CN107844192A - 调适电子装置上显示内容的系统和方法 - Google Patents

调适电子装置上显示内容的系统和方法 Download PDF

Info

Publication number
CN107844192A
CN107844192A CN201710121424.7A CN201710121424A CN107844192A CN 107844192 A CN107844192 A CN 107844192A CN 201710121424 A CN201710121424 A CN 201710121424A CN 107844192 A CN107844192 A CN 107844192A
Authority
CN
China
Prior art keywords
user
user interface
graphical cues
blink
predefined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201710121424.7A
Other languages
English (en)
Inventor
P·南达拉吉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wipro Ltd
Original Assignee
Wipro Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wipro Ltd filed Critical Wipro Ltd
Publication of CN107844192A publication Critical patent/CN107844192A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Dermatology (AREA)
  • Neurosurgery (AREA)
  • Neurology (AREA)
  • Business, Economics & Management (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Epidemiology (AREA)
  • General Business, Economics & Management (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开一种调适电子装置上显示内容的系统和方法。该方法包括:显示第一用户界面,该第一用户界面包括针对用户的多个第一图形提示,其中,所述多个第一图形提示被相继着重突显;检测用于选择所述第一用户界面的着重突显图形提示的用户的一个或多个预定义眨眼姿势;以及根据检测到的所述用户的一个或多个预定义眨眼姿势,对所述第一用户界面进行调适,以显示第二用户界面。

Description

调适电子装置上显示内容的系统和方法
技术领域
本发明总体涉及显示装置,且尤其涉及一种调适电子装置上显示内容的系统和方法。
背景技术
显示装置领域的技术进步催生了各种可配置为与因重大疾病或事故导致的残疾而变得无行为能力的患者沟通的显示器。由于此类无行为能力的患者与医生、护士、家庭成员等人的互动范围有限,因此上述显示器旨在帮助这些患者传达其需求。此类帮助是基于对与患者眼睛关联的运动的跟踪,如眼球运动,注视检测等。
在某些情形下,护士、医生或家庭成员形式的中间人必须在场,以引导患者表达其需求。此类需求引导可借助显示器上显示的菜单完成。在某些其他情形下,患者可通过注视类的导航姿势直接传达其需求。然而,上述方法要么需要所述中间人形式的第三人在场,要么基于患者的注视。显然,此类方法为资源密集型方法,且易于因不正确的注视跟踪而导致错误。此外,由于无行为能力的患者难以通过注视类姿势对显示的菜单进行导航,因此上述方法还给患者造成不便。
因此,需要提供一种机制,以使患者可将其需求无压力且方便地传达给看护人员。此外,还需要此类机制在可用性方面具有改进,以允许患者能够根据有限的一组姿势方便地对整个菜单进行导航。
发明内容
在一种实施方式中,公开一种调适电子装置上显示内容的方法。在一个实施例中,所述方法包括显示第一用户界面,该第一用户界面包括针对用户的多个第一图形提示。所述多个第一图形提示被相继着重突显。该方法还包括检测用于选择所述第一用户界面的着重突显的图形提示的该用户的一个或多个预定义眨眼姿势。该方法还包括,当检测到所述用户的所述一个或多个预定义眨眼姿势后,对所述第一用户界面进行调适,以显示第二用户界面。
在另一实施方式中,公开一种调适电子装置上显示内容的系统。该系统包括处理器以及以可通信方式连接于该处理器的存储器。所述存储器存有处理器可执行指令,该指令在执行时使得所述处理器显示第一用户界面,该第一用户界面包括针对用户的多个第一图形提示。所述多个第一图形提示被相继着重突显。所述处理器可执行指令在执行时,还使得所述处理器检测用于选择所述第一用户界面的着重突显的图形提示的所述用户的一个或多个预定义眨眼姿势。所述处理器可执行指令在执行时,还使得所述处理器,当检测到所述用户的所述一个或多个预定义眨眼姿势后,对所述第一用户界面进行调适,以显示第二用户界面。
在又一实施方式中,公开一种非暂时性计算机可读介质,该介质存有用于调适电子装置上显示内容的计算机可执行指令。在一个实施例中,所存指令在由处理器执行时,使得该处理器执行操作,该操作包括显示第一用户界面,该第一用户界面包括针对用户的多个第一图形提示。所述多个第一图形提示被相继着重突显。所述操作还包括检测用于选择所述第一用户界面的着重突显的图形提示的所述用户的一个或多个预定义眨眼姿势。所述操作还包括当检测到所述用户的所述一个或多个预定义眨眼姿势后,对所述第一用户界面进行调适,以显示第二用户界面。
需要理解的是,以上概略描述与以下详细描述均仅在于例示和说明,而不在于限制所要求保护的发明。
附图说明
所附各图并入本公开内容之内并构成本公开内容的一部分,用于对例示实施方式进行描述,并与说明书一道阐明所公开的原理。
图1为根据本公开内容一些实施方式经通信网络来调适电子装置上显示内容的例示网络环境框图。
图2为根据本公开内容一些实施方式调适电子装置上显示内容的例示系统框图。
图3A显示了根据本公开内容一些实施方式调适电子装置上显示内容的第一例示情形。
图3B显示了根据本公开内容一些实施方式调适电子装置上显示内容的第二例示情形。
图4为根据本公开内容一些实施方式调适电子装置上显示内容的详细例示方法流程图。
图5为用于实施符合本公开内容各实施方式的例示计算机系统的框图。
具体实施方式
以下,参考附图,对例示实施方式进行描述。在任何方便之处,各图中均采用相同附图标记指代相同或类似部件。虽然本文中描述了所公开原理的实施例和特征,但是在不脱离所公开实施方式的精神和范围的前提下,还可进行修改、调整以及做出其他实施方式。以下具体描述意在仅视作例示,而真正的范围及精神如权利要求书所述。
现在参考图1,该图所示为根据本公开内容一些实施方式经通信网络来调适电子装置上显示内容的例示网络环境100的框图。如以下结合图2所进一步详述的,网络环境100显示第一用户界面,该界面包括针对用户(如用户102)的多个第一图形提示。所述多个第一图形提示可被相继着重突显。所述系统还可检测用于对所述第一用户界面上着重突显的图形提示进行选择的所述用户102的一个或多个预定义眨眼姿势。所述系统还在检测到用户102的所述一个或多个预定义眨眼姿势时,对所述第一用户界面进行配置,以显示第二用户界面。
网络环境100包括由用于发送和接收各种数据的计算装置(如,计算机、服务器、数字设备、路由器、调制解调器、网桥、交换机等)组成的网络。在一种实施方式中,网络环境100包括:持有关联电子装置104的用户102;以及一个或多个远程装置(如远程装置108)。电子装置104和远程装置108可经有线或无线通信网络106相互通信。每个所述计算装置还包括一个或多个处理器和计算机可读介质(如存储器)。所述计算机可读存储介质存有指令,该指令在由所述一个或多个处理器执行时使得该一个或多个处理器实施符合本公开内容各个方面的数据接收和传输。所述计算机可读存储介质可还存有可被网络环境100捕获、处理和/或请求的各种数据(如最优网络路径,最优分组大小,数据分组,节点的当前分组大小等)。
电子装置104可包括合适的逻辑,电路,接口和/或代码,用于在显示屏110上向用户102显示一个或多个用户界面。所述一个或多个用户界面可包括所述第一用户界面和所述第二用户界面。电子装置104的显示屏110的实现形式可例如包括,但不限于,液晶显示器(LCD),发光二极管(LED)显示器,有机LED(OLED)显示技术。电子装置104可还包括摄像头形式的图像跟踪装置112,用于跟踪用户102的眼球运动。在一种实现方式中,图像跟踪装置112可集成于电子装置104内部。在另一实现方式中,图像跟踪装置112可处于电子装置104的外部且经通信网络106与电子装置104以可通信方式连接。
通信网络106可包括一种介质,通过该介质,网络环境100内的电子装置104和远程装置108可相互通信。通信网络106可包括,但不限于,因特网,云计算网络,无线保真(Wi-Fi)网络,无线局域网(WLAN),局域网(LAN),电话线(POTS),长期演进(LTE)和/或城域网(MAN)。例示网络环境100内的各种装置可按照各种有线和无线通信协议与通信网络106连接。此类有线和无线通信协议可包括,但不限于,传输控制协议和因特网协议(TCP/IP),用户数据报协议(UDP),超文本传输协议(HTTP),文件传输协议(FTP),Zigbee,EDGE,红外(IR),IEEE 802.11,802.16,蜂窝通信协议和/或蓝牙(BT)通信协议。
远程装置108可包括合适的逻辑,电路,接口和/或代码,用于根据用户102提供的一个或多个用户输入,显示电子装置104所生成的一个或多个通知。远程装置108的实现形式例如包括,但不限于,个人计算机网络,个人数字助理(PDA)设备,膝上型计算机或平板电脑。
运行过程中,电子装置104可在显示屏110上显示第一用户界面。所显示的第一用户界面可包括多个第一图形提示。在一种实施方式中,所显示的多个第一图形提示可对应于预配置于所述系统内的菜单项。所述菜单项可包括,但不限于,用于联系某个人的请求,用于订购一个或多个耗材的请求,用于表达物理或精神状态的请求等。在一种实施方式中,所述菜单项可由系统管理员配置于所述系统中。在另一实施方式中,所述菜单项可由用户至少根据所显示的多个第一图形提示动态决定。电子装置104还可将所显示的多个第一图形提示中的每个提示以第一预定义时间间隔相继地着重突显。在一种实施方式中,对所述多个第一图形提示的着重突显可通过该图形提示在显示屏110上的视觉着重突显实现。在另一实施方式中,对所述多个第一图形提示的着重突显可通过由电子装置104对于每个所显示的图形提示产生音频输出的方式实现。
电子装置104还可实施从所述第一用户界面至第二用户界面的自动过渡。此类自动过渡的实施可以以第二预定义时间间隔为依据。在一种实施方式中,所述自动过渡可包括,但不限于,从所述第一用户界面至所述第二用户界面的垂直滚动,从所述第一用户界面至所述第二用户界面的水平滚动,淡入淡出过渡,闪光过渡等。此外,所述第二用户界面可包括多个第二图形提示,每个第二图形提示以第一预定义时间间隔被相继地着重突显。在一种实施方式中,所述多个第二图形提示可对应于所述多个第一图形提示中的被选图形提示。在一种实施例中,根据所显示的多个第二图形提示,用户102可提供另一输入,用于从所述多个第二图形提示中选出一个图形提示。在另一实施例中,所述多个第二图形提示可对应于用户102所做出的确认选择。在此情况下,可无需要求电子装置104对所述多个第二图形提示进行着重突显。
电子装置104可经图像跟踪装置112对用户102的眼球运动进行跟踪。在一种实施方式中,图像跟踪装置112可通过检测用户102的一个或多个预定义眨眼姿势,而对所显示的第一用户界面上的着重突显图形提示进行选择。在一种实施方式中,所述一个或多个预定义眨眼姿势可包括,但不限于,用户102的单眼或双眼眨动预定义次数,用户102的单眼或双眼闭合预定义时间长度,用户102的眼睛眨动的组合。此外,在一种实施方式中,上述姿势可包括,先以第一预定义眨眼姿势停止图形提示的着重突显,然后以第二预定义眨眼姿势选择该着重突显已停止的着重突显图形提示。
电子装置104还可响应于所检测出的一个或多个预定义眨眼姿势而对所述第一用户界面进行调适,以显示所述第二用户界面。在一种实施方式中,所述调适包括控制所述多个第一图形提示和所述多个第二图形提示的显示特性。所述显示特性可例如包括,但不限于,相继着重突显所述多个第一图形提示的时间间隔,相继着重突显所述多个第二图形提示的时间间隔,所述多个第一图形提示或所述多个第二图形提示的大小,所述多个第一图形提示或所述多个第二图形提示的显示时间长度,以及显示单元的亮度水平。
在一种实施方式中,电子装置104还可保存所检测出的用户102的一个或多个预定义眨眼姿势。该保存操作可在与电子装置104相关联的存储器内实施。在一种实施方式中,随着在某个时间点上检测到的用户102的预定义眨眼姿势,可还根据对用户102预定义的眨眼姿势的检测历史,实施从所述第一用户界面至所述第二用户界面的调适。本领域技术人员可理解的是,上述系统可包括第三用户界面、第四界面等多个其他界面。在一种实施方式中,可通过电子装置104实施的调适,实现从所述第一用户界面至所述多个用户界面当中的一个界面的过渡。此外,可根据所检测出的用户102的一个或多个预定义眨眼姿势实施所述调适。
在一种实施方式中,电子装置104可根据所检测的用户的一个或多个预定义眨眼姿势生成一个或多个通知。该通知可发送于远程装置108。在一些实施方式中,可在用户开始对所显示的多个第一图形提示进行选择之时便生成所述通知。在一些其他实施方式中,可根据与用户相关联的各种医疗事件(如医疗紧急情况)生成所述通知。此外,还可根据用户的物理或精神状态,用户发出的请求的状态,以及对所述多个第一图形提示中的一个或多个图形提示的选择,生成所述通知。在一种实施方式中,电子装置104可至少通过将用户选择着重突显图形提示所用的平均时间与预定义时间阈值相比较的方式,判断与用户102相关联的所述医疗紧急情况。在各实施例中,当未在所述预定义时间阈值内提供与选择一个或多个被显示图形提示对应的用户输入时,电子装置104可推测已发生与用户相关联的医疗紧急情况,并生成一个或多个通知,该通知可经通信网络106发送于远程装置108。
需要理解的是,上述各种模块可在可编程门阵列、可编程阵列逻辑、可编程逻辑器件等可编程硬件装置内实施。或者,上述各种模块也可在由各种类型处理器执行的软件内实施。被认定的可执行代码模块例如可包括计算机指令的一个或多个物理块或逻辑块,这些物理块或逻辑块例如组织为对象、程序、功能、模块或其他构建体。然而,在物理形式上,被确定的模块的可执行代码无需位于一处,而是可包括存于不同位置处的不同指令,当这些指令在逻辑上相互接合时,可构成所述模块并实现该模块的标称目的。实际上,可执行代码模块可以为单个指令或多个指令,而且甚至可分布于不同应用程序的多个不同代码段上以及可分布于多个存储器装置之上。
本领域技术人员可以理解的是,有多种方法可用于经通信网络传输数据。例如,例示通信网络100可通过本文所述方法经通信网络传输数据。具体而言,本领域技术人员可理解的是,用于实施本文所述技术和步骤的控制逻辑和/或自动化程序可由网络环境100通过硬件、软件或硬件及软件的组合实现。例如,网络环境100的所述一个或多个处理器可对合适的代码进行访问和执行,以实现本文所述的部分或所有技术。类似地,网络环境100的所述一个或多个处理器还可包括用于实施本文所述的部分或所有方法的专用集成电路(ASIC)。
图2为根据本公开内容一些实施方式调适电子装置上显示内容的例示系统框图。以下,结合图1的元件,对图2进行说明。参考图2,该图所示为电子装置104。电子装置104可包括一个或多个处理器(例如处理器202),存储器204,输入/输出(I/O)单元206,调适引擎208,用户输入记录单元210,通知单元212以及收发器214。处理器202可以可通信方式连接存储器204,I/O单元206,调适引擎208,用户输入记录单元210,通知单元212以及收发器214。在一种实施方式中,电子装置104可通过通信网络106并经收发器214连接所述一个或多个远程装置(如远程装置108)。
处理器202可包括合适的逻辑,电路,接口和/或代码,该逻辑,电路,接口和/或代码可执行存储器204内保存的一组指令。处理器202可通过执行所述电子装置的存储器204内存储的一个或多个跟踪算法而对用户102的眼球运动进行跟踪并对电子装置104的显示屏110进行调适。处理器202可例如为X86类处理器,精简指令集计算(RISC)处理器,专用集成电路(ASIC)处理器,复杂指令集计算(CISC)处理器和/或其他处理器。
存储器204可包括合适的逻辑,电路和/或代码,该逻辑,电路和/或代码可对带有至少一个可由处理器202执行的代码段的机器代码和/或计算机程序进行存储。在一种实施方式中,存储器204可对所检测的用户102的一个或多个预定义眨眼姿势进行存储。此外,存储器204可对一个或多个关系表进行存储,此类关系表例如为图形提示表204a,眼部姿势表204b以及调适表204c。所述存储器还可对一个或多个可配置参数进行存储,该参数包括,但不限于,着重突显所述图形提示的第一预定义时间间隔,从第一界面过渡至第二界面的第二预定义时间间隔,以及判断医疗紧急情况的预定义时间阈值。存储器204的实现形式例如可包括,但不限于,随机存取存储器(RAM),只读存储器(ROM),硬盘驱动器(HDD)和/或安全数字(SD)卡。
I/O单元206可包括合适的逻辑,电路,接口和/或代码,该逻辑,电路,接口和/或代码可经图像跟踪装置112对用户102的眼球运动进行跟踪,并经显示屏110向用户提供输出。I/O单元206可包括各种输入和输出装置,这些装置可与处理器202通信。电子装置104可经显示屏110向用户102显示一个或多个界面。以上已在图1中公开了显示屏110的实施例。电子装置104还可根据图像跟踪装置112对用户102的眼球运动进行跟踪。I/O单元206的图像跟踪装置112可配备摄影镜头和/或变焦镜头等摄影光学系统,以及一个或多个电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)等图像传感器。图像跟踪装置112的实现形式可例如包括,但不限于,数码摄像头,个人数字助理(PDA)内嵌的摄像头,视频摄像头和/或运动摄像头。本领域技术人员可理解的是,所述I/O单元还可包括一个或多个音频类输出装置,用于实现与用户102的通信。
调适引擎208可包括合适的逻辑,电路,接口和/或代码,该逻辑,电路,接口和/或代码可根据所检测的用户102的一个或多个预定义眨眼姿势,对所显示的第一用户界面进行调适,以显示第二用户界面。所述调适可进一步根据存储器204内所保存的关系表实现。调适引擎208可实现为一个或多个基于本领域已知的处理器技术的处理器。
用户输入记录单元210可包括合适的逻辑,电路,接口和/或代码,该逻辑,电路,接口和/或代码可将所检测出的用户102的一个或多个预定义眨眼姿势保存于存储器204内。在一种实施方式中,对所述姿势的保存有利于用户界面的调适。用户输入记录单元210可实现为一个或多个基于本领域已知的处理器技术的处理器。
通知单元212可包括合适的逻辑,电路,接口和/或代码,该逻辑,电路,接口和/或代码可通过将用户选择着重突显图形提示所用的平均时间与存储器204内保存的预定义时间阈值相比较的方式,生成一个或多个通知。所生成的一个或多个通知可经收发器214发送至远程装置108。通知单元212可实现为一个或多个基于本领域已知的处理器技术的处理器。
收发器214可包括合适的逻辑,电路,接口和/或代码,该逻辑,电路,接口和/或代码可通过通信网络106与另一电子装置104或远程装置108通信。收发器214可通过实施现有技术而支持有线或无线通信。收发器214可包括,但不限于,天线,射频(RF)收发器,一个或多个放大器,调谐器,一个或多个振荡器,数字信号处理器,编码器-解码器(CODEC)芯片组,用户识别模块(SIM)卡和/或本地缓冲器。收发器214可通过无线通信与因特网,内联网和/或无线网络通信,所述无线网络例如为蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN)。所述无线通信可使用多种通信标准、协议和技术中的任何一种,例如全球移动通信系统(GSM),增强数据GSM环境(EDGE),宽带码分多址(W-CDMA),码分多址接入(CDMA),长期演进(LTE),时分多址(TDMA),蓝牙,无线保真(Wi-Fi)(如IEEE 802.11a,IEEE 802.11b,IEEE 802.11g和/或IEEE 802.11n),互联网协议语音(VoIP),Wi-MAX,电子邮件、即时消息和/或短消息服务(SMS)协议。
运行过程中,处理器202与I/O单元206可共同在显示屏110上向用户(如用户102)显示第一用户界面。所显示的第一用户界面可包括多个第一图形提示。在一种实施方式中,所显示的多个第一图形提示可对应于图1所述的菜单项。处理器202可进一步以预定义顺序相继着重突显所述多个第一图形提示中的每个提示,所述相继顺序可保存于存储器204内。在一种实施方式中,所述预定义顺序可以以保存于存储器204内的图形提示表204a为依据。所述表可定义图形提示类型(如图形提示的类别或主题)与图形提示显示特性之间的关系。在一种实施方式中,所述图形提示类型可对应于使用户102能以“是”或“否”的形式进行回答的问题。在另一实施方式中,所述图形提示类型可对应于可由用户102选择的图标(对应于服务)。图形提示的显示特性可包括,但不限于,对所述多个第一图形提示进行着重突显的顺序,着重突显图形提示的第一预定义时间间隔,待相继着重突显用户界面的多个图形提示的次数,相继着重突显图形提示的时间间隔,图形提示的颜色,图形提示的大小,图形提示的显示时间长度,显示屏110的亮度水平,和/或与图形提示相关联的一个或多个多媒体特性。表1给出了图形提示表的一示例。
表1
如表1所示,与拨打电话的请求相对应的图形提示可与一个或多个显示特性相关联。所述显示特性可包括联系人着重突显的顺序。例如,频繁联系的联系人可比较不频繁联系的联系人在所述顺序中显示在更高处。此外,所述一个或多个显示特性可包括用于辨识的联系人图片。类似地,与例中“问题1”的图形提示对应的一个或多个显示特性可包括与该图形提示相关联的显示时间长度,动画效果类型,字体大小和/或颜色方案。
在一种实施方式中,所保存的着重突显图形提示的预定义顺序可与预存用户(如用户102)简档相关联。如此,在该实施方式中,可根据用户102的身体状况对着重突显所述多个第一图形提示的顺序进行定制。例如,当用户102对应于危重患者时,与着重突显用于请求一个或多个耗材的图形提示相比较,可优先着重突显用于请求医疗服务或用于要求表达物理或精神状态的图形提示。
在显示所述第一用户界面后,处理器202可根据I/O单元206的图像跟踪装置112对用户102的眼球运动进行跟踪。所述跟踪可以为对用于选择所显示的第一用户界面上的着重突显图形提示的一个或多个预定义用户眨眼姿势进行检测。在一种实施方式中,所述一个或多个预定义眨眼姿势可包括,但不限于,用户102的单眼或双眼眨动预定义次数,用户102单眼或双眼闭合预定义时间长度,用户102眼睛眨动的组合。在一种实施方式中,处理器202可在显示屏110上向用户102显示所述一个或多个预定义眨眼姿势的列表。在一种实施方式中,所述一个或多个预定义眨眼姿势可对应于停止相继着重突显所述图形提示的用户输入。在另一实施方式中,所述一个或多个预定义眨眼姿势可对应于用于选择图形提示的“是”或“否”式回应。本领域技术人员可理解的是,在一种实施方式中,可由电子装置104的用户根据该用户的身体状况严重程度,对所述一个或多个预定义用户眨眼姿势进行动态配置。
一旦检测到一个或多个预定义用户的眨眼姿势后,处理器202可查阅存储器204内保存的眼部姿势表204b,以判断根据该眨眼姿势应采取何种行动。眼部姿势表204b可定义图形提示的类别或主题(如以上结合表1所详细描述的一样),用户102的一个或多个预定义眨眼姿势,以及与所述一个或多个预定义眨眼姿势相对应的回应之间的关系。表2给出了所述眼部姿势表的一示例。
表2
如表2所示,对于与例中“问题1”对应的图形提示,可接受的眼部姿势可包括“一次眨动”或“两次眨动”。此外,每个所述眼部姿势可映射于一个用户回应。例如,“一次眨动”可对应于用户回应“是”,“两次眨动”可对应于用户回应“否”。类似地,对于其他图形提示(例如,与“问题X”对应的图形提示),可根据“一次眨动”,“两次眨动”,“长时间眨动”或“三次眨动”等各种眼部姿势,选择“选项1”,“选项2”,“选项3”或“选项4”等选项。此外,在一种实施方式中,上述眼部姿势可包括,先以第一预定义眨眼姿势停止图形提示的着重突显,然后以第二预定义眨眼姿势选择该着重突显已停止的着重突显图形提示。
根据所检测的一个或多个用户102的眨眼姿势以及眼部姿势表204b中定义的关系,处理器202可指示调适引擎208将所显示的第一用户界面调适至第二用户界面。所述第二用户界面可包括多个第二图形提示,每个第二图形提示以所述第一预定义时间间隔被相继着重地突显。在一种实施方式中,所述多个第二图形提示可对应于所述多个第一图形提示中的被选图形提示。在一种实施例中,根据所显示的多个第二图形提示,用户102可提供另一用于从所述多个第二图形提示中选出一个图形提示的输入。在另一实施例中,所述多个第二图形提示可对应于用户102所做出的确认选择。在一种实施方式中,当所述多个第二图形提示对应于上述后一情形时,可无需要求电子装置104着重突显所述多个第二图形提示。
在一种实施方式中,上述调适可根据存储器204内保存的调适表204c实现。调适表204c可定义用户102的回应或与用户102相关联的事件与待由调适引擎208实施的调适类型之间的关系。在一种实施方式中,所述调适可包括对所述多个第一图形提示和所述多个第二图形提示的上述显示特性进行控制。表3给出了调适表204c的一示例。
表3
如表3所示,根据所检测出的用户102的眼部姿势以及与该眼部姿势相对应的事件,调适引擎208可查阅存储器204内保存的上述调适表204c。所述调适表的每一行映射于带有可由调适引擎208实施的调适类型的事件。例如,当用户对问题1的回答为“是”时,所述调适引擎可对后续可显示的用户界面(所述第二用户界面)的层次结构进行修改。类似地,当预定义数目个着重突显图形提示未检测到用户回应时,调适引擎208可增加着重突显的图形提示的所述第一预定义时间间隔。其他所列示例包括,根据检测出的事件改变图形提示的显示特性。
在一种实施方式中,从所述第一用户界面至所述第二用户界面的调适可包括修改所述多个第一图形提示和所述多个第二图形提示的图形提示层次结构。所述层次结构可定义于调适表204c中。所述层次结构的修改可包括显示被用户102选择的可能性大于预定义的可能性的多个第二图形提示。可根据与用户102相关联的一个或多个历史输入,确定所述多个第二图形提示中的图形提示被选择的可能性。所述历史输入可保存于存储器204内。此类历史输入可对应于之前被用户102选择的图形提示。在一种实施方式中,可由用户输入记录单元210实施对每个被选图形提示的保存。
在一种实施方式中,调适引擎208可自动将显示屏110从所述第一用户界面过渡至所述第二用户界面。从所述第一用户界面至所述第二用户界面的过渡可在当在第二预定义时间间隔内未检测到用户102的一个或多个预定义眨眼姿势时实施。需要注意的是,从所述第一用户界面至所述第二用户界面的上述过渡可仅在当所述多个第一图形提示中的每个提示都已着重突显后仍未在所述第二预定义时间间隔内检测到用户输入时才实施。
在一种实施方式中,从所述第一用户界面至所述第二用户界面的上述过渡可包括,但不限于,从所述第一用户界面至所述第二用户界面的垂直滚动,从所述第一用户界面至所述第二用户界面的水平滚动,从所述第一用户界面至所述第二用户界面的淡入淡出过渡,从所述第一用户界面至所述第二用户界面的闪光过渡,从所述第一用户界面至所述第二用户界面的溶解过渡,从所述第一用户界面至所述第二用户界面的擦除过渡,以及从所述第一用户界面至所述第二用户界面的光圈过渡。
在一种实施方式中,调适引擎208可根据调适表204c中定义的关系,对从所述第一用户界面到多个第二用户界面的导航路径进行修改。例如,所述第一用户界面可对应于引导用户102作出与高优先度服务的选择相对应的回应。所述服务的优先度可由处理器202至少根据用户102的历史用户输入,用户102的身体状况,或者用户102的环境条件(例如,处于一天中的什么时间)进行分配。当检测到用户102的一个或多个预定义眨眼姿势时,所述调适引擎可对导航路径进行修改,以显示含次高优先度服务的第二用户界面。举例而言,当处于一天中的早晨时间时,如果对所述第一用户界面的选择对应于食品订购时,调适引擎208可将所述第二用户界面呈现为包括多个与早餐食品相对应的第二图形提示。类似地,当处于一天中的晚上时间时,如果对所述第一用户界面的选择对应于食品订购时,调适引擎208可将所述第二用户界面呈现为包括多个与正餐食品相对应的第二图形提示。本领域技术人员可理解的是,上述调适由调适引擎208实施,从而减少了用户102在请求所需服务时需要进行的互动次数。
在一种实施方式中,根据所检测出的用户102的一个或多个预定义眨眼姿势,调适引擎208可与I/O单元206共同提供用于动态决定所需服务的选项。该动态决定的服务可对应于存储器204内保存的所述关系表中未定义的服务。例如,当用于拨打电话的图形提示被选择时,调适引擎208可显示多个第二图形提示,该提示含有用于供用户102动态决定待拨打联系人联系信息的选项。
在一种实施方式中,根据所检测出的用户102的一个或多个预定义眨眼姿势,处理器202可指示通知单元212生成一个或多个通知。该一个或多个通知可对应于以下一个或多个:与用户相关联的医疗事件;对应于用户物理或精神状态的手动或自动讯息;用户所发请求的状态;以及对所述多个第一图形提示当中的一个或多个图形提示的选择。在另一实施方式中,可在当检测到含有一个或多个预定义眨眼姿势的第一输入时,生成所述一个或多个通知。在一种实施方式中,当所述一个或多个通知对应于医疗事件(如医疗紧急情况)时,可通过将用户选择着重突显图形提示所用的平均时间与存储器204内保存的预定义时间阈值相比较的方式生成所述通知。通知单元212可将所生成的一个或多个通知经收发器214发送于远程装置108。此外,在另一实施方式中,通知单元212可将生成的一个或多个通知保存于存储器204内。在一种实施方式中,所生成的一个或多个通知可至少基于以下的一个或多个:光信号;哔哔声;蜂鸣器;振动输出;短消息服务(SMS);多媒体消息服务(MMS);视频呼叫;以及社交媒体通知。
图3A显示了根据本公开内容一些实施方式调适电子装置显示内容的第一例示情形。以上已结合图1和图2中的元件对图3A中的元件进行了描述。
参考图3A,其中所示为可显示于显示屏110上的第一用户界面302。第一用户界面302可包括多个第一图形提示,在图中分别表示为第一图形提示304a,第二图形提示304b和第三图形提示304c。处理器202可将所述多个第一图形提示中的每个提示相继着重突显第一预定义时间间隔,该第一预定义时间间隔可保存于存储器204内。所述着重突显如包围框306所示。
在一种例示情形中,第一用户界面302可对应于向用户102提供用于订购食品,与人联系或表达感受的选项的界面。在一种实施例中,第一图形提示304a可对应于用于订购食品的选项,第二图形提示304b可对应于用于与人联系的选项,第三图形提示304c可对应于用于表达感受的选项。根据所显示图形提示的选择,处理器202可呈现包括多个第二图形提示的第二用户界面308。所述多个第二图形提示可包括以预定义层次结构形式呈现的图形提示。所述预定义层次结构内所含的图形提示可对应于总类别。举例而言,当用户102选择了用于与人联系的第二图形提示304b时,所述处理器可查阅以上述预定义层次结构呈现的用户102的联系人列表,如朋友,家庭成员,医生,律师或同事。所述层次结构内的每种联系人可映射于可构成所述多个第二图形提示的图形提示。
当图像跟踪装置112检测到一个或多个预定义眨眼姿势时,处理器202可指示所述调适引擎将所述第一用户界面调适至第二用户界面308。该调试还可进一步根据用户102以前所作的选择而实施。
在一种实施例中,调适后的第二用户界面308可包括与修改后的层次结构相对应的所述多个第二图形提示。例如,所述多个第二图形提示的修改后的层次结构可包括用于联系家庭成员的图形提示310a,用于联系医生的图形提示310b,以及用于联系用户102的联系人列表中的其他成员的图形提示310c。所述其他成员可对应于联系频度较低的朋友,律师和同事。其中,所述预定义的多个第二图形提示的层次结构已由调适引擎208修改至仅显示用户102频繁选择的那些图形提示。同时,通过图形提示310c,用户102可查阅使用频度较低的联系人,或者通过添加新的联系人而扩展所述预定义层次结构。对所述预定义层次结构的此类修改取代了可由用户102提供的选择输入,从而减少了用户102用于选择图形提示时所需的互动次数。
参考图3B,其中所示为可显示于显示屏110上的第一用户界面312。第一用户界面312可包括多个第一图形提示,图中分别表示为对应于订购食物的第一图形提示314a,对应于与人联系的第二图形提示314b和对应于表达感受的第三图形提示314c。处理器202可将所述多个第一图形提示中的每个提示相继着重突显第一预定义时间间隔,该第一预定义时间间隔可保存于存储器204内。所述着重突显如包围框316所示。
在一种例示情形中,当在预定义时间间隔内未检测到所述用户102的一个或多个预定义眨眼姿势时,调适引擎208可增大所显示图形提示的字体大小。字体大小增大后的所述图形提示可以以下述各图形提示的形式显示于第二用户界面318:对应于订购食物的第一图形提示320a,对应于与人联系的第二图形提示320b以及对应于表达感受的第三图形提示320c。如以上公开内容中所描述的,当已将所述多个第一图形提示着重突显过一个或多个预定义轮数后仍未检测到用户输入时,可对所述图形提示的字体大小做出改变。
本领域技术人员可理解的是,上述调适还可包括根据用户输入,控制所显示的多个第一图形提示的其他显示特性。以上已在图1和图2中对此类显示特性进行了详细描述。
图4为根据本公开内容一些实施方式的用于调适电子装置上显示内容的详细例示方法的流程图。参考图4,其中所示为流程图400。以下结合图1~图3,对流程图400进行描述。该方法始于步骤402,之后进入步骤404。
在步骤404中,可由处理器202在显示屏110上显示包括多个第一图形提示的第一用户界面。所显示的多个第一图形提示中的每个图形提示可以第一预定义时间间隔被相继着重地突显。在步骤406中,可通过图像跟踪装置112,对用户(如用户102)的眼球运动进行跟踪。在步骤408中,通过对用户102眼球运动的跟踪,可判断出已检测到的用于选择所述第一用户界面内的着重突显图形提示的一个或多个预定义眨眼姿势。此外,还可判断出是否在第二预定义时间间隔内检测出了所述姿势。上述的第一预定义时间间隔和第二预定义时间间隔可保存于存储器204内。
在各实施例中,当检测到用于选择所述第一用户界面内的着重突显图形提示的一个或多个预定义眨眼姿势时,所述方法可进入步骤410。在各实施例中,当未检测到用于选择所述第一用户界面内的着重突显图形提示的一个或多个预定义眨眼姿势时,所述方法可进入步骤416。
在步骤410中,可判断所检测到的一个或多个预定义眨眼姿势是否对应于存储器204内保存的关系表中所列的事件类型。在各实施例中,当步骤410中的判断结果为真时,可在步骤412中根据调适表204c,将所述第一用户界面调适至第二用户界面。所述第二用户界面可包括多个第二图形提示,每个第二图形提示可以第一预定义时间间隔被相继着重地突显。此外,所述调适是基于与用户102相关的事件类型的确定,而所述事件类型则对应于所检测出的一个或多个预定义眨眼姿势。在一种实施方式中,对所述第一用户界面的调适包括控制所述多个第一图形提示和多个第二图形提示的显示特性。以上已在图1~图3中详细描述了显示特性控制方面的细节。在步骤414中,所检测出的用于选择图形提示的一个或多个预定义眨眼姿势可保存于存储器204中。之后,所述方法可进入步骤418。在各实施例中,当步骤410中的判断结果为假时,所述方法可进入步骤404。
在步骤416中,可判断是否已经经过所述第二预定义时间间隔。在各实施例中,当已经经过了所述第二预定义时间间隔后仍未检测到一个或多个预定义眨眼姿势时,可在步骤418中通过调试引擎208向用户102显示第二用户界面。通过向用户102显示第二用户界面,可判断用户是否希望继续互动。所述判断可在步骤420中实施。在各实施例中,当用户确认继续互动时,所述方法可进入步骤404。在各实施例中,当用户102希望中止互动时,所述方法可进入结束步骤422,此时可关闭所述系统。在一种实施方式中,当用户102希望中止互动时,所述方法可进入步骤404。在该实施方式中,可向用户102显示所述第一用户界面,并询问是否对用户102的眼球运动进行跟踪。在另一实施方式中,当用户102希望中止互动时,可将其通知一个或多个看护人员(如家人,医生或护士)。在一种实施例中,根据所述通知,所述看护人员可将电子装置104关闭。在另一实施例中,所述看护人员可将所述系统的状态调整为空闲状态。在该空闲状态下,可向用户102显示所述第一用户界面,并询问是否对用户102的眼球运动进行跟踪。
还应理解的是,上述技术可采用如下形式:计算机或控制器实现的方法;以及用于实施这些方法的装置。本公开内容还可以以含有指令的计算机程序代码的形式实施,所述指令包含于软盘、CD-ROM、硬盘驱动器或其他任何计算机可读存储介质等有形介质中,其中,当所述计算机程序代码载入计算机或控制器内并由该计算机或控制器执行时,所述计算机即成为一种用于实施本发明的装置。本公开内容还可以以计算机程序代码或信号的形式实施,所述计算机程序代码或信号例如存储于存储介质中,或者载入计算机或控制器内并由该计算机或控制器执行,或者经电线或电缆、光纤或电磁辐射等传输介质传输,其中,当所述计算机程序代码载入计算机内并由该计算机执行时,所述计算机即成为一种用于实施本发明的装置。当在通用微处理器中实施时,所述计算机程序代码的代码段对所述微处理器进行配置,以创建出特定的逻辑电路。
以上公开的方法和系统可在个人计算机(PC)或服务器计算机等常规或通用计算机系统内实施。现在参考图5,该图所示为用于实施符合本公开内容实施方式的例示计算机系统501的框图。计算机系统501的各种变形可用于实现用于经通信网络发送数据的网络环境100。计算机系统501可包括中央处理单元(“CPU”或“处理器”502)。处理器502可包括至少一个用于执行程序组件的数据处理器,所述程序组件用于执行用户或系统生成的请求。用户可包括使用设备(例如,本公开内容范围内的设备)的个人或此类设备本身。所述处理器可包括专用处理单元,例如集成系统(总线)控制器、存储器管理控制单元、浮点单元、图形处理单元、数字信号处理单元等。所述处理器可包括微处理器,例如AMD速龙(Athlon)、毒龙(Duron)或皓龙(Opteron),ARM应用处理器,嵌入式或安全处理器,IBM PowerPC,IntelCore、安腾(Itanium)、至强(Xeon)、赛扬(Celeron)或其他处理器产品线等。处理器502可通过主机、分布式处理器、多核、并行、网格或其他架构实现。一些实施方式可使用专用集成电路(ASIC)、数字信号处理器(DSP)、现场可编程门阵列(FPGA)等嵌入式技术。
处理器502可配置为通过输入/输出(I/O)接口503与一个或多个I/O设备进行通信。I/O接口503可采用通信协议/方法,例如但不限于,音频、模拟、数字、单声道、RCA、立体声、IEEE-1394、串行总线、通用串行总线(USB)、红外、PS/2、BNC、同轴、组件、复合、数字视觉接口(DVI)、高清晰度多媒体接口(HDMI)、射频天线、S-视频,VGA、IEEE 802.n/b/g/n/x、蓝牙、蜂窝(例如码分多址(CDMA)、高速分组接入(HSPA+)、移动通信全球系统(GSM)、长期演进(LTE)、WiMax等)等。
通过使用I/O接口503,计算机系统501可与一个或多个I/O设备进行通信。举例而言,输入设备504可以为天线、键盘、鼠标、操纵杆、(红外)遥控、摄像头、读卡器、传真机、加密狗、生物计量阅读器、麦克风、触摸屏、触摸板、轨迹球、传感器(例如加速度计、光传感器、GPS、陀螺仪、接近传感器等)、触控笔、扫描仪、存储设备、收发器、视频设备/视频源、头戴式显示器等。输出设备505可以为打印机、传真机、视频显示器(例如阴极射线管(CRT)、液晶显示器(LCD)、发光二极管(LED)、等离子等)、音频扬声器等。在一些实施方式中,收发器506可与处理器502连接。所述收发器可促进各类无线传输或接收。例如,所述收发器可包括以可操作方式连接至收发器芯片(例如德州仪器(Texas Instruments)WiLink WL1283、博通(Broadcom)BCM4750IUB8、英飞凌科技(Infineon Technologies)X-Gold 618-PMB9800等)的天线,以实现IEEE 802.11a/b/g/n、蓝牙、FM、全球定位系统(GPS)、2G/3G HSDPA/HSUPA通信等。
在一些实施方式中,处理器502可配置为通过网络接口507与通信网络508进行通信。网络接口507可与通信网络508通信。所述网络接口可采用连接协议,包括但不限于,直接连接,以太网(例如双绞线10/100/1000BaseT),传输控制协议/网际协议(TCP/IP),令牌环,IEEE 802.11a/b/g/n/x等。通信网络508可包括,但不限于,直接互连、局域网(LAN)、广域网(WAN)、无线网络(例如使用无线应用协议)、因特网等。通过网络接口507和通信网络508,计算机系统501可与设备509、510和511通信。这些设备可包括,但不限于,个人计算机,服务器,传真机,打印机,扫描仪,以及各种移动设备,例如蜂窝电话、智能电话(例如苹果(Apple)iPhone、黑莓(Blackberry)、基于安卓(Android)系统的电话等)、平板电脑、电子书阅读器(亚马逊(Amazon)Kindle,Nook等)、膝上型计算机、笔记本电脑、游戏机(微软(Microsoft)Xbox、任天堂(Nintendo)DS,索尼(Sony)PlayStation等)等。在一些实施方式中,计算机系统501可本身包含一个或多个上述设备。
在一些实施方式中,处理器502可配置为通过存储接口512与一个或多个存储设备(例如RAM 513、ROM 514等)进行通信。所述存储接口可采用串行高级技术连接(SATA)、集成驱动电子设备(IDE)、IEEE 1394、通用串行总线(USB)、光纤通道、小型计算机系统接口(SCSI)等连接协议连接至存储设备,该存储设备包括,但不限于,存储驱动器、可移除磁盘驱动器等。所述存储驱动器还可包括磁鼓、磁盘驱动器、磁光驱动器、光盘驱动器、独立磁盘冗余阵列(RAID)、固态存储设备、固态驱动器等。
所述存储设备可存储一系列程序或数据库组件,包括但不限于,操作系统516、用户界面应用程序517、网页浏览器518、邮件服务器519、邮件客户端520、用户/应用程序数据521(例如本公开内容中所述的任何数据变量或数据记录)等。操作系统516可促进计算机系统501的资源管理和运行。操作系统例如包括,但不限于,苹果Macintosh OS X、Unix、类Unix系统套件(例如伯克利软件套件(BSD)、FreeBSD、NetBSD、OpenBSD等)、Linux套件(如Red Hat、Ubuntu、Kubuntu等)、IBM OS/2、微软Windows(XP,Vista/7/8等)、苹果iOS、谷歌(Google)安卓、黑莓操作系统等。用户界面517可利用文本或图形工具促进程序组件的显示、执行、互动、操控或操作。例如,用户界面可在以可操作方式连接至计算机系统501的显示系统上提供光标、图标、复选框、菜单、滚动条、窗口、窗口部件等计算机交互界面元件。还可采用图形用户界面(GUI),包括但不限于,苹果Macintosh操作系统的Aqua、IBM OS/2、微软Windows(例如Aero、Metro等)、Unix X-Windows、网页界面库(例如ActiveX、Java、Javascript、AJAX、HTML、Adobe Flash等)等。
在一些实施方式中,计算机系统501可执行网页浏览器518存储的程序组件。所述网页浏览器可以为超文本浏览应用程序,如微软Internet Explorer、谷歌Chrome、谋智(Mozilla)火狐(Firefox)、苹果Safari等。安全网页浏览可通过HTTPS(安全超文本传输协议)、安全套接字层(SSL)、安全传输层(TLS)等实现。网页浏览器可使用AJAX、DHTML、AdobeFlash、JavaScript、Java、应用程序编程接口(API)等工具。在一些实施方式中,计算机系统501可执行邮件服务器519存储的程序组件。所述邮件服务器可以为微软Exchange等因特网邮件服务器。所述邮件服务器可使用ASP、ActiveX、ANSI C++/C#、微软.NET、CGI脚本、Java、JavaScript、PERL、PHP、Python、WebObjects等工具。所述邮件服务器还可使用因特网信息访问协议(IMAP),邮件应用程序编程接口(MAPI),微软Exchange,邮局协议(POP),简单邮件传输协议(SMTP)等通信协议。在一些实施方式中,计算机系统501可执行邮件客户端520存储的程序组件。所述邮件客户端可为苹果Mail、微软Entourage、微软Outlook、谋智Thunderbird等邮件查看程序。
在一些实施方式中,计算机系统501可存储用户/应用程序数据521,例如本公开内容中所述数据、变量、记录等(如以往单库,关键词,N元模型,簇或类别,关系映射,用户查询,解决方法等)。此类数据库可以为容错、关系、可扩展、安全数据库,例如甲骨文(Oracle)或赛贝斯(Sybase)。或者,上述数据库可通过数组、散列、链表、结构、结构化文本文件(例如XML)、表格等标准化数据结构实现,或者实施为面向对象的数据库(例如通过ObjectStore、Poet、Zope等)。上述数据库可以为合并或分布数据库,有时分布于本公开内容所讨论的上述各种计算机系统之间。应该理解的是,可以以任何可工作的组合形式对上述任何计算机或数据库组件的结构及操作进行组合、合并或分布。
本领域技术人员可以理解的是,上述各种实施方式中描述的技术实现了对电子装置显示器的调适,从而取代了可由用户提供的选择输入。这一操作减少了用户所需的互动次数。这尤其符合在通过音频或触碰类动作提供输入方面具有困难的无行为能力患者用户的需求。
此外,上述各种实施方式中描述的技术基于用户的预定义眨眼姿势。此类预定义眨眼姿势因易于记忆且易于检测而增强了可用性。其次,由于依赖眨眼类姿势,上述公开的系统比基于注视的系统更加稳健。再次,以上所述系统在生成一个或多个通知方面的固有能力可使远程用户能够一直获知用户的实时状态。该状态可对应于用户身体状况和/或用户需求。另外,此类更新使得远程用户可及时解决与用户相关联的任何医疗紧急情况。
本说明书已对用于调适电子装置上显示内容的系统和方法进行了描述。所示步骤用于说明所述例示实施方式,并且应当预想到的是,随着技术的不断发展,特定功能的执行方式也将发生改变。本文所呈现的上述实施例用于说明而非限制目的。此外,为了描述的方便性,本文对各功能构建模块边界的定义为任意性的,只要其上述功能及其关系能够获得适当执行,也可按其他方式定义边界。根据本申请的启示内容,替代方案(包括本申请所述方案的等同方案、扩展方案、变形方案、偏差方案等)对于相关领域技术人员是容易想到的。这些替代方案均落入所公开实施方式的范围和精神内。
此外,一个或多个计算机可读存储介质可用于实施本公开内容的实施方式。计算机可读存储介质是指可对处理器可读取的信息或数据进行存储的任何类型的物理存储器。因此,计算机可读存储介质可对由一个或多个处理器执行的指令进行存储,包括用于使处理器执行根据本申请实施方式的步骤或阶段的指令。“计算机可读介质”一词应理解为包括有形物件且不包括载波及瞬态信号,即为非临时性介质,例如随机存取存储器(RAM)、只读存储器(ROM)、易失性存储器、非易失性存储器、硬盘驱动器、只读光盘存储器(CD-ROM)、DVD、闪存驱动器、磁盘以及其他任何已知物理存储介质。
以上公开内容及实施例旨在于仅视为示例性内容及实施例,所公开实施方式的真正范围和精神由权利要求给出。

Claims (20)

1.一种调适电子装置上显示内容的方法,其特征在于,所述方法包括:
在显示单元上显示第一用户界面,所述第一用户界面包括针对用户的多个第一图形提示,其中,所述多个第一图形提示被相继着重突显;
经图像识别单元检测用于选择所述第一用户界面的着重突显的图形提示的所述用户的一个或多个预定义眨眼姿势;以及
当检测到所述用户的所述一个或多个预定义眨眼姿势时,由调适引擎对所述第一用户界面进行调适,以显示第二用户界面。
2.如权利要求1所述的方法,其特征在于,至少一个所述第二用户界面包括多个第二图形提示。
3.如权利要求2所述的方法,其特征在于,所述多个第一图形提示和所述多个第二图形提示中的每一个被着重突显第一预定义时间间隔。
4.如权利要求1所述的方法,其特征在于,还包括根据第二预定义时间间隔从所述第一用户界面自动过渡到所述第二用户界面,其中,所述过渡至少包括垂直滚动或水平滚动。
5.如权利要求1所述的方法,其特征在于,根据与所述用户相关联的一个或多个历史选择,确定所述第二用户界面。
6.如权利要求1所述的方法,其特征在于,还包括根据所检测到的所述用户的一个或多个预定义眨眼姿势,生成一个或多个通知。
7.如权利要求6所述的方法,其特征在于,所生成的一个或多个通知对应于以下当中的一个或多个:与所述用户相关联的医疗事件;对应于所述用户的物理或精神状态的讯息;所述用户所发请求的状态;以及对所述多个第一图形提示当中的一个或多个图形提示的选择。
8.如权利要求7所述的方法,其特征在于,至少通过将所述用户选择着重突显的图形提示所用的平均时间与预定义时间阈值相比较的方式,经所述电子装置判断与所述用户相关联的医疗事件。
9.如权利要求1所述的方法,其特征在于,所述一个或多个预定义眨眼姿势至少包括以下中的一个或多个:所述用户的单眼或双眼眨动预定义次数;所述用户的单眼或双眼闭合预定义时间长度;所述用户的眼睛眨动的组合。
10.如权利要求1所述的方法,其特征在于,对所述第一用户界面的调适包括控制所述多个第一图形提示和所述多个第二图形提示的显示特性。
11.如权利要求10所述的方法,其特征在于,所述显示特性至少包括以下的一个或多个:相继着重突显所述多个第一图形提示的时间间隔;相继着重突显所述多个第二图形提示的时间间隔;所述多个第一图形提示或所述多个第二图形提示的大小;所述多个第一图形提示或所述多个第二图形提示的显示时间长度;所述显示单元的亮度水平。
12.如权利要求1所述的方法,其特征在于,还包括将所检测的用于选择着重突显的图形提示的一个或多个预定义用户眨眼姿势保存于与所述电子装置相关联的存储器内。
13.一种调适电子装置上显示内容的系统,其特征在于,所述系统包括:
处理器;以及
以通信方式连接于所述处理器的存储器,其中,所述存储器存有所述处理器可执行的指令,所述指令在执行时使得所述处理器:
显示第一用户界面,所述第一用户界面包括针对用户的多个第一图形提示,其中,所述多个第一图形提示被相继着重突显;
检测用于选择所述第一用户界面的着重突显的图形提示的所述用户的一个或多个预定义眨眼姿势;以及
当检测到所述用户的所述一个或多个预定义眨眼姿势时,对所述第一用户界面进行调适,以显示第二用户界面。
14.如权利要求13所述的系统,其特征在于,至少一个所述第二用户界面包括多个第二图形提示,以及
所述多个第一图形提示和所述多个第二图形提示中的每一个被着重突显第一预定义时间间隔。
15.如权利要求13所述的系统,其特征在于,所述处理器还根据第二预定义时间间隔实施从所述第一用户界面至所述第二用户界面的自动过渡,其中,所述过渡至少包括垂直滚动或水平滚动。
16.如权利要求13所述的系统,其特征在于,根据与所述用户相关联的一个或多个历史选择,确定所述第二用户界面。
17.如权利要求13所述的系统,其特征在于,所述处理器还根据所检测到的所述用户的一个或多个预定义眨眼姿势,生成一个或多个通知。
18.如权利要求13所述的系统,其特征在于,所述一个或多个预定义眨眼姿势至少包括以下中的一个或多个:所述用户的单眼或双眼眨动预定义次数;所述用户的单眼或双眼闭合预定义时间长度;所述用户的眼睛眨动的组合。
19.如权利要求13所述的系统,其特征在于,对所述第一用户界面的调适包括控制所述多个第一图形提示和所述多个第二图形提示的显示特性,
所述显示特性至少包括以下的一个或多个:相继着重突显所述多个第一图形提示的时间间隔;相继着重突显所述多个第二图形提示的时间间隔;所述多个第一图形提示或所述多个第二图形提示的大小;所述多个第一图形提示或所述多个第二图形提示的显示时间长度;所述显示单元的亮度水平。
20.一种存有指令的非暂时性计算机可读介质,其特征在于,所述指令用于根据基于眼部的用户输入实施显示内容的调适,其中,当所述指令由一个或多个处理器执行时,所述处理器执行操作,所述操作包括:
显示第一用户界面,所述第一用户界面包括针对用户的多个第一图形提示,其中,所述多个第一图形提示被相继着重突显;
检测用于选择所述第一用户界面的着重突显图形提示的所述用户的一个或多个预定义眨眼姿势;以及
当检测到所述用户的所述一个或多个预定义用户眨眼姿势时,对所述第一用户界面进行调适,以显示第二用户界面。
CN201710121424.7A 2016-09-20 2017-03-02 调适电子装置上显示内容的系统和方法 Withdrawn CN107844192A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
IN201641032077 2016-09-20
IN201641032077 2016-09-20

Publications (1)

Publication Number Publication Date
CN107844192A true CN107844192A (zh) 2018-03-27

Family

ID=57326183

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710121424.7A Withdrawn CN107844192A (zh) 2016-09-20 2017-03-02 调适电子装置上显示内容的系统和方法

Country Status (3)

Country Link
US (1) US20180081433A1 (zh)
EP (1) EP3296842A1 (zh)
CN (1) CN107844192A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11457860B2 (en) * 2018-07-09 2022-10-04 Cheng Qian Human-computer interactive device and method

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5821936A (en) * 1995-11-20 1998-10-13 Siemens Business Communication Systems, Inc. Interface method and system for sequencing display menu items
US20020163543A1 (en) * 2001-05-02 2002-11-07 Minoru Oshikiri Menu item selection method for small-sized information terminal apparatus
US20130214925A1 (en) * 2012-02-17 2013-08-22 Wavemarket, Inc. System and method for detecting and responding to an emergency
US20140215398A1 (en) * 2013-01-25 2014-07-31 Apple Inc. Interface scanning for disabled users
CN104755023A (zh) * 2012-11-02 2015-07-01 索尼公司 图像显示设备和信息输入设备

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5261042A (en) * 1986-03-27 1993-11-09 Wang Laboratories, Inc. Menu management system
JP3892197B2 (ja) * 2000-02-03 2007-03-14 パイオニア株式会社 ナビゲーションシステム
US6882869B1 (en) * 2000-12-19 2005-04-19 Cisco Technology, Inc. Device, methods, and user interface for providing optimized entry of alphanumeric text
CN102981614B (zh) * 2005-08-15 2016-08-17 皇家飞利浦电子股份有限公司 用于个人卫生保健环境的用户界面系统
US8886153B2 (en) * 2010-12-22 2014-11-11 Verizon Patent And Licensing Inc. Method and apparatus for configuring a mobile device to provide emergency notification
KR101919009B1 (ko) * 2012-03-06 2018-11-16 삼성전자주식회사 안구 동작에 의한 제어 방법 및 이를 위한 디바이스
CN103713735B (zh) * 2012-09-29 2018-03-16 华为技术有限公司 一种使用非接触式手势控制终端设备的方法和装置
US9007301B1 (en) * 2012-10-11 2015-04-14 Google Inc. User interface
ITMI20120375U1 (it) * 2012-10-19 2014-04-20 B10Nix S R L Sistema ed apparecchiatura di interazione tra un elaboratore informatico ed un utente disabile.
US20150213634A1 (en) * 2013-01-28 2015-07-30 Amit V. KARMARKAR Method and system of modifying text content presentation settings as determined by user states based on user eye metric data
US9442631B1 (en) * 2014-01-27 2016-09-13 Google Inc. Methods and systems for hands-free browsing in a wearable computing device
US11310337B2 (en) * 2014-12-30 2022-04-19 Avaya Inc. Interactive contact center menu traversal via text stream interaction
CN105892642A (zh) * 2015-12-31 2016-08-24 乐视移动智能信息技术(北京)有限公司 一种根据眼部动作对终端进行控制的方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5821936A (en) * 1995-11-20 1998-10-13 Siemens Business Communication Systems, Inc. Interface method and system for sequencing display menu items
US20020163543A1 (en) * 2001-05-02 2002-11-07 Minoru Oshikiri Menu item selection method for small-sized information terminal apparatus
US20130214925A1 (en) * 2012-02-17 2013-08-22 Wavemarket, Inc. System and method for detecting and responding to an emergency
CN104755023A (zh) * 2012-11-02 2015-07-01 索尼公司 图像显示设备和信息输入设备
US20140215398A1 (en) * 2013-01-25 2014-07-31 Apple Inc. Interface scanning for disabled users

Also Published As

Publication number Publication date
EP3296842A1 (en) 2018-03-21
US20180081433A1 (en) 2018-03-22

Similar Documents

Publication Publication Date Title
US11617006B1 (en) System and method for capturing audio or video data
US10484597B2 (en) Emotional/cognative state-triggered recording
US11049147B2 (en) System and method for providing recommendation on an electronic device based on emotional state detection
US10877783B2 (en) System and method for alerting a user of risks
US20170041264A1 (en) System and method for controlling data transmissions using human state-based data
US11825011B2 (en) Methods and systems for recalling second party interactions with mobile devices
US9323984B2 (en) System and methods of adaptive sampling for emotional state determination
US10424288B2 (en) System and method for rendering textual messages using customized natural voice
US9679497B2 (en) Proxies for speech generating devices
US10148808B2 (en) Directed personal communication for speech generating devices
US20160166204A1 (en) Detecting visual impairment through normal use of a mobile device
EP3360056B1 (en) Facilitating awareness and conversation throughput in an augmentative and alternative communication system
US20180357386A1 (en) Systems and methods for personalized care management
CN107844192A (zh) 调适电子装置上显示内容的系统和方法
US20160078192A1 (en) Processing medical data on a cloud server
US9380983B2 (en) Method and system for fail-proof patient monitoring
EP4189559A1 (en) Electronic devices and methods for selecting and displaying multimodal content
EP4329320A1 (en) Method and apparatus for video playback
EP3306494A1 (en) System and method for customizing a presentation
US20190095635A1 (en) Method and device for managing system access to a user

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20180327