CN104081382B - 建立可动态指定的用户界面的方法和系统 - Google Patents

建立可动态指定的用户界面的方法和系统 Download PDF

Info

Publication number
CN104081382B
CN104081382B CN201380007353.8A CN201380007353A CN104081382B CN 104081382 B CN104081382 B CN 104081382B CN 201380007353 A CN201380007353 A CN 201380007353A CN 104081382 B CN104081382 B CN 104081382B
Authority
CN
China
Prior art keywords
user
background
control panel
electronic equipment
application program
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201380007353.8A
Other languages
English (en)
Other versions
CN104081382A (zh
Inventor
伽柏·维达
斯蒂芬·麦肯齐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Teknision Inc
Original Assignee
Teknision Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Teknision Inc filed Critical Teknision Inc
Publication of CN104081382A publication Critical patent/CN104081382A/zh
Application granted granted Critical
Publication of CN104081382B publication Critical patent/CN104081382B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/44Program or device authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2221/00Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/21Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/2149Restricted operating environment

Abstract

由于便携式电子设备的多功能性和为个人所专用的特点,其正作为应用程序几乎存在于任何地方,日渐成为个人生活的一部分,而且每天都有新产品推出。因此,这些电子设备动态调整应用程序、信息、用户界面等变得越来越重要。根据本发明的实施方案,用户界面提供:生物特征识别—与其他背景因素独立或关联的用户界面(UI)配置根据成功识别的用户的身份而变化;电子环境背景—电子设备的电子环境为UI提供背景基础;动态背景调整和小背景—UI配置随着大小背景的变化进行适应性调整,将大背景分为多个小背景;直观的用户界面—用户动作更直观且更类似于真实世界中的操作;及智能代理人—对应用程序通知进行分析以识别对其他应用程序中其他操作/活动的影响。

Description

建立可动态指定的用户界面的方法和系统
技术领域
本发明涉及用户界面,尤其涉及用于建立可动态指定的用户界面的方法和系统。
背景技术
在人机交互的工业设计领域中,用户界面是人与机器进行交互的“空间”。人和机器在用户界面交互的目标是对机器进行有效操作和控制,同时机器向用户发出反馈以帮助用户做出操作决定。这种广义上的用户界面例子包括计算机操作系统、手工具、重型机械操作员控制器和过程控制器的交互方面。创建用户界面的相关设计考虑事项与人机工程学和心理学等学科有关,或涉及人机工程学和心理学等学科。
因此,用户界面是人(用户)与机器(设备)进行交互且包括硬件(物理)和软件(逻辑)组件的系统。用户界面存在于各种各样的系统中,提供了以下手段:
输入—使用户能操纵系统;及
输出—使系统能显示用户操纵的效果。
一般而言,人机交互工程的目标是生成一种使机器操作更容易、高效和愉快并产生预期结果的用户界面,这通常意味着,操作员只需提供最少的输入就能实现预期输出,而机器向人提供尽可能少的非预期输出,并且操作员提供的输入是直观和合乎逻辑的。随着基于微处理器的系统越来越多的使用以及重型机械社会认知的相对降低,术语“用户界面”已带有电子设备和系统图形用户界面的色彩,同时工业控制面板和机械控制设计讨论更普遍地涉及人机界面。用户界面其他常见术语包括人与计算机界面(HCI)和人机界面(MMI)。
一些发明人认为用户界面是使计算机用户满意的首要因素,这是因为用户界面的设计会影响到用户对系统进行输入和解释系统输出须花费多少努力以及学会系统输入和解释输出须付出多少努力。可用性是指特定用户界面的设计考虑用户心理和生理特点的程度以及使系统使用过程有效、高效和令人满意的程度。
可用性主要是用户界面的一个特征,但也与产品功能性及其设计过程有关联。可用性说明了目标用户有效、高效和满意地使用产品的预期用途效果如何,还考虑到了使用背景的要求。在计算机科学和人机交互中,(计算机程序和/或电子设备的)用户界面指呈现给用户的图形、文字和听觉信息以及连贯的控制动作(如计算机键盘或触控板的键击,计算机鼠标或手指在触控板上的移动,和用户对控制程序所用的计算机程序和/或电子设备的一个或多个界面所做的其他选择)。
直接操纵界面指一般类别的用户界面,此类界面使用户能通过至少与真实世界不严格对应的操作来操纵向其呈现的对象。但迄今为止现有技术的解决方案均被含糊地称为直接机器界面,因为用户通过键盘、触控板或其他输入设备操作直接选择功能特性或项目。而用户通过点击或触摸选择移动项目并不相当于真实世界中用户通常用手捏住和抓住的动作来选择物品。
目前,以下类型的用户界面最为常见:图形用户界面(GUI)和网页风格用户界面(WUI,也称网页用户界面)。GUI接受用户通过键盘、鼠标和触控板等设备进行的输入并在设备显示器上提供清晰的图形输入/输出。GUI设计中广泛使用的有至少两种不同的原则,面向对象用户界面(OOUI)和面向应用界面(AOI)。实现的GUI可运用一种或多种语言,包括但不限于,且设计成使用一个或多个操作系统工作,包括但不限于适用于便携电子设备(PED)和固定电子设备(FED)的塞班、Openlndiana、Haiku、安卓、Windows、Mac OS、iOS、RISC OS、GNU/Linux、Tablet OS和黑莓OS。
WUI接受输入并通过生成网页的方式提供输出,网页通过因特网传送,用户使用网页浏览器程序查看网页。实现的WUI可运用Java、AJAX、Adobe Flex、Microsoft NET等类似技术在单独的程序中提供实时控制,无需刷新传统的HTML网页浏览器。网页服务器、服务器和联网计算机的管理网页界面通常称为控制面板。
最初,用户界面使用命令行界面,其中,用户通过计算机键盘键入命令字串提供输入,系统通过在计算机显示器上用印刷体打出文字提供输出。在许多情况下,此类界面仍被程序员和系统管理员用在工程和科学环境中,同时还被技术先进的个人计算机用户使用。过去,此类界面通过引入控件(也称窗口小部件)进行扩充,控件包括但不限于窗口、文本框、按钮、超链接、下拉列表、选项卡和弹出菜单。那些可通过界面元素扩充的即为界面对象,界面对象将正在进行的操作或转换的状态表示为用户意图的视觉提示(如指针)或显示用户可交互位置的可供性(包括但不限于光标、指针和调整柄)。
当今的用户界面已演变成包括以下方面:
体贴周到的用户界面管理着用户的注意力,判断何时打断用户、警告类型以及呈现给用户的信息的详细程度。
成批界面为非交互式用户界面,其中,用户在成批处理前预先规定成批作业的所有细节并在所有处理完成时接收输出。
传统的界面代理试图以动画人物、机器人或其他人物形象使计算机界面人格化并以会话形式呈现交互。
基于交叉的界面为图形用户界面,其中,主要任务为使边界交叉而非指向。
手势界面是接受人手手势或计算机鼠标或触控笔描画的鼠标手势形式的输入的图形用户界面。
智能用户界面是旨在通过用户、域、任务、话语和媒体(如图形、自然语言和手势)模型呈现、推理和操作来提高人机交互的效率、有效性和自然度的人机界面。
动作跟踪界面监视用户身体动作并将其转化成命令。
多屏界面使用多个显示器以提供更加灵活的交互,常用于计算机游戏交互中。
非命令用户界面通过观察用户推断出其需要和意图,无需用户用公式明确表示命令。
面向对象用户界面(OOUI)基于面向对象的编程隐喻,使用户能操纵仿真对象及其属性。
自反用户界面,其中,用户仅通过用户界面控制和重新定义整个系统,如更改其命令动词。
有形用户界面,其更强调触摸和物理环境或其元素。
面向任务界面是通过将任务而非文件做成主要交互单元来解决桌面隐喻信息超负荷问题的用户界面。
文本用户界面是输出文本但接受键入命令字串以外或代替键入命令字串的其他形式的输入的用户界面。
语音用户界面,其接受输入并通过生成语音提示提供输出。用户输入通过按下按键或按钮或对着界面口头作答完成。
自然语言界面—用于搜索引擎和网页上。用户键入问题,然后等待回应。
零输入界面从一组传感器获取输入,而不是通过输入对话向用户提问。
缩放用户界面是信息对象可以不同的比例和细节水平呈现且用户能改变查看区域的比例以显示更多细节的图形用户界面。
但是,尽管演变出了所述多种用户界面,但这些界面都将便携或固定电子设备上的用户环境视为稳定的环境,而且不从根本上调整用户界面或该环境的其他方面,包括用户为个人可用的功能特性和应用程序,而是假设所有用户以相同方式参与应用程序。
一个较佳用户界面的特性具有一致性,即向用户提供一系列一致的期望并达到这些期望。若不能用于某种目的且对最终用户没有任何益处,一致性可能就较差,像任何其他原则一样,一致性也具有其限制。一致性是认知尺寸框架所述的用户界面设计中折衷的一个品质。在一些情况下,违反一致性原则能产生十分明显的有利条件,细心明智的用户界面设计者可能选择违反该原则以达到其他一些重要的目标。
一般认为有三个方面与一致性相关。第一,不同功能特性的控件应以一致的方式呈现以便用户很容易找到这些控件。例如,当一些命令通过菜单可用,一些通过图标可用,一些通过右击可用,一些通过屏幕角落处的单独按钮可用,一些按功能分组,一些按“常见”分组,一些按“高级”分组,此时用户会发现使用软件很难。用户查找某一命令时应具有找到该命令用的一致的搜索策略。用户必须使用的搜索策略越多,搜索就越令人沮丧。分组越是一致,搜索就越容易。用户界面设计单一性原则规定,最理想的是应仅有一种能实现简单操作的方法以帮助很快习惯使用界面。
第二,惊讶原则,即,各种功能特性应以相似的方式工作,因此在一种实施方案或情形中,界面不应要求用户“先选择功能特性再选择功能进行应用”,然后在其他情形中“先选择功能再选择功能特性进行应用”。命令在所有背景中应以相同的方式工作。第三,针对用户界面的一致性建议在不同版本中会有所不同。变化应尽量小,并应保持向前兼容,这随着设备和界面的成熟进行调整。从传统上说,应用程序和硬件越不成熟,保持其现在版本或更早版本的用户就越少,因此越广泛使用的应用程序和硬件必须认真坚持现状以避免产生破坏性成本和遭到用户强烈反对。但是在当今,一种在消费领域很成功的新应用程序和/或硬件元素会在很短时间内从零用户发展到拥有百万用户。例如,苹果iPadTM于2010年4月推出,在头80天内卖出3百万台。在2010年的八个月内,销售量总计1.48千万,2011年末期,普遍认为苹果有望在该年销售4千万台设备。
用户界面的设计广泛采用心理模型,普遍发现通过心理模型很难对不清楚和不完整的事实进行量化,这种灵活性不论从消极意义上说还是从积极意义上说均相当地多变,心理模型起到能引起选择性感知(如仅感知选定部分的信息)的信息过滤器的作用并且在许多情况下与世界上的复杂事物相比很有限。例如,最近发布的三星GalaxyTM智能手机使用人脸识别只能向一个人解锁,但只要将未解锁的智能手机给另外一个用户,它所有的保护均会失去,便不进一步执行任何其他功能。
心理模型是理解组织学习的基本方法,并且在许多情况下基于根深蒂固的思维和行动印象。心理模型是理解世界的基础以致人们几乎意识不到有它的存在,一般用以下几种基本形式表示:
多边形—共有一个边的顶点代表相关项目;
因果回路图—展示信息联系趋势和方向以及产生的因果关系;及
流程图—用于表示动态系统。
因此,用户在不知道所用的心理模型时期望用户界面、软件和硬件以特定方式运行,一旦违反已牢固建立的心理模型,用户便会感到困惑、被忽视或不满意。当今,社交媒体意味着这些用户能迅速将其想法传达给更多受众,从而对软件和/或硬件的商业成功造成负面影响。
随着便携电子设备广泛渗透到消费者中,当今智能手机必须能支持直观界面和能在应用程序之间的快速切换,使用户通过直接邮件、网络邮件、简单的信息服务(SMS)、电话、多媒体应用程序、下载的和在线游戏、社交媒体服务、流多媒体内容等进行浏览、编辑、查看、播放、评论等。同时,这些便携电子设备包括多个无线接口,包括但不限于IEEE802.11、IEEE802.15、IEEE802.16、IEEE802.20、UMTS、GSM850、GSM900、GSM1800、GSM1900和GPRS以及近场通讯界面(NFC)、加速度计、全球定位系统(GPS)、指南针中一个或多个,以便设备知道其位置,利用位置信息的第三方应用程序也不断增多,如谷歌纵横、苹果的“找朋友”以及“我周围的单身人士”。
由于其无处不在和为个人专用的特点,智能手机正日益定位到个人生活的其他方面,如用万事达卡的PayPass数字钱包程序或维萨卡的payWave进行购买,用美国银行、大通银行、PayPal、富国银行、第一资本、美国运通等机构的应用程序办理银行业务,用StateFarm等的应用程序办理保险业务,以及医疗、新闻、生活方式、健康和减肥、教育。因此,蜂窝电话、智能手机、个人数字助理(PDA)、便携计算机、寻呼机、便携多媒体播放器、便携游戏机、笔记本电脑、平板电脑、电子阅读器等便携电子设备中含有与用户相关的保密和敏感信息。
所以,这些电子设备根据用户身份对呈现给用户的应用程序、信息和用户界面等做出适应性调整就变得越来越有好处。另外,根据用户使用电子设备的背景对这些方面进行调整也将很有益处。所述原理也适用于联网电视、游戏系统和台式计算机等非便携电子设备。
因此,根据本发明实施方案的用户界面和电子设备有益的是,提供了生物特征识别、环境背景和通过改变背景、直观界面和小背景进行动态重新配置。
生物特征识别—其中与其他背景因素无关或关联的用户界面(UI)配置根据识别的用户的身份而变化。所述基于背景用户界面的UI配置(例如)包括从多个UI中选择一个UI呈现给用户,适应性调整UI/控制面板元素,适应性调整可访问应用程序及其设置。
电子环境背景—其中电子设备的电子环境为用户活动提供了背景基础,这样UI、控制面板、应用程序、设置等可根据无线/有线环境变化。
动态背景调整—其中UI、控制面板、应用程序、设置等的配置随着背景变化根据用户的电子、地理、临时背景和/或人作不连续的或连续的适应性调整。
小背景—其中,家庭、旅行、工作等大背景实际是多个小背景,这些小背景会引起UI、控制面板、应用程序、设置等发生更细微的调整。
直观用户界面—其中用户做出更直观的动作,如挤压、抠取、打开、关闭等,通过触摸屏上的预定动作完成,预定动作更非常像在真实世界中用户所做的动作。
通过审阅结合附图对本发明具体实施方案所做的以下描述,该领域的普通技术人员会很容易明白本发明的其他方面和特征。
发明内容
本发明的一个目的是减少现有技术中与用户界面相关的一些局限性,尤其是提供一种建立可动态指定的用户界面的方法和系统。
根据本发明的一个实施方案,提供了一种方法,包括:
设置寄存用户生物特征的传感器;
为设备设置用于执行与用户界面相关的用户界面应用程序的微处理器;
设置内存用于存储:
用户界面应用程序;
多个基准生物特征中的至少一个基准生物特征,每个基准生物特征与设备的授权用户相关;
多个背景控制面板中的至少一个背景控制面板;及
多个用户配置文件中的至少一个用户配置文件,每个用户配置文件与所述多个背景控制面板的预定部分关联且每个背景控制面板与提供给预定用户的一组预定软件应用程序的配置相关;
设置多个无线接口中的至少一个无线接口,每个无线接口根据预定标准运行;
通过微处理器执行用户界面应用程序以验证设备的预期用户为授权用户并提供显示的背景控制面板,所述背景控制面板至少根据授权用户、电子设备的大背景和电子设备的小背景选择。
根据本发明的一个实施方案,提供了一种方法,包括:
设置在至少包括内存和微处理器的设备上执行的用户界面应用程序;
在内存中设置多个背景控制面板,每个背景控制面板与身份和一组预定的软件应用程序的设置相关;
在显示器上根据应用程序的用户界面、设备用户身份、大背景和小背景建立第一背景控制面板;
检测用户身份、大背景和小背景中的至少一个的变化;
将第一背景控制面板动态地改为第二背景控制面板,第二背景控制面板根据用户界面应用程序、用户身份、大背景和小背景中的至少一个变化项以及用户身份、大背景和小背景中的至少一个未改变项确定。
根据本发明的一个实施方案,提供了一种方法,包括:
设置在至少包括内存、触控板和微处理器设备上执行的应用程序;
检测用户手指在触控板上与向用户显示的对象相关联的预定动作;
将用户手指的预定动作和与向用户显示的对象相关的操作关联起来;
向用户显示将与该对象相关的操作应用到该对象的结果。
根据本发明的一个实施方案,提供了一种方法,包括:
在包括微处理器和智能代理人应用程序的第一计算机上执行;
用智能代理人应用程序分析与多个软件应用程序中的第一软件应用程序的相互通信(至少一向)以识别出与第一软件应用程序中信息项相关的数据的通信实例;
用智能代理人确定所述数据对信息项的影响;及
至少根据所述数据确定对信息项的更改建议。
通过审阅结合附图对本发明具体实施方案进行的以下描述,该领域普通技术人员会很容易明白本发明的其他方面和特征。
附图说明
现在参考附图仅用实例对本发明的实施方案进行说明,其中:
图1为根据本发明一个实施方案的背景UI心理模型;
图2为根据本发明一个实施方案的背景UI心理模型;
图3为根据本发明一个实施方案的示例性配置文件层流程图;
图4为根据本发明一个实施方案的用户背景控制面板层的示例性迁移;
图5为根据本发明一个实施方案的向用户呈现的示例性锁屏;
图6为根据本发明一个实施方案的向用户呈现的示例性用户访问屏;
图7为根据本发明一个实施方案的示例性部分用户锁屏;
图8为根据本发明一个实施方案的向用户呈现的旅行模式的示例性背景控制面板;
图9为根据本发明一个实施方案的向用户呈现的带应用程序选项的旅行(休假)模式的示例性背景控制面板;
图10为根据本发明一个实施方案的向用户呈现的家庭模式的示例性背景控制面板;
图11为根据本发明一个实施方案的向用户呈现的带应用程序任务的家庭模式的示例性背景控制面板;
图12为根据本发明一个实施方案的向用户呈现的工作模式的示例性背景控制面板;
图13为根据本发明一个实施方案的向用户呈现的带应用程序任务的工作模式的示例性工作屏幕;
图14A为根据本发明一个实施方案的用户控制面板的定制;
图14B为控制面板扩展配置和对电子设备的动态映射;
图15为带应用程序默认和任务视图以及不同应用程序类别任务视图的用户控制面板配置;
图16为UI中控制面板布局和元素的呆板的与自然的方式;
图17为根据本发明一个实施方案的向UI用户提供自然方式的一系列示例性元素;
图18为根据本发明一个实施方案的向UI用户提供自然方式的一系列示例性元素;
图19为根据本发明一个实施方案的向UI用户提供自然方式的一系列示例性元素;
图20为根据本发明一个实施方案的居住和办公环境及其中向UI提供小背景的元素;
图21为根据本发明一个实施方案的大背景和小背景因素的用户和背景确定的示例性流程图;
图22为支持与实施根据本发明一个实施方案的背景UI的电子设备相互通信的网络;
图23为支持根据本发明一个实施方案的背景UI的电子设备和网络接入点;
图24为根据本发明一个实施方案的显示来自智能代理人的通知的示例性屏幕,其中通知告知用户应用程序接收的通知对活动的影响;
图25所示为根据本发明一个实施方案的显示来自智能代理人的通知的示例性屏幕,其中通知告知用户应用程序接收的通知对活动的影响;及
图26为根据本发明一个实施方案的用户启用智能代理人提供告知收到的通知使活动发生变动的通知的示例性流程图。
具体实施方式
本发明涉及用户界面,尤其涉及用于建立可动态指定的用户界面的系统和方法。
接下来的说明仅作为示例性实施方案,无意对该公开内容的范围、适用性或配置进行限制。相反,接下来的示例性实施方案说明将向该领域技术人员提供使其能够实施示例性实施方案的说明。应理解的是,在不偏离所附权利要求书中规定的精神和范围的情况下,可对元素的功能和布置做各种改变。
此处及整个本申请说明书中所用的“便携电子设备”指需要使用电池或其他独立式能量供能的通讯用无线设备,包括,但不限于,蜂窝电话、智能手机、个人数字助理(PDA)、便携计算机、寻呼机、便携多媒体播放器、便携游戏机、笔记本电脑、平板电脑、电子阅读器等设备。此处及整个本申请说明书中所用的“固定电子设备”(FED)指不需要使用电池或其他独立式能量供能的通讯用无线或有线设备,包括,但不限于,联网电视、游戏系统、台式计算机、一体机、联网通信终端。
此处所用的“网络运营商”或“网络服务供应商”指,但不限于,为移动电话用户提供包括语音、文本信息和因特网在内服务的电话或其他公司;为用户提供包括但不限于语音、文本信息、网络电话和因特网这些服务的电话或其他公司;提供无线接入本地网、城域网和广域网以进行数据、文本、因特网和其他业务或通信会话等的电话、电缆或其他公司。
此处所用的“软件系统”指,但不限于,执行软件应用程序或应用程序软件套件以提供与电子目录许可证发放、注释、发布、生成、呈现、加密、社区参与、存储、合并和呈现以及电子目录用户和社区活动跟踪相关的一个或多个功能特性的基于服务器的计算机系统。所述软件系统从一个“软件应用程序”或多个“软件应用程序”通过通信接入,向软件应用程序提供数据,包括但不限于电子目录。此处所用的“软件应用程序”可指,但不限于,在便携或固定电子设备上执行的一个应用程序、应用程序组合或应用程序套件,以提供与用户界面生成、呈现、管理和控制相关的一个或多个功能特性相关的一个或多个功能特性。各种形式的软件应用程序可构成操作系统的一部分,或为应用层的一部分,或为操作系统和应用层之间的附加层。
此处及整个本申请说明书中所用的“用户”指,但不限于,运用软件系统和/或软件应用程序的个人或设备,且此处所用的“用户”可指用软件系统和/或软件应用程序注册以获取一级目录和生成与一级目录相关联的二级目录的个人、团体或组织。此处及整个本申请说明书中所用的“用户界面”指,但不限于,接受一个或多个用户输入设备的用户输入并向用户提供输出的图形用户界面(GUI)和/或网页用户界面(WUI)。通常,用户界面在电子设备显示器和/或显示屏上提供清晰的图形输入/输出,而且除通过音频、视频和触控界面接受输入外,还可将视频和/或可触摸的输出与清晰的图形输出同时提供。
图1所示为根据本发明一个实施方案的背景UI心理模型100。在该背景UI心理模型100中,所绘的100A至100C分别为用户A、B和C的第一至第三用户配置文件。就第一用户配置文件而言,它包括多个层,即触摸屏110、锁120、配置文件130、背景控制面板140、应用程序150和硬件160,其中背景UI心理模型100在智能手机、平板电脑和PDA等便携电子设备上实施,触摸屏110通过触敏表面提供第一用户输入并通过LCD/LED显示器提供第一用户输出。于是,在用户访问触摸屏110时,向其呈现锁120,这根据本发明实施方案通过以下图5、6、7和21所示的过程提供用户生物特征寄存。
因此,供用户提供有效生物特征寄存证书的软件应用程序确定将多个用户配置文件中哪个用户配置文件呈现给用户。因此,在该背景UI心理模型100中,从用户配置文件A100A、用户配置文件B100B和用户配置文件C100C中选择。若选择与第一用户A有关的用户配置文件A100A,根据该时刻用户所在的背景和用户A配置文件130向用户呈现背景控制面板,所述背景控制面板分别从第一至第三背景控制面板140、142和143中选择。所述第一至第三背景控制面板140、142和143中每个控制面板均根据所选背景控制面板的特征、前一会话的设置、以及检索的与显示应用程序相关的数据中的一项或多项显示预定的应用程序组合。这些应用程序从第一至第五应用程序150和152至155中选择。
当背景UI心理模型100确定该用户为第二用户(用户B)时,所选的用户配置文件为用户配置文件B100B。根据该时刻用户所在的背景和用户配置文件B132选择呈现的背景控制面板分别从第四至第六背景控制面板144至146中选择。所述第四至第六背景控制面板144至146中每个控制面板根据所选背景控制面板的特征、前一会话的设置、以及检索的与显示应用程序相关的数据中的一项或多项显示预定的应用程序组合。但为清晰起见未示出的应用程序,除其他应用程序外,还可包括所述第一至第五应用程序150和152至155中的一个或多个应用程序。
若背景UI心理模型100确定该用户为第三用户,即用户C,所选的用户配置文件为用户配置文件C100C。根据该时刻用户所在的背景和用户配置文件C133选择呈现的背景控制面板分别从第七至第九背景控制面板147至149中选择。所述第七至第九背景控制面板147至149中每个控制面板根据所选背景控制面板的特征、前一会话的设置、以及检索的与显示应用程序相关的数据中的一项或多项显示预定的应用程序组合。但为清晰起见未示出的应用程序,除其他应用程序外,还可包括所述第一至第五应用程序150和152至155中一个或多个应用程序。
该领域技术人员会明白,根据硬件160的变形,触摸屏110也可用一个或多个用户输入手段和一个或多个用户输出手段代表。还会明白的是,根据硬件160内元素的配置和规格,其他层的操作和性能方面可不同。硬件160的示例性配置在下文中参考图23用电子设备2304呈现。
图2所示为根据本发明一个实施方案的背景UI心理模型200。如图所示,背景UI心理模型200包括锁定层210、配置文件层220、背景控制面板层230和应用层240。首先从锁定层210方面来说,它包括锁屏211,所述锁屏211用于锁定电子设备并要求用户提供一种或多种有效的证书方可进入配置文件层220。在配置文件层220中,背景UI心理模型200通过签到223处理生物特征证书提供结果,其中根据生物特征证书是否与电子设备的授权用户是否匹配做出判断。若匹配,背景UI心理模型200进入背景控制面板层230。
若生物特征证书不匹配,背景UI心理模型200移至未识别222,其中用户可通过提供ID和关联密码进行手动输入证书。若这些证书不正确,背景UI心理模型200在用户未识别221中向用户提供响应并返回锁屏211。在锁屏211,注册用户可选择添加更多用户,其中背景UI心理模型200允许在新用户224中进行新用户生物特征证书注册。或者,注册用户可选择让另一用户作为暂时用户访问电子设备,其中背景UI心理模型200允许通过访客账户225进入。
从未识别222或签到223,背景UI心理模型200进入背景控制面板层230。若为新用户224和访客账户225,向用户呈现默认背景控制面板,其中对于前者,新用户可开始建立针对当前背景所希望的背景控制面板的特征。随着时间的过去,新用户在不同的背景中之后再访问将导致需要建立适合该用户的附加背景控制面板。在背景UI心理模型200中,无供访客通过访客账户225进入的背景控制面板的定制。
在主页层230,背景控制面板根据大背景数据(包括但不限于电子设备关联、地理位置、网络关联、日期和时间)选择。如图所示,背景控制面板为工作环境231、旅行环境232和家庭环境233,另外,应用程序启动器234触发以启动应用程序,启动的应用程序显示在选择的背景控制面板上。每个背景控制面板可根据小背景数据(包括但不限于电子设备关联、用户输入、日期和时间)进行定义。电子设备关联示例如设备组235所示,设备组235包括计算机、移动设备、电视机、智能桌和汽车。应用程序启动程序234启动谷歌Chrome241、谷歌Gmail242和Facebook243等应用以及新应用添加界面Add244。
根据大小背景信息、选择的背景控制面板和启动的应用程序,从支持该UI的电子设备或与该电子设备连接的一个或多个网络236中检索数据和/或目录。所述检索的数据包括用户偏好(如使用TI集团的TI云服务)、数据源(谷歌文档和日历)、社交网络(如Facebook和Twitter)、存储(如应用程序下载和媒体源)。作为可选做法,背景UI心理模型200针对所述项(包括但不限于操作系统、硬件、用户属性、用户偏好和用户输入/输出设备)包括附加层。
图3所示为根据本发明一个实施方案的示例性配置文件流程图300,其中生物特征证书输入借助人脸识别实现。因此,在锁定层310,对生物特征证书和/或其他数据输入的响应确定为签到311、新用户312和访客313。从签到311,流程进入人脸识别签到320的配置文件层,其中用户识别后前进到欢迎340或者未能识别而被导向糟糕350,此时向用户提供备用的证书输入。例如,用户可能处于不同的照明条件下,穿的衣服遮蔽了部分脸等情况,这些都会导致人脸识别失败,即使是对授权用户。若在糟糕350处备用证书成功输入,则导向“欢迎”340,否则流程返回锁定层310。从新用户312,流程进入人脸输入330,其中要求新用户看着摄像头拍摄照片以便处理存为新授权人脸证书。从新用户312,流程进入添加账户360,此时提示用户将默认背景控制面板中的预定应用程序链接到个人账户,如TwitterTM、FacebookTM、GmailTM和LinkedlnTM。从添加账户360和欢迎340,流程进入背景控制面板层。为清晰起见,该步未示出。
该领域技术人员会明白,人脸识别表示这是唯一可用的生物特征验证技术。任何生物特征标示符(即用于区分个体的区别性的可测量的特征)均可使用,一般分为生理特征或行为特征。生理特征与体形相关且包括但不限于指纹、人脸识别、DNA、掌纹、掌形几何分析、虹膜识别、视网膜识别、DNA和气味/香味。行为特征包括但不限于打字节奏、步态和声音。该领域技术人员会明白,生物特征可根据电子设备、所需的安全保护程度等进行选择,而且在其他情况下,可使用两种或更多种生物特征。
一些生物特征(如人脸识别,它因智能电话、蜂窝电话、笔记本电脑、平板电脑、摄像机等的普及而常见)的一个潜在缺点是,若人脸受损,便无法像标记或密码一样取消和重新指定。因此,本发明的实施方案可使用能取消的生物特征,其中加入了保护或包含重置功能。例如,能取消的生物特征在匹配前可进行该生物特征图片或具体功能的变形,正是变形参数的可变性使该方案具有能取消的性质。
图4所示为流程400中根据本发明一个实施方案的为用户提供的背景控制面板层的示例性迁移。因此,在背景UI的背景控制面板层中,四个背景控制面板为工作面板410、旅行面板420、家庭面板和应用程序面板440。用户从不同位置重新进入锁屏结束使用UI时或从一个大背景迁移到另一个继续使用时,可在任一对背景控制面板之间迁移。同样,可从任一主页面板访问应用程序面板440。作为可选做法,应用程序面板440还可仅能从大背景定义的有限个主页面板访问。
或者,当用户发现大背景和/或小背景变化时正在访问一个或多个应用程序,这些应用程序可保持为初始配置直至出现以下预定情况,如停止该应用程序、预定的一段时间未使用,或者可启动因偏好和/或设置产生的超驰控制。
图5所示为根据本发明一个实施方案的向用户呈现的示例性锁屏500,其中,由于平板520中设有摄像头(为清晰起见,未示出)并使用人脸识别技术,平板520的第一UI屏510显示用户应面对平板520进行登录的画面。根据本发明一个实施方案,人脸识别成功后,进入图6,其中向用户呈现示例性用户访问屏600。用户访问屏600呈现带有授权用户图片620和信息630(该例中为“你好,STEVE,正在加载中。”)的第二UI屏610。
根据本发明一个实施方案,随后,UI检测到用户成功登录后一段预定的时间未使用,然后进入图7中所示的部分用户锁屏700。于是,还是由于平板520的UI中使用人脸识别技术,向用户呈现带“用户应面对平板520”信息716的第三UI屏710,第三UI屏上依次为第一至第五图片711至715。由于第三图片713代表当前大背景/小背景中最近的一个有效用户,因此第三图片713显示在中间且比依次排列的第一、第二、第四和第五图片711、712、714和715大。第一、第二、第四和第五图片711、712、714和715指允许在当前大背景/小背景中访问该电子设备的其他用户。
因此,该领域技术人员会明白,电子设备可设置一个生物特征验证过程,其中有效用户列表根据大背景和/或小背景而变化。例如,儿童在家庭的大背景和家中游戏室的小背景中是电子设备的有效用户,但在家庭的大背景和家中卧室的小背景中却不是。同样地,大背景是工作时的部分用户锁屏700中的用户列表可能就与家庭等环境的部分用户锁屏不同。
图8所示为根据本发明一个实施方案的向用户呈现的UI800的示例性背景控制面板810,其中大背景为旅行。因此,背景控制面板810位于UI800的配置文件层和应用程序层之间,根据大背景(为清晰起见,未示出)和小背景信息830建立。背景控制面板810中应用程序的数据和目录来自于该电子设备和/或通过与该电子设备连接的一个或多个网络联接的远程来源820。背景控制面板810中所示为配置文件811、日历812、旅行813、博客814、回顾815、天气816、出租车817应用程序以及工具栏818。例如,旅行813可为TripitTM,天气816可为AccuWeather,博客814可为TumblrTM,回顾815可为YelpTM,出租车817可为Cab4MeTM
图9所示为根据本发明一个实施方案的向用户呈现的UI800的示例性背景控制面板,其中大背景为旅行,但该背景为与商务旅行相对的休假旅行。因此,背景控制面板910位于UI900的配置文件层和应用程序层之间,根据大背景(为清晰起见,未示出)和小背景信息930建立。背景控制面板910中应用程序的数据和目录来自于该电子设备和/或通过与该电子设备连接的一个或多个网络联接的远程来源920。背景控制面板910中所示为配置文件911、日历912、旅行913、博客914、回顾915、天气916、出租车917应用程序以及工具栏918。该领域技术人员会明白,除设置/偏好不同外,UI中一般旅行和休假旅行背景控制面板中显示的应用程序也可能不同。
图10所示为根据本发明一个实施方案的向用户呈现的UI1000的示例性背景控制面板1010,其中大背景为家。因此,背景控制面板1010位于UI1000的配置文件层和应用程序层之间,根据大背景(为清晰起见,未示出)和小背景信息1030建立。背景控制面板1010中应用程序的数据和目录来自于该电子设备和/或通过与该电子设备连接的一个或多个网络联接的远程来源1020。背景控制面板1010中所示为配置文件1011、日历1012、第一社交应用程序1014、第二社交应用程序回顾1016、媒体播放器1015、安全1017应用程序以及工具栏1018。例如日历1012为谷歌日历、第一社交应用程序1014为FacebookTM、第二社交应用程序回顾1016为TweetDeckTM、安全程序1017为ADTPulse。
图11所示为根据本发明一个实施方案的向用户呈现的UI1000的示例性背景控制面板1110,其中大背景为家,每个应用程序显示如以下图15所示的任务栏。因此,背景控制面板1110位于UI1100的配置文件层和应用程序层之间,根据大背景(为清晰起见,未示出)和小背景信息1130建立。背景控制面板1110中应用程序的数据和目录来自于该电子设备和/或通过与该电子设备连接的一个或多个网络联接的远程来源1120。背景控制面板1110中所示为配置文件1111、日历1112、第一社交应用程序1114、第二社交应用程序回顾1116、媒体播放器1115、安全1117应用程序以及工具栏1118。该任务栏中的任务为:
配置文件1101—切换用户、锁定;
日历1112—查看、添加事项;
第一社交应用程序1114—主页、搜索、配置文件;
第二社交应用程序回顾1116—在线、我的推文、朋友;
媒体播放器1115—照片、音乐、视频;及
安全1117—安全、相机、灯、恒温器。
图12所示为根据本发明一个实施方案的向用户呈现的UI1200的示例性背景控制面板1210,其中大背景为工作。因此,背景控制面板1210位于UI1200的配置文件层和应用程序层之间,根据大背景(为清晰起见,未示出)和小背景信息1230建立。背景控制面板1210中应用程序的数据和目录来自于该电子设备和/或通过与该电子设备连接的一个或多个网络联接的远程来源1220。背景控制面板1210中所示为配置文件1211、日历1212、任务列表1214、社交应用程序1213、邮件1215、电子阅读器1216、新闻1217应用程序以及工具栏1218。例如,日历1212和任务列表1214为谷歌日历和谷歌日历中的任务列表,社交应用程序1213为TweetDeck、邮件1215为谷歌Gmail、电子阅读器1216为KindleTM阅读器、新闻1217为雅虎TM新闻。
图12所示为根据本发明一个实施方案的向用户呈现的UI1200的示例性背景控制面板1310,其中大背景为工作,但此时应用程序均显示任务模式为执行。因此,背景控制面板1310位于UI1300的配置文件层和应用程序层之间,根据大背景(为清晰起见,未示出)和小背景信息1330建立。背景控制面板1310中应用程序的数据和目录来自于该电子设备和/或通过与该电子设备连接的一个或多个网络联接的远程来源1320。背景控制面板1310中所示为配置文件1311、日历1312、任务列表1314、社交应用程序1313、邮件1315、电子阅读器1316、新闻1317应用程序以及工具栏1318。例如,日历1312和任务列表1314为谷歌日历和谷歌日历中的任务列表,社交应用程序1313为TweetDeck、邮件1315为谷歌Gmail、电子阅读器1316为KindleTM阅读器、新闻1317为雅虎TM新闻。任务栏中的任务为:
配置文件1311—切换用户、锁定;
日历1312—查看、添加事项;
社交应用程序1313—在线、我的推文、朋友;
任务1314—全部、打开、关闭;
邮件1315—收件箱、发件箱、草稿箱、回收站;
电子阅读器1316—最新、标题、作者;及
新闻1317—头条新闻、视频。
图14所示为根据本发明一个实施方案的用户控制面板定制顺序。因此,在第一个屏幕1410中,UI具有四个应用程序(用阴影线区表示)和三个“+”框。到目前为止,UI以三栏的形式界定在第一个屏幕中,其中第一栏中有3个应用程序,第二栏中有一个应用程序。若用户移到其中一个“+”框,会出现带“1.添加标题”文本信息的箭头,经用户选择操作,出现第二个屏幕1420,在该屏幕中向用户呈现一个应用程序列表和文本信息“2.选择应用程序”。在该例中,向用户呈现FacebookTM、FlightTrack、Tweet Deck和Tumblr。用户在FlightTrack上移动使FlightTrack改为显示“+”符号,一旦选中后,选定的应用程序将添加到第一个屏幕1410第二栏的底部且原来的“+”符号将移动到该栏的底部。
此外,图14中所示还有已为用户配置家庭面板1430、工作面板1440和旅行面板1450的布局示例。该领域技术人员会明白,开始时可向新用户呈现多个背景控制面板的默认屏幕或可呈现单个背景控制面板并提供选项以便通过用户驱动过程建立后面的背景控制面板。作为可选做法,UI可对大背景和小背景信息进行监视以根据行为模式确定添加新屏幕可能对用户有益。例如,UI可能注意到,虽然最初配置的背景控制面板为谷歌Gmail和谷歌日历(IEEE802.1lb节点识别为“RobinsonFamily”),但用户在工作日早上10点到下午4点访问微软Outlook以及谷歌日历(IEEE802.1lg节点识别为“USPTO ABC123”)。于是,UI可提示用户是否希望指定新的背景控制面板,选择背景控制面板定义(如工作、主办公室等)和将他们当前的应用程序设置存储该新背景控制面板的一部分。
图14B所示为背景控制面板1460,用户向其中添加了大量的应用程序。因此,在第一个屏幕1470中,向用户呈现的是根据用户偏好(如最小字体)映射在电子设备显示器上的背景控制面板1460的上面部分。若用户向下滚动屏幕,显示器调整呈现第二个屏幕1480,用户继续滚动,接着呈现第三个屏幕1490。如第一个至第三个屏幕1470至1490中依次所示,UI对应用程序进行管理以便以满窗口显示在屏幕中,从而使第一个至第三个屏幕1470至1490的每个屏幕中的应用程序的相对位置根据背景控制面板1460中的映射应用程序结构进行调整。类似地,转动电子设备的屏幕会使背景控制面板1460以不同方式映射到显示屏上。
应明白的是,除将家庭、工作和旅行作为背景控制面板选项外,用户还可建立多个(如工作)背景控制面板作为小背景驱动工作背景控制面板变形,以反映他们在办公室和董事会会议室内的活动。类似地,用户可为家(如办公室、游戏室、起居室、卧室)配置多个背景仪表面板,且作为可选做法,还可选择为同一大小背景配置多个背景控制面板。例如,周一至周五早上8点至下午6点,“家”和“办公室”的背景控制面板可配置成一个背景控制面板,在其他时间中,可配置成另一个背景控制面板。该例中,大小背景包括整个地理位置(电子关联以界定办公室而不是厨房等)和时间(工作日)以在同一实际位置设置多个背景控制面板。
图15所示为默认的、显示应用程序任务视图的和显示不同类别应用程序任务视图的用户控制面板配置。因此,在第一个屏幕1510中,每个应用程序显示为默认模式,其中显示了目录,但菜单按钮关闭,然而在第二个屏幕1520中,每个菜单按钮打开。如第一个至第三个按钮1530至1550依次所示,经用户操作后,每个菜单按钮序列由默认变成打开,在该例中,用户在该应用程序的屏幕上滑动手指。可也在菜单按钮区中滑动,或者采用单击、双击等动作。因此,如图所示,每个菜单按钮打开显示一列选项,如娱乐应用程序第一按钮序列1530显示照片、音乐和视频,与配置文件屏幕相关的第三个按钮序列1550显示切换用户和锁定,社交媒体应用程序显示显示框和推文。例如,显示框可显示Twitter上某人追随者的人数或邮件应用程序中未读邮件的数量。在每个打开的菜单按钮中,用户可通过轻击菜单项目区的触控板等动作以选中该列表中的项目并触发因此产生的操作。
图16所示为UI中控制面板布局和元素的呆板与自然方式,其中第一个至第三个屏幕图片1610至1630代表呆板方式,而第四个至第六个屏幕图片1640至1660分别代表自然方式。因此,在第一和第四个屏幕图片1610和1640中,邮件应用程序呈现与邮件草稿、已发送、接收等有关的打开窗口。在第一个窗口1610的呆板方式中,窗口就如微软Outlook、谷歌Gmail、雅虎Mail等相对于屏幕排列和堆放,但在第四个屏幕图片1640中,这些窗口以类似于人将纸张铺放或整理在桌面上的形式散布在屏幕上。因而,相比呆板方式,用户可能对自然方式的邮件系统感到更舒适。类似地,在第二个屏幕图片1620中,电子书应用程序像(如)在Kobo阅读器、iBooks和Kindle中一样显示,其中图书以列、行等形式直线排列,展示装置可包括虚拟书架等。第五个屏幕图片1650将书以堆放的方式呈现,在该例中为横向,但也可竖向堆放。
在第三个屏幕图片1630中,用户以传统的先“点击”再“拖拽”的操作方式(正如该领域技术人员所熟悉的用鼠标、手指等在显示器上移动对象的方式)将“行星游戏”窗口从一个位置移动到另一个位置。在第六个屏幕图片1660中,用户通过在窗口边上聚拢两根手指的方式在屏幕上“挤压”窗口以移动窗口,以便该动作不会被误认为是UI识别的另一种也是用两根手指进行的动作,如苹果iPod和iPad用户熟悉的缩放操作,这本身并不是一个自然操作。因此,用户先“挤压”再移动窗口,然后向后张开手指以将窗口释放在新位置处。
图17为根据本发明一个实施方案的向用户提供自然方式的一系列UI示例性元素;因此,当用户希望访问存储在服务器目录结构中的信息时,传统上,需要通过列表式索引进行访问,其中用户按顺序打开下一层等的子目录以找到他们要找的信息。但如图17所示,信息以文件柜1710的形式显示,其中用户用手指1715在触控板上进行操作,使抽屉打开并向用户呈现打开的抽屉图片(如第一抽屉1720和第二抽屉1725),其中用户通过一套抽屉的大小便能直观的了解到他们选择的这个“抽屉”中有多少内容。然后用户进行“触摸”操作1730,第一滑动1735打开“抽屉”,或者第二滑动1740关闭“抽屉”。一旦呈现打开的抽屉,用户图片可调整为第一悬挂文件1745或第二悬挂文件1750,其中多次滑动操作1755使用户以类似于在真实文件柜抽屉中的方式“翻阅”文件。在用户“翻阅”索引的时候,可呈现其中每个项目或项目组的图片,以便用户不仅能在索引文件夹边缘接收标题信息(见下文中图19),还能向其呈现首页图片或类似信息(为清晰起见,未示出)。
因此,该领域技术人员会明白,自然行为还可用于呈现电子设备或远程存储位置中的信息、数据和内容,而且这些自然动作也可用于选择、存储和管理产生的内容。因此,图18所示为根据本发明一个实施方案的向用户提供自然方式的一系列UI示例性元素,其中用户(如)通过手指的对角挤压式动作1810选择文件1820,然后按照希望对所选文件进行的下一操作进行手指的动作。可选做法是,文件夹用真实世界中用户所熟知的物体的文件夹图片表示。例如,当用户将文件/文件夹移动到回收箱1850上方时,文件/文件夹会被放进回收箱1850以便随后清空回收箱1850时从系统中移除。相反,将文件1820移动到搬运箱1840上方,文件1820会被放进档案中并从当前索引存储目录中移除,而将文件1820移动到碎纸机1830上方,文件1820的内容安全地从电子设备和/或关联存储器中删除,这种清除与相对回收箱发生的文件索引更改不同。
如图19所示,为根据本发明一个实施方案的向用户提供自然方式的一系列UI示例性元素,其中用户已经在根据本发明一个实施方案的自然呈现的存储系统中打开了抽屉1950,其中在该例中抽屉1950代表邮件。因此,每封邮件与抽屉1950中的文件夹1930关联并含有含邮件主题行的索引标签1920,且当UI从用户注册的社交网络应用程序(可能包括商务网站Linkedln和个人网站Facebook)中找到用户的匹配图片,则还有含邮件发送人图片的用户标签1940。若某用户无匹配图片,可提示该用户为其指定一个图片,或者该用户可选择用另一偏爱的图片更换,如魔鬼、逗趣的人、动物、物体等,这样可将此人与该用户联系起来。另外,图中所示还有代表邮件附件类型(如PDF、电影、音频文件、文件)的图标1910。
图20所示为根据本发明实施方案的居住和办公环境,分别为2000A和2000B及其中向UI提供小背景的元素。因此,居住环境2000A包括多个房间,由于通常一个Wi-Fi节点2010会覆盖一个居住环境2000A,而且在城市环境中大部分居民用户能看到多个本地住宅Wi-Fi节点,因此每个房间均为Wi-Fi节点2010。于是,当与平板2045关联起来时,Wi-Fi节点2020使UI将大背景建立为“家”,不过仅此而已。在居住环境2000A中,卧室、起居室和地下游戏室中分别为第一至第三电视机2005、2015和2025;地下室为游戏机2030、地下办公室为笔记本电脑,另一个卧室为笔记本电脑2035。因此,平板2045可与其他这些电子设备建立关联以将大背景改为小背景。
例如,若要将平板2045与第一电视机2005关联起来,用户要靠近卧室,而若要将第三电视机2025和游戏机2030关联起来,用户要靠近地下游戏室。若建立关联包括需要用户验证设备标识,只要将三台电视机中的一台关联起来即可。例如,用户在地下室中,用户出发该UI或该UI由该用户触发生成新背景控制面板过程,然后一旦第三电视机2025的关联建立,其标识存储为小背景的一部分。因此,当游戏机2030不在或未打开时,“地下室播放屏幕”背景控制面板的小背景不需要对第三电视机2025和游戏机2030进行检测。
该领域技术人员会明白,Wi-Fi(IEEE802.11)/WiMAX(IEEE802.16)无线发射机和接收机的发射距离可使平板2045与第一和第二电视机2005和2015关联起来。因此,UI可在平板2045中有选择地对无线发射机进行控制以减小无线发射机(如IEEE802.11Wi-Fi)的发射距离,直至电子关联降到只有紧邻区域中而不是整个居住环境和/或邻近区域的单元能识别为无线环境的水平。或者,可利用IEEE802.15或蓝牙作为短距离无线接口建立小背景,大背景则通过IEEE802.11/802.16Wi-Fi/WiMAX建立。
参考商业环境2000B,小型办公配置布置为包括设有与Wi-Fi节点2080连接的第一和第二台式电脑2075和2085以及第一至第三笔记本电脑2055、2070和2050的办公室。因此,用户平板2060可配置成根据与Wi-Fi节点2080的关联建立背景控制面板进行工作,如将平板2060与第一笔记本电脑2050关联起来可触发小背景,如同用户置身于他自己的办公室中,而建立多个未知智能手机2065的关联可建立会议室的小环境(董事会会议室)。
该领域技术人员会明白,对于一些用户,背景控制面板数量有限(其中事实上,UI基本上仅提供一个背景控制面板),而对于其他一些用户,数量显著,这些用户可有与家庭、工作、娱乐、旅行等关联的多个背景控制面板并且这些控制面板可呈现给家中其他人。因此,一家四口(两个成人和两个小孩)用的平板可有以下12种背景控制面板:
家=7,与家庭每个成员关联的大背景、与每个在家办公的成人关联的小背景和一个成人卧室除去家长控制的小背景;
学校=2,与每个小孩关联的大背景;
工作=2,与每个成人关联的大背景;及
旅行=1,与所有家庭成员相关的大背景。
图21所示为适用于便携电子设备(PED)的根据本发明一个实施方案的大背景和小背景因素的用户和背景确定的示例性流程图2100。因此,该过程从步骤2100开始,在步骤2100,用户拿起PED,UI接收用于触发UI从睡眠模式进入锁屏的加速计数据;在步骤2110,用户提供生物特征输入;在步骤2115,对生物特征输入进行评价以确定该用户是否经过授权。步骤2110和步骤2115的实例已在上文参考图3给出。在步骤2120,UI确定第一用户的身份(已得到其生物特征验证),然后进入步骤2125以确定是否有第二用户。例如,UI可分析用于对用户进行人脸识别的图片的其余部分以确定该图片中是否有其他人,此外还接收视频等输入作为确定第二用户的一部分。
接下来,在步骤2130,UI继续确定PED的网络关联,然后在步骤2135中确定本地电子设备的关联。这些在步骤2140中结合第一和第二用户数据以及其他背景信息(包括但不限于GPS数据、加速度计数据、日期、时间和图片背景(当使用人脸识别时))一起使用以确定要使用的背景控制面板。在步骤2141中,加载要使用的控制面板,其中UI进入加载与多个可用控制面板中选定的控制面板关联的用户偏好。接下来,在步骤2143中,UI根据用户偏好调整应用程序及其功能特性。例如,当用户识别为“Tom”在办公室工作时,打开的邮件应用程序为微软Outlook且偏好为用户名和密码,但当确定为“Tom”在家中时,应用程序可为谷歌Gmail且未使用任何偏好。
接下来,在步骤2745,该过程确定UI是否建立定期或单次访问模式,前者说的是大小背景信息定期验证,后者说的是在遇到超时或其他条件屏幕锁定情况前不进行验证。若为后者,过程移至步骤2150并停止,否者进入步骤2155,在步骤2155,定期验证根据环境数据进行,或进入步骤2165,在步骤2165,定期验证根据Δζ的时间间隔进行。若该过程按时间间隔进行,延迟Δζ后,该过程移至步骤2120。若按环境数据进行,PED在步骤2155中启用界面并在步骤2160中查找其他用户特征,其中若无,该过程回到步骤2155,若有,该过程返回步骤2120。
应明白的是,若不回进入步骤2120,该过程还可回到步骤2110并重复进行生物特征验证。作为可选做法,该步骤可暂停所有应用程序直至完成验证(如通过指纹和人脸识别),或者不暂停,不暂停情况是通过人脸识别等无需中断用户活动进行验证。因此,生物特征验证可在电子设备上对第一至第五家庭成员2175A至2175E(分别代表父亲、母亲、儿子、女儿和祖母)和第一至第三员工2170A至2170C(分别代表工作同事)进行。可选做法是,第一家庭成员2175A的某一用户(如父亲)可在两个中出现,因此第二员工2170B还可能是同一个人。这样,第一用户将从第一至第五家庭成员2175A至2175E和第一至第三员工2170A至2170C中选择。
UI解锁PED工作过程中,第二用户可从解锁序列中(如在人脸识别拍摄的照片中或通过PED上扩音器等接口)识别,以便所述第二用户在电子设备未与第二用户的PED或FED关联时俘获到。应明白的是,在这种背景下,第二用户是一个广义上的术语,因为这些个体实际上可能不使用PED,但却在该用户的小环境中,因而对小背景有影响。例如,解开PED锁定成年用户可在目录上将谷歌图片搜索建为不受限制,但当第二用户(如第一和第二工作组2180A和2180B中所示的工作同事或第一和第二家庭组2185A和2815B中所示的小孩)在场时,这就可能不太合适。
该领域技术人员会明白,根据UI的大小背景情况,屏幕中的锁可类似地看作背景控制面板,这样当大小背景选择将第一和第三员工2170A和2170C作为授权用户的背景控制面板时,根据本发明一个实施方案,第一和第三员工2170A和2170C仅可解开PED的锁定。因此,经理可授权其行政助理工作时访问它的PED,旅行模式时任何其他人以及PED在家中时其家庭成员均不可访问。因此,经理对某些应用程序可有完全的访问权利,其行政助理对这些应用程序具有有限的访问权利,其家人则无任何访问权利。同样地,用户家人在用户办公室无法解开PED的锁定且可能只有成人能解开旅行模式的PED的锁定,以限制小孩玩弄PED。
该领域技术人员应明白,小背景概念是如何从用户登录时静态指定演变到根据实际环境动态指定。例如,以下与动态指定的背景控制面板有关的情境可根据本发明实施方案实现:
用户A注册,UI建立背景控制面板,但用户A将该PED给了另一个用户(用户B),用户B现在有权访问用户A的背景控制面板和偏好,于是,UI监视定期拍摄的数码照片发现用户改变了,若成功识别该用户,转换到用户B背景控制面板,否则转换到访客屏幕;
用户A注册,UI建立背景控制面板,但用户A现在把设备放在桌子上,因此UI检查照片时看不到人,只能识别言语,从而UI保持当前的背景控制面板;
用户A注册,UI建立背景控制面板,但现在UI检测到用户A后面另有一人,便调整背景控制面板或将其关闭并警告用户A;
用户A注册,UI建立第一背景控制面板,但现在用户A保持PED中进行的活动,带着该PED进入另一经过识别的大小背景环境,使UI从原来背景的背景控制面板变到新背景的背景控制面板,在这种情况下,所述变化可慢慢形成以使(例如)当前未使用的应用程序立即调整,而正在使用的保持不变或(如可能)进行逐渐调整;
用户A注册,UI建立背景控制面板,同时用户在与PED关联的另一显示器上展示内容,该PED显示器呈现出大键盘,然后用户移动,UI自动更新背景控制面板,使得现在内容无缝地在PED上呈现给用户且该键盘缩小到通常在PED上呈现给用户的样子。
该领域技术人员会明白,根据本发明实施方案的UI背景控制面板通过用户选择提供大背景和小背景变体能根据用户的活动和时刻表进行UI的动态迁移。虽然PED或FED初始时可能提供有限的默认背景控制面板供配置,但用户建立多少背景控制面板可根据其个人偏好决定。在本发明的其他实施方案中,用户界面使大背景和小背景信息联系起来进行抽样分析以确定用户是否可从当前建立的背景控制面板以外的另一背景控制面板受益。
图22为支持与实施根据本发明一个实施方案的背景UI的电子设备进行相互通信的网络2200。如图所示,第一和第二用户组2200A和2200B与电信网络2200连接。在这个典型的电信架构中,远程电话总局2280通过网络2200与其余电信服务供应商网络进行通信,可包括长距离OC-48/OC-192主力元素、OC-48广域网(WAN)、无源光纤网络和无线电线路。电话总局2280通过网络2200连接本地、区域和国际电话局(为清晰起见,未示出),并在此通过网络2200分别连接第一和第二无线接入点(AP)2295A和2295B,2295A和2295B分别向第一和第二用户组2200A和2200B提供Wi-Fi小区。与网络2200连接的还有第一和第二Wi-Fi节点2210A和2210B,后者通过路由器2205连接到网络2200上。第二Wi-Fi节点2210B与居住建筑物2260A和环境2260关联起来,环境2260中为第一和第二用户组2200A和2200B。第二用户组2200B还可通过有线接口(可经亦可不经路由器,如路由器2205)连接网络2200,所述有线接口包括但不限于DSL/拨号上网、DOCSIS、以太网、G.hn、ISDN、MoCA、PON和电力线通信(PLC)。
在与第一AP2210A关联的小区中,第一组用户2200A可使用各种便携电子设备,包括笔记本电脑2255、便携游戏机2235、平板电脑2240、智能手机2250、蜂窝手机2245以及多媒体播放器2230。在与第二AP2210B关联的小区中,第二组用户2200B可使用各种固定电子设备,包括游戏机2225、个人计算机2215、无线/联网电视机2220以及电缆调制解调器2205。
与网络2200连接的还有第一和第二AP,第一和第二AP除提供具有增强数据传输支持的3G和4G演进服务,还提供(如)蜂窝GSM(全球移动通信系统)电话服务。第二AP2295B在本示例性实施方案中覆盖覆盖第一和第二用户组2200A和2200B。或者,第一和第二用户组2200A和2200B在地理上可完全独立并通过该网络运营商或其他网络运营商在地理上分布的多个AP(为清晰起见,未示出)接入网络2200。所示的第一AP2295A覆盖第一用户组2200A和环境2260,2260中除包括第一用户组2200A外,还包括第二用户组2200B。因此,第一和第二用户组2200A和2200B可根据他们特定的通信接口通过一个或多个无线通信标准(IEEE802.11、IEEE802.15、IEEE802.16、IEEE802.20、UMTS、GSM850、GSM900、GSM1800、GSM1900、GPRS、ITU-R5.138、ITU-R5.150、ITU-R5.280和IMT-2000等)向网络2200通信。该领域技术人员会明白,许多便携和固定电子设备可同时支持多个无线协议,这样例如用户就可使用电话、SMS、Wi-Fi/WiMAX数据传输、VOIP和接入互联网等GSM服务。因此,第一用户组2200A中的便携电子设备可通过IEEE802.15等标准和蓝牙以特别的方式形成关联。
与网络2200连接的还有零售环境2265、第一商业环境2270和第二商业环境2275以及第一和第二服务器2290A和2290B。根据本发明实施方案,所述第一和第二服务器与其他服务器(为清晰起见,未示出)一起可提供与以下供应商相关的多种服务,即电子设备相关软件操作系统和/或软件应用程序供应商、电子设备供应商、供固定和便携电子设备下载或访问的有线和/或无线通信、产品数据库、库存管理数据库、零售定价数据库、许可证数据库、客户数据库、网站以及软件应用程序中一个或多个方面的供应商。第一和第二主要内容来源2290A和2290B还可提供(如)其他互联网服务,如搜索引擎、金融服务、第三方应用程序和其他基于互联网的服务。
图23为支持根据本发明实施方案的背景UI的电子设备2304和网络接入点2307。电子设备2304可为(如)便携电子设备或固定电子设备并可包括上述附加元素以及所述和所示以外的其他元素。电子设备2304中所示的还有作为系统2300简化功能图一部分的协议架构,系统2300包括电子设备2304(如智能手机2255)、接入点(AP)2306(如第一Wi-Fi AP610)以及一个或多个网络设备2307,如通信服务器、流媒体服务器、路由器(如第一和第二服务器175和185)。网络设备2307可通过网络、有线、无线和/或光纤通信线路(如以上参考图1所述)的任一组合连接AP2306。电子设备2304包括一个或多个处理器2310和与处理器2310连接的内存2312。AP2306还包括一个或多个处理器2311和与处理器2311连接的内存2313。处理器2310和处理器2311中任一个例子的非详尽清单包括中央处理器(CPU)、数字信号处理器(DSP)、精简指令组计算机(RISC)/复杂指令系统计算机(CISC)等等。此外,处理器2310和处理器2311中任一个可为专用集成电路(ASIC)的一部分或可为专用标准产品(ASSP)的一部分。内存2312和内存2313中任一个例子的非详尽清单包括以下半导体器件的任一组合,如寄存器、锁存器、ROM、EEPROM、闪存设备、非易失性随机存取存储设备(NVRAM)、SDRAM、DRAM、双数据速率(DDR)存储设备、SRAM、通用串行总线(USB)移动内存等等。
电子设备2304可包括音频输入元件2314(如扩音器)和与处理器2310任一个连接的音频输出元件2316(如扬声器)。电子设备2304可包括视屏输入元件2318(如摄像机)和与处理器2310任一个连接的视频输出元件2320(如LED显示器)。电子设备2304还可包括键盘2315和触控板2317,所述键盘2315和触控板2317(例如)可为实体键盘和触控板,使用户能在一个或多个应用程序2322中输入内容或选择功能。或者,键盘2315和触控板2317可为触敏元件的预定区域,构成电子设备2304中显示器的一部分。所述一个或多个应用程序2322通常存储在内存2312中且可通过处理器2310任一组合执行。电子设备2304还包括向处理器2310提供三维运动输入的加速度计2360和向处理器2310提供地理位置信息的GPS2362。
电子设备2304包括协议栈2324,AP2306包括通信栈2325。系统2300中所示的协议栈2324为IEEE802.11协议栈,但或者可利用其他协议栈,如互联网工程任务组(IETF)多媒体协议栈。同样,AP栈2325利用协议栈,但是为了清晰起见,不进行进一步阐述。协议栈2324和AP栈2325的元素可用软件、固件和/或硬件的任一组合实现。协议栈2324包括连接一个或多个前端收发器和天线2328的兼容IEEE802.11的物理层模块2326和连接兼容IEEE802.2的LLC模块2332的兼容IEEE802.11的MAC模块2330。协议栈2324包括网络层IP模块2334、传输层用户数据报协议(UDP)模块2336和传输层传输控制协议(TCP)模块2338。
协议栈2324还包括会话层实时传输协议(RTP)模块2340、会话通告协议(SAP)模块2342、会话发起协议(SIP)模块2344和实时流协议(RTSP)模块2346。协议栈2324包括表示层媒体协商模块2348、呼叫控制模块2350、一个或多个音频信号编码器2352和一个或多个视频信号编码器2354。应用程序2322可通过AP2306能够建立、保持和/或终止与任一设备2307的通信会话。通常,应用程序2322为此可启用SAP、SIP、RTSP、媒体协商和呼叫控制模块中任一模块。通常,信息可通过TCP模块2338、IP模块2334、LLC模块2332和MAC模块2330从SAP、SIP、RTSP、媒体协商和呼叫控制模块传送到物理层模块2326。
该领域技术人员会明白,电子设备2304的元件还可在AP2306中实现,包括但不限于协议栈2324的一个或多个元素,协议栈元素包括兼容IEEE802.11的物理层模块、兼容IEEE802.11的MAC模块和兼容IEEE802.2的LLC模块2332。AP2306另外可包括网络层IP模块、传输层用户数据报协议(UDP)模块和传输层传输控制协议(TCP)模块以及会话层实时传输协议(RTP)模块、会话通告协议(SAP)模块、会话发起协议(SIP)模块和实时流协议(RTSP)模块、媒体协商模块和呼叫控制模块。
电子设备2304代表的便携和固定电子设备除所述IEEE802.11接口外还可包括一个或多个附加无线或有线接口,所述附加无线或有线接口可从IEEE802.15、IEEE802.16、IEEE802.20、UMTS、GSM850、GSM900、GSM1800、GSM1900、GPRS、ITU-R5.138、ITU-R5.150、ITU-R5.280、IMT-2000、DSL、拨号上网、DOCSIS、以太网、G.hn、ISDN、MoCA、PON、和电力线通信(PLC)中选择。
图24所示为根据本发明一个实施方案的显示来自智能代理人的通知2470的示例性屏幕2400,其中通知2470告知用户应用程序接收的通知对活动的影响。因此,用户正在使用的电子设备,其上为向用户呈现第一至第五应用程序窗口2420至2460和配置文件窗口2410的显示背景控制面板2480。该电子设备中正在执行的是智能代理人,智能代理人对与一个或多个应用程序的相互通信进行分析以识别出与其他应用程序相关的数据更改的实例。例如,所示的第一至第五应用程序2420至2460分别为日志、FlightTracker、Tumblr、Yelp和Cab4Me。FlightTracker中收到与用户航班相关的时刻表变动,指示其上午10点钟的航班已推迟到上午11点钟。于是,智能代理人根据日历、FlightTracker和Cab4Me确定应对其中的活动作出更改。所做的更改在通知2470中显示为“会议时间改在下午1:30并通知参会者”、“午餐时间更新为下午1:30”和“搭乘出租车”时间改在上午9:00。针对以上各项,通知2470提供按钮选项供用户采用或拒绝智能代理人通过通知2470提出的变更。
图25所示为根据本发明一个实施方案的供智能代理人告知用户应用程序接收的通知对活动的影响用的示例性通知系统2500。因此,用户具有平板2520和智能手机2530,二者均通过有线和/或无线接口(为清晰起见,均未示出)连接到网络2550上。与网络2550连接的还有第一和第二服务器2560和2570。所述第一和第二服务器2560和2570作为用户已访问并与用户的一个或多个背景控制面板相关的一个或多个应用程序相关的软件系统和存储装置的主机。用户事先已建立一个智能代理人应用程序作为其一套应用程序的一部分,所建立的智能代理人应用程序分析与用户应用程序的相互通信以识别出含有影响用户应用程序中其他活动的内容的通信实例。当通信影响其他活动,智能代理人向用户提供通知,若用户使用平板2520,通知呈现为第一通知屏2540,或者若用户使用智能手机2530,呈现为第二通知2550。此外,平板2520和智能手机2530各自向用户呈现背景控制面板。因此,在第一和第二通知屏2540和2550中,根据用户建立的设置提示用户是否希望对其他活动做出更改和/或根据通知和安排的其他活动向其他用户提供消息。
图26为根据本发明一个实施方案的用户启用智能代理人提供告知收到的通知使活动发生变动的通知的示例性流程图2600。在步骤2605,第一用户(用户1)登录第一电子设备(设备1),该流程进入步骤2610,在步骤2610,用户访问智能代理人功能,所述智能代理人功能可为用户访问或下载的独立的应用程序、用户电子设备上预装的UI管理套件中的一个功能特性或预装在用户电子设备上的应用程序。在步骤2615,通过一系列提示提示用户是否希望选择受监视的应用程序或者是否希望让智能代理人完全自动选择应用程序或通过选择主屏幕导向。
若用户选择完全自动过程,流程进入步骤2620,在步骤2620,智能代理人从主页屏幕自动关联应用程序,然后进入步骤2625,在步骤2625,用户输入偏好用于关联其他电子设备。若用户选择半自动过程,在步骤2630中,向用户提供大背景和小背景构成的主屏幕列表,以便用户能选择(如)将智能代理人与(如)所有主屏幕关联起来或仅和与(如)工作相关的主屏幕关联起来。接下来,在步骤2635,智能代理将所选主屏幕中的应用程序关联起来以便监视,然后流程进入步骤2625。若用户选择手动过程,那么在步骤2640中,向用户提供在其主屏幕适合监控/通知的应用程序列表,用户从中选择希望关联的应用程序,然后流程在进入步骤2625前在步骤2645中将所选应用程序关联起来。
从步骤2625开始,智能代理人在步骤2650中在用户的电子设备(设备1)上启用,然后流程进入步骤2655,在步骤2655,智能代理人转移到其他关联电子设备上并启用。然后流程进入步骤2660,在步骤2660,智能代理人监视所选应用程序的通信以确定任何接收到的通知是否需要执行操作。在步骤2665,若未接收到任何通知,流程回到步骤2660,否则由用户建立的自动化程度决定。若选择了自动化过程,流程进入步骤2670或者进入步骤2685。在步骤2670,智能代理人自动对关联应用程序做出任何适用的更改,然后进入步骤2675,在步骤2675,智能代理人自动通知用户应用的更改,然后进入步骤2680,在步骤2680,与第三方就变更进行通信,然后回到步骤2660。若选择了手动过程,在于步骤2690中提示用户是否希望做出更改前,流程在步骤2685中告知用户接收的通知和对其他活动的影响,或不通过通知窗口,如上文所述的图24中的通知2470。若用户选择做出一项或多项更改,更改将在步骤2695中实施,否则,流程回到2660。然后流程从2695进入步骤2680,在步骤2680中,告知第三方所做的更改并回到步骤2660。
应明白的是,无背景控制面板,智能应用程序也可在电子设备上使用,或者关联电子设备不使用背景控制面板而主电子设备使用,反之亦可。还应明白的是,电子设备上安装和/或运行的智能代理人应用程序可与在远程服务器上执行的软件系统通信,以使基于远程服务器的软件系统能对与用户应用程序相关的通信进行分析以便用户在电子设备上单独重新启动或重新打开UI使所有应用程序启动和接收通知时能向用户提供通知。在参考图24至图26对本发明实施方案进行的说明中,就活动进行了讨论,该领域技术人员会明白,所做的更改和接收的通知可与应用程序的其他方面相关,包括但不限于接收的文件和针对更新所做的操作。
该领域技术人员会明白,虽然以上就背景控制面板讨论的概念主要从平板电脑、智能手机、笔记本电脑和类似便携电子设备角度考虑,但基本原理可应用于各种设备,包括(如)便携游戏机(如)任天堂DS和索尼PSP、便携音乐播放器(如苹果iPod)和电子阅读器(Kobo、Kindle和索尼阅读器)。应明白的是,虽然本发明实施方案针对UI进行说明,但是这些实施方案还可用在构成背景控制面板的一部分的软件应用程序中,或作为其他操作环境(如Windows、Mac OS、Linux和安卓)中独立的应用程序。
该领域技术人员会明白,本发明的实施方案不需要其他所述元素就可以实施。例如,无需验证用户生物特征对电子设备进行锁定或解锁就能使用智能代理人通知和背景控制面板。还应明白的是,通过生物特征验证或备用证书输入(如ID/密码)和根据本发明实施方案所述的背景控制面板建立用户身份,为可直接访问/呈现信息、而不是只能通过UI访问的开放应用程序提供了应用程序图标以便选择性地启动这些开放应用程序。因此,应明白的是,可根据用户身份建立这些应用程序的设置/偏好。
虽然以上说明给出的具体细节可帮助充分理解实施方案,但是当然,没有这些具体细节,所述实施方案也可实行。例如,电路可在框图中示出,以免因不必要的细节而使所述实施方案模糊不清。还有,熟悉的电路、过程、算法、结构和技术可省去任何不必要的细节进行展示以免使所述实施方案模糊不清。
上述技术、模块、步骤和手段的实施可通过各种方式完成。例如,这些技术、模块、步骤和手段可通过硬件、软件或其组合实施。对于硬件实施,处理单元可在一个或多个专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、设计用于执行上述功能的其他电子单元和/或其组合中实施。
另外,应注意,所述实施方案可描述为一个可用流程图、数据流图、结构图或框图说明的过程。虽然流程图可将操作描述成一个顺次过程,但其中很多操作能平行或同时执行。另外,操作顺序可以重新排列。虽然当操作完成时过程终止,但可能还有图中不含的附加步骤。一个过程可对应一种方法、一种功能、一个程序、一个例行子程序、一个子程序等。当过程对应功能时,其终止对应于该功能返回调用功能或主功能。
此外,实施方案还可用硬件、软件、脚本语言、固件、中间件、微代码、硬件描述语言和/或其任一组合实施。当用软件、固件、中间件、脚本语言和/或微代码实施时,执行必要任务的程序代码或代码段可存储在机器可读媒体(如存储媒体)上。代码段或机器可执行指令可表示程序、功能、子程序、程序、例行程序、子例行程序、模块、软件包、脚本、类或指令、数据结构和/或程序语句的任何组合。代码段可通过传递和/或接收信息、数据、自变量、参数和/或存储内容与另一代码段与硬件电路连接。信息、自变量、参数、数据等可向前传递、或通过任何合适的手段传递,如共享内存、信息传递、令牌传递、网络传输。
对于固件和/或软件实施,方法可用执行此处所述功能的模块(如程序、功能等)实施。具体表达指令的任何机器可读媒体可用于实施此处所述的方法。例如,软件代码可存储在内存中。内存可在处理器中或处理器外部实施,且在实施上也可不同,从内存用于存储软件代码供以后执行到内存用于执行软件代码。此处所述的术语“内存”指任何类型的长期、短期、易失、不易失或其他存储媒体,且不限于任何特定类型的内存、或内存数量或任何特定类型的内存存储媒体。
另外,如此处所公开,术语“存储媒体”可表示一个或多个用于存储数据的设备,包括只读内存(ROM)、随机存取内存(RAM)、磁性RAM、磁芯存储器、磁性磁盘存储媒体、光纤存储媒体、闪存设备和/或存储信息用的其他机器可读媒体。术语“机器可读媒体”包括但不限于便携或固定存储设备、光纤存储设备、无线信道和/或能够存储、容纳或传输指令和/或数据的其他各种媒体。
此处所述的方法在一个或多个实施方案中可被包含一个或多个接受含代码段的指令的机器执行。对于所述的任一种方法,当机器执行指令时,即在执行方法。包括任何能够执行规定该机器要执行的操作的指令组(顺序或其他)的机器。因此,典型的机器可用含一个或多个处理器的典型处理系统说明。每个处理器可包括CPU、图形处理单元和可编程DSP单元中一个或多个。处理系统进一步可包括内存子系统,包括主RAM和/或静态RAM和/或ROM。可包括总线子系统用于在组件之间通信。若处理系统需要显示器,可包括像液晶显示器(LCD)这样的显示器。若需要手动输入数据,处理系统还可包括输入设备,如字母输入单元(如键盘)、指向控制设备(如鼠标)等中一个或多个。
内存包括含在处理系统执行时用于执行此处所述一种或多种方法的指令的机器可读代码段(如软件或软件代码)。在计算机系统执行过程中,软件可完全驻留在内存中,或也可全部或至少部分驻留在RAM和/或处理器中。因此,内存和处理器还可构成包括机器可读代码的系统。
在替代实施方案中,机器可作为独立设备运行或可连接(如联网)到其他机器。在联网部署中,机器可以服务器或客户机的身份在服务器-客户机网络环境中运行,或作为对等机在对等网络或分布式网络中运行。机器可为(如)计算机、服务器、服务器集群、计算机集群、网络设备、分布式计算环境、云计算环境或任何能执行规定该机器要执行操作的指令组(顺序或其他)的机器。术语“机器”还可包括单独或联合执行一组(或多组)指令以执行此处所述任一种或多种方法的机器的任何总称。
上述对本发明示例性实施方案的公开内容旨在进行举例和说明,无意对本发明进行详尽说明或将本发明限制为所公开的形式。鉴于以上公开内容,该领域普通技术人员会明白此处所述实施方案可有很多变形和改进。在此所附的权利要求书及其对等物对本发明的范围进行了规定。
此外,在描述本发明的代表性实施方案时,说明书以特定步骤顺序呈现了本发明的方法和/或过程。但是,只要方法或过程不依赖于此处所述特定的步骤顺序,该方法或过程不应限制为所述的特定步骤顺序。该技术领域普通技术人员应理解,其他步骤顺序也是可能的。因此,说明书中所述的特定的步骤顺序不应构成对权利要求书的限制。另外,针对本发明方法和/或过程的权利要求书应不限制为以所述顺序执行其步骤,且该领域技术人员能很容易理解这些顺序可以变化,但应保持在本发明的精神和范围内。

Claims (8)

1.一种建立用于向用户显示的背景界面的方法:
设置获取电子设备的用户生物特征的传感器;
为所述电子设备设置用于执行与设备用户界面相关的用户界面应用程序的微处理器;
设置形成所述电子设备一部分的内存用于存储:
用户界面应用程序,
多个基准生物特征中的至少一个基准生物特征,每个基准生物特征与所述电子设备的授权用户相关;
多个背景控制面板中的至少一个背景控制面板,其中每个背景控制面板与提供给预定授权用户的一组预定软件应用程序的配置相关;及
多个用户配置文件中的至少一个用户配置文件,每个用户配置文件与所述电子设备的授权用户及所述多个背景控制面板的预定部分关联;
基于所述传感器获取的用户生物特征确定所述电子设备的预期用户为授权用户并且将所获取的生物特征与存储在所述电子设备的内存内的所述多个基准生物特征进行比较;和
在确定预期用户是显示在电子设备的背景控制面板上授权用户时,所述背景控制面板至少根据授权用户、电子设备的大背景和电子设备的小背景选择;其中
根据所述电子设备的地理位置,与所述电子设备相关联的网络,与所述电子设备相关联的另一电子设备,当前日期和当前时间中的至少一个来建立所述大背景;
通过以下方式建立所述小背景:通过处理从将用户建立为授权用户以识别除了授权用户之外的任何其他用户的存在时使用的传感器中获取的生物特征来自动检测所述授权用户在其附近的其他个体的存在;并且
通过应用相对于将被呈现给授权用户的背景控制板的预定限制和预定设置中的至少一个来建立小背景包括其他个体存在的背景控制板,而不检测其他个体并关闭用户界面应用程序。
2.根据权利要求1所述的方法,其中,
处理来自所述传感器的所获取的生物特征包括以下中的至少一个:分析为所述用户的面部识别而获取的图像的剩余部分,并且处理从形成电子设备的一部分的扩音器俘获的音频内容。
3.根据权利要求1所述的方法,其中,
小背景根据多个设备标识中至少一个关联设备标识确定,每个关联设备通过多个无线接口中至少一个无线接口与该电子设备通信。
4.一种建立用于向用户显示的背景界面的方法,包括:
设置在至少包括内存和微处理器的电子设备上执行的用户界面应用程序;
在内存中提供多个背景控制面板,每个背景控制面板与身份和一组预定的软件应用的设置相关;
设置多个基准生物特征,每个基准生物特征与所述设备的授权用户相关;
在显示器上根据用户界面应用程序、设备用户身份、大背景和小背景建立第一背景控制面板;
检测用户身份、大背景和小背景中至少一个的变化;
动态地确定是否将第一背景控制面板改为第二背景控制面板,其中所检测到的改变是相对于大背景和小背景中的至少一个而言,第二背景控制面板根据用户界面应用程序、用户身份、大背景和小背景中的至少一个变化项以及用户身份、大背景和小背景中的至少一个未改变项确定;
动态地确定是否将第一背景控制板改为第三背景控制板,其中所检测到的改变是相对于所述用户身份而言,并且所述改变是从一个授权用户到另一个授权用户,第三背景控制板至少根据用户界面应用程序和另一授权用户的用户身份确定;和
动态地禁用所述用户界面应用程序,其中所检测到的改变是相对于所述用户身份而言,并且所述改变是从授权用户到未授权用户;其中
根据所述电子设备的地理位置,与所述电子设备相关联的网络,与所述电子设备相关联的另一电子设备,当前日期和当前时间中的至少一个来建立所述大背景;
在初始建立第一背景控制板或检测小背景中的改变中建立及采用所述小背景包括通过处理从将用户建立为授权用户以识别除了授权用户之外的任何其他用户的存在时使用的生物测定传感器获取的生物特征来自动检测用户在其附近的其他个体的存在;并且
将第一背景控制板改为第二背景控制板,其中检测到的小背景中的改变包括检测其他个体的存在是采用相对于可经由用户界面应用程序访问的软件应用的预定限制和预定设置中的至少一个,并关闭用户界面应用程序。
5.根据权利要求4所述的方法,其中,
检测设备用户变化包括使用传感器提供设备用户生物特性。
6.根据权利要求4所述的方法,其中,
关闭所述用户界面应用程序还包括警告所述用户。
7.根据权利要求4所述的方法,其中,
设备自动存储和分析用户使用设备情况以及与存储用户使用设备情况时大背景和小背景相关的信息,并提示用户可能需要创建新的背景控制面板以改善设备的使用。
8.根据权利要求4所述的方法,其中,
动态更改包括根据第一背景控制面板中应用程序中的活动一次性改变背景控制面板和以一系列步骤改变第一背景控制面板的各方面以提供第二背景控制面板中的至少一种更改。
CN201380007353.8A 2012-01-08 2013-01-08 建立可动态指定的用户界面的方法和系统 Active CN104081382B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261584288P 2012-01-08 2012-01-08
CA61/584,288 2012-01-08
PCT/CA2013/000004 WO2013102267A1 (en) 2012-01-08 2013-01-08 Method and system for dynamically assignable user interface

Publications (2)

Publication Number Publication Date
CN104081382A CN104081382A (zh) 2014-10-01
CN104081382B true CN104081382B (zh) 2018-03-23

Family

ID=48744947

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380007353.8A Active CN104081382B (zh) 2012-01-08 2013-01-08 建立可动态指定的用户界面的方法和系统

Country Status (6)

Country Link
US (1) US9646145B2 (zh)
EP (1) EP2801040B1 (zh)
JP (1) JP2015509237A (zh)
CN (1) CN104081382B (zh)
CA (1) CA2860833C (zh)
WO (1) WO2013102267A1 (zh)

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140089672A1 (en) * 2012-09-25 2014-03-27 Aliphcom Wearable device and method to generate biometric identifier for authentication using near-field communications
TWI471800B (zh) * 2012-07-03 2015-02-01 Evermore Technology Inc 用於建置具有輸出入界面控制能力的行動運算裝置用應用程式之建置系統及方法
US20150229533A1 (en) * 2012-09-10 2015-08-13 Teknision Inc. Method and system for transferable customized contextual user interfaces
US9158560B2 (en) * 2012-10-26 2015-10-13 Verizon Patent And Licensing Inc. Dynamic application arranger
WO2014088621A1 (en) * 2012-12-03 2014-06-12 Google, Inc. System and method for detecting gestures
JP2014127879A (ja) * 2012-12-26 2014-07-07 Panasonic Corp 放送画像出力装置、放送画像出力方法、およびテレビ
CN112130874A (zh) 2013-01-11 2020-12-25 辛纳科尔股份有限公司 背景控制面板配置选择的方法和系统
US20140282207A1 (en) * 2013-03-15 2014-09-18 Rita H. Wouhaybi Integration for applications and containers
JP5796725B2 (ja) * 2013-03-22 2015-10-21 カシオ計算機株式会社 認証処理装置、認証処理方法及びプログラム
CN105431857A (zh) * 2013-05-29 2016-03-23 慧与发展有限责任合伙企业 应用程序的被动安全
US20160203304A1 (en) * 2013-08-29 2016-07-14 Physio-Control, Inc. Adaptive electronic device interface
JP5862976B2 (ja) * 2013-10-09 2016-02-16 Necパーソナルコンピュータ株式会社 情報処理装置及び方法
US10055562B2 (en) * 2013-10-23 2018-08-21 Intel Corporation Techniques for identifying a change in users
KR20150071252A (ko) * 2013-12-18 2015-06-26 삼성전자주식회사 전자장치에서 화면 구성 제어를 위한 방법 및 장치
US9971490B2 (en) * 2014-02-26 2018-05-15 Microsoft Technology Licensing, Llc Device control
US9805326B2 (en) 2014-04-24 2017-10-31 International Business Machines Corporation Task management integrated design environment for complex data integration applications
KR20160001151A (ko) * 2014-06-26 2016-01-06 삼성전자주식회사 카드 사용 지원 방법 및 장치
US10102738B2 (en) * 2014-09-30 2018-10-16 Henry's Products Llc Portable security device
CN104636506B (zh) * 2015-03-13 2016-09-28 北京奇虎科技有限公司 一种在智能终端中添加主页的方法和装置
US10031722B1 (en) * 2015-03-17 2018-07-24 Amazon Technologies, Inc. Grouping devices for voice control
WO2016179752A1 (zh) * 2015-05-08 2016-11-17 上海欧拉网络技术有限公司 一种移动设备用户界面的实现方法及装置
US10655951B1 (en) 2015-06-25 2020-05-19 Amazon Technologies, Inc. Determining relative positions of user devices
US10365620B1 (en) 2015-06-30 2019-07-30 Amazon Technologies, Inc. Interoperability of secondary-device hubs
US9875373B2 (en) * 2015-09-28 2018-01-23 International Business Machines Corporation Prioritization of users during disaster recovery
US10068078B2 (en) 2015-10-15 2018-09-04 Microsoft Technology Licensing, Llc Electronic devices with improved iris recognition and methods thereof
CN106951157A (zh) * 2016-01-07 2017-07-14 深圳富泰宏精密工业有限公司 电子设备及用户接口切换方法
CN106201540B (zh) * 2016-07-15 2019-11-05 深圳奥比中光科技有限公司 体感交互界面的设置方法以及设置装置
CN106250077A (zh) * 2016-07-18 2016-12-21 乐视控股(北京)有限公司 一种应用关联的内容界面呈现方法、装置及其电子设备
US10802839B2 (en) * 2016-11-21 2020-10-13 Vmware, Inc. User interface customization based on user tendencies
US10359993B2 (en) 2017-01-20 2019-07-23 Essential Products, Inc. Contextual user interface based on environment
US10166465B2 (en) 2017-01-20 2019-01-01 Essential Products, Inc. Contextual user interface based on video game playback
KR20190012695A (ko) * 2017-07-28 2019-02-11 양재혁 태그 컨텐츠를 포함하는 정보를 공유하는 광고 방법 및 시스템
TWI695308B (zh) * 2017-09-15 2020-06-01 林勁璋 分散式互動介面系統及其操作方法
US11182056B2 (en) * 2018-01-31 2021-11-23 Salesforce.Com, Inc. Application navigation
US11100226B1 (en) * 2018-04-04 2021-08-24 NortonLifeLock Inc. Systems and methods for identifying a malicious user interface
EP3644202B1 (en) * 2018-10-26 2023-10-04 IDEMIA France Biometric-secured non-biometric applications on a card
US20210150451A1 (en) * 2019-11-15 2021-05-20 Coupang Corp. Systems and methods for automated mobile-device based work period trading
CN110908735A (zh) * 2019-11-19 2020-03-24 北京字节跳动网络技术有限公司 应用程序标签自动加载和变更方法、装置及电子设备
US11061526B2 (en) 2019-12-09 2021-07-13 Motorola Solutions, Inc. Incident card system
US11232170B1 (en) * 2020-09-08 2022-01-25 UiPath, Inc. Application-specific graphical element detection
US11507259B2 (en) 2020-09-08 2022-11-22 UiPath, Inc. Graphical element detection using a combined series and delayed parallel execution unified target technique, a default graphical element detection technique, or both
US11740853B1 (en) 2020-10-26 2023-08-29 Wells Fargo Bank, N.A. Smart table system utilizing extended reality
US11457730B1 (en) 2020-10-26 2022-10-04 Wells Fargo Bank, N.A. Tactile input device for a touch screen
US11429957B1 (en) 2020-10-26 2022-08-30 Wells Fargo Bank, N.A. Smart table assisted financial health
US11397956B1 (en) 2020-10-26 2022-07-26 Wells Fargo Bank, N.A. Two way screen mirroring using a smart table
US11572733B1 (en) 2020-10-26 2023-02-07 Wells Fargo Bank, N.A. Smart table with built-in lockers
US11741517B1 (en) 2020-10-26 2023-08-29 Wells Fargo Bank, N.A. Smart table system for document management
US11727483B1 (en) 2020-10-26 2023-08-15 Wells Fargo Bank, N.A. Smart table assisted financial health
US11689534B1 (en) * 2020-12-01 2023-06-27 Amazon Technologies, Inc. Dynamic authorization of users for distributed systems
CN112732149B (zh) * 2020-12-31 2022-10-11 上海航翼网络科技有限公司 一种基于ai技术的新型显示软件互动界面的办法
TWI806058B (zh) * 2021-05-26 2023-06-21 中華電信股份有限公司 生成服務內個人捷徑之方法及電腦可讀媒介

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6563430B1 (en) * 1998-12-11 2003-05-13 Koninklijke Philips Electronics N.V. Remote control device with location dependent interface
WO2007143057A2 (en) * 2006-06-02 2007-12-13 Microsoft Corporation Logon and machine unlock integration

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6633315B1 (en) * 1999-05-20 2003-10-14 Microsoft Corporation Context-based dynamic user interface elements
US6748195B1 (en) * 2000-09-29 2004-06-08 Motorola, Inc. Wireless device having context-based operational behavior
US20030046401A1 (en) * 2000-10-16 2003-03-06 Abbott Kenneth H. Dynamically determing appropriate computer user interfaces
WO2002099597A2 (en) * 2001-06-07 2002-12-12 Unwired Express, Inc. Method and system for providing context awareness
US20050054381A1 (en) * 2003-09-05 2005-03-10 Samsung Electronics Co., Ltd. Proactive user interface
KR100651729B1 (ko) * 2003-11-14 2006-12-06 한국전자통신연구원 홈네트워크 환경에서의 멀티-모달 상황 인식어플리케이션을 위한 시스템 및 방법
US20060107219A1 (en) * 2004-05-26 2006-05-18 Motorola, Inc. Method to enhance user interface and target applications based on context awareness
US7756820B2 (en) * 2004-07-19 2010-07-13 Sap Ag Activity browser
US7848765B2 (en) * 2005-05-27 2010-12-07 Where, Inc. Location-based services
KR100695331B1 (ko) * 2005-09-23 2007-03-16 한국전자통신연구원 상황인지 환경을 위한 사용자 인터페이스 장치 및 이에연동되는 기기 제어 장치 및 그의 동작 방법
US7954064B2 (en) * 2005-10-27 2011-05-31 Apple Inc. Multiple dashboards
US20070101279A1 (en) * 2005-10-27 2007-05-03 Chaudhri Imran A Selection of user interface elements for unified display in a display environment
US7873710B2 (en) * 2007-02-06 2011-01-18 5O9, Inc. Contextual data communication platform
US8713458B2 (en) * 2007-02-15 2014-04-29 Nokia Corporation Visualization of information associated with applications in user interfaces
US8954871B2 (en) * 2007-07-18 2015-02-10 Apple Inc. User-centric widgets and dashboards
US8732611B2 (en) * 2007-09-04 2014-05-20 Apple Inc. Graphical user interface for mobile electronic device
US8621642B2 (en) * 2008-11-17 2013-12-31 Digitalpersona, Inc. Method and apparatus for an end user identity protection suite
KR101584058B1 (ko) * 2009-08-07 2016-01-12 삼성전자주식회사 현재 상황에 적합한 사용 환경을 제공하는 휴대 단말기 및 이의 운용 방법
US8966110B2 (en) * 2009-09-14 2015-02-24 International Business Machines Corporation Dynamic bandwidth throttling
US8972878B2 (en) * 2009-09-21 2015-03-03 Avaya Inc. Screen icon manipulation by context and frequency of Use
US10063996B2 (en) * 2011-02-11 2018-08-28 Thermopylae Sciences and Technology Methods and systems for providing geospatially-aware user-customizable virtual environments
US20140237589A1 (en) * 2011-09-29 2014-08-21 Bradley Neal Suggs Personalization Data of an Active Application

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6563430B1 (en) * 1998-12-11 2003-05-13 Koninklijke Philips Electronics N.V. Remote control device with location dependent interface
WO2007143057A2 (en) * 2006-06-02 2007-12-13 Microsoft Corporation Logon and machine unlock integration

Also Published As

Publication number Publication date
JP2015509237A (ja) 2015-03-26
CA2860833C (en) 2018-05-29
CN104081382A (zh) 2014-10-01
EP2801040A1 (en) 2014-11-12
CA2860833A1 (en) 2013-07-11
EP2801040B1 (en) 2018-04-11
US9646145B2 (en) 2017-05-09
US20150020191A1 (en) 2015-01-15
WO2013102267A1 (en) 2013-07-11
EP2801040A4 (en) 2015-12-23

Similar Documents

Publication Publication Date Title
CN104081382B (zh) 建立可动态指定的用户界面的方法和系统
CN104981774B (zh) 背景控制面板配置选择的方法和系统
US11099812B2 (en) Device and method for performing functions
US20190116094A1 (en) Method and system for transferable customized contextual user interfaces
CN108733438A (zh) 应用程序与数字助理集成
US9275148B1 (en) System and method for augmented browsing and knowledge discovery
CN108780463A (zh) 社交图的生成和管理
CN102819425A (zh) 便于自动控制的对显示画面的改进编排和自动导航
CN108475159A (zh) 在锁定屏幕上创建笔记
CN110494818A (zh) 在外壳上具有可交互用户界面表面的可折叠显示设备
Streitz et al. Distributed, Ambient and Pervasive Interactions: Understanding Humans: 6th International Conference, DAPI 2018, Held as Part of HCI International 2018, Las Vegas, NV, USA, July 15–20, 2018, Proceedings, Part I
Shawkat et al. Design and prototypical implementation of a mobile healthcare application: health express
US20220300307A1 (en) Providing assistive user interfaces using execution blocks
Bamfo An implementation of a web platform to support free recycling in Ghana
Martinák Mobilní Android aplikace pro správu uživatelských služeb hostingové společnosti
Streitz Weiser’s Vision: 20 Years Later
Puustinen Bank in a pocket
KR20160064605A (ko) 프로세스 몬스터 앱 서비스 제공 시스템 및 그 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant