CN104471536A - 利用附加信息扩充用户接口 - Google Patents

利用附加信息扩充用户接口 Download PDF

Info

Publication number
CN104471536A
CN104471536A CN201380039001.0A CN201380039001A CN104471536A CN 104471536 A CN104471536 A CN 104471536A CN 201380039001 A CN201380039001 A CN 201380039001A CN 104471536 A CN104471536 A CN 104471536A
Authority
CN
China
Prior art keywords
information
application
user interface
additional information
container
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380039001.0A
Other languages
English (en)
Other versions
CN104471536B (zh
Inventor
D.P.维尔森
N.E.里查德斯
A.比根
D.霍恩德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN104471536A publication Critical patent/CN104471536A/zh
Application granted granted Critical
Publication of CN104471536B publication Critical patent/CN104471536B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/38Creation or generation of source code for implementing user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/542Event management; Broadcasting; Multicasting; Notifications

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本文公开了用于利用附加信息增强应用的用户接口的方法、系统和存储介质的实施例。在一个实例中,所述方法可以包括:计算设备检测与在所述计算设备上执行的应用、所述应用的用户接口的容器或所述容器的至少一个对象相关联的事件;确定用于扩充与所述应用的所述用户接口的所述容器的所述至少一个对象相关联的基本信息的附加信息;以及利用所述附加信息或对应于所述附加信息的一个或多个指示符扩充所述容器的显示中的所述至少一个对象的所述基本信息。所述附加信息与对象相关联。可以描述和/或要求保护其它实施例。

Description

利用附加信息扩充用户接口
相关申请
本申请要求享有于2012年8月22日提交的名称为“AUGMENTING USER INTERFACE WITH ADDITIONAL INFORMATION”的美国专利申请No. 13/591,742的优先权。本申请由于具有共同发明人而与于2012年6月18日提交的美国申请No. 13/038,824相关。
技术领域
本公开的实施例总体涉及数据处理的领域,并且更具体地涉及用于提供用户接口的技术。
背景技术
在数据处理中,大多数最终用户应用具有用户接口。大多数用户接口要求关于如何达到所期望的成果的用户决定。典型地,用户可能经历使用可用用户接口(UI)控件、容器和/或对象(例如由应用的用户接口提供)的多个步骤直到可以达到所期望的成果。在当前系统中,用户可能需要两种类型的信息来导航用户接口:关于应用能力的信息和实施手头任务所需要的信息。关于应用能力的信息可以被提供在应用自身中。工具提示通常用于对用户给出UI能力的描述以帮助用户选择和使用特定控件或对象。为了使用工具提示,可能要求用户顺序地将鼠标悬停在各种可用选项之上(或者在触摸系统上按住/轻击各种可用选项)。然而,工具提示典型地不示出使用对应UI控件或对象的预期结果的预览。
实施手头任务可能需要的信息可以跨多个计算资源而拆分。例如,信息可以跨桌面系统上的多个窗口或者移动设备上的多个应用而可用。例如,用户可以使用航班预订网站来预订航班,使用日历程序来查看他的可用性,并且使用便携式文档格式(PDF)阅读器来在她的桌面上回顾用于预订航班的公司指南。因此,用户可能需要布置她的桌面以确保包含她需要的信息的所有三个窗口同时可见,或者使用窗口切换机制来在窗口之间进行切换。这可能证实是麻烦的任务。
另外,用户可能不知道或未预料到用户接口控件相关动作的结果,直到她实际上使用特定接口控件或对象。由此,用户可能不能够做出关于选择特定用户接口控件或对象的预期结果的知情决定。因此,由于可能负面地影响利用特定用户接口的用户体验的这样的用户接口控件/对象选择,可能出现出乎意料的结果或错误。
附图说明
通过结合附图的以下详细描述将容易理解实施例。为了便于该描述,相似的附图标记指代相似的结构元件。在附图的各图中通过示例的方式而非通过限制的方式图示实施例。
图1图示了依照一些实施例的其中可实践各种实施例的环境。
图2图示了具有依照实施例增强的用户接口对象的用户接口的示例屏幕截图。
图3-4图示了具有依照实施例增强的用户接口的对象的用户接口的其它示例屏幕截图。
图5图示了依照实施例的用于用户接口增强的过程流程图。
图6图示了依照一些实施例的其中可实现各种实施例的环境。
具体实施方式
提出了用于利用附加信息(例如与关于应用的事件相关联的信息)增强在计算设备上执行的应用的用户接口的技术。可利用其扩充用户接口的附加信息可以在交互发生之前向用户告知利用应用用户接口的用户交互的可能结果。例如,用户可以被告知关于与容器和/或被包括在容器中的对象相关联的功能和/或内容,其中容器至少部分地形成应用的用户接口。在另一示例中,经呈现的附加信息可以使得用户能够查明与特定对象或容器的交互的成果并做出关于哪个容器或对象是用户与应用的会话的特定实例中的最佳可选选择的知情决定。
例如,容器或容器的对象可以是利用与应用相关联且响应于关于应用的事件提供的附加信息来扩充的。附加信息可以例如响应于诸如用户与应用或同应用相关联的内容的交互之类的事件而提供,并可以包括涉及与用户接口应用的对象相关联的特定功能的数据、涉及用户接口的状态或上下文或者与用户接口的对象相关联的功能的数据、涉及内容的数据(例如与针对应用的传入通信相关联)等。在一个示例中,导致用户接口增强的事件可以是通过检测诸如光标之类的选择元件朝向可针对这样的检测而指定的用户接口的特定区域的移动来查明的。例如,利用光标在接近于容器中的特定对象的特定区域之上的盘旋或在触摸敏感屏幕的情况下在对象附近或之上感测用户的手指或触笔可以指示选择对象的用户意图。当被检测到时,所接收的输入可以导致引起用户接口的一个或多个对象或容器利用如本文所描述的相关信息的扩充的后续动作。
与要访问的对象相关联的数据可以与对象(或容器)相关联地被采集、可视化和呈现给用户,例如以取代或添加到对象或容器的现有静态定义。数据可以是通过与对象或容器相关联地呈现一个或多个指示符来可视化的,该指示符可以包括图像、文本、缩略图、链接、对象或容器的视觉特性(例如尺寸、位置、配色方案、运动等)中的改变等。
用于增强用户接口的信息可以是以许多不同方式采集的。例如,可以基于与可导致用户接口增强的事件相关联的数据启发性地确定该信息。例如,该信息可以是从针对电子邮件应用的传入电子邮件消息中辨明的,诸如消息重要性、消息优先级、发送者的身份等。该信息还可以包括与导致用户接口增强的用户接口对象或容器或事件相关联的动态获取和处理的内容和/或上下文。该信息可以是通过下述操作来产生的:从内容源(例如,针对特定内容资源而服务的内容所驻留在的数据储存库)或从由内容源(例如网站)呈现的内容获取数据并处理所获取的数据以提供与对应于所获取的数据的对象或容器相关联的视觉指示符。
如以下更加详细地描述的,可以存在导致利用附加信息的用户接口的增强的不同类型的事件。例如,应用用户接口增强可以是通过从一个操作模式切换到另一个(例如从“正常”到“增强”模式)来导致的。在该示例中,事件可以包括切换模式,并且信息可以包括从可连接至应用或该应用在其上执行的计算设备的资源采集的数据。所连接的资源的一个示例可以是社交联网网站,从其可以收集与应用的特定用户相关联的社交信息和对该社交信息提出“增强”模式中的增强用户接口。所连接的信息资源的另一示例可以是与托管应用的计算设备可访问的服务器相关联的数据储存或者存储在不同计算设备上且可由计算设备访问的数据集合(例如多个文件)。作为另一示例,信息可以包括应用的执行环境的资源利用。作为又一示例,应用可以发起导致用户接口增强的事件。例如,如果应用可以知晓(例如确定或接收适当通知)附加信息可用,则它可以切换到该“增强”模式而不必从用户取得输入。
图1示出依照一些实施例的其中可实现本文描述的用户接口增强的各方面的说明性环境100。在实施例中,图1的环境100可以用于增强由应用104(例如电子邮件应用或音乐播放器应用)提供的用户接口,其使用本文描述的UI增强服务112经由用户接口108呈现内容(例如网站)106。增强可以包括附加信息以扩充由应用104提供的针对被包括在应用的用户接口中的对象和/或容器的基本信息。如本文所使用的,容器是包含其它对象的对象类型。对象可能或可能不包含其它对象。要理解,UI增强服务112可以包括许多不同实现,包括但不限于在诸如客户端设备102或Web服务器120之类的计算设备上执行的软件应用组件。在一个实施例中,服务112可以被供应作为一起组成通过互联网供应的云计算平台的远程计算服务的一部分。服务可以被配置成在诸如纯Java HTTP Web服务器环境之类的Web服务器环境中运行。
在实施例中,环境100可以包括被用户用于与提供内容的电子实体交互的客户端计算设备102。内容可以由客户端计算设备102通过应用104(例如浏览器)访问。内容可以存储在一个或多个远程内容数据储存114、116和118中,并可以被商家、网站或其它实体利用以便给用户提供通过导航至例如通过Web服务器120操作的网站106来搜索和查看内容的机会。数据储存可以是(例如利用搜索引擎)通过互联网或本领域中已知的任何其它类型的计算机网络可访问的。在另一示例中,数据储存114、116、118可以是设备102本地可访问的。例如,数据储存114、116、118可以包括本地存储的地址簿或其它用户关联信息。
在实施例中,在设备102上操作的UI增强服务112可以被配置成响应于检测到诸如用户输入或传入通信之类的事件,利用与对象和/或容器相关联的信息扩充用户接口108的对象和/或容器。例如,当检测到用户与接近于由应用104在客户端计算设备102上呈现的用户接口108的特定对象的区域的交互时,对应于与对象相关联的内容的数据可以聚集(例如来自一个或多个数据储存114、116、118),并且可以与用户接口108的对象相关联地向用户显示对应的视觉指示符(例如,与对象相关联的项的重要性或紧急性的指示)。
在实施例中,UI增强服务112可以被实现为受信脚本,例如JavaScript®。在一些实施例中,受信脚本还可以被实现为ActionScript®、VBScript®、Java Servlet®、Flash®、JScript®或其它脚本语言。在一些实施例中,受信脚本112可以被实现为对应用104的扩展(即,插件应用)。在一些实施例中,当用户访问网站时,UI增强服务(受信脚本)112可以被加载在网站106的页面上。一般而言,受信脚本不必是网站特定的;脚本可以作为浏览器的一部分而被提供或者作为对浏览器的扩展而被安装。在一些实施例中,UI增强服务112可以是通过作为中间件框架的一部分的API提供的,并可以直接被实现为应用的一部分或被实现为提供增强的独立守护程序。在又一实施例中,UI增强服务112可以被实现为不与应用共享UI框架而仅与下层操作系统的窗口系统集成的独立守护进程。
包括UI增强服务112的受信脚本可以被配置成检测用户与接近于用户接口108的特定对象或容器的区域的交互,访问内容数据储存114-118,检索与对应于对象或容器的内容相关联的信息,处理所检索的内容以产生内容概要,并呈现针对对象或容器的经处理的内容。在一些实施例中,受信脚本还可以被配置成调整对象或容器的视觉性质(例如尺寸、颜色、字体等)以便适应经处理的内容概要。
图2-4图示了由UI增强服务增强的用户接口的各种实施例。图2-4中图示的实施例不将本公开局限于所描述的实施例,而是仅仅提出本文描述的用户接口增强的实现的不同示例。
图2图示了示例电子邮件应用的示例用户接口200。在实施例中,示例电子邮件应用可以具有操作的“常规”模式和“增强”模式。在“常规”模式中,应用可以具有传统用户接口204,其可以针对显示而呈现不同容器,诸如在左容器窗格208中示出的文件夹206。传统用户接口204还可以在右容器窗格212中呈现内容210。如所示,在“增强”模式中,增强用户接口220可以在左窗格224中显示容器文件夹222,其可以具有与一个或多个所显示的文件夹相关联的各种指示符。例如,指示符可以反映可从本地源(例如高速缓存的电子邮件、用户的电子邮件联系人等)和/或远程源(例如,诸如社交联网Web资源之类的所连接的资源)得到的附加信息。附加信息可以包括例如关于文件夹的每电子邮件消息的阅读计数、文件夹优先级(例如基于电子邮件中的经指派的优先级)、文件夹的明示或暗示的重要性(例如,从电子邮件的内容或发送者与接收者的关系得到)、发送者与接收者的关系(例如基于相同的姓氏、所交换的消息的数目、信件的长度、与诸如接收者的工作场所之类的特定组织的关联等)等等。附加信息还可以从被包括在电子邮件消息的主题行中的主题信息或与电子邮件消息的内容相关联的内容信息得到。例如,附加信息可以从电子邮件消息中的标题信息得到,且一般从可被保持在服务器侧上的关于电子邮件的信息得到。
如所示,包括紧急、重要或者以其它方式与众不同的电子邮件消息(例如,关于当前、相关或重要项目的消息)的一些文件夹222可以以许多不同的方式利用视觉指示符高亮显示,诸如利用强调的视觉性质(例如更大字体尺寸、重量、颜色等)。可以不强调可能包括不太相关的内容(例如低重要性的消息)的其它文件夹222(例如利用较小字体、褪色的颜色等)。右容器(窗格)228可以包括各种内容226,诸如被包括在被显示于左窗格224中的文件夹222中的特定文件夹中的电子邮件消息。
可以存在可能导致用户接口200增强的各种事件。例如,具有高重要性水平的电子邮件消息的接收可以导致利用如上描述的一个或多个视觉指示符增强(例如电子邮件所属于的)特定文件夹。在另一示例中,高重要性的电子邮件消息的接收可以使所有文件夹222以“增强”模式显示,如窗格224中所示。在又一示例中,用户可以与接口200交互,例如通过请求从由传统用户接口204指示的“常规”模式切换到由增强用户接口200指示的“增强”模式。在又一示例中,访问接近于文件夹206之一的窗格208的区域(例如利用光标,未示出)可以触发文件夹的利用相关附加信息的扩充。因此,如果用户访问接近于窗格208中的文件夹206之一的区域,则UI增强服务(例如由图1中的附图标记112引用)可以获取与文件夹相关联的信息,处理所获取的信息,并利用文件夹显示经处理的信息或与经处理的信息相关联的视觉指示符。在替换实施例中,UI增强服务可以在用户访问接近于文件夹206之一的区域之前预获取和/或预处理与容器(窗格)208的一个或多个对象(文件夹)206相关联的信息。
图3和4图示了音乐播放器应用的示例用户接口300和400。用户接口300和400分别图示了针对应用的接口的“常规”和“增强”模式。左容器窗格306中的对象304可以具有层级中的项计数、标签和图标。例如,对象304可以表示不同媒体项,诸如播放列表或歌曲。右容器窗格324中的对象320可以表示与一个或多个对象320相关联的媒体项(例如歌曲)。因此,在“常规”回放模式中,用户可以查看如图3的窗格306和324中示出的明白的播放列表。
在“增强”模式中,对象320可以是通过使用视觉指示符或汇总来自本地的和/或所连接的源的数据的其它数据来增强的。示例用户接口400示出“增强”模式中的示例音乐播放器应用。用户接口400可以包括包含对象的两个容器窗格404和406,类似于由用户接口300表示的“常规”模式。如图2的示例中那样,触发由用户接口400说明的“增强”模式的事件可以是用户发起的从“常规”到“增强”模式的切换。当用户切换到“增强”模式时,表示播放列表的对象408可以改变以添加与播放列表相关联的功能信息,例如节奏(每分钟的节拍或BPM)和/或其它信息,诸如例如涉及与播放列表相关联的用户的社交信息。一般地,附加信息可以从与播放列表上的媒体项相关联的任何资源获取,例如与播放列表上的媒体项相关联的元数据。
例如,假定用户正要举办聚会且正在选择要在聚会上回放的各种音乐项的列表。在从多个社交网络得知宾客列表及其聆听习惯的情况下,如果播放列表包括特定宾客最爱的歌曲,则可以例如利用宾客的简档图片来扩充播放列表。因此,用户接口400的“增强”模式可以包括具有BPM指示符410和附加信息412的对象(播放列表)408中的至少一些。附加信息可以从本地和/或远程资源获取,诸如地址簿、社交联网资源等。信息可以包括关于用户——聚会的宾客——的信息,诸如用户上载或生成的表示用户、用户的偏好、用户在音乐方面的品味等的图像。从该信息,用户可以推断出例如宾客喜欢较快和较响亮的歌曲,并且她可以聚焦于那些播放列表以根据宾客的品味编制用于聚会的歌曲的列表。
图5是依照各种实施例的用于利用附加信息增强应用的用户接口的过程流程图500。如以上讨论的,应用可以是被配置成向用户提供内容和/或服务的任何类型的应用,诸如电子邮件应用、音乐播放器应用等。过程500可以在框502处开始,其中检测与应用相关联的可触发应用的用户接口的增强的事件。所检测到的事件可以采取许多不同形式。例如,如在参考图2的作为电子邮件应用的应用的示例中讨论的,事件可以包括:接收传入电子邮件消息,用户访问电子邮件文件夹之一,将用户接口视图从“常规”模式切换到“增强”模式,等等。在另一示例中,如在参考图3-4讨论的作为音乐播放器应用的应用的示例中那样,事件可以包括:将用户接口从“常规”模式切换到“增强”模式,访问播放列表之一,等等。
一般地,不同类型的事件可以触发利用附加信息增强应用的用户接口。例如,在电子邮件应用的示例中,触发用户接口的增强的事件可以是在日历上设置特定日期(例如用户的配偶的临近的生日日期),从该日期起,与用户的配偶相关联的(例如由用户的配偶或具有与用户的配偶相同的姓氏的任何人发送的)所有消息应当被考虑为具有高重要性且在具有对应视觉指示符(例如不同的字体尺寸、不同颜色等)的分离的文件夹中累积。在用户与路线选择应用交互的示例中,触发事件可以是:选择路线,改变路线,将汽车带到目的地(例如停车场),停留,等等。
在又一示例中,用户接口可以是响应于用户接口的特定区域(诸如特定对象位于其中的区域或者任何其它指定区域)的用户交互的检测而扩充的。这些对象中的一个或多个可以是响应于用户与指定区域的交互(例如将光标移动至该区域,利用键盘上的箭头进入该区域,如果屏幕是触摸敏感的则触摸该区域等等)而利用对应附加信息扩充的。在又一示例中,选择元件(光标)朝向用户接口的特定对象的移动可以被检测,并且,响应于该检测,可以利用与对应于UI控件元件的内容相关联的信息来扩充对象。
在框504处,可以响应于在框502处发生的检测而确定与被包括在用户接口中的一个或多个对象或容器相关联的相关附加信息。相关信息可以包括与对应于对象或容器的内容相关联的内容或上下文信息。相关信息可以包括对象的功能的描述、被包括在对象中的项的描述、与用户或与应用的用户相关联的其它用户相关联的图像和社交信息(例如个人数据)等等。用于增强用户接口的信息可以以许多不同的方式采集。例如,信息可以是基于用户动作或用户偏好启发性地确定的。信息可以是例如在编码时间声明的对用户接口的确定性的、静态的添加。信息还可以包括动态获取和处理的与一个或多个用户接口对象相关联的内容。创建该动态获取和处理的内容的方式可以纯粹是算法上的(例如搜索结果的算法评估),或者基于像遗传程序或其它自适应技术之类的人工智能概念。如以上讨论的,信息可以从本地源(例如高速缓冲存储器)和/或所连接的资源(例如社交联网站点)获取。信息还可以包括改变用户接口行为(例如对象状态)。例如,在以上描述的“增强”模式中,行为中的可能改变将是示出远程获取的播放列表而不是基于例如诸如以上参考图4描述的访问指示附加信息412的元件中的一个或多个之类的事件的本地播放列表。
在框508处,可以处理所获取的内容或上下文信息以例如产生与对应于所确定的附加信息的各种视觉指示符和/或对象相关联的内容或上下文概要。经处理的信息可以包括与对象相关联的内容(例如网页)或上下文的简要描述,并可以采取不同形式(视觉指示符):文本、照片、图标、标志、缩略图和其它类型的内容项。例如,对象的视觉性质(尺寸、颜色等)可以被改变以便提供向用户中继所确定的附加信息的视觉指示符。
在框510处,可以利用对应的附加内容或上下文概要信息来增强(例如扩充)用户接口的基本信息。例如,可以将内容或上下文概要信息放置成邻近于用户接口的容器中的一个或多个对象。在框512处,可以呈现扩充的用户接口以在用户接口上显示。
图6图示了依照各种实施例的用于实现用户接口增强的方面的环境(例如系统)600的示例。如将领会的,尽管出于解释的目的而使用基于Web的环境,但是可以在适当时使用不同环境以实现各种实施例。环境600包括一个或多个电子客户端(用户)设备660(A)-660(N),其可以包括可操作成通过适当的网络620发送和接收请求、消息或信息并将信息传送回到设备660(A)-660(N)的用户665的任何适当设备。这样的客户端设备的示例可以包括但不限于个人计算机、手机、手持式消息收发设备、膝上型计算机、机顶盒、个人数据助理、电子书阅读器、平板、游戏控制台等。这些设备还可以包括出于诸如开发和数据库管理之类的目的而运行多种商业上可用的操作系统和其它已知应用中的任一种的工作站。这些设备还可以包括其它电子设备,诸如虚拟终端、瘦客户端、游戏系统和能够经由网络进行通信的其它设备。设备可以是娱乐系统的一部分,例如用在诸如汽车、火车、飞机等的运输系统中的娱乐系统。例如,用户设备660(A)-660(N)可以包括处理器652和用于存储处理器可执行指令(诸如,数据文件661、操作系统662和诸如音乐播放器应用之类的一个或多个应用664)的存储器654。
设备还可以包括以下元件中的至少一个或全部两个:被设计成实现外围组件与环境(系统)600的交互的输入/输出接口651;和通信接口656。在各种实施例中,输入/输出接口651可以包括但不限于显示器(例如液晶显示器、触摸屏显示器等)、扬声器、麦克风、静物相机、视频摄像机、闪光灯(例如发光二极管闪光)和键盘。对于包括支持触摸屏特征的显示器的实施例,系统600可以包括用于促进显示器的控制的触摸屏控制器。如以上讨论的,操作系统662和/或应用664可以包括被配置成增强被呈现于用户设备660(A)-660(N)上的应用的用户接口的UI增强服务。
网络620可以包括任何适当的网络,其包括内联网、互联网、蜂窝网络、局域网或任何其它这样的网络或其组合。用于这样的系统的组件可以至少部分地取决于所选择的网络和/或环境的类型。用于经由这样的网络进行通信的协议和组件是众所周知的且在本文中将不详细讨论。通过网络进行的通信可以通过有线或无线连接及其组合而实现。在该示例中,网络包括互联网,并且环境包括用于接收请求并响应于此而供应内容的一个或多个Web服务器(内容提供商服务器)625,尽管对于其它网络,可以使用服务于类似目的的替换设备,如对本领域普通技术人员将显而易见的那样。
说明性环境(系统)600可以包括至少一个应用服务器605,其包括或关联于可连接至通信接口690和存储器632的一个或多个处理器630、输入设备640、输出设备642、可移除存储装置634和非可移除存储装置636。如以上讨论的,在一个实施例中,UI增强服务可以驻留在服务器605上并可以在客户端设备660(A)-660(N)或服务器605上执行。因此,存储器632可以包括UI增强服务模块646。
所有请求和响应的处置(例如针对由UI增强服务发起的信息的请求)以及客户端设备660(A)-660(N)与应用服务器605之间的内容递送可以由一个或多个内容提供商Web服务器625处置。内容数据储存672可以与服务器625相关联。数据储存672可以通过与其相关联的逻辑可操作成从服务器625接收指令并响应于此获取、更新或以其它方式处理数据。在一个示例中,UI增强服务可以提交针对与应用的用户接口的容器的一特定对象(多个对象)相关联的内容的请求。在实施例中,UI增强服务可以由在用户设备660(A)-660(N)上执行的指令提供。
每一个服务器可以包括提供针对该服务器的一般管理和操作的可执行程序指令的操作系统,并典型地可以包括存储指令的计算机可读介质,所述指令当由服务器的处理器执行时允许服务器执行其预期功能。针对操作系统和服务器一般功能的合适实现是已知的或商业上可用的,且容易由本领域普通技术人员实现,特别是鉴于本文中的公开内容。
环境600可以包括如以上讨论的多种数据储存和其它存储器以及存储介质。这些可以驻留在多种位置中,诸如在对一个或多个计算机来说本地(和/或驻留在一个或多个计算机中)或者相对于跨网络的任何或所有计算机而言远程的存储介质上。用于执行归于计算机、服务器或其它网络设备的功能的任何必要文件可以在适当时被本地和/或远程存储。存储介质可以包括诸如盘驱动器之类的非暂时性介质、光学存储设备和诸如随机存取存储器(“RAM”)或只读存储器(“ROM”)之类的固态存储设备、闪速存储器或其它存储器技术、CD-ROM、数字多功能盘(DVD)或其它光学存储装置、磁盒、磁带、磁盘存储装置或其它磁存储设备,以及可移除介质设备、存储卡、闪速卡或可以用于存储所期望的信息且可以被处理器访问的任何其它介质。
环境600可以是利用经由通信链路互连的若干计算机系统和组件的分布式计算环境,其使用一个或多个计算机网络或直接连接。然而,本领域普通技术人员将领会到,这样的系统可以同样良好地操作在具有比图6中图示的更少或更多数目的组件的系统中。因此,图6中的环境600的描绘应当被视为在本质上是说明性的,而不限于本公开的范围。
本文所描述的实施例包括具有存储在其上的可执行指令的计算设备可读存储介质,所述指令响应于由计算设备的执行而使计算设备:确定用于扩充与在计算设备上执行的应用的用户接口的容器的至少一个对象相关联的基本信息的附加信息,该附加信息与该至少一个对象相关联,并且确定是响应于与应用、应用的用户接口的容器或容器的至少一个对象相关联的事件而执行的;以及利用附加信息或对应于附加信息的一个或多个指示符扩充容器的显示中的至少一个对象的基本信息。
使计算设备扩充容器的显示中的至少一个对象的基本信息的可执行指令还响应于由计算设备的执行而使计算设备改变与容器的显示或至少一个对象相关联的视觉性质或行为。
响应于由计算设备的执行而使计算设备确定附加信息的可执行指令还响应于由计算设备的执行而使计算设备从本地信息资源或所连接的信息资源中的至少一个收集信息,其中本地信息资源与应用或本地可访问数据储存相关联,并且其中所连接的信息资源是计算设备经由计算机网络可访问的。
所连接的信息资源可以包括计算设备可访问的服务器或一个或多个社交联网资源中的至少一个。应用可以包括电子邮件应用,容器包括电子邮件文件夹,至少一个对象包括至少一个电子邮件消息,并且事件包括电子邮件通信的接收。附加信息可以包括与至少一个电子邮件消息相关联的一个或多个属性,该一个或多个属性包括电子邮件消息的重要性的指示、电子邮件消息的发送者的姓名、被包括在电子邮件消息的主题行中的主题信息或者与电子邮件消息的内容相关联的内容信息。
应用可以是音乐播放器应用,其中容器可以包括与音乐播放器应用相关联的至少一个播放列表,其中至少一个对象可以包括该至少一个播放列表上的媒体项,并且其中事件可以包括将该至少一个播放列表的显示从常规模式切换到增强模式。附加信息可以包括与媒体项相关联的媒体信息或与媒体项相关联的功能特性中的至少一个。媒体信息包括与媒体项的用户相关联的用户信息,并且其中功能特性包括媒体项的节奏测量。
本文所描述的实施例还包括计算设备,其包括处理器和用户接口增强应用,所述用户接口增强应用由所述处理器操作以:检测与在计算设备上执行的应用、应用的用户接口的容器或容器的至少一个对象相关联的事件;确定用于扩充与应用的用户接口的容器的至少一个对象相关联的基本信息的附加信息,所述附加信息与所述至少一个对象相关联;以及利用所述附加信息或对应于所述附加信息的一个或多个指示符扩充容器的显示中的至少一个对象的基本信息。
用户接口增强应用还可以由处理器操作以改变与容器的显示或至少一个对象相关联的视觉性质或行为或者从本地信息资源或所连接的信息资源中的至少一个收集附加信息。
与应用相关联的事件可以包括电子邮件消息的接收或至少一个对象的访问中的至少一个,其中对象可以是电子邮件文件夹并且应用可以是电子邮件应用。所连接的信息资源可以包括网站,并且附加信息可以包括与网站相关联的内容。
应用可以是音乐播放器应用,其中容器可以包括与音乐播放器应用相关联的至少一个播放列表,其中至少一个对象可以包括所述至少一个播放列表上的媒体项,并且其中事件可以包括将所述至少一个播放列表的显示从常规模式切换到增强模式。附加信息可以包括与媒体项相关联的社交信息或与媒体项相关联的功能特性中的至少一个。
用户接口增强应用还可以由处理器操作以针对显示而呈现通过利用视觉指示符扩充至少一个对象的基本信息而增强的用户接口。计算设备可以选自以下各项中的一个:智能电话、移动互联网设备、膝上型计算机、台式计算机、服务器、机顶盒或游戏控制台、以及与运输系统相关联的娱乐系统。
本文所描述的实施例还包括用于增强应用的用户接口的计算机实现的方法,所述方法包括:利用计算设备检测与在计算设备上执行的应用、应用的用户接口的容器或容器的至少一个对象相关联的事件;利用计算设备确定用于扩充与应用的用户接口的容器的至少一个对象相关联的基本信息的附加信息,所述附加信息与至少一个对象相关联;以及利用计算设备,利用所述附加信息或对应于所述附加信息的一个或多个指示符扩充容器的显示中的至少一个对象的基本信息。
所述方法还可以包括改变与容器的显示或至少一个对象相关联的视觉性质以及从本地信息资源或所连接的信息资源中的至少一个收集附加信息。本地资源可以是与计算设备相关联的高速缓冲存储器。所连接的信息资源可以包括至少一个网站、计算设备可访问的服务器上的数据储存或者存储在不同的计算设备上且可由计算设备访问的数据的集合。
尽管出于描述的目的已经在本文中说明和描述了某些实施例,但是在不脱离本公开的范围的情况下,被预计为实现相同目的的许多种替换和/或等同实施例或实现可以取代所示出和所描述的实施例。本申请旨在覆盖本文所讨论的实施例的任何改编或变型。

Claims (21)

1.一种计算设备,包括:
处理器;以及
用户接口增强应用,所述用户接口增强应用由所述处理器操作以:
  检测与在所述计算设备上执行的应用、所述应用的用户接口的容器或所述容器的至少一个对象相关联的事件;
  确定用于扩充与所述应用的所述用户接口的所述容器的所述至少一个对象相关联的基本信息的附加信息,所述附加信息与所述至少一个对象相关联;以及
  利用所述附加信息或对应于所述附加信息的一个或多个指示符扩充所述容器的显示中的所述至少一个对象的所述基本信息。
2.权利要求1的计算设备,其中所述用户接口增强应用还由所述处理器操作以改变与所述容器的所述显示或所述至少一个对象相关联的视觉性质或行为。
3.权利要求1的计算设备,其中所述用户接口增强应用还由所述处理器操作以从本地信息资源或所连接的信息资源中的至少一个收集所述附加信息。
4.权利要求1的计算设备,其中与所述应用相关联的事件包括电子邮件消息的接收或所述至少一个对象的访问中的至少一个,其中对象是电子邮件文件夹并且应用是电子邮件应用。
5.权利要求1的计算设备,其中所述附加信息包括与至少一个电子邮件消息相关联的一个或多个属性,所述一个或多个属性包括电子邮件消息的重要性的指示、电子邮件消息的发送者的姓名、被包括在电子邮件消息的主题行中的主题信息或者与电子邮件消息的内容相关联的内容信息。
6.权利要求1的计算设备,其中所述应用是音乐播放器应用,其中所述容器包括与所述音乐播放器应用相关联的至少一个播放列表,其中所述至少一个对象包括所述至少一个播放列表上的媒体项,其中所述事件包括将所述至少一个播放列表的显示从常规模式切换到增强模式,并且其中所述附加信息包括与所述媒体项相关联的社交信息或与所述媒体项相关联的功能特性中的至少一个。
7.权利要求1-6中任一项的计算设备,其中所述用户接口增强应用还由所述处理器操作以处理所述附加信息以便产生对应于所述附加信息的视觉指示符或行为,并且其中所述用户接口增强应用还由所述处理器操作以针对显示而呈现通过利用所述视觉指示符扩充所述至少一个对象的基本信息而增强的用户接口。
8.权利要求7的计算设备,其中所述计算设备选自以下各项中的一个:智能电话、移动互联网设备、膝上型计算机、台式计算机、服务器、机顶盒或游戏控制台、以及与运输系统相关联的娱乐系统。
9.一种用于增强应用的用户接口的计算机实现的方法,所述方法包括:
利用计算设备检测与在所述计算设备上执行的应用、所述应用的用户接口的容器或所述容器的至少一个对象相关联的事件;
利用所述计算设备确定用于扩充与所述应用的所述用户接口的所述容器的所述至少一个对象相关联的基本信息的附加信息,所述附加信息与所述至少一个对象相关联;以及
利用所述计算设备,利用所述附加信息或对应于所述附加信息的一个或多个指示符扩充所述容器的显示中的所述至少一个对象的所述基本信息。
10.权利要求9的计算机实现的方法,还包括:通过所述计算设备改变与所述容器的所述显示或所述至少一个对象相关联的视觉性质。
11.权利要求9的计算机实现的方法,还包括:通过所述计算设备从本地信息资源或所连接的信息资源中的至少一个收集所述附加信息,其中所述本地信息资源与所述应用或本地可访问数据储存相关联,并且其中所述所连接的信息资源是所述计算设备经由计算机网络可访问的。
12.权利要求11的计算机实现的方法,其中所述所连接的信息资源包括所述计算设备可访问的服务器或一个或多个社交联网资源中的至少一个。
13.权利要求9的计算机实现的方法,其中所述应用包括电子邮件应用,所述容器包括电子邮件文件夹,所述至少一个对象包括至少一个电子邮件消息,并且所述事件包括电子邮件通信的接收。
14.权利要求13的计算机实现的方法,其中所述附加信息包括与所述至少一个电子邮件消息相关联的一个或多个属性,所述一个或多个属性包括电子邮件消息的重要性的指示、电子邮件消息的发送者的姓名、被包括在电子邮件消息的主题行中的主题信息或者与电子邮件消息的内容相关联的内容信息。
15.权利要求9的计算机实现的方法,其中所述应用是音乐播放器应用,其中所述容器包括与所述音乐播放器应用相关联的至少一个播放列表,其中所述至少一个对象包括所述至少一个播放列表上的媒体项,并且其中所述事件包括将所述至少一个播放列表的显示从常规模式切换到增强模式。
16.权利要求15的计算机实现的方法,其中所述附加信息包括与所述媒体项相关联的媒体信息或与所述媒体项相关联的功能特性中的至少一个。
17.权利要求16的计算机实现的方法,其中所述媒体信息包括与所述媒体项的用户相关联的用户信息,并且其中所述功能特性包括所述媒体项的节奏测量。
18.至少一种具有存储在其上的可执行指令的计算设备可读存储介质,所述可执行指令响应于由计算设备的执行而使所述计算设备执行权利要求9-18的方法中的任一个。
19.一种设备,包括:
用于检测与在所述设备上执行的应用、所述应用的用户接口的容器或所述容器的至少一个对象相关联的事件的装置;
用于确定用于扩充与所述应用的所述用户接口的所述容器的所述至少一个对象相关联的基本信息的附加信息的装置,所述附加信息与所述至少一个对象相关联;以及
用于利用所述附加信息或对应于所述附加信息的一个或多个指示符扩充所述容器的显示中的所述至少一个对象的所述基本信息的装置。
20.权利要求19的设备,还包括:用于改变与所述容器的所述显示或所述至少一个对象相关联的视觉性质的装置。
21.权利要求19或20的设备,还包括:用于从本地信息资源或所连接的信息资源中的至少一个收集所述附加信息的装置,其中所述本地信息资源与所述应用或本地可访问数据储存相关联,并且其中所述所连接的信息资源是计算设备经由计算机网络可访问的。
CN201380039001.0A 2012-08-22 2013-08-06 利用附加信息扩充用户接口 Active CN104471536B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/591742 2012-08-22
US13/591,742 US9218167B2 (en) 2012-08-22 2012-08-22 Augmenting user interface with additional information
PCT/US2013/053831 WO2014031333A1 (en) 2012-08-22 2013-08-06 Augmenting user interface with additional information

Publications (2)

Publication Number Publication Date
CN104471536A true CN104471536A (zh) 2015-03-25
CN104471536B CN104471536B (zh) 2018-03-06

Family

ID=50149213

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380039001.0A Active CN104471536B (zh) 2012-08-22 2013-08-06 利用附加信息扩充用户接口

Country Status (4)

Country Link
US (1) US9218167B2 (zh)
EP (1) EP2888675A4 (zh)
CN (1) CN104471536B (zh)
WO (1) WO2014031333A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140354680A1 (en) * 2013-05-31 2014-12-04 Blackberry Limited Methods and Devices for Generating Display Data
US9774561B1 (en) * 2014-03-10 2017-09-26 Amazon Technologies, Inc. Customized electronic document distribution
CN106302082A (zh) * 2015-05-14 2017-01-04 阿里巴巴集团控股有限公司 电子邮件处理方法、客户端及服务器
US11321333B2 (en) * 2016-04-26 2022-05-03 Microsoft Technology Licensing, Llc Auto-enrichment of content
US11328238B2 (en) 2019-04-01 2022-05-10 Microsoft Technology Licensing, Llc Preemptively surfacing relevant content within email
US11210057B2 (en) * 2020-01-10 2021-12-28 James Matthew Gielarowski Multi-User Media Player GUI

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030233419A1 (en) * 2002-01-08 2003-12-18 Joerg Beringer Enhanced email management system
CN1558628A (zh) * 2004-01-15 2004-12-29 广州市华仕科技有限公司 移动电子邮件系统
US20100299394A1 (en) * 2009-05-20 2010-11-25 International Business Machines Corporation User-configured alternate email rendering
US20110283236A1 (en) * 2010-01-26 2011-11-17 Francois Beaumier Digital jukebox device with improved user interfaces, and associated methods
US20120023416A1 (en) * 2002-09-18 2012-01-26 Justin Khoo Enhancement of e-mail client user interfaces and e-mail message formats

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060168549A1 (en) * 2005-01-25 2006-07-27 Eric Chan User interfaces and methods for displaying attributes of objects and accessing content
EP1777611B1 (en) 2005-10-11 2010-04-07 Research In Motion Limited System and method for organizing application indicators on an electronic device
US7954060B2 (en) * 2007-03-29 2011-05-31 International Business Machines Corporation Accentuated graphical user interface
US20080244442A1 (en) 2007-03-30 2008-10-02 Microsoft Corporation Techniques to share information between application programs
JP5121828B2 (ja) * 2007-07-04 2013-01-16 アイマトリックス株式会社 電子メール処理装置、電子メール処理方法、電子メール処理プログラムおよび電子メール処理システム
EP2240862A4 (en) * 2007-12-18 2012-08-08 Lucent Technologies Inc METHODS AND SYSTEMS FOR MANAGING EXPIRATION IN ELECTRONIC MESSAGING SYSTEMS
US8032602B2 (en) * 2009-02-18 2011-10-04 International Business Machines Corporation Prioritization of recipient email messages
US10025458B2 (en) * 2010-04-07 2018-07-17 Apple Inc. Device, method, and graphical user interface for managing folders
EP2403225A1 (en) 2010-06-30 2012-01-04 Research In Motion Limited Methods and apparatus for visually supplementing a graphical user interface
US8312096B2 (en) * 2010-12-08 2012-11-13 Google Inc. Priority inbox notifications and synchronization for mobile messaging application
US20120311444A1 (en) * 2011-06-05 2012-12-06 Apple Inc. Portable multifunction device, method, and graphical user interface for controlling media playback using gestures
US8943071B2 (en) * 2011-08-23 2015-01-27 At&T Intellectual Property I, L.P. Automatic sort and propagation associated with electronic documents
US9009240B2 (en) * 2011-12-15 2015-04-14 Microsoft Corporation Dynamic control of an electronic message system
US8886734B2 (en) * 2012-02-03 2014-11-11 Apple Inc. Email mailbox management with sender-specific message lists

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030233419A1 (en) * 2002-01-08 2003-12-18 Joerg Beringer Enhanced email management system
US20120023416A1 (en) * 2002-09-18 2012-01-26 Justin Khoo Enhancement of e-mail client user interfaces and e-mail message formats
CN1558628A (zh) * 2004-01-15 2004-12-29 广州市华仕科技有限公司 移动电子邮件系统
US20100299394A1 (en) * 2009-05-20 2010-11-25 International Business Machines Corporation User-configured alternate email rendering
US20110283236A1 (en) * 2010-01-26 2011-11-17 Francois Beaumier Digital jukebox device with improved user interfaces, and associated methods

Also Published As

Publication number Publication date
WO2014031333A1 (en) 2014-02-27
EP2888675A4 (en) 2016-04-06
US20140059567A1 (en) 2014-02-27
CN104471536B (zh) 2018-03-06
US9218167B2 (en) 2015-12-22
EP2888675A1 (en) 2015-07-01

Similar Documents

Publication Publication Date Title
CN103809905B (zh) 用于管理消息的方法和设备和用于发送消息的方法和设备
US20180143748A1 (en) Smart carousel of image modifiers
TWI569198B (zh) 用於經擴充的通訊服務的動態最小化導覽欄
CN113348650B (zh) 交互信息界面的显示方法、系统及机器可读存储介质
US8949858B2 (en) Augmenting user interface elements with information
CN104471536A (zh) 利用附加信息扩充用户接口
US20130139113A1 (en) Quick action for performing frequent tasks on a mobile device
CN104885048A (zh) 用于管理数字内容项的系统和方法
US20110258575A1 (en) Displaying large datasets in a browser environment
CN105144094A (zh) 用于管理应用当中的导航的系统和方法
US20220231978A1 (en) Smart attachment of cloud-based files to communications
CN104067211A (zh) 使用直接操纵进行自信的项目选择
AU2014288039A1 (en) Remote operation of applications using received data
CN109074548B (zh) 对内容的自动丰富
US11531646B2 (en) Facilitating generation and utilization of group folders
US9509648B2 (en) Associating sentiment with objects presented via social media
US20160283083A1 (en) Intelligent interactive screen capture
WO2018040547A1 (zh) 一种创建群组的方法及装置
GB2511018A (en) Data display device, data display method and program
US20180225025A1 (en) Technologies for providing user centric interfaces
US10152496B2 (en) User interface device, search method, and program
US11455081B2 (en) Message thread prioritization interface
US9647970B2 (en) Sorting electronic mail
KR102368945B1 (ko) 외부 콘텐츠 아이템과의 인코딩된 연관을 제공하는 기법
US11630877B1 (en) Custom visual codes for network links

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant