CN110678842B - 动态生成针对与操作系统用户界面元素的用户交互的任务快捷方式 - Google Patents

动态生成针对与操作系统用户界面元素的用户交互的任务快捷方式 Download PDF

Info

Publication number
CN110678842B
CN110678842B CN201780091333.1A CN201780091333A CN110678842B CN 110678842 B CN110678842 B CN 110678842B CN 201780091333 A CN201780091333 A CN 201780091333A CN 110678842 B CN110678842 B CN 110678842B
Authority
CN
China
Prior art keywords
computing device
application
task
operating system
user interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780091333.1A
Other languages
English (en)
Other versions
CN110678842A (zh
Inventor
蒂姆·万特兰
阿塞拉·吉瓦卡·拉纳维拉·古纳瓦达纳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN110678842A publication Critical patent/CN110678842A/zh
Application granted granted Critical
Publication of CN110678842B publication Critical patent/CN110678842B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种方法,所述方法包括:输出第一图形用户界面,所述第一图形用户界面包括与能够由所述计算装置执行的多个应用中的特定应用相关联的应用信息。所述方法还包括:接收与命令相对应的用户输入的指示,所述命令与操作系统相关联。所述方法进一步包括:至少部分地基于被显示为所述第一图形用户界面的一部分的所述应用信息生成针对能够由所述多个应用中的一个或多个相应应用执行的动作的至少一个任务快捷方式,所述多个应用能够由所述计算装置执行。所述方法包括:输出第二图形用户界面,所述第二图形用户界面包括与所述至少一个任务快捷方式相对应的图形元素。

Description

动态生成针对与操作系统用户界面元素的用户交互的任务快 捷方式
背景技术
通常,为了使用移动计算装置(诸如,智能手机)撰写电子邮件,获得到某个位置的方向或执行另一个任务,用户必须在最终完成预期任务之前执行几个动作,诸如,启动相关的应用、选择特定用户界面特征和选择收件人或指定其它相关信息。另外,用户可能需要通过选择用于切换应用或导航到主页的图标来从一个应用切换到另一个应用,从一组应用中选择相关的应用并且然后在相关的应用内执行动作。此外,用户必须在每次执行任务时执行任务的每个动作。这种交互可能是乏味的、重复的和耗时的。
发明内容
通常,所公开的主题涉及使操作系统能够动态地确定与用户想要执行的应用相关联的动作的技术。例如,计算装置的操作系统可以响应于接收到与命令相对应的用户输入确定与应用相关联的一个或多个任务,该命令与计算装置的操作系统相关联。作为一个示例,计算装置可以显示图形用户界面,该图形用户界面包括与特定应用相关联的应用信息和与命令相对应的图形元素,该命令与操作系统相关联。例如,图形用户界面可以包括互联网浏览器的信息(例如,文本和/或图像)和与操作系统相对应的图形元素,诸如,返回图标、主页图标和应用切换图标(也被称为任务切换图标)。
计算装置可以接收选择图形用户界面的返回图标、主页图标或应用切换图标的用户输入。作为响应,操作系统可以使计算装置显示快捷菜单,该快捷菜单包括与被显示为图形用户界面的一部分的应用信息相关联的预测任务中的一个或多个。计算装置可以接收选择任务中的一个任务的用户输入并且然后可以自动开始执行与所选任务相对应的动作。例如,响应于接收到选择预定行程的快捷方式的用户输入,操作系统可以自动执行旅行社应用并且显示用于搜索航班的用户界面,其中,目的地地址预先填入了在早期图形用户界面的应用信息中显示的目的地(诸如,城市、机场等)。
通过预测用户可能想要执行的任务并且在接收到指示与操作系统相关联的命令(例如,指示用户改变应用的意图)的用户输入时显示相应的任务快捷方式,计算装置可以使用户能够选择与特定任务相关联的图标,而不是搜索适当的应用和执行任务的每个动作。以这种方式,技术可以使计算装置能够减少执行任务所需的步骤数量。此外,本公开的技术可以减少执行各种任务所需的用户输入数量,这可以简化用户体验并且可以降低计算装置的功耗(假设需要处理的用户输入更少),从而降低了功耗并且可以改进计算装置的整体操作。
在一个示例中,方法包括:通过计算装置并且为了在存在敏感显示装置处进行显示,输出第一图形用户界面,该第一图形用户界面包括与能够由计算装置执行的多个应用中的特定应用相关联的应用信息。方法包括:通过计算装置并且从存在敏感显示装置接收与命令相对应的用户输入的指示,该命令与操作系统相关联。方法还包括:响应于接收到用户输入的指示,通过计算装置至少部分地基于被显示为第一图形用户界面的一部分的应用信息生成针对能够由多个应用中的一个或多个相应应用执行的动作的至少一个任务快捷方式,该多个应用能够由所述计算装置执行。方法进一步包括:通过计算装置,输出第二图形用户界面以由显示装置显示,该第二图形用户界面包括与至少一个任务快捷方式相对应的图形元素。
在另一个示例中,计算装置包括一个或多个处理器、存在敏感显示装置和存储一个或多个模块的存储装置。一个或多个模块能够由一个或多个处理器执行以为了在存在敏感显示装置处进行显示而输出第一图像用户界面,该第一图形用户界面包括与能够由计算装置执行的多个应用中的特定应用相关联的应用信息。一个或多个模块能够由一个或多个处理器执行以从存在敏感显示装置接收与命令相对应的用户输入的指示,该命令与操作系统相关联,并且响应于接收到用户输入的指示,至少部分地基于被显示为第一图形用户界面的一部分的应用信息,生成针对能够由多个应用中的一个或多个相应应用执行的动作的至少一个任务快捷方式,该多个应用能够由计算装置执行。一个或多个模块能够由一个或多个处理器执行以为了通过显示装置显示而输出第二图形用户界面,该第二图形用户界面包括与至少一个任务快捷方式相对应的图形元素。
在另一个示例中,计算机可读存储介质编码有指令。指令在被执行时使计算装置的一个或多个处理器为了在存在敏感显示装置处进行显示而输出第一图形用户界面,该第一图形用户界面包括与能够由计算装置执行的多个应用中的特定应用相关联的应用信息。指令在被执行时也使计算装置的一个或多个处理器从存在敏感显示装置接收与命令相对应的用户输入的指示,该命令与操作系统相关联,并且响应于接收到用户输入的指示,至少部分地基于被显示为第一图形用户界面的一部分的应用信息,生成针对能够由多个应用中的一个或多个相应应用执行的动作的至少一个任务快捷方式,该多个应用能够由计算装置执行。指令在被执行时进一步使计算装置的一个或多个处理器输出第二图形用户界面以由显示装置显示,该第二图形用户界面包括与至少一个任务快捷方式相对应的图形元素。
一个或多个示例的细节陈述于附图和下面的描述中。本公开的其它特征、目的和优点通过描述和附图以及通过权利要求书将变得显而易见。
附图说明
图1A至图1C是图示了根据本公开的一个或多个方面的提供动态生成的任务快捷方式的示例计算装置和图形用户界面的概念图。
图2是图示了根据本公开的一个或多个方面的配置为动态生成任务快捷方式的示例计算装置的框图。
图3A至图3C是图示了根据本公开的一个或多个方面的示例图形用户界面的概念图,该示例图形用户界面由配置为动态生成任务快捷方式的示例计算装置呈现。
图4A至图4B是图示了根据本公开的一个或多个方面的示例图形用户界面的概念图,该示例图形用户界面由配置为动态生成任务快捷方式的示例计算装置呈现。
图5A至图5C是图示了根据本公开的一个或多个方面的示例图形用户界面的概念图,该示例图形用户界面由配置为动态生成任务快捷方式的示例计算装置呈现。
图6是图示了根据本公开的一个或多个方面的示例操作的流程图,该操作由配置为动态生成任务快捷方式的示例计算装置执行。
具体实施方式
图1A至图1C是图示了根据本公开的一个或多个方面的提供动态生成的任务快捷方式的示例计算装置100和图形用户界面120A至120C的概念图。在图1A的示例中,计算装置100可以包括各种类型的计算装置中的一种或多种、可以是各种类型的计算装置中的一种或多种或可以是各种类型的计算装置中的一种或多种的一部分,诸如,移动电话(包括智能手机)、平板计算机、上网本、膝上型计算机、个人数字助理(“PDA”)、台式计算机、可穿戴计算装置(例如,手表、眼镜等)、电子阅读器、电视机、汽车导航和娱乐系统和/或其它类型的装置。在其它示例中,计算装置100可以是一个或多个处理器,例如,上面描述的计算装置中的一种或多种的一个或多个处理器。
计算装置100包括存在敏感显示器(PSD)140,该PSD 140可以充当计算装置100的相应输入和/或输出装置。PSD 140可以使用各种技术来实施。例如,PSD 140可以充当输入装置,该输入装置使用存在敏感输入屏幕,诸如,电阻式触摸屏、表面声波触摸屏、电容式触摸屏、投射式电容触摸屏、压力敏感屏幕、声波脉冲识别触摸屏或其它压力敏感显示技术。PSD 140也可以充当输出(例如,显示)装置,该输出(例如,显示)装置使用任何一种或多种显示装置,诸如,能够将可见信息输出至计算装置100的用户的液晶显示器(LCD)、点阵显示器、发光二极管(LED)显示器、有机发光二极管(OLED)显示器、电子墨水或类似的单色或彩色显示器。
PSD 140可以接收来自相应计算装置100的用户的触觉输入。PSD 140可以检测一个或多个用户输入(例如,用户用手指或手写笔触摸或指向PSD 140的一个或多个位置)并且输出用户输入的一个或多个指示(例如,描述输入的位置和/或持续时间的信息)。PSD140可以将信息输出至用户作为用户界面(例如,图形用户界面114),该用户界面可以与计算装置100所提供的功能相关联。例如,PSD 140可以呈现与在计算装置100处执行或可从计算装置100访问的计算平台、操作系统、应用和/或服务的应用或其它特征相关的各种用户界面。
计算装置100包括操作系统150。在一些示例中,操作系统150控制计算装置100的组件的操作。例如,在一个示例中,操作系统150促进应用模块156与计算装置100的各种运行时间库和硬件组件(诸如,存在敏感显示器140)通信。操作系统150也可以在多个应用模块156之间执行各种系统操作或操作。例如,响应于接收到用户输入,操作系统可以执行复制操作、粘贴操作、截图操作、最小化窗口操作、终止活动应用操作或任务切换操作(例如,交换活动应用)。
在这方面,操作系统150可以在计算装置100的底层硬件与应用模块156之间提供接口。操作系统150可以包括在内存的保护区域(可以被称为“系统内存空间”)中执行的内核。内核可以显示接口(诸如,应用程序接口或API),该接口(诸如,应用程序接口或API)包括应用模块156能够调用来与底层硬件交互的功能。内核可以管理与底层硬件相关的中断和异常,分配供应用模块156使用的内存,并且通常支持执行环境,该执行环境支持应用模块156的执行。
内核可以分配内存并且通常以这样一种方式维护执行环境:允许应用模块156中的单独应用模块独立于应用模块156中的其它应用模块执行,使得一个应用模块156的故障通常不会影响其它应用模块156执行。内核可以分配供应用模块156使用的内存,从而创建与系统内存空间分开的所谓的“用户内存空间”或“应用内存空间”。内核也可以提供用于促进多个应用模块156同时执行的各种机制,从而提供场境切换功能和支持多个应用模块156同时执行的其它功能。以这种方式,操作系统150可以提供执行环境(例如,用户内存空间),在该执行环境(例如,用户内存空间)中,多个应用模块156可以独立和同时执行以通过操作系统150所提供的服务和功能提供附加服务和功能。
如图1的示例进一步所示的,计算装置100的操作系统150可以包括用户界面(UI)模块152、输入处理模块153和任务预测模块154。计算装置100可以进一步包括一个或多个应用模块156A至156N(统称为“应用模块156”)。模块152、153、154、156可以使用硬件、硬件和软件、硬件和固件或它们的任何组合执行所描述的操作。计算装置100可以用多个处理器或多个装置执行模块152、153、154、156。计算装置100可以执行模块152、153、154、156作为在底层硬件上执行的虚拟机。
应用模块156代表可以由计算装置100执行的各种独立应用和服务。应用模块156的示例包括映射或导航应用、日历应用、助理或预测引擎、搜索引擎、运输服务应用(例如,公共汽车或火车追踪应用)、社交媒体应用、游戏应用、电子邮件应用、消息传递应用、互联网浏览器应用、键盘应用或可以在计算装置100处执行的任何其它应用。
操作系统150的UI模块152可以代表由操作系统150公开的应用编程接口(API)。UI模块152可以代表配置为处理与PSD 140的用户交互的模块和计算装置100的其它组件。在一些示例中,UI模块152可以使PSD 140显示用户界面作为计算装置100的用户的视图输出并且/或在PSD 140处提供输入。例如,一个或多个应用模块156(例如,互联网浏览器应用模块156A)可以呼叫或调用UI模块152来呈现图形用户界面。例如,UI模块152可以使PSD 140显示与互联网浏览器应用模块156A相关联的图形用户界面,诸如,图1A的图形用户界面120A。例如,UI模块152可以用指示图形用户界面120A的信息来加载与PSD 140相关联的帧缓冲器。PSD 140可以从帧缓冲器检索指示图形用户界面120A的信息并且显示图形用户界面120A。
图形用户界面120A包括应用信息区域122和操作系统区域124。应用信息区域122可以包括与互联网浏览器应用模块156A相关联的应用信息(例如,文本和/或图像)。如图1A所示,应用信息区域122包括文章,该文章包括图像和文本描述。操作系统区域124可以包括一个或多个图形元素,该一个或多个图形元素与和操作系统150相关联的命令(例如,与和应用模块156A相关联的命令截然相反)相对应。如图1A所示,操作系统区域124包括多个操作系统图形元素126A至126C(统称为“OS图形元素”)。例如,操作系统图形元素126A可以包括“返回”图标,操作系统图形元素126B可以包括“主页”图标并且操作系统图形元素126C可以包括“任务切换”图标。
在一些情况下,UI模块152可以响应于接收到选择图形元素126A的用户输入将指示之前显示的图形用户界面的信息输出至与PSD 140相关联的帧缓冲器,响应于接收到选择图形元素126B的用户输入将指示主页或默认图形用户界面的图形用户界面的信息输出至与PSD 140相关联的帧缓冲器,或响应于接收到选择图形元素126C的用户输入将指示包括代表一个或多个暂停的(例如,最近使用过的但是不是当前执行的)应用模块156的图形用户界面的信息输出至帧缓冲器。
与用户导航到不同用户界面、搜索特定应用和在应用内执行一个或多个动作以完成任务所需的计算装置相比,根据本公开的技术,计算装置100可以响应于接收到与和操作系统相关联的命令相对应的用户输入(例如,选择显示在操作系统区域124中的图形元素的用户输入)预测用户可能会执行的一个或多个任务。
操作系统150可以接收来自PSD 140的用户输入(例如,滑动、轻击、双击、轻击并且按住等)的指示。例如,PSD 140可以检测在与图形元素126C相对应的位置处的用户输入,并且将用户输入(例如,在PSD 140内指示用户输入的形心位置和/或指示用户输入的信息,诸如,输入位置、输入持续时间、检测到的压力量)的指示存储在系统内存空间中的位置处。PSD 140接下来可以与操作系统150交互以传递用户输入的指示在系统内存空间中的位置。响应于接收到位置,操作系统150可以将中断发给输入处理模块153,该中断指示存储在系统内存空间中的位置处的用户输入的指示可用于进一步处理。
在一些示例中,输入处理模块153可以响应于接收到中断检索来自系统内存空间的用户输入的指示,并且基于用户输入的指示确定用户输入与和操作系统150相关联的命令相对应。例如,输入处理模块153可以基于用户输入的指示确定用户输入是在PSD 140的显示图形元素126中的任何一个的位置处接收到的并且与和操作系统150相关联的命令相对应。例如,用户输入的指示可以包括PSD 140的检测到用户输入的位置的指示,使得输入处理模块153可以将PSD 140的检测到用户输入的位置与识别由PSD 140显示的一个或多个图形元素的位置的信息进行比较。例如,输入处理模块153可以检测用户输入发生在PSD140的位置处,该位置呈现操作系统150生成的信息(例如,而不是从应用模块156A接收到的信息)。以这种方式,在一些示例中,输入处理模块153确定选择图形元素126C的用户输入与和操作系统150相关联的命令相对应。响应于确定用户输入与和操作系统150相关联的命令相对应,输入处理模块153可以将指示对图形元素126C的选择的通知发送至任务预测模块154。
响应于接收到指示对图形元素126C的选择的通知,任务预测模块154可以确定或预测用户可能会执行的一个或多个任务。任务预测模块154可以至少部分地基于被显示为图形用户界面120A的一部分的应用信息确定用户可能会执行的任务。在一些情况下,任务预测模块154可以确定图形用户界面120A包括菲茨罗伊山的图像和描述与菲茨罗伊山相关的活动(例如,登山)的文本。例如,响应于确定图形用户界面120A包括菲茨罗伊山的图像,任务预测模块154可以预测用户可能预订行程并且可以确定帮助用户执行预定行程的一个或多个任务快捷方式。类似地,任务预测模块154可以预测用户可能搜索关于在PSD 140显示的应用信息中描述的活动(例如,登山)的更多信息。
任务预测模块154可以至少部分地基于预测任务和被显示为图形用户界面120A的一部分的应用信息为能够由应用模块156中的相应应用模块执行的一个或多个动作生成一个或多个任务快捷方式。换言之,任务预测模块154可以至少部分地基于被显示为图形用户界面120A的一部分的应用信息确定一个或多个任务快捷方式。在一些示例中,任务预测模块154可以通过识别配置为执行任务的应用和确定要发送给应用的一个或多个参数(例如,被显示为图形用户界面120A的一部分的信息)确定一个或多个任务快捷方式。
任务预测模块154可以确定用于执行预测任务的一个或多个应用模块156。应用模块156的一个或多个应用模块可以注册(例如,在应用文件中)相应应用模块配置来执行的一组一个或多个任务。任务预测模块154可以基于任务注册确定配置为执行预测任务的一个或多个应用。例如,任务预测模块154可以确定旅行社应用模块156B被配置为预订行程,并且购物应用模块156C被配置为搜索和购买商品。
任务预测模块154也可以预测任务快捷方式的一个或多个参数。如贯穿本公开所使用的,任务快捷方式参数指的是要被供给预测应用执行预测任务的信息的特定部分。例如,响应于确定预测任务包括预订行程,任务预测模块154可以确定一个或多个任务快捷方式参数,诸如,行程的起点和/或目的地。类似地,响应于确定预测任务包括购物,任务预测模块154可以确定用于购物的任务快捷方式参数,诸如,要购买的商品的类型(例如,登山装备)。
响应于确定配置为执行任务的一个或多个应用和一个或多个任务快捷方式参数,任务预测模块154可以将关于一个或多个任务快捷方式的信息输出至UI模块152。例如,任务预测模块154可以针对一个或多个预测任务输出信息,该信息指示配置为执行预测任务的应用模块和与预测任务相关联的任务快捷方式参数。
UI模块152可以接收关于相应任务快捷方式的信息并且可以将关于任务快捷方式的信息输出至与PSD 140相关联的帧缓冲器。例如,UI模块152可以将指示图形用户界面120B的信息输出至与PSD 140相关联的帧缓冲器,该图形用户界面120B包括与相应任务快捷方式相关联的任务快捷方式图形元素128A和128B(统称为任务快捷方式图形元素128)。PSD 140可以接收来自帧缓冲器的信息并且可以显示图形用户界面120B。
PSD 140可以检测选择任务快捷方式图形元素128中的一个的用户输入,将指示用户输入的信息存储到系统内存空间的位置,并且将用户输入的指示的位置输出至操作系统150。操作系统150可以将中断发给输入处理模块153,使得输入处理模块153可以从系统内存空间检索用户输入的指示。输入处理模块153可以确定用户输入与对特定任务快捷方式的选择相对应并且将信息输出至UI模块152,该信息指示对图形元素126中的特定图形元素的选择。例如,用户输入的指示可以包括PSD 140的检测到用户输入的位置的指示,使得输入处理模块153可以将PSD 140的检测到用户输入的位置与识别PSD 140显示的一个或多个图形元素的位置的信息进行比较。在一些示例中,输入处理模块153可以确定用户输入与对任务快捷方式图形元素128B的选择相对应并且可以将信息输出至UI模块152,该信息指示用户选择的任务快捷方式图形元素128B。
响应于接收到对任务快捷方式图形元素128B的选择的指示,UI模块152可以执行与任务快捷方式图形元素128B相关联的应用。例如,UI模块152可以执行旅行社应用模块156B并且可以将与任务快捷方式图形元素128B相关联的任务快捷方式参数发送至旅行社应用模块156B。旅行社应用模块156B可以将信息发送至UI模块152,该信息指示与旅行社应用模块156B相关联的图形用户界面120C。UI模块152可以将指示图形用户界面120C的信息发送至帧缓冲器。PSD 140可以从帧缓冲器检索指示图形用户界面120C的信息并且显示图形用户界面120C。如图1C所示,元素128图形用户界面120C包括目的地字段,该目的地字段是基于显示在图形用户界面120B中的应用信息来预填充的。换言之,在一些示例中,图形用户界面120C的目的地字段是用城市“El Chalten”来预填充的。
除了需要用户点击几次屏幕、滚动许多应用图标和通过与特定应用交互执行附加动作之外,计算装置100还可以响应于接收到与执行操作系统命令的命令相对应的用户输入预测用户可能会执行的一个或多个任务。以这种方式,计算装置可以减少用户和计算装置所执行的动作数量,这可以减少计算装置接收到的输入数量并且更快速地执行任务,从而降低功耗和提高电池寿命。
图2是图示了根据本公开的一个或多个方面的配置为动态生成任务快捷方式的示例计算装置的框图。计算装置200是图1的计算装置100的更详细的示例。图2只图示了计算装置200的一个特定示例,并且计算装置200的许多其它示例可以在其它情况下使用并且可以包括被包括在示例计算装置200中的组件的子集或可以包括图2未示出的附加组件。
如图2的示例所示,计算装置200包括一个或多个处理器230、一个或多个输入组件242、一个或多个输出组件244、一个或多个通信单元246、一个或多个存储装置248和存在敏感显示器240。计算装置200的存储装置248包括操作系统250和一个或多个应用模块256A至256N(统称为应用模块256)。通信信道249可以将组件230、240、242、244、246和/或248中的每一个都互相连接以进行组件间通信(物理地、通信地和/或操作地)。在一些示例中,通信信道249可以包括系统总线、网络连接、一个或多个进程间通信数据结构或用于在硬件和/或软件之间传递数据(也被称为信息)的任何其它组件。
一个或多个处理器230可以实施功能和/或执行计算装置200内的指令。例如,计算装置200上的处理器230可以接收和执行存储装置248所存储的指令,该存储装置248提供操作系统250和应用模块256的功能。在程序执行期间,在存储装置248内,由处理器230执行的这些指令可以使计算装置200存储和/或修改信息。处理器230可以执行操作系统250和应用模块256的指令以执行一个或多个操作。即,操作系统250和应用模块256能够由处理器230操作以执行本公开中所描述的各种功能。
计算装置200的一个或多个输入组件242可以接收输入。输入的示例是触觉、听觉、动力和光学输入,只举几个示例。在一个示例中,计算装置200的输入装置242包括鼠标、键盘、语音响应系统、摄影机、按钮、控制板、麦克风或用于检测来自人或机器的输入的其它任何类型的装置。在一些示例中,输入组件242可以是存在敏感输入组件,该存在敏感输入组件可以包括存在敏感屏幕、触摸敏感屏幕等。
计算装置200的一个或多个输出装置244可以生成输出。输出的示例是触觉、音频和视频输出。在一些示例中,计算装置200的输出装置244包括存在敏感屏幕、声卡、视频图形适配器卡、扬声器、阴极射线管(CRT)显示器、液晶显示器(LCD)或用于生成针对人或机器的输出的其它任何类型的装置。输出组件可以包括显示组件,诸如,阴极射线管(CRT)显示器、液晶显示器(LCD)、发光二极管(LED)或用于生成触觉、听觉和/或视觉输出的任何其它类型的装置。
在一些示例中,计算装置200的存在敏感显示器240可以包括输入组件242和/或输出组件244的功能。在图2的示例中,存在敏感显示器240可以包括存在敏感输入组件264,诸如,存在敏感屏幕或触摸敏感屏幕。在一些示例中,存在敏感输入组件264可以检测在存在敏感输入组件处和/或附近的对象。作为一个示例范围,存在敏感输入组件264可以检测对象,诸如,在存在敏感输入组件264的两英寸或更少内的手指或手写笔。存在敏感输入组件264可以确定存在敏感输入组件的检测到对象的位置(例如,(x,y)坐标)。在另一示例范围中,存在敏感输入组件264可以检测距存在敏感输入组件264两英寸或更少的对象,而且其它范围也是可能的。存在敏感输入组件264可以确定用户手指使用电容式、电感式和/或光学识别技术选择的存在敏感输入组件264的位置。
在一些示例中,存在敏感显示器240也可以使用关于输出组件244描述的触觉、音频或视频刺激将输出提供给用户。例如,存在敏感显示器240可以包括呈现图形用户界面的显示组件262。显示组件262可以是任何类型的输出组件,该输出组件提供视觉输出,诸如,关于输出组件244所描述的。虽然被示出为计算装置200的集成组件,但是存在敏感显示器240在一些示例中可能是用于与计算装置200的其它组件共享数据或信息路径以发送和/或接收输入和输出的外部组件。例如,存在敏感显示器240可能是计算装置200的内置组件(例如,移动电话上的屏幕),该内置组件位于计算装置200的外部包装内并且物理连接至该外部包装。在另一个示例中,存在敏感显示器240可能是计算装置200的外部组件(例如,与平板计算机共享有线和/或无线数据路径的显示器、投影仪等),该外部组件位于计算装置200的包装外并且与该包装物理分开。在一些示例中,当存在敏感显示器240位于计算装置200的包装外并且与该包装物理分开时,可以通过两个单独的组件实施:用于接收输入的存在敏感输入组件264和用于提供输出的显示组件262。
计算装置200的一个或多个通信单元246可以通过发送和/或接收数据与外部装置进行通信。例如,计算装置200可以使用通信单元246在无线电网络(诸如,蜂窝无线电网络)上发送和/或接收无线电信号。在一些示例中,通信单元246可以在卫星网络(诸如,GPS网络)上发送和/或接收卫星信号。通信单元246的示例包括网络接口卡(例如,诸如,以太网卡)、光学收发器、射频收发器、GPS接收器或可以发送和/或接收信息的其它任何类型的装置。通信单元246的其它示例可以包括在移动装置中发现的GPS、3G、4G和无线电以及通用串行总线(USB)控制器等。
操作系统250可以控制计算装置200和/或其组件的一个或多个功能。在图2的示例中,操作系统250包括用户界面(UI)模块252、输入处理模块253和任务预测模块254,它们可以与计算装置200的一个或多个应用256或硬件组件(诸如,PSD 240)交互。在一些示例中,应用模块256中的一个应用模块可以调用操作系统250的API,诸如UI模块252,以使计算装置200将信息输出至用户。例如,互联网浏览器应用256A可以调用UI模块252来输出图形用户界面,该图形用户界面包括与互联网浏览器应用256A相关联的应用信息。响应于互联网浏览器应用256A调用或呼叫UI模块252,UI模块252可以从互联网浏览器应用256A检索应用信息。在一些示例中,UI模块252将指示图形用户界面(例如,图1的图形用户界面120A)的图形用户界面信息存储在与PSD 140相关联的帧缓冲器中,图形用户界面信息包括从互联网浏览器应用256A接收到的应用信息的至少一部分。图形用户界面信息还可以包括与操作系统150相关联的信息,诸如,图1的OS图形元素126A至126C的指示(例如,该指示可以指示“返回”图标、“主页”图标和“任务切换”图标)。在一些示例中,PSD 240可以从帧缓冲器检索指示图形用户界面120A的信息并且显示图形用户界面120A。
PSD 240的存在敏感输入组件264可以检测用户输入并且将用户输入的指示存储在系统内存的位置处。PSD 240可以将用户输入的指示的位置发送至操作系统250。输入处理模块253可以从系统内存的位置接收指示用户输入的信息(例如,指示用户输入的位置、压力量等的信息)。
在一些示例中,输入处理模块253确定检测到的用户输入是否与和操作系统250相关联的命令相对应。输入处理模块253可以基于用户输入的类型、用户输入的位置或它们的组合确定输入是否与操作系统命令或应用命令相对应。例如,输入处理模块253可以基于用户输入的指示确定用户输入的类型是否是大体上静止的手势或移动手势。例如,用户输入的指示可以包括用户输入的位置、速度、压力量等的指示。大体上静止的手势的示例包括轻击、双击、轻击并且按住等。移动手势的示例包括滑动、捏合、旋转等。
在一些示例中,输入处理模块253响应于确定用户输入是选择一个OS图形元件126的大体上静止的手势确定用户输入与和操作系统250相关联的命令相对应。作为另一个示例,输入处理模块253可以响应于确定用户输入是选择显示在图形用户界面120A的应用信息区域内的应用信息的大体上静止的手势确定用户输入与应用命令相对应。
输入处理模块253可以响应于确定用户输入是移动手势确定用户输入与和操作系统250相关联的命令相对应,该移动手势从PSD 240的第一预定区域到PSD 240的第二预定区域穿过PSD 240。例如,输入处理模块253可以响应于确定用户输入是从PSD 240的一侧(例如,左侧)到PSD 240的另一个区域(例如,中间部分)的滑动确定用户输入与操作系统命令(例如,切换任务、显示主页屏幕或显示一组暂停应用的命令)相对应。在一些示例中,暂停应用指的是位于内存中并且可用于执行但是不是当前执行的最小化或最近使用的应用。在另一个示例中,输入处理模块253响应于用户输入是移动手势确定用户输入与应用命令相对应,该移动手势不会开始或结束于预定区域。例如,输入处理模块253可以响应于确定用户输入是移动手势并且移动手势不会开始于PSD 240的预定区域确定用户输入与滚动应用GUI的应用命令相对应。
响应于确定用户输入与和操作系统250相关联的命令相对应,输入处理模块253可以输出任务预测模块254的通知,该通知指示用户输入与和操作系统250相关联的命令相对应,使得任务预测模块254可以预测用户可能会执行的任务。在一些示例中,任务预测模块254可以响应于接收到来自计算装置200的用户的肯定同意预测用户可能会执行的任务或分析信息。
任务预测模块254可以利用通过机器学习技术(例如,在本地计算装置200上)生成的用于预测用户可能会执行的一个或多个任务的模型来预测用户可能会执行的一个或多个任务。可以用来生成模型的示例机器学习技术可以包括各种学习风格,诸如,监督学习、非监督学习和半监督学习。经由这种技术生成的示例类型的模型包括贝氏模型、聚类模型、决策树模型、正则化模型、回归模型、实例方面模型、人工神经网络模型、深度学习模型、降维模型等。
贯穿本公开,描述了如下示例:只有在计算装置接收到来自计算装置的用户的允许对信息进行分析的许可时,计算装置和/或计算系统才能够对与计算装置和计算装置的用户相关联的信息(例如,场境、位置、速度、搜索查询等)进行分析。例如,在下面讨论的情况下,在计算装置或计算系统可以收集或可以使用与用户相关联的信息之前,可以向用户提供如下机会:提供输入以控制计算装置和/或计算系统的程序或特征是否可以收集和使用用户信息(例如,关于用户的当前位置、当前速度等的信息),或决定装置和/或系统是否和/或如何可以接收可能与用户相关的内容。另外,一些信息在被计算装置和/或计算系统存储或使用之前可以一种或多种方式来处理,从而去除个人可识别信息。例如,用户的身份可以被处理,从而使得无法确定用户的个人身份信息,或可以将用户的地理位置一般化,其中,可以获得位置信息(诸如,城市、邮政编码、或州县等级),从而使得无法确定用户的特定位置。因此,用户可以控制如何收集关于用户的信息并且信息如何被计算装置和计算系统使用。
任务预测模块254可以至少部分地基于分析或识别被PSD 240显示为图形用户界面120A的一部分的应用信息确定或预测用户可能会执行的一个或多个任务。任务预测模块254可以识别由PSD 240显示的应用信息,例如,通过对图形用户界面120A执行光学字符识别(OCR)或图像识别。作为另一个示例,任务预测模块254可以通过解析接收自互联网浏览器应用模块256A的信息以确定哪些信息是由PSD 240显示的来识别由PSD 240显示的应用信息。
在一些情况下,任务预测模块254至少部分地基于PSD 240显示的应用信息预测任务。例如,任务预测模块254可以响应于确定PSD 240显示的应用信息包括地址确定用户可能会前往目的地(例如,特定地址、城市、机场等)。作为另一个示例,任务预测模块254可以响应于PSD 240显示的应用信息包括日期和/或时间(例如,未来日期或时间)确定用户可能会安排日历条目。
任务预测模块254可以基于计算装置200的场境确定用户可能会执行的任务。任务预测模块254可以收集与计算装置200相关联的场境信息以定义计算装置200的场境。任务预测模块254可以配置为定义任何类型的场境,该场境指定特定时间计算装置200的物理和/或虚拟环境的特性。
如贯穿本公开所使用的,术语“场境信息”用来描述可供任务预测模块254用来定义计算装置和计算装置的用户在特定时间能够体验的虚拟和/或物理环境特性的任何信息。场境信息的示例有许多并且可以包括:时间和日期信息、通过计算装置200的传感器(例如,位置传感器、加速计、陀螺仪、气压计、环境光传感器、接近传感器、麦克风和任何其它传感器)获得的传感器信息、由计算装置200的通信模块发送和接收的通信信息(例如,基于文本的通信、听觉通信、视频通信等)和与在计算装置200处执行的应用相关联的应用使用信息(例如,与应用相关联的应用信息、互联网搜索记录、文本通信、语音和视频通信、日历信息、社交媒体文章和相关信息等)。场境信息的另外的示例包括从在装置200的外部的发送装置获得的信号和信息。例如,任务预测模块254可以经由计算装置200的无线电或通信单元接收来自接近计算装置200的一个或多个计算装置的信息。
基于任务预测模块254收集到的场境信息,任务预测模块254可以定义计算装置200的场境并且可以基于场境确定用户可能会执行的任务。在一些示例中,计算装置200可以包括指示计算装置200的用户的主页地址的信息(例如,作为用户配置文件的一部分)并且计算装置200的场境包括计算装置200的当前位置。在这些示例中,任务预测模块254可以响应于确定计算装置200的当前位置不与用户所在城市或州(例如,用户不太可能拥有车辆的位置)相对应确定用户不太可能会预订行程(例如,经由行程共享应用或打车)。同样,任务预测模块254可以响应于确定计算装置200的当前位置不与用户所在城市或州(例如,用户更有可能开车的位置)相对应确定用户可能会请求交通信息(例如,经由导航应用的旅行时间)。
响应于确定用户可能会执行的任务,任务预测模块254可以生成一个或多个任务快捷方式。任务预测模块254可以确定或识别配置为执行任务快捷方式的应用。在一些示例中,任务预测模块254基于数据记录识别应用,该数据记录将应用和给定应用被配置来执行的一个或多个任务相关联。例如,应用模块256可以在任务注册数据记录中用操作系统250注册相应应用模块被配置来执行的一组一个或多个任务(例如,在安装应用的时候)。任务预测模块254可以基于任务注册数据记录确定配置为执行预测任务的一个或多个应用。例如,任务预测模块254可以确定导航应用模块256B配置为呈现交通信息并且行程共享应用模块256C配置为预订汽车运输。
在一些示例中,任务预测模块254确定或预测任务快捷方式的一个或多个参数。任务预测模块254可以至少部分地基于由PSD 240显示的应用信息确定任务快捷方式参数。例如,用于预订行程的任务参数可以包括行程的起点或目的地。作为一个示例,响应于确定预测任务包括预订行程,任务预测模块254基于由PSD 240显示的应用信息(诸如,由PSD 240显示的地址)确定行程的目的地。任务预测模块254可以基于场境信息确定任务快捷方式的一个或多个参数。例如,当任务包括预订行程时,任务预测模块可以确定场境包括计算装置200的当前位置并且可以确定行程的起点是计算装置200的当前位置。
在一些示例中,任务预测模块254确定配置为执行任务的应用并且/或至少部分地基于场境信息。场境信息可以包括应用使用信息。例如,应用使用信息可以指示与另一个行程共享应用相比用户更多地使用特定行程共享应用,使得任务预测模块254可以确定配置为执行任务快捷方式的应用是特定行程共享应用。
响应于确定配置为执行任务的一个或多个应用和一个或多个任务快捷方式参数,任务预测模块254可以将关于一个或多个任务快捷方式的信息输出至UI模块252。例如,任务预测模块254可以针对一个息输出至UI模块252。
UI模块252可以接收关于相应任务快捷方式的信息(例如,识别应用和任务参数的信息)并且可以将指示一个或多个任务快捷方式图形元素的信息(例如,图标)输出至要被PSD 240显示的帧缓冲器。PSD 240从帧缓冲器检索指示一个或多个任务快捷方式图形元素的信息并且输出图形用户界面,该图形用户界面包括一个或多个任务快捷方式图形元素,诸如,图1B的任务快捷方式元素。
PSD 240可以检测选择特定任务快捷方式图形元素(例如,图1B的任务快捷方式图形元素128A)的用户输入并且输出指示用户输入的信息。在一些示例中,输入处理模块253接收用户输入的指示,确定用户输入与对特定任务快捷方式的选择相对应,并且将指示对特定任务快捷方式图形元素的选择的信息输出至UI模块252。例如,输入处理模块253可以基于用户输入的指示确定用户输入与对任务快捷方式图形元素的选择相对应,该任务快捷方式图形元素与经由行程共享应用模块256C预订行程相对应。作为响应,输入处理模块253可以将信息输出至UI模块252,该信息指示与预订行程的任务相关联的所选任务快捷方式图形元素。
响应于接收到对特定任务快捷方式图形元素的选择的指示,UI模块252可以执行与所选任务快捷方式图形元素相关联的应用。在一些示例中,UI模块252响应于接收到用户选择与行程共享应用模块256C相关联的任务快捷方式图形元素的指示执行行程共享应用模块256C。UI模块252可以将与所选任务快捷方式图形元素相关联的任务快捷方式参数输出至行程共享应用模块256C。
行程共享应用模块256C可以接收来自UI模块252的任务参数并且基于接收到的任务参数生成图形用户界面。例如,图形用户界面信息可以包括指示行程目的地包括由PSD240显示的地址和行程起点包括计算装置200的当前地址的信息。UI模块252可以接收图形用户界面信息并且将图形用户界面信息发送至帧缓冲器。PSD 240可以从帧缓冲器检索图形用户界面信息并且显示图形用户界面。例如,图形用户界面可以包括行程起点字段和行程目的地字段,这些字段都是预填充的。
图3A至图3C是图示了根据本公开的一个或多个方面的示例图形用户界面的概念图,该示例图形用户界面由配置为动态生成任务快捷方式的示例计算装置呈现。下面在图2的计算装置200的背景下描述图3。
在图3A的示例中,计算装置200的操作系统250将与图形用户界面320A相对应的信息输出至与PSD 240相关联的帧缓冲器,使得PSD 240显示图形用户界面320A。图形用户界面320A包括应用信息区域322和操作系统区域324。应用信息区域322可以包括与特定应用(诸如,互联网浏览器应用模块256A)相关联的应用信息(例如,文本和/或图像)。如图1A所示,应用信息区域322包括文章,该文章包括图像和文本描述。操作系统区域324可以包括一个或多个图形元素,该一个或多个图形元素与和操作系统150相关联的命令(例如,与和应用模块156A相关联的命令截然相反)相对应。如图3A所示,操作系统区域324包括多个操作系统图形元素326A至326C(统称为“OS图形元素”)。在图3A的示例中,操作系统图形元素326A包括“返回”图标,操作系统图形元素326B可以包括“主页”图标,并且操作系统图形元素326C包括“任务切换”图标。响应于输出图形用户界面320A,PSD 240可以检测用户输入327并且可以输出指示用户输入327的信息(例如,位置、压力量等)。
操作系统250可以接收关于用户输入327的信息并且确定用户输入327是否与和操作系统250相关联的命令相对应。在一些示例中,操作系统250基于用户输入327的类型、用户输入327的位置或它们的组合确定用户输入是否与和操作系统250相关联的命令相对应。操作系统250可以基于接收自PSD 240的用户输入的指示确定用户输入327的类型和/或位置。例如,操作系统250可以响应于确定用户输入327是移动手势并且该移动手势从PSD 240的第一预定区域(例如,与图形用户界面320B的边缘相对应)到PSD 240的第二预定区域(例如,与图形用户界面320B的内部区域相对应)穿过PSD 240,确定用户输入与和操作系统250相关联的命令相对应。在图3B的示例中,操作系统250确定用户输入327与和操作系统250相关联的命令(诸如,显示诸如搜索框(也被称为“快速搜索栏”)等图形元素的命令)相对应。
在一些示例中,响应于确定用户输入327与和操作系统250相关联的命令相对应,操作系统250确定针对能够由一个或多个相应应用模块执行的相应动作的一个或多个任务快捷方式。例如,操作系统250可以至少部分地基于被显示为图形用户界面320B的一部分的应用信息、场境信息或它们的组合确定用户可能会执行的一个或多个任务。
响应于确定用户可能会执行的任务,操作系统250可以生成一个或多个任务快捷方式。操作系统250可以通过确定或识别配置为执行任务的至少一个应用和任务的一个或多个任务快捷方式参数来生成一个或多个任务快捷方式。例如,响应于确定预测任务包括预订行程,操作系统150可以确定一个或多个任务快捷方式参数,诸如,行程的目的地(例如,El Chalten)。类似地,响应于确定预测任务包括购物,操作系统250可以确定用于购物的任务快捷方式参数,诸如,要购买的商品的类型(例如,登山装备)。
在一些示例中,操作系统250输出关于任务快捷方式的信息(例如,至帧缓冲器),使得PSD可以输出图形用户界面320C,该图形用户界面320C包括指示预测任务快捷方式的任务快捷方式图形元素328A和328B(统称为任务快捷方式图形元素328)。每个任务快捷方式图形元素都可以包括配置为执行任务的应用的指示和预测任务的指示。例如,如图3C所示,任务快捷方式图形元素328A包括指示配置为执行任务的应用的图形元素329A1(例如,应用图标)和指示要执行的任务(例如,“购买登山设备”)的图形元素329A2(例如,文本描述)。同样,如图3C所示,任务快捷方式图形元素328B包括指示配置为执行任务的应用的图形元素329B1(例如,应用图标)和指示要执行的任务(例如,“预订行程”)的图形元素329B2(例如,文本描述)。图形用户界面320C还可以包括与和操作系统相关联的命令相对应的图形元素,诸如,搜索栏图形元素330。
图4A至图4B是图示了根据本公开的一个或多个方面的示例图形用户界面的概念图,该示例图形用户界面由配置为动态生成任务快捷方式的示例计算装置呈现。下面在图2的计算装置200的背景下描述图4。
在图4A的示例中,计算装置200的操作系统250将与图形用户界面420A相对应的信息输出至帧缓冲器,使得PSD 240显示图形用户界面420A。图形用户界面420A包括应用信息区域422和操作系统区域424。应用信息区域422可以包括与特定应用模块(诸如,消息传递应用模块)相关联的应用信息(例如,文本和/或图像)。在图4A的示例中,应用信息区域422包括与消息传递应用相关联的应用信息,包括消息440A和440B。操作系统区域424包括一个或多个操作系统图形元素426A至426C,该一个或多个操作系统图形元素426A至426C与和操作系统250相关联的命令相对应。在一些示例中,操作系统图形元素426A包括“返回图标”,该“返回图标”指示显示之前显示的图形用户界面的操作系统命令,操作系统图形元素426B包括“主页图标”,该“主页图标”指示显示操作系统的主页或默认图形用户界面的操作系统命令,并且操作系统图形元素426C包括“任务切换图标”,“任务切换图标”指示显示指示一个或多个暂停(例如,最近使用的应用)的图形用户界面的操作系统命令。
响应于输出图形用户界面420A,PSD 240可以检测用户输入并且可以输出关于用户输入的信息(例如,位置、压力量等)。操作系统250可以接收关于用户输入的信息并且确定用户输入是否与和操作系统250相关联的命令相对应。在一些示例中,操作系统250基于用户输入的类型、用户输入的位置或它们的组合确定用户输入是否与和操作系统250相关联的命令相对应。例如,操作系统250可以响应于确定用户输入是位于PSD 240与操作系统图形元素(例如,操作系统图形元素426CB)相对应的位置处的大体上静止的手势,确定用户输入与和操作系统250相关联的命令相对应。换言之,操作系统250可以响应于确定用户输入是选择“主页图标”的用户输入确定用户输入与和操作系统250相关联的命令相对应。
在一些示例中,选择操作系统图形元素(例如,主页图标)的用户输入可以指示用户旨在打开或执行不同的应用(例如,通过选择主页图标、通过一组应用图标(例如,利用应用抽屉)进行搜索和为特定应用选择启动该应用的图标)。
操作系统250可以响应于确定用户输入与和操作系统250相关联的命令相对应确定用户可能会执行的一个或多个任务。在一些示例中,操作系统250可以至少部分地基于被显示为图形用户界面420A的一部分的应用信息、场境信息或它们的组合确定用户可能会执行的一个或多个任务。在一些示例中,操作系统250可以基于消息440A和/或440B确定用户可能会购买棒球比赛的门票和/或查看日历。例如,操作系统250可以确定PSD 240显示与特定类型的体育赛事(例如,棒球比赛)相关的信息并且场境信息包括用户历史,该用户历史指示用户过去已经购买的特定类型的体育赛事的门票。
响应于确定用户可能会执行的任务,在一些示例中,操作系统250可以生成一个或多个任务快捷方式。操作系统250可以通过确定或识别配置为执行任务的至少一个应用和任务的一个或多个任务快捷方式参数来生成任务快捷方式。例如,响应于确定预测任务包括预订棒球比赛的门票,操作系统150可以确定一个或多个任务快捷方式参数,诸如,用户希望参加比赛的日期(例如,星期四)。类似地,响应于确定预测任务包括查看日历,操作系统250可以确定用于查看日历的任务快捷方式参数,诸如,显示日历信息的特定的一天或几天。
在一些示例中,操作系统250输出关于任务快捷方式的信息(例如,至帧缓冲器),使得PSD可以输出图形用户界面420B,该图形用户界面420B包括指示预测任务快捷方式的任务快捷方式图形元素428A和428B(统称为任务快捷方式图形元素428)。每个任务快捷方式图形元素都可以包括配置为执行任务的应用的指示和预测任务的指示。例如,如图4B所示,任务快捷方式图形元素428A包括指示配置为执行任务的应用的图形元素429A1(例如,应用图标)和指示要执行的任务(例如,“购票”)的图形元素429A2(例如,文本描述)。同样,如图4B所示,任务快捷方式图形元素428B包括指示配置为执行任务的应用(例如,日历应用)的图形元素429B1(例如,应用图标)和指示要执行的任务(例如,“检查日历”)的图形元素429B2(例如,文本描述)。
图5A至图5C是图示了根据本公开的一个或多个方面的示例图形用户界面的概念图,该示例图形用户界面由配置为动态生成任务快捷方式的示例计算装置呈现。下面在图2的计算装置200的背景下描述图5。
在图5A的示例中,计算装置200的操作系统250将与图形用户界面520A相对应的信息输出至帧缓冲器,使得PSD 240显示图形用户界面520A。图形用户界面520A可以代表锁屏。如图5A所示,图形用户界面520A包括指示锁屏的图形元素560(例如,锁定图标)和指示应用信息(例如,与消息传递应用相关联的锁屏通知)的图形元素562。
响应于输出图形用户界面520A,PSD 240可以检测用户输入527并且可以输出关于用户输入527的信息(例如,位置、压力量等)。例如,PSD 240可以在PSD 240与操作系统图形元素560相对应的位置处检测输入并且可以输出用户输入的指示。操作系统250可以接收用户输入的指示并且确定用户输入是否与和操作系统250相关联的命令相对应。
在一些示例中,操作系统250基于用户输入527的类型、用户输入327的位置或它们的组合确定用户输入是否与和操作系统250相关联的命令相对应。例如,操作系统259可以响应于确定用户输入327是移动手势确定用户输入与和操作系统相关联的命令相对应,该移动手势从PSD 240的第一预定区域(例如,与特定图形元素(诸如,图形元素560)相对应)到PSD 240的第二预定区域(例如,PSD 240与图形元素562相对应的区域)穿过PSD 240。在图5B的示例中,操作系统250确定用户输入527与和操作系统250相关联的命令(诸如,解锁计算装置250的命令)相对应。
在一些示例中,开始于操作系统图形元素560(例如,锁定图标)并且终止于与应用(例如,锁屏通知)相关联的图形元素562的用户输入可以指示用户旨在解锁计算装置和打开与图形元素562相关联的消息传递应用。
操作系统250可以响应于确定用户输入与和操作系统250相关联的命令相对应确定一个或多个任务快捷方式。在一些示例中,操作系统250可以至少部分地基于被显示为图形用户界面520A的一部分的应用信息、场境信息或它们的组合确定用户可能会执行的一个或多个任务。例如,操作系统250可以基于图形用户界面520A的图形元素562确定用户可能会购买棒球比赛的门票和/或查看日历。
响应于确定用户可能会执行的任务,操作系统250可以确定或识别配置为执行任务的至少一个应用和任务的一个或多个任务快捷方式。例如,响应于确定预测任务包括查看日历,操作系统250可以确定用于查看日历的任务快捷方式参数,诸如,显示日历信息的特定的一天或几天。
在一些示例中,操作系统250输出关于任务快捷方式的信息(例如,至帧缓冲器),使得PSD可以输出图形用户界面520B,该图形用户界面520B包括指示预测任务快捷方式的任务快捷方式图形元素528。每个任务快捷方式图形元素都可以包括配置为执行任务的应用的指示和预测任务的指示。例如,如图4B所示,任务快捷方式图形元素528包括指示配置为执行任务的应用(例如,日历应用)的图形元素529A1(例如,应用图标)和指示要执行的任务(例如,“转到星期四”)的图形元素529A2(例如,文本描述)。
PSD 240可以检测选择任务快捷方式图形元素528的用户输入并且输出指示用户输入的信息。操作系统250可以接收指示用户输入的信息并且确定用户输入与对任务快捷方式图形元素428B的选择相对应。响应于确定用户输入与对任务快捷方式图形元素428B的选择相对应,操作系统250可以执行与所选任务快捷方式图形元素相关联的应用模块(例如,日历应用)。在一些示例中,操作系统250可以将与所选任务快捷方式图形元素相关联的任务快捷方式参数输出至日历应用。例如,操作系统250可以将通知输出至日历应用,该通知指示任务快捷方式参数包括输出星期二晚上的日历信息的动作。
响应于执行任务快捷方式图形元素428B所指示的特定应用,日历应用可以检索与一个或多个任务快捷方式参数相关联的信息(例如,从存储装置或远程计算装置)并且可以将信息输出至操作系统250。例如,日历应用可以输出图形用户界面信息,该图形用户界面信息指示任务快捷方式参数所指示的一天/时间(例如,星期二晚上)的日历事件。
操作系统250可以接收图形用户界面信息并且将图形用户界面信息发送至帧缓冲器。图形用户界面520C可以包括与配置为执行任务的应用相关联的应用信息(例如,与日历应用相关联的日历信息)。在一些示例中,图形用户界面520C还包括与消息传递应用相关联的应用信息。换言之,在一些示例中,操作系统250可以执行配置为执行任务快捷方式的应用,并且在没有终止或暂停当前执行的应用的情况下使PSD 240输出与配置为执行任务快捷方式的应用相关联的图形用户界面。换句话说,操作系统250可以同时执行消息传递应用和日历应用,并且输出图形用户界面520C,该图形用户界面520C包括消息传递应用和日历应用两者的应用信息。以这种方式,用户可以在不切换应用的情况下查看日历信息,这可能通过减少用户输入来提高用户体验。减少用户输入可以降低功耗和提高电池寿命。
图6是图示了根据本公开的一个或多个方面的示例操作的流程图,该示例操作由配置为动态生成任务快捷方式的示例计算装置(诸如,图1A的计算装置100或图2的计算装置200)执行。下面在图1A至图1C的计算装置100和GUI 120A至120C的背景下描述图6。
计算装置100可以输出图形用户界面(例如,GUI 120A)以在存在敏感显示器140显示(602)。图形用户界面可以包括应用信息区域122和操作系统区域124。应用信息区域122包括与当前由计算装置100执行的应用(诸如,互联网浏览器应用)相关联的应用信息。操作系统区域124包括操作系统图形元素126A至126C(例如,分别是“返回”图标、“主页”图标和“任务切换”图标)。
存在敏感显示器140可以在存在敏感显示器140与一个操作系统图形元素126相关联的位置处检测第一用户输入并且输出第一用户输入的指示。操作系统150的输入处理模块153可以接收用户输入的指示。
输入处理模块153可以确定第一用户输入是否与和操作系统150相关联的命令相对应(604)。例如,输入处理模块153可以基于用户输入的类型、场境信息或两者确定第一用户输入是否与OS命令相对应。
响应于确定输入不与和操作系统150相关联的命令相对应(606的“否定”路径),在一些示例中,计算装置可以执行与当前图形用户界面所表示的应用相关联的动作(616)。例如,输入处理模块153可以确定输入与对互联网浏览应用图形用户界面显示的链接的选择相对应,并且UI模块152可以将指示对链接的选择的通知发送至互联网浏览应用。
响应于确定输入与和操作系统150相关联的命令相对应(606的“肯定”路径),任务预测模块154可以生成一个或多个任务快捷方式(608)。例如,任务预测模块154可以确定或预测用户可能会执行的一个或多个任务并且生成一个或多个相应的任务快捷方式。任务预测模块154可以至少部分地基于图形用户界面120A显示的应用信息、场境信息或两者预测用户可能会执行的一个或多个任务。
操作系统150的UI模块152可以输出指示任务快捷方式的图形用户界面信息(610)。例如,UI模块152可以将图形用户界面信息输出至显示缓冲器,使得PSD 140可以显示图1B所示的图形用户界面120B。例如,图形用户界面120B包括代表购买登山设备的任务快捷方式的任务快捷方式图形元素128A和代表预订行程的任务快捷方式的任务快捷方式图形元素128B。
存在敏感显示器140可以检测第二用户输入(例如,第二手势)和将第二用户输入的指示提供至计算装置100。输入处理模块153可以接收第二用户输入的指示(12)。响应于接收到第二用户输入的指示,输入处理模块153可以确定第二用户输入与对特定任务快捷方式图形元素(例如,图形元素128B)的选择相对应。
响应于接收到对任务快捷方式图形元素128B的选择的指示,计算装置100可以执行由所选任务快捷方式链接的一个或多个动作(614)。例如,UI模块152可以执行与任务快捷方式图形元素128B相关联的应用。例如,UI模块152可以执行旅行社应用模块156B并且可以将与任务快捷方式图形元素128B相关联的任务快捷方式参数发送至旅行社应用模块156B。旅行社应用模块156B可以将信息发送至UI模块152,该信息指示与旅行社应用模块156B相关联的图形用户界面120C。UI模块152可以将指示图形用户界面120C的信息发送至帧缓冲器。PSD 140可以从帧缓冲器检索指示图形用户界面120C的信息并且显示图形用户界面120C。如图1C所示,图形用户界面120C包括目的地字段,该目的地字段是基于显示在图形用户界面120B中的应用信息来预填充的。换言之,在一些示例中,图形用户界面120C的目的地字段是用城市“El Chalten”来预填充的。
下面的编号示例可以说明本公开的一个或多个方面:
示例1、一种方法,该方法包括:通过计算装置并且为了在存在敏感显示装置处进行显示,输出第一图形用户界面,该第一图形用户界面包括与能够由计算装置执行的多个应用中的特定应用相关联的应用信息;通过计算装置并且从存在敏感显示装置,接收与关联于操作系统的命令相对应的用户输入的指示;响应于接收到用户输入的指示,通过计算装置至少部分地基于被显示为第一图形用户界面的一部分的应用信息生成针对能够由多个应用中的一个或多个相应应用执行的动作的至少一个任务快捷方式,该多个应用能够由计算装置执行;以及通过计算装置,为了通过显示装置显示,输出第二图形用户界面,该第二图形用户界面包括与至少一个任务快捷方式相对应的图形元素。
示例2、根据示例1所述的方法,其中,与操作系统相关联的命令包括显示一个或多个暂停应用的指示的命令。
示例3、根据示例1所述的方法,其中,与操作系统相关联的命令包括显示由操作系统生成的主屏幕的命令。
示例4、根据示例1至3中任一项所述的方法,其中,与至少一个任务快捷方式相对应的图形元素是第二图形元素,并且其中,第一输入与对第一图形用户界面的第一图形元素的选择相对应,第一图形元素与能够由操作系统执行的操作相关联而不与能够由特定应用执行的操作相关联。
示例5、根据示例1所述的方法,其中,用户输入包括在显示装置的预定位置处开始并且在显示装置的不同位置处终止的手势,其中,手势与显示一个或多个相应暂停应用的图形指示或显示由操作系统生成的主屏幕的命令相对应。
示例6、根据示例5所述的方法,其中,显示装置的不同位置与锁屏通知相对应,该锁屏通知与能够由计算装置执行的多个应用中的第二应用相关联,并且其中,第二图形用户界面的第一区域包括与第二应用相关联的应用信息,并且第二图形用户界面的第二区域包括至少一个任务快捷方式。
示例7、根据示例6所述的方法,其中,用户输入是第一用户输入,该方法进一步包括:响应于接收到选择至少一个任务快捷方式的特定任务快捷方式的第二用户输入的指示,通过计算装置,输出第三图形用户界面以由显示装置显示,该第三图形用户界面包括与第二应用相关联的应用信息和与第三应用相关联的应用信息的至少一部分,该第三应用与特定任务快捷方式相关联。
示例8、根据示例1至7中任一项所述的方法,其中,至少一个任务快捷方式包括与多个应用中的第一应用相对应的第一任务快捷方式和与多个应用中的第二应用相对应的第二任务快捷方式,其中,第二图形用户界面包括与第一任务快捷方式相对应的第一图形元素和与第二任务快捷方式相对应的第二图形元素。
示例9、根据示例1至6中任一项所述的方法,其中,用户输入是第一用户输入,该方法进一步包括:通过计算装置接收第二用户输入的指示,该第二用户输入与对特定图形元素的选择相对应,该特定图形元素与来自至少一个任务快捷方式的特定任务快捷方式相对应;以及通过计算装置执行与特定任务快捷方式相对应的动作。
示例10、一种计算装置,该计算装置包括:一个或多个处理器、存在敏感显示装置和存储装置,该存储装置存储一个或多个模块,该一个或多个模块能够由一个或多个处理器执行以:输出第一图形用户界面以在存在敏感显示装置处进行显示,该第一图形用户界面包括与能够由计算装置执行的多个应用中的特定应用相关联的应用信息;从存在敏感显示装置接收与关联于操作系统的命令相对应的用户输入的指示;响应于接收到用户输入的指示,至少部分地基于被显示为第一图形用户界面的一部分的应用信息生成针对能够由多个应用中的一个或多个相应应用执行的动作的至少一个任务快捷方式,该多个应用能够由计算装置执行;以及输出第二图形用户界面以由显示装置显示,该第二图形用户界面包括与至少一个任务快捷方式相对应的图形元素。
示例11、根据示例10所述的计算装置,其中,与操作系统相关联的命令包括显示一个或多个暂停应用的指示的命令。
示例12、根据示例10所述的计算装置,其中,与操作系统相关联的命令包括显示由操作系统生成的主屏幕的命令。
示例13、根据示例10至12中任一项所述的计算装置,其中,与至少一个任务快捷方式相对应的图形元素是第二图形元素,并且其中,第一输入与对第一图形用户界面的第一图形元素的选择相对应,第一图形元素与能够由操作系统执行的操作相关联而不与能够由特定应用执行的操作相关联。
示例14、根据示例10所述的计算装置,其中,用户输入包括在显示装置的预定位置处开始并且在显示装置的不同位置处终止的手势,其中,手势与显示一个或多个相应暂停应用的图形指示或显示由操作系统生成的主屏幕的命令相对应。
示例15、根据示例14所述的计算装置,其中,显示装置的不同位置与锁屏通知相对应,该锁屏通知与能够由计算装置执行的多个应用中的第二应用相关联,并且其中,第二图形用户界面的第一区域包括与第二应用相关联的应用信息,并且第二图形用户界面的第二区域包括至少一个任务快捷方式。
示例16、根据示例15的计算装置,其中,用户输入是第一用户输入,其中,一个或多个模块可进一步由一个或多个处理器执行以:响应于接收到选择至少一个任务快捷方式的特定任务快捷方式的第二用户输入的指示,通过计算装置,输出第三图形用户界面以由显示装置显示,该第三图形用户界面包括与第二应用相关联的应用信息和与第三应用相关联的应用信息的至少一部分,该第三应用于特定任务快捷方式相关联。
示例17、根据示例10至16中任一项所述的计算装置,其中,至少一个任务快捷方式包括与多个应用中的第一应用相对应的第一任务快捷方式和与多个应用中的第二应用相对应的第二任务快捷方式,其中,第二图形用户界面包括与第一任务快捷方式相对应的第一图形元素和与第二任务快捷方式相对应的第二图形元素。
示例18、根据示例10至15中任一项所述的计算装置,其中,用户输入是第一用户输入,其中,一个或多个模块可进一步由一个或多个处理器执行以:通过计算装置接收与对特定图形元素的选择相对应的第二用户输入的指示,该特定图形元素与来自至少一个任务快捷方式的特定任务快捷方式相对应;以及通过计算装置执行与特定任务快捷方式相对应的动作。
示例19、一种计算机可读存储介质,该计算机可读存储介质包括指令,该指令在被执行时使计算装置的至少一个处理器:输出第一图形用户界面以在存在敏感显示装置处进行显示,该第一图形用户界面包括与能够由计算装置执行的多个应用中的特定应用相关联的应用信息;从存在敏感显示装置接收与命令相对应的用户输入的指示,该命令与操作系统相关联;响应于接收到用户输入的指示,至少部分地基于被显示为第一图形用户界面的一部分的应用信息生成针对能够由多个应用中的一个或多个相应应用执行的动作的至少一个任务快捷方式,该多个应用能够由计算装置执行;以及输出第二图形用户界面以由显示装置显示,该第二图形用户界面包括与至少一个任务快捷方式相对应的图形元素。
示例20、根据示例19所述的计算机可读存储介质,其中,与操作系统相关联的命令包括显示一个或多个暂停应用的指示的命令。
示例21、根据示例19所述的计算机可读存储介质,其中,与操作系统相关联的命令包括显示由操作系统生成的主屏幕的命令。
示例22、根据示例19至21中任一项所述的计算机可读存储介质,其中,与至少一个任务快捷方式相对应的图形元素是第二图形元素,并且其中,第一输入与对第一图形用户界面的第一图形元素的选择相对应,第一图形元素与能够由操作系统执行的操作相关联而不与能够由特定应用执行的操作相关联。
示例23、根据示例19所述的计算机可读存储介质,其中,用户输入包括在显示装置的预定位置开始并且在显示装置的不同位置终止的手势,其中,手势与显示一个或多个相应暂停应用的图形指示或显示由操作系统生成的主屏幕的命令相对应。
示例24、根据示例23所述的计算机可读存储介质,其中,显示装置的不同位置与锁屏通知相对应,该锁屏通知与能够由计算装置执行的多个应用中的第二应用相关联,并且其中,第二图形用户界面的第一区域包括与第二应用相关联的应用信息,并且第二图形用户界面的第二区域包括至少一个任务快捷方式。
示例25、根据示例24所述的计算机可读存储介质,其中,用户输入是第一用户输入,其中,指令进一步使至少一个处理器:响应于接收到选择至少一个任务快捷方式的特定任务快捷方式的第二用户输入的指示,输出第三图形用户界面以由显示装置显示,该第三图形用户界面包括与第二应用相关联的应用信息和与第三应用相关联的应用信息的至少一部分,该第三应用与特定任务快捷方式相关联。
示例26、根据示例19至25中任一项所述的计算机可读存储介质,其中,至少一个任务快捷方式包括与多个应用中的第一应用相对应的第一任务快捷方式和与多个应用中的第二应用相对应的第二任务快捷方式,其中,第二图形用户界面包括与第一任务快捷方式相对应的第一图形元素和与第二任务快捷方式相对应的第二图形元素。
示例27、根据示例19至24中任一项所述的计算机可读存储介质,其中,用户输入是第一用户输入,其中,指令进一步使至少一个处理器:接收与对特定图形元素的选择相对应的第二用户输入的指示,该特定图形元素与来自至少一个任务快捷方式的特定任务快捷方式相对应;以及执行与特定任务快捷方式相对应的动作。
示例28:一种计算装置,该计算装置包括用于执行根据示例1至9中任一项所述的方法的构件。
在一个或多个示例中,所描述的功能可以用硬件、硬件和软件、硬件和固件或它们的任何组合来实施。如果用软件来实施,则功能可以作为一个或多个指令或代码存储在计算机可读介质中或通过计算机可读介质进行传输,并且由基于硬件的处理单元执行。计算机可读介质可以包括:计算机可读存储媒体或介质,该计算机可读存储媒体或介质与有形介质(诸如,数据存储媒体)相对应;或通信媒体,该通信媒体包括促进例如根据通信协议将计算机程序从一个地方转移到另一个地方。以这种方式,计算机可读介质通常可以与(1)非暂时性的有形计算机可读存储媒体或(2)通信介质(诸如,信号或载波)相对应。数据存储媒体可以是任何可用媒体,该可用媒体可以由一个或多个计算机或一个或多个处理器访问,以检索用于实施本公开所描述的技术的指令、代码和/或数据结构。计算机程序产品可以包括计算机可读介质。
作为示例,而非限制,这种计算机可读存储媒体可以包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储器、磁盘存储器或其它磁存储装置、闪存、或可以用于存储呈指令或数据结构形式的期望程序并且可以由计算机访问的任何其它存储介质。同样,任何连接被适当地称为计算机可读介质。例如,如果通过使用同轴电缆、光纤电缆、双绞线、数字用户线(DSL)、或无线技术(诸如,红外线、无线电和微波)来从网站、服务器或其它远程源发送指令,则同轴电缆、光纤电缆、双绞线、DSL、或无线技术(诸如,红外线、无线电和微波)包括在介质的定义范围内。然而,应该理解,该计算机可读存储介质和媒体以及数据存储媒体不包括连接、载波、信号、或其它暂时性媒体,但是反而涉及非暂时性的有形存储媒体。本文所使用的磁盘和光盘包括:激光唱片(CD)、激光视盘、光盘、数字通用光盘(DVD)、软盘和蓝光盘,其中,磁盘通常磁重现数据,而光盘利用激光来光重现数据。上述的组合还应该被包括在计算机可读介质的范围内。
指令可以由一个或多个处理器执行,诸如,一个或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程序逻辑阵列(FPGA)或其它等效的集成或离散逻辑电路系统。因此,本文所使用的术语“处理器”可以指任何前述结构或适用于实施本文所描述的技术的任何其它结构。另外,在一些方面中,本文所描述的功能可以设置在专用硬件和/或软件模具内。同样,技术可以完全实施在一个或多个电路或逻辑元件中。
本公开的技术可以实施在各种各样的装置或设备(包括无线手机、集成电路(IC)或IC集(例如,芯片集))中。本公开中描述了各种组件、模具或单元,以强调配置为执行所公开的技术但是不一定需要由不同的硬件单元实施的装置的功能方面。确切地说,如上所述,结合合适的软件和/或固件,各个单元都可以被组合成硬件单元或通过收集可互操作的硬件单元(包括上面所描述的一个或多个处理器)而被提供。
已经描述了各个实施例。这些和其它实施例在以下权利要求书的范围内。

Claims (13)

1.一种动态生成任务快捷方式的方法,包括:
通过计算装置并且为了在存在敏感显示装置处进行显示,输出第一图形用户界面,所述第一图形用户界面包括:
应用信息区域,所述应用信息区域包括与能够由所述计算装置执行的多个应用中的特定应用相关联的应用信息,以及
操作系统区域,所述操作系统区域包括第一图形元素,所述第一图形元素对应于与操作系统相关联的命令;
通过所述计算装置并且从所述存在敏感显示装置接收与关联于操作系统的所述命令相对应的所述第一图形元素处的用户输入的指示;
响应于接收到所述用户输入的所述指示,通过所述计算装置至少部分地基于被显示为所述第一图形用户界面的一部分的所述应用信息和与所述计算装置相关联的场境信息,生成针对能够由所述多个应用中的一个或多个相应应用执行的动作的至少一个任务快捷方式,所述多个应用能够由所述计算装置执行,其中所述场境信息能够用于定义所述计算装置和所述计算装置的用户在特定时间体验的虚拟和/或物理环境特性;以及
通过所述计算装置,为了通过所述存在敏感显示装置显示,输出第二图形用户界面,所述第二图形用户界面包括与所述至少一个任务快捷方式相对应的第二图形元素。
2.根据权利要求1所述的方法,其中,与所述操作系统相关联的所述命令包括显示一个或多个暂停应用的指示的命令。
3.根据权利要求1所述的方法,其中,与所述操作系统相关联的所述命令包括显示由所述操作系统生成的主屏幕的命令。
4.根据权利要求1所述的方法,
其中,所述用户输入与对所述操作系统区域的所述第一图形元素的选择相对应,所述第一图形元素与能够由所述操作系统执行的操作相关联而不与能够由所述特定应用执行的操作相关联。
5.根据权利要求1所述的方法,
其中,所述用户输入包括在所述操作系统区域内的所述存在敏感显示装置的预定位置处开始并且在所述存在敏感显示装置的不同位置处终止的手势,以及
其中,所述手势与显示一个或多个相应暂停应用的图形指示或显示由所述操作系统生成的主屏幕的命令相对应。
6.根据权利要求5所述的方法,其中,所述存在敏感显示装置的所述不同位置与锁屏通知相对应,所述锁屏通知与能够由所述计算装置执行的所述多个应用中的第二应用相关联,并且其中,所述第二图形用户界面的第一区域包括与所述第二应用相关联的所述应用信息,并且所述第二图形用户界面的第二区域包括所述至少一个任务快捷方式。
7.根据权利要求6所述的方法,其中,所述用户输入是第一用户输入,所述方法进一步包括:
响应于接收到选择所述至少一个任务快捷方式的特定任务快捷方式的第二用户输入的指示,通过所述计算装置,输出第三图形用户界面以由所述存在敏感显示装置显示,所述第三图形用户界面包括与所述第二应用相关联的所述应用信息和与第三应用相关联的应用信息的至少一部分,所述第三应用与所述特定任务快捷方式相关联。
8.根据权利要求1至5中任一项所述的方法,
其中,所述至少一个任务快捷方式包括与所述多个应用中的第一应用相对应的第一任务快捷方式和与所述多个应用中的第二应用相对应的第二任务快捷方式,
其中,所述第二图形用户界面包括与所述第一任务快捷方式相对应的第一图形元素和与所述第二任务快捷方式相对应的第二图形元素。
9.根据权利要求1至6中任一项所述的方法,其中,所述用户输入是第一用户输入,所述方法进一步包括:
通过所述计算装置接收第二用户输入的指示,所述第二用户输入与对特定图形元素的选择相对应,所述特定图形元素与来自所述至少一个任务快捷方式的特定任务快捷方式相对应;以及
通过所述计算装置执行与所述特定任务快捷方式相对应的动作。
10.一种计算装置,所述计算装置包括:
一个或多个处理器;
存在敏感显示装置;以及
存储装置,所述存储装置存储一个或多个模块,所述一个或多个模块能够由所述一个或多个处理器执行以:
输出第一图形用户界面以在所述存在敏感显示装置处进行显示,所述第一图形用户界面包括:
应用信息区域,所述应用信息区域包括与能够由所述计算装置执行的多个应用中的特定应用相关联的应用信息,以及
操作系统区域,所述操作系统区域包括第一图形元素,所述第一图形元素对应于与操作系统相关联的命令;
从所述存在敏感显示装置接收与关联于所述操作系统的命令相对应的所述第一图形元素处的用户输入的指示;
响应于接收到所述用户输入的所述指示,至少部分地基于被显示为所述第一图形用户界面的一部分的所述应用信息和与所述计算装置相关联的场境信息,生成针对能够由所述多个应用中的一个或多个相应应用执行的动作的至少一个任务快捷方式,所述多个应用能够由所述计算装置执行,其中所述场境信息能够用于定义所述计算装置和所述计算装置的用户在特定时间体验的虚拟和/或物理环境特性;以及
输出第二图形用户界面以由所述存在敏感显示装置显示,所述第二图形用户界面包括与所述至少一个任务快捷方式相对应的第二图形元素。
11.一种计算系统,所述计算系统包括:
一个或多个处理器;
存在敏感显示器;以及
存储装置,所述存储装置存储一个或多个模块,所述一个或多个模块能够由所述一个或多个处理器执行以执行根据权利要求1至9中任一项所述的方法。
12.一种编码有指令的计算机可读存储介质,所述指令在被执行时使计算装置的一个或多个处理器执行根据权利要求1至9中任一项所述的方法。
13.一种计算系统,所述计算系统包括用于执行根据权利要求1至9中任一项所述的方法的组件。
CN201780091333.1A 2017-12-22 2017-12-22 动态生成针对与操作系统用户界面元素的用户交互的任务快捷方式 Active CN110678842B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2017/068272 WO2019125492A1 (en) 2017-12-22 2017-12-22 Dynamically generated task shortcuts for user interactions with operating system user interface elements

Publications (2)

Publication Number Publication Date
CN110678842A CN110678842A (zh) 2020-01-10
CN110678842B true CN110678842B (zh) 2023-07-18

Family

ID=66001307

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780091333.1A Active CN110678842B (zh) 2017-12-22 2017-12-22 动态生成针对与操作系统用户界面元素的用户交互的任务快捷方式

Country Status (4)

Country Link
US (1) US20200057541A1 (zh)
EP (1) EP3602285A1 (zh)
CN (1) CN110678842B (zh)
WO (1) WO2019125492A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9684398B1 (en) 2012-08-06 2017-06-20 Google Inc. Executing a default action on a touchscreen device
US10097684B1 (en) * 2018-03-19 2018-10-09 Google Llc Maintaining an automobile configuration of a mobile computing device while switching between automobile and non-automobile user interfaces
US11468881B2 (en) * 2019-03-29 2022-10-11 Samsung Electronics Co., Ltd. Method and system for semantic intelligent task learning and adaptive execution
US11294532B2 (en) 2019-06-01 2022-04-05 Apple Inc. Routing actions to appropriate scenes
CN110874174A (zh) * 2019-10-28 2020-03-10 维沃移动通信有限公司 一种信息显示方法及电子设备
US11157151B1 (en) * 2020-07-28 2021-10-26 Citrix Systems, Inc. Direct linking within applications
US11271929B1 (en) * 2020-09-28 2022-03-08 BIZZ dot BUZZ, LLC Dynamic display control application for controlling graphical user interface elements based on activity data
USD960927S1 (en) * 2020-09-30 2022-08-16 Snap Inc. Display screen or portion thereof with a graphical user interface
US20220404956A1 (en) * 2021-06-17 2022-12-22 Samsung Electronics Co., Ltd. Method and electronic device for navigating application screen

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105393206A (zh) * 2013-06-14 2016-03-09 微软技术许可有限责任公司 用于锁屏上动作的用户定义的快捷方式
CN107402687A (zh) * 2016-03-24 2017-11-28 谷歌公司 场境任务快捷方式

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9685160B2 (en) * 2012-04-16 2017-06-20 Htc Corporation Method for offering suggestion during conversation, electronic device using the same, and non-transitory storage medium
KR102045841B1 (ko) * 2012-10-09 2019-11-18 삼성전자주식회사 전자 장치에서 태스크 추천 아이콘을 생성하는 방법 및 장치
KR20140111495A (ko) * 2013-03-11 2014-09-19 삼성전자주식회사 전자 장치의 화면 제어 방법 및 그 전자 장치
US9965530B2 (en) * 2016-04-20 2018-05-08 Google Llc Graphical keyboard with integrated search features

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105393206A (zh) * 2013-06-14 2016-03-09 微软技术许可有限责任公司 用于锁屏上动作的用户定义的快捷方式
CN107402687A (zh) * 2016-03-24 2017-11-28 谷歌公司 场境任务快捷方式

Also Published As

Publication number Publication date
US20200057541A1 (en) 2020-02-20
CN110678842A (zh) 2020-01-10
WO2019125492A1 (en) 2019-06-27
EP3602285A1 (en) 2020-02-05

Similar Documents

Publication Publication Date Title
CN110678842B (zh) 动态生成针对与操作系统用户界面元素的用户交互的任务快捷方式
JP6957632B2 (ja) コンピューティング装置の通知のための通知チャネル
KR102188754B1 (ko) 상황별 작업 바로 가기들
US11816325B2 (en) Application shortcuts for carplay
EP3414657B1 (en) Automatic graphical user interface generation from notification data
EP3340102B1 (en) Displaying private information on personal devices
CN106095449B (zh) 提供便携式装置的用户接口的方法和设备
US20180188906A1 (en) Dynamically generating a subset of actions
US11422672B2 (en) Managing updates in a computing system using multiple access methods
US20160350136A1 (en) Assist layer with automated extraction
CN105849758B (zh) 多模式内容消费模型
CN108604152A (zh) 未读消息提示方法和终端
WO2018169572A1 (en) Outputting reengagement alerts by a computing device
CN108700986B (zh) 图形通知中的信息循环
JP2020525933A (ja) グラフィカルキーボード内からのアプリケーション機能へのアクセス
WO2019219084A1 (zh) 一种显示控制方法及终端
US11360579B2 (en) Capturing pen input by a pen-aware shell
US20150160830A1 (en) Interactive content consumption through text and image selection

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant