CN108027695A - 基于体验模式转换的应用用户接口重新配置 - Google Patents

基于体验模式转换的应用用户接口重新配置 Download PDF

Info

Publication number
CN108027695A
CN108027695A CN201680006865.6A CN201680006865A CN108027695A CN 108027695 A CN108027695 A CN 108027695A CN 201680006865 A CN201680006865 A CN 201680006865A CN 108027695 A CN108027695 A CN 108027695A
Authority
CN
China
Prior art keywords
experience mode
experience
mode
application
operating system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201680006865.6A
Other languages
English (en)
Inventor
J·S·考夫塔尔
C·S·瓦尔克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN108027695A publication Critical patent/CN108027695A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/445Program loading or initiating
    • G06F9/44505Configuring for program initiating, e.g. using registry, configuration files

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

描述了用于由操作系统(OS)响应于体验模式的转换而将应用的用户接口(UI)的配置转换为特定的体验模式配置的系统和方法的方面。可以将应用UI从针对硬件输入交互被优化的配置转换为针对经由自然输入方法的交互被优化的配置,或者反之亦然。体验模式转换触发事件由OS检测,并且作为响应,OS从第一体验模式转换为第二体验模式,并且向应用传送该转换。响应于传送,应用转换为第二体验模式,并将UI重新配置为与第二体验模式相关联的配置。其它方面使得用户能够经由应用手动地切换体验模式,并且当OS对模式进行转换时保持处于所选择的模式。

Description

基于体验模式转换的应用用户接口重新配置
背景技术
现代用户使用软件应用来执行可以在各种类型的计算设备(例如,平板、智能电话、膝上计算机、台式计算机、可翻转计算机等)上执行的各种任务。各种计算设备支持多于一种输入模式,例如,触摸输入、鼠标输入、笔/触控笔输入、手势输入等,并因此支持各种使用场景中的交互。为了协助用户定位和使用给定应用的功能,提供了包含多个可选择的功能控件的用户接口。取决于特定的使用场景,功能控件的布置提供较好的用户体验。例如,在其中输入可以更精确的桌面体验模式中,用户接口可以包括具有较小的命中目标的较多选项。相反,在自然输入体验模式中,允许不那么精确的输入的用户接口(例如,在功能控件之间具有较大间隔来提供足够的空间以供用户的手指访问选项的用户接口)可能是更佳的。
发明内容
提供本发明内容以便以简化的形式引入在下面的具体实施方式章节中进一步描述的概念的选择。本发明内容并非旨在识别所要求保护的主题的关键特征或必要特征,也并非旨在用于限制所要求保护的主题的范围。
系统的方面提供了基于检测到由操作系统或者由应用用信号传达的体验模式转换触发事件来将应用用户接口转换为特定的体验模式配置。根据各种方面,本文中所讨论的将应用用户接口转换为特定的体验模式配置使得应用能够在桌面体验模式和自然输入体验模式二者中进行操作,而不需要用户手动地切换体验模式。此外,方面在不中断操作系统或应用的操作连续性和交互上下文的情况下实现了桌面体验模式与自然输入体验模式之间的切换。
示例被实现为计算机过程、计算系统、或者诸如计算机程序产品或计算机可读介质的制品。根据一个方面,计算机程序产品是能够由计算机系统读取、并且对用于执行计算机过程的指令的计算机程序进行编码的计算机存储介质。
在附图和下面的说明书中阐述了一个或多个方面的细节。通过阅读以下具体实施方式并阅览相关联的附图,其它特征和优点将显而易见。应当理解,以下具体实施方式仅是示例性的而不对权利要求进行限制。
附图说明
通过参考以下附图,本公开内容的另外的特征、方面、以及优点将变得更好理解,其中,元素不是按比例的,以便于更清楚地示出细节,并且其中,相同的附图标记贯穿若干视图指示相同的元素;
图1是示出用于响应于体验模式转换触发事件而将应用的用户接口转换为特定的体验模式配置的系统的框图;
图2A是示出在用于响应于由操作系统用信号传达的体验模式转换触发事件而将应用用户接口转换为特定的体验模式配置的示例方法中所涉及的总体阶段的高级别流程图;
图2B是示出在用于响应于由操作系统用信号传达的体验模式转换触发事件而将应用用户接口转换为特定的体验模式配置的另一示例方法中所涉及的总体阶段的高级别流程图;
图2C是示出在用于响应于由应用用信号传达的体验模式转换触发事件而将应用用户接口转换为特定的体验模式配置的示例方法中所涉及的总体阶段的高级别流程图;
图2D是示出在用于响应于基于检测到由操作系统用信号传达的体验模式转换触发事件而转换为应用的模式优化的版本的示例方法中所涉及的总体阶段的高级别流程图;
图3是附接到硬件输入设备的示例计算设备的示例说明;
图4是用户在计算设备上显示的桌面体验模式开始菜单中选择启动应用的示例说明;
图5是在计算设备上显示、并且包括应用桌面体验模式UI的显示的应用的示例说明;
图6是通过用户将硬件输入设备从计算设备断开连接而生成的模式转换事件以及接收用户许可以用于转换为桌面体验模式的通知的示例的示例说明;
图7是应用转换为自然输入体验模式并将应用UI重新配置为自然输入体验模式UI的示例说明;
图8是用户选择从自然输入体验模式开始菜单中启动应用的示例说明;
图9是在计算设备的显示器上显示为自然输入体验模式UI的应用UI的示例说明;
图10是自然输入浮动上下文UI菜单的示例说明;
图11是自然输入体验应用UI菜单中的功能控件的示例说明;
图12是自然输入体验应用UI菜单中的诸如调出和下拉菜单的功能的示例说明;
图13是通过用户将硬件输入设备连接到计算设备而生成的模式转换事件的示例的示例说明;
图14是在计算设备上显示、提示用户选择从自然输入体验模式转换为桌面体验模式的通知的示例说明;
图15是被重新配置为桌面体验模式UI的应用UI的示例说明;
图16是在桌面体验模式UI中显示的桌面体验应用UI菜单的示例说明;
图17是桌面体验模式UI的示例说明;
图18A是在自然输入体验模式中显示、并且包括触摸动作栏的示例应用UI的示例说明;
图18B示出了示例桌面体验模式应用UI菜单与示例自然输入体验模式应用UI菜单的比较;
图19是示出可以用来实践示例的计算设备的物理组件的一个示例的框图;
图20A和图20B是可以用来实践示例的移动计算设备的简化框图;以及
图21是其中可以实践示例的分布式计算系统的简化框图。
具体实施方式
下面参考附图更全面地描述各种方面,附图形成其中的一部分,并且示出具体的示例性方面。然而,方面可以以许多不同的形式实现,并且不应当被解释为限于本文中所阐述的方面;相反,这些方面被提供以使得本公开内容将是透彻且完整的,并且将全面地向本领域技术人员传达方面的范围。方面可以被实践为方法、系统、或设备。因此,方面可以采用硬件实现方式、完全软件实现方式、或组合软件和硬件方面的实现方式的形式。因此,以下具体实施方式不应被认为是限制意义的。
在本文中描述并且在附图中示出了用于基于检测到由应用或者由操作系统用信号传达的体验模式转换触发事件来将应用的用户接口转换为特定体验模式配置的系统的方面。方面使得能够将应用和操作系统的用户接口转换为特定的体验模式配置,该特定的体验模式配置是定制用于根据所检测的体验模式转换触发事件的使用场景的,并且因此优化与设备的用户交互。一般地,实现将应用和操作系统的用户接口转换为定制用于使用场景的特定的体验模式配置增加用户和计算效率并减少要完成各种任务花费的时间量。根据一个方面,本文中所讨论的技术检测触发事件并在接收来自用户的肯定响应时对应用用户接口和操作系统用户接口体验模式配置进行转换。根据另一方面,本文中所讨论的技术检测触发事件并对应用用户接口和操作系统用户接口体验模式配置进行转换,而不需要用户提供分离的动作来引起转换。
方面降低用户交互时间和用户不方便性,这是因为用户不需要手动地在用户接口体验模式之间进行转换或者当在应用或在操作系统中发生体验模式之间的切换时重新发现和/或恢复上下文。此外,所需要的与计算设备的用户交互的数量降低,这是因为用户可以跨体验模式之间的切换而继续与应用交互,因此增加了计算效率并减少了要完成各种任务花费的时间量。此外,通过降低要执行任务(例如,在操作系统和应用的不同体验模式之间进行切换)必须被处理的输入的数量节约了计算资源。
图1是示出用于基于检测到由应用或者操作系统(在本文中有时被称为OS)用信号传达的体验模式转换触发事件来转换应用的用户接口体验模式配置的系统的框图。系统100包括操作系统104,其具有一个或多个操作系统用户接口120、操作系统体验模式模块106、以及具有一个或多个应用用户接口110((多个)应用UI 110)的至少一个应用108。用户116使用计算设备102上的应用108来进行各种任务,例如,书写、计算、绘画、组织、准备演示文稿、发送和接收电子邮件、记笔记和组织笔记、制作音乐等。根据一个方面,应用108包括本地存储在计算设备上的胖(thick)客户端应用。根据另一方面,应用108包括驻留在远程服务器上并且能够通过网络(例如,互联网或内联网)访问的瘦(thin)客户端应用(即,网络应用)。例如,瘦客户端应用托管在浏览器控制的环境中,或者以浏览器支持的语言被编码并依赖于公共的网络浏览器,以使得应用108能够在计算设备102上执行。计算设备102被配置为接收内容以供在显示器118上呈现。
应用108被配置为使得用户116能够在计算设备102上使用定点设备(例如,笔/触控笔、鼠标等)和/或使用传感器(例如,触摸传感器、手势传感器、悬停传感器、加速度计、陀螺仪、倾斜传感器)来经由多个输入模式与内容进行交互。根据一个方面,计算设备102可操作以支持多于一种输入模式,并且因此支持多种使用场景中的交互。
为了协助用户定位和使用给定应用108的功能,提供了包含多个可选择的功能控件的应用用户接口(UI)110。取决于特定的使用场景,功能控件的布置提供较好的用户体验。例如,在其中输入可以更精确的桌面体验模式中,应用UI 110可以包括具有较小的命中目标的较多功能控件。根据另一示例,在自然输入体验模式中,应用UI中的功能控件的布置允许不那么精确的输入,例如,通过在功能控件之间提供较大的间隔来允许足够的空间以供用户的手指访问选项。应用108与应用UI体验模式模块114通信,应用UI体验模式模块114包括这样的功能:将应用UI从自然输入体验模式配置转换为桌面体验模式配置,并且反之亦然。根据一个方面,应用体验模式模块114是应用108的组件。在一些示例中,应用UI体验模式模块114包括体验模式应用协议接口(API),其向操作系统104报告在应用108中发起的体验模式转换触发事件。例如,体验模式转换触发事件包括在应用UI 110中显示的体验模式功能控件的选择。
仍然参考图1,系统100包括操作系统(OS)体验模式模块106。根据一个方面,体验模式模块106使得计算设备102上的操作系统104能够在不同的用户体验模式(例如,自然输入体验模式、桌面体验模式等)中操作并且在不同的用户体验模式之间切换。例如,取决于用户体验模式,操作系统104将OS用户接口120重新配置为或者针对自然输入(当OS 104处于自然输入体验模式中时)被优化的或者针对传统的硬件输入(当OS 104处于桌面体验模式中时)被优化的体验模式UI配置。根据另一方面,操作系统体验模式模块106与应用108通信(例如,经由体验模式API),以向应用108报告在操作系统104中发起的体验模式转换触发事件,其向应用108指示何时在不同的用户体验模式UI配置(例如,自然输入体验模式UI配置、桌面体验模式UI配置等)中操作以及在不同的用户体验模式UI配置之间切换。根据一个方面,操作系统体验模式模块106是操作系统104的组件。
根据一个方面,操作系统体验模式模块106包括体验模式API。一般地,体验模式API表示提供用于与体验模式模块106交互的接口的API。根据一个方面,应用108能够调用OS体验模式API以用于通知不同的体验模式之间的转换。此外,根据一个方面,OS体验模式模块106使用OS体验模式API来向应用108传送各种体验相关的事件。在一些示例中,操作系统104能够调用应用体验模式API以用于通知不同的体验模式之间的转换。此外,应用体验模式模块114使用应用体验模式API来向操作系统104传送各种体验相关的事件。
一般地,“自然输入体验模式”指代这样的操作模式:其中计算设备102的各种视觉、功能、以及行为特性针对以“自然”方式与计算设备102进行用户交互被优化,免于由诸如鼠标、键盘、远程控件等输入设备施加的人工约束。例如,自然输入方法包括依赖于触摸识别、在屏幕上以及邻近屏幕二者的手势识别、空中手势、头部和眼睛跟踪等的那些方法。在操作系统UI 120中,自然输入体验模式UI配置将多应用的环境呈现为沉浸式环境,其扩展系统菜单、放大菜单选择项、扩展菜单选择项的命中目标区域、在状态栏中提供后退按钮等。在一些示例中,自然输入体验模式UI配置排除使用类似桌面的显示和功能可见性(affordance),例如,状态栏(例如,任务栏)、标题栏等。尽管自然输入体验模式被描述为单独的输入体验模式的集合,并且自然输入体验模式UI配置被描述为一般针对以“自然方式”进行用户交互和输入被优化的配置,但是应当认识到,每种单独的自然交互和输入方法(例如,依赖于触摸识别、在屏幕上以及邻近屏幕二者的手势识别、空中手势、头部和眼睛跟踪等的那些方法)可以具有其自己的分离的输入体验模式(例如,触摸模式、手势模式、空中手势模式、头部和眼睛跟踪模式等)。
图8中示出了自然输入体验模式UI配置中的示例操作系统UI 120。在应用UI 110中,自然输入体验模式UI配置提供额外的间隔功能控件、放大功能控件、扩展功能控件的命中目标区域,以及以针对触摸输入、手势输入、空中手势输入、头部和眼睛跟踪输入等被优化的方式来改变功能控件的行为,例如,将标准按钮变换为具有下拉的拆分按钮、提供调出、移除微调控件、移除应用UI窗口控件(例如,最小化、最大化、关闭、以及恢复命令)、提供沿显示器118的一侧固定住的触摸动作栏、以及提供浮动的上下文用户接口菜单。根据一个方面,当从桌面体验模式转换为自然输入体验模式时,应用UI体验模式模块114禁用特定的应用UI交互功能(例如,悬停)。图7和图9-14中示出了自然输入体验模式UI配置中的示例应用UI 110。
“桌面体验模式”一般指代较传统的操作模式,例如,涉及经由鼠标、轨迹板、硬件键盘等的用户交互。在操作系统UI 120中,桌面体验模式UI配置将多应用的环境呈现为多窗口的环境,其提供具有较小的菜单选择项的较紧凑的系统菜单、减小的菜单选择项的命中目标区域等。在一些示例中,在操作系统UI 120中,桌面体验模式UI配置包括使用类似桌面的显示和功能可见性,例如,状态栏(例如,任务栏)、标题栏等。图3和图4中示出了桌面体验模式UI配置中的示例操作系统UI 120。
在应用UI 110中,桌面体验模式UI配置提供具有较小的命中目标的较多的功能命令选项,并且以针对更精确的输入方法被优化的方式来改变功能控件的行为。图5、图6、以及图15-17中示出了桌面体验模式UI配置中的示例应用UI 110。如下面进一步详细说明的,自然输入体验模式UI配置和桌面体验模式UI配置包括不同的相应的视觉、功能、以及行为特征,其能够取决于在计算设备102上哪个模式是激活的而被应用。
图2A是示出在用于基于检测到由操作系统104用信号传达的体验模式转换触发事件来将应用用户接口110转换为特定的体验模式配置的示例方法中所涉及的总体阶段的高级别流程图。方法200开始于当指示体验模式改变的事件发生时。例如,模式转换事件表示从桌面体验模式到自然输入体验模式的改变,或者反之亦然。模式转换事件可以以各种方式来生成。根据一个方面,模式转换事件响应于基于硬件的动作而发生。例如,用户116可以将诸如键盘和/或鼠标的硬件输入设备连接到便携式计算设备102,例如,平板。这种连接可以以各种方式发生,例如,经由物理连接、无线连接等。将硬件输入设备连接到便携式计算设备102生成模式转换事件。例如,模式转换事件是对从自然输入体验模式改变为桌面体验模式的调用。图13中示出了通过用户116将硬件输入设备连接到计算设备102而生成的模式转换事件的示例。
作为另一示例,用户116可以将硬件输入设备从便携式计算设备102断开连接。例如,用户116可以断开硬件输入设备与便携式计算设备102之间的物理连接。作为另一示例,用户116可以禁用硬件输入设备与便携式计算设备102之间的无线连接(例如,或其它短距离无线电技术连接)。将硬件输入设备从便携式计算设备102断开连接生成模式转换事件。例如,模式转换事件是对从桌面体验模式改变为自然输入体验模式的调用。图6中示出了通过用户116将硬件输入设备从计算设备102断开连接而生成的模式转换事件的示例。
在其它示例中,响应于指导在体验模式之间进行改变的用户输入而生成模式转换事件。例如,可选择的模式控件可以在操作系统UI 120中显示,该可选择的模式控件在被选择时生成模式转换事件。可选择的模式控件可以在操作系统UI 120中的各种位置处显示和/或可访问,例如,在任务栏、开始菜单、选项菜单等中。在其它示例中,指导在体验模式之间进行改变的用户输入是经由键盘做出的,例如,选择键盘上的模式控制按钮,或者选择快捷键、存取键等。
在操作202处,模式转换事件被检测。根据一个方面,模式转换事件由操作系统104检测。根据另一方面,模式转换事件由OS体验模式模块106检测。在一些示例中,模式转换事件响应于模式改变的通知而被检测。在操作203处,OS用户接口120从其当前的体验模式转换为与模式转换事件相关联的体验模式,并且操作系统104基于体验模式来重新配置OS用户接口120,例如,从桌面体验模式配置重新配置为自然输入体验模式配置,或者从自然输入体验模式配置重新配置为桌面体验模式配置。例如,当将OS用户接口120重新配置为自然输入体验模式配置时,重新配置可以包括以下中的一个或多个:在任务栏中提供后退按钮,扩展应用UI 110的显示以填充显示器118的最大区域,提供具有较大菜单选择以及菜单选择控件之间的额外间隔的较大系统菜单,扩展菜单选择控件的命中目标区域等。
方法200前进到操作204,在操作204处应用UI体验模式模块114接收模式转换事件的通知。例如,应用UI体验模式模块114对OS体验模式API做出API调用,以用于针对体验模式状态对体验模式模块106进行查询。作为另一示例,应用UI体验模式模块114收听指示模式转换事件已经发生的事件。
方法200进行到操作206,在操作206处应用108基于体验模式来重新配置应用UI110。在一个示例中,通知在重新配置之前被提供给用户,告知用户应用UI 110将从桌面体验模式重新配置为自然输入体验模式,或者反之亦然。在另一示例中,通知在重新配置之后被提供给用户,告知用户该转换。在另一示例中,不向用户提供任何通知。根据一个方面,当从桌面体验模式转换为自然输入体验模式时,应用UI体验模式模块114将应用UI 110重新配置为针对自然交互输入(例如,触摸输入、手势输入、空中手势输入、头部和眼睛跟踪输入等)被优化。根据一个方面,当从桌面体验模式转换为自然输入体验模式时,应用108重新配置应用UI 110,重新配置包括以下中的至少一个:提供额外的间隔功能控件,放大功能控件,扩展功能控件的命中目标区域,以针对触摸输入、手势输入、空中手势输入、头部和眼睛跟踪输入等被优化的方式来改变功能控件的行为,例如,将标准按钮变换为具有下拉的拆分按钮、提供调出、移除微调控件、移除应用UI窗口控件(例如,最小化、最大化、关闭、以及恢复命令)、提供固定到显示器118的一侧的触摸动作栏、以及提供浮动的上下文用户接口菜单。根据一个方面,当从桌面体验模式转换为自然输入体验模式时,应用108禁用特定的应用UI交互功能(例如,悬停)。图7和图9-14中示出了自然输入体验模式UI配置的各种示例。
根据一个方面,当从自然输入体验模式转换为桌面体验模式时,应用UI体验模式模块114将应用UI 110重新配置为较传统的操作模式,例如,涉及经由精确的输入设备(例如,鼠标、轨迹板、硬件键盘等)的用户交互。在一些示例中,当将应用UI 110从自然输入体验模式重新配置为桌面体验模式时,应用UI体验模式模块114将功能控件的行为改变为使用特定于鼠标或其它类型的定点设备的特征。在其它示例中,应用UI体验模式模块114实现特定的应用UI交互功能(例如,悬停)。在其它示例中,应用108向应用UI 110的标题栏增加应用窗口命令,例如,最小化、最大化、关闭、以及恢复命令。图5、图6、以及图15-17中示出了桌面体验模式UI配置的各种示例。
图2B是示出在用于基于检测到经由操作系统104的体验模式转换触发事件来将应用用户接口110转换为特定的体验模式配置的另一示例方法中所涉及的总体阶段的高级别流程图。在图2B所示的示例方法208中,在转换应用UI 110的体验模式配置之前需要用户输入。
方法208开始于当指示操作系统104体验模式改变的事件发生时。例如,模式转换事件表示从桌面体验模式到自然输入体验模式的改变,或者反之亦然。在操作210处,模式转换事件如上面关于图2A所描述的被检测。
方法208进行到操作212,在操作212处响应于模式转换事件而由操作系统104向用户116提供通知。根据一个方面,取决于当前模式和触发模式转换事件的动作,通知提示用户116对是从桌面体验模式转换为自然输入体验模式还是从自然输入体验模式转换为桌面体验模式进行选择。
在决策操作214处,关于用户116是选择改变体验模式、选择不改变体验模式、还是不理会该事件做出确定。如果接收到来自用户的否定响应的指示(例如,由用户做出的不改变当前体验模式或不理会通知的选择),则体验模式不进行转换,并且方法208结束。
如果接收到选择改变体验模式的指示,则方法208进行到操作215,在操作215处体验模式被改变,并且OS体验模式模块106重新配置OS用户接口120,例如,从桌面体验模式配置重新配置为自然输入体验模式配置,或者从自然输入体验模式配置重新配置为桌面体验模式配置。然后,方法208进行到操作216,在操作216处操作系统104经由OS体验模式模块106通知应用UI体验模式模块114对体验模式进行转换。例如,如果应用108处于桌面体验模式中,则操作系统104通知应用UI体验模式模块114转换为自然输入体验模式。作为另一示例,如果应用108处于自然输入体验模式中,则操作系统104通知应用UI体验模式模块114转换为桌面体验模式。
方法208前进到操作218,在操作218处应用UI体验模式模块114基于体验模式来重新配置应用UI 110,例如,从桌面体验模式重新配置为自然输入体验模式,或者从自然输入体验模式重新配置为桌面体验模式。
图2C是示出在用于响应于由应用108用信号传达的体验模式转换触发事件而将应用用户接口110转换为特定的体验模式配置的示例方法中所涉及的总体阶段的高级别流程图。方法220开始于当在应用108中发生与体验模式改变相关联的事件时。在一些示例中,与体验模式改变相关联的事件是由用户116进行的手动选择,例如,对在应用UI 110中显示的体验模式功能控件的选择。图9-18中示出了体验模式功能控件902的示例。在一些示例中,对应用108中的体验模式进行手动选择类似于对应用体验模式进行手动覆写(override)。
方法220继续到操作222,在操作222处应用体验模式模块114检测事件,并且在操作224处,将应用108的体验模式改变为所选择的体验模式,并且基于体验模式来重新配置应用UI 110。例如,如果应用108处于桌面体验模式中,并且用户116选择体验模式功能控件902以将体验模式改变为自然输入体验模式,则应用108将应用UI 110重新配置为针对自然交互输入(例如,触摸输入、手势输入、空中手势输入、头部和眼睛跟踪输入等)被优化的自然输入模式UI配置。
方法220进行到操作226,在操作226处操作系统发起的模式转换事件发生,操作系统体验模式模块106基于体验模式来重新配置操作系统UI 120,并且将体验模式转换事件用信号传达给应用体验模式模块114。在一个示例中,操作系统体验模式模块106经由OS体验模式模块API广播模式转换事件,并且应用体验模式模块API收听并接收OS模式转换事件的指示。在另一示例中,应用体验模式模块API针对OS模式转换事件对OS体验模式模块API做出调用。
方法220继续到操作228,在操作228处应用体验模式模块114不改变当前手动选择的体验模式,并且应用UI 110保持处于当前手动选择的体验模式配置,而不管OS体验模式转换。
例如,考虑到操作系统104和应用108处于桌面体验模式中,并且用户116手动地选择将应用108置于自然输入体验模式中。因此,应用108转换为自然输入体验模式,并且应用UI 110被重新配置为自然输入UI配置。接下来,考虑到用户116将键盘或其它硬件设备从计算机102拆离。因此,操作系统104转换为自然输入体验模式,并且将该转换用信号传达给应用108。根据一个方面,应用108保持处于自然输入体验模式中。接下来,考虑到用户116将键盘或其它硬件设备重新附接到计算机102。因此,操作系统104转换为桌面体验模式,并且将该转换用信号传达给应用108。根据一个方面,应用108保持处于自然输入体验模式。
图2D是示出在用于响应于基于检测到经由操作系统104的体验模式转换触发事件而转换为应用108的模式优化的版本的示例方法中所涉及的总体阶段的高级别流程图。方法230开始于当指示操作系统104体验模式改变的事件发生时。例如,模式转换事件表示从桌面体验模式到自然输入体验模式的改变,或者反之亦然。在操作232处,模式转换事件被检测。在操作234处,OS用户接口120从其当前的体验模式转换为与模式转换事件相关联的体验模式,并且操作系统104基于体验模式来重新配置OS用户接口120,例如,如上面关于图2A所描述的。
方法230继续到操作236,在操作236处当前运行的应用108不具有或支持OS用户接口120所转换到的体验模式。因此,操作系统104用信号传达要在与模式转换事件相关联的体验模式中执行或启动的应用108的模式优化的版本(例如,具有或支持OS用户接口120所转换到的体验模式的应用108的版本)。应用108的模式优化的版本接收信号并启动。
方法230继续到操作238,在操作238中应用108的模式优化的版本提供处于与模式转换事件相关联的体验模式中的应用UI 110,并恢复先前启动的应用108的相关上下文。例如,应用108的模式优化的版本确保正确的文档被打开,并滚动到正确的位置等,以使得用户116感觉无缝。
现在参考图3-7,示出了示例说明从桌面体验模式转换为自然输入体验模式的示例。在图3中,示出了附接到键盘302的计算设备102。因此且如所示出的,操作系统104处于桌面体验模式中。在所示出的示例中,输入设备是键盘302。然而,这并非旨在是限制性的,并且输入设备可以以各种其它方式来实现,例如,游戏控制器、音乐控制器、鼠标、触摸板等。
在图4中,经由鼠标或其它指针或键盘选择来打开桌面体验模式OS开始菜单402。如所示出的,在桌面体验模式中,桌面体验模式OS开始菜单402在显示器118的紧凑区中显示,并且包括以较小的显示尺寸显示且紧凑地布置的各种菜单选择项。此外,状态栏(有时也被称为任务栏)402不包括后退按钮。然后,用户116经由鼠标或其它指针来选择菜单选择项,以启动应用108。根据所示出的示例,应用108是记事本应用。
在图5中,应用108处于桌面体验模式中,并且应用UI 110被显示为计算设备102的显示器118上的桌面体验模式UI 510。例如,在桌面体验模式中,应用UI 110包括窗口控件502,例如,最大化、最小化、关闭、以及恢复命令。
在图6中,用户116将计算设备102从键盘302拆离,这产生模式转换事件602。因此,在一些示例中,操作系统104显示通知604,提示用户116选择从桌面体验模式转换为自然输入体验模式。如所示出的,用户116选择转换为自然输入体验模式,并且因此,操作系统104转换为自然输入体验模式,并且向应用108用信号传达要转换为自然输入体验模式。能够存在用于描述自然输入体验模式的各种术语。在一些示例中,自然输入体验模式可以被称为平板模式。根据一个方面,用于描述自然输入体验模式的术语可以通过被使用的计算设备102的特定类型来确定。
在图7中,应用108转换为自然输入体验模式,并且将应用UI 110重新配置为自然输入体验模式UI 710。例如,应用UI 110变为沉浸式的并填充显示器118,并且功能控件针对自然交互输入(例如,触摸输入、手势输入、空中手势输入、头部和眼睛跟踪输入等)被优化,如上面所描述的。如所示出的,后退按钮702由OS体验模式模块106增加到OS任务栏504。
现在参考图8-17,示出了示例说明从自然输入体验模式转换为桌面体验模式的示例。在图8中,操作系统104处于自然输入体验模式中,并且自然输入体验模式开始菜单802在操作系统用户接口120中显示。在自然输入体验模式中,自然输入体验模式开始菜单802被显示为填充用户接口120的扩展的沉浸式菜单。如所示出的,自然输入体验OS用户接口120在自然输入体验模式开始菜单802中包括具有扩展的命中目标区域的放大的菜单选择项,并且在状态栏或任务栏504中提供后退按钮702等。在所示出的示例中,用户116选择用于启动自然输入体验模式开始菜单802的命令。然后,用户116触摸控件804以启动应用108。根据所示出的示例,应用108是文字处理应用。
在图9中,应用108处于自然输入体验模式中,并且应用UI 110被显示为计算设备102的显示器118上的自然输入体验模式UI 710。例如,应用UI 110是沉浸式的或者在显示器118中最大化且填充显示器118,并且在应用UI 110中功能控件被放大并且间隔开,以使得其针对自然交互输入(例如,触摸输入、手势输入、空中手势输入、头部和眼睛跟踪输入等)被优化。应用UI 110包括体验模式功能控件902,其在被选择时将应用体验模式覆写为所选择的体验模式。在一些示例中并且如图10所示出的,自然输入体验模式中的应用UI110包括代替鼠标类型的上下文菜单显示的自然输入浮动上下文UI菜单1002。例如,自然输入浮动上下文UI菜单1002中的功能控件1004具有较大的命中目标。为了在自然输入体验模式中供应较大的命中目标,功能控件较大且间隔较远地分开。
如图11所示出的,当应用108处于自然输入体验模式中时,自然输入体验应用UI菜单1102中的功能控件间隔较远地分开,这使得对于自然输入方法而言能够更简单地进行选择。如图12所示出的,自然输入体验模式UI 710包括诸如来自自然输入体验应用UI菜单1102的调出和下拉菜单1202的功能。根据一个方面,当处于自然输入体验模式中时,功能控件的某些行为被改变。例如,在桌面体验模式中,一些功能控件具有多于一个激活区,其中激活区中的一个供给对与控件(例如,拆分按钮控件1204或微调控件)相关联的功能或值的超集的访问。当这些功能控件在自然输入体验模式UI中显示时,多个激活区被组合成单个目标。例如并且如图12所示出的,选择拆分按钮控件1204的任何部分造成包括互相排斥的值的列表的次级UI菜单(例如,下拉菜单1202、弹出菜单等)的显示。
如图13中所示出的,用户116将计算设备102附接到键盘302,这产生OS模式转换事件602。因此,如图14中所示出的,操作系统104提供通知604,提示用户116选择是否从自然输入体验模式转换为桌面体验模式。如所示出的,用户116选择从当前模式退出并转换为桌面体验模式。因此,OS体验模式模块106将操作系统UI 120转换为桌面体验模式,并且向应用108提供该转换的指示,例如,经由应用体验模式模块114。在图15中,应用108转换为桌面体验模式,并且应用UI 110被重新配置为桌面体验模式UI配置510。如所示出的,后退按钮702从OS任务栏504中移除,应用108被重新窗口化,并且应用UI 110在桌面体验模式配置中显示,例如,其中窗口控件502包括在应用UI 110中,触摸动作栏904从显示中移除,以及功能控件显示地较大且离得较远,并且功能控件的行为被转换以用于精确输入。
在图16中,桌面体验应用UI菜单1602在桌面体验模式UI 510中显示,其中,桌面体验应用UI菜单1602中的功能控件较小并且间隔较近地在一起,从而允许显示较多的功能控件。
如图17中所示出的,桌面体验模式UI 510包括桌面体验模式下拉功能1702的较紧密的布局。此外,当处于桌面体验模式中时,一些功能控件的某些行为被改变,例如,拆分按钮控件1204、微调控件、以及具有多个激活区的其它功能控件。例如,在桌面体验模式中,可以要求用户选择拆分按钮控件1204的下拉箭头部分1704,以使得显示次级UI菜单(例如,下拉菜单1202、弹出菜单等)。这种行为不同于自然输入体验模式中的拆分按钮控件1204的行为,在自然输入体验模式中,次级UI菜单经由选择拆分按钮控件的任何部分来启动。
图18A是当应用108(在该示例中,电子邮件应用)处于自然输入体验模式中时示例应用UI 110的示例说明。在一些示例中以及如所示出的,当应用108处于自然输入体验模式中时,触摸动作栏1802包括在应用UI 110中。根据示例,触摸动作栏1802被固定到应用UI110的右边缘,并且包括多个功能控件。例如,在电子邮件应用中,触摸动作栏1802可以包括这样的功能控件,如答复、全部答复、或转发命令、删除命令、移动或复制到文件夹命令、后续标记命令、以及标注为已读或未读命令。
图18B示出了示例桌面体验模式应用UI菜单1602与示例自然输入体验模式应用UI菜单1102的比较。如能够看到的,自然输入体验模式应用UI菜单1102中的功能控件间隔较远地分开并且包括附加的补白(padding),从而提供针对自然交互输入(例如,触摸输入、手势输入、空中手势输入、头部和眼睛跟踪输入等)的优化的体验。由于在桌面体验模式中功能控件较小并且间隔较近地在一起,所以在桌面体验模式应用UI菜单1602中能够显示较多的功能控件。
用户接口转换系统和方法的示例提供了:由操作系统响应于从第一体验模式到第二体验模式的改变而接收操作系统体验模式转换事件的指示;将应用108的体验模式转换为第二体验模式;以及在第二体验模式配置710中生成应用用户接口的显示,其中,应用用户接口从第一体验模式配置510被重新配置为包括以下中的至少一个的改变:应用用户接口功能控件1004的大小;应用用户接口功能控件之间的间隔;应用用户接口功能控件的命中目标区域;以及具有多个激活区的功能控件的行为。
尽管已经在与在计算机上的操作系统上运行的应用程序结合地执行的程序模块的一般上下文中描述了示例,但是本领域技术人员将意识到,方面还可以与其它程序模块组合地实现。一般地,程序模块包括例程、程序、组件、数据结构、以及执行特定任务或实现特定抽象数据类型的其它类型的结构。
本文所描述的方面和功能可以经由大量的计算系统来操作,包括但不限于,台式计算机系统、有线和无线计算系统、移动计算系统(例如,移动电话、上网本、平板或板型计算机、笔记本计算机、以及膝上型计算机)、手持式设备、多处理器系统、基于微处理器的或可编程的消费者电子产品、小型计算机、以及大型计算机。
此外,根据一个方面,本文所描述的方面和功能在分布式系统(例如,基于云的计算系统)上进行操作,其中应用功能、存储器、数据存储和取回、以及各种处理功能通过分布式计算网络(例如,互联网或内联网)彼此远程地进行操作。根据一个方面,各种类型的用户接口和信息经由机载计算设备显示器或者经由与一个或多个计算设备相关联的远程显示单元来显示。例如,各种类型的用户接口和信息在墙壁表面上显示并进行交互,各种类型的用户接口和信息被投射到墙壁表面上。与用来实践示例的大量的计算系统的交互包括:键击输入、触摸屏输入、语音或其它音频输入、手势输入(其中,相关联的计算设备配备有用于捕获和解释用户手势以用于控制计算设备的功能的检测(例如,照相机)功能)等。
图19-21以及相关联的描述提供了对示例在其中被实践的各种操作环境的讨论。然而,关于图19-21示出和讨论的设备和系统是出于示例和说明的目的,而并非对用于实践本文所描述的示例的大量计算设备配置进行限制。
图19是示出计算设备1900的物理组件(即,硬件)的框图,利用该计算设备1900可以实践本公开内容的示例。在基本配置中,计算设备1900包括至少一个处理单元1902,以及系统存储器1904。根据一个方面,取决于计算设备的配置和类型,系统存储器1904包括但不限于易失性存储器(例如,随机存取存储器)、非易失性存储器(例如,只读存储器)、闪速存储器、或者这些存储器的任何组合。根据一个方面,系统存储器1904包括操作系统1905和适于运行软件应用1950的一个或多个编程模块1906。根据一个方面,系统存储器1904包括体验模式模块106和应用UI体验模式模块114。例如,操作系统1905适于控制计算设备1900的操作。此外,示例结合图形库、其它操作系统、或任何其它应用程序来实践,并且不限于任何特定的应用或系统。该基本配置在图19中由短划线1908内的那些组件示出。根据一个方面,计算设备1900具有附加的特征或功能。例如,根据一个方面,计算设备1900包括附加的数据存储设备(可移除的和/或不可移除的),举例来说,例如,磁盘、光盘、或磁带。这样的附加存储在图19中由可移除存储设备1909和不可移除存储设备1910示出。
如上面陈述的,根据一个方面,多个程序模块和数据文件存储在系统存储器1904中。当在处理单元1902上执行时,程序模块1906(例如,体验模式模块106)执行过程,包括但不限于图2所示的方法200的阶段中的一个或多个阶段。根据一个方面,其它程序模块是根据示例使用的,并且包括诸如电子邮件和联系人应用、文字处理应用、电子表格应用、数据库应用、幻灯片演示应用、画图或计算机辅助应用程序等的应用。
根据一个方面,示例在包括分立电子元件的电子电路、包含逻辑门的封装或集成电子芯片、使用微处理器的电路中实践,或者在包含电子元件或微处理器的单个芯片上实践。例如,方面经由片上系统(SOC)来实践,其中,图19所示的组件中的每个组件或许多组件集成到单个集成电路上。根据一个方面,这种SOC器件包括一个或多个处理单元、图形单元、通信单元、系统虚拟化单元、以及各种应用功能,其全部集成(或者“烧录”)到芯片基板上成为单个集成电路。当经由SOC进行操作时,经由与计算设备1900的其它组件一起集成到单个集成电路(芯片)上的专用逻辑对本文所描述的功能进行操作。根据一个方面,本公开内容的方面使用能够执行逻辑操作(举例来说,例如,与(AND)、或(OR)、以及非(NOT))的其它技术来实践,包括但不限于机械、光学、流体、以及量子技术。此外,示例在通用计算机内或者在任何其它电路或系统中实践。
根据一个方面,计算设备1900具有一个或多个输入设备1912,例如,键盘、鼠标、笔、声音输入设备、触摸输入设备等。根据一个方面,还包括(多个)输出设备1914,例如,显示器、扬声器、打印机等。上述设备是示例,并且可以使用其它设备。根据一个方面,计算设备1900包括允许与其它计算设备1918进行通信的一个或多个通信连接1916。合适的通信连接1916的示例包括但不限于:RF发射机、接收机、和/或收发机电路;通用串行总线(USB)、并行、和/或串行端口。
如本文使用的术语计算机可读介质包括计算机存储介质。计算机存储介质包括易失性和非易失性、可移除和不可移除的介质,其以任何方法或技术实现以用于存储信息,例如,计算机可读指令、数据结构、或程序模块。系统存储器1904、可移除存储设备1909、以及不可移除存储设备1910全部是计算机存储介质示例(例如,存储器存储)。根据一个方面,计算机存储介质包括RAM、ROM、电可擦除可编程只读存储器(EEPROM)、闪速存储器或其它存储器技术,CD-ROM、数字通用盘(DVD)或其它光存储,磁带盒、磁带、磁盘存储或其它磁存储设备,或者能够用于存储信息并且能够由计算设备1900访问的任何其它制品。根据一个方面,任何这样的计算机存储介质是计算设备1900的一部分。计算机存储介质不包括载波或其它传播的数据信号。
根据一个方面,通信介质通过计算机可读指令、数据结构、程序模块、或者调制数据信号中的其它数据(例如,载波或其它传输机制)来实施,并且包括任何信息递送介质。根据一个方面,术语“调制数据信号”描述了一个或多个特性以对信号中的信息进行编码的方式设置或改变的信号。通过示例而非限制的方式,通信介质包括有线介质(例如,有线网络或直接有线连接)和无线介质(例如,声学、射频(RF)、红外、以及其它无线介质)。
图20A和图20B示出了移动计算设备2000(例如,移动电话、智能电话、平板个人计算机、膝上型计算机等),示例可以利用该移动计算设备2000来实践。参考图20A,示出了用于实现方面的移动计算设备2000的示例。在基本配置中,移动计算设备2000是具有输入元件和输出元件二者的手持式计算机。移动计算设备2000典型地包括显示器2005和允许用户将信息输入到移动计算设备2000中的一个或多个输入按钮2010。根据一个方面,移动计算设备2000的显示器2005用作输入设备(例如,触摸屏显示器)。如果包括可选的侧面输入元件2015,则其允许进一步的用户输入。根据一个方面,侧面输入元件2015是旋转开关、按钮、或任何其它类型的手动输入元件。在替代示例中,移动计算设备2000包含更多或更少的输入元件。例如,在一些示例中,显示器2005可以不是触摸屏。在替代示例中,移动计算设备2000是便携式电话系统,例如,蜂窝电话。根据一个方面,移动计算设备2000包括可选的键板2035。根据一个方面,可选的键板2035是物理键板。根据另一方面,可选的键板2035是在触摸屏显示器上生成的“软”键板。在各种方面中,输出元件包括用于显示图形用户接口(GUI)的显示器2005、视觉指示器2020(例如,发光二极管)、和/或音频转换器2025(例如,扬声器)。在一些示例中,移动计算设备2000包含用于向用户提供触觉反馈的振动转换器。在另一示例中,移动计算设备2000包含输入和/或输出端口,例如,音频输入(例如,麦克风插孔)、音频输出(例如,耳机插孔)、以及视频输出(例如,HDMI端口),以用于向外部设备发送信号或接收来自外部设备的信号。
图20B是示出移动计算设备的一个示例的架构的框图。也就是说,移动计算设备2000包含用于实现一些示例的系统(即,架构)2002。在一个示例中,系统2002被实现为能够运行一个或多个应用(例如,浏览器、电子邮件、日历、联系人管理器、消息传递客户端、游戏、以及媒体客户端/播放器)的“智能电话”。在一些示例中,系统2002被集成为计算设备,例如,集成的个人数字助理(PDA)和无线电话。
根据一个方面,一个或多个应用程序2050被加载到存储器2062中,并在操作系统2064上运行或与操作系统2064相关联地运行。应用程序的示例包括电话拨号程序、电子邮件程序、个人信息管理(PIM)程序、文字处理程序、电子表格程序、互联网浏览器程序、消息传递程序等。根据一个方面,体验模式模块106和应用UI体验模式模块114被加载到存储器2062中。系统2002还包括存储器2062内的非易失性存储区域2068。非易失性存储区域2068用于存储持久信息,如果系统2002断电,则持久信息不应当丢失。应用程序2050可以使用并存储非易失性存储区域2068中的信息,例如,电子邮件或者由电子邮件应用使用的其它消息等。同步应用(未示出)也驻留在系统2002上,并且被编程为与驻留在主机计算机上的对应的同步应用进行交互,以使得存储在非易失性存储区域2068中的信息与存储在主机计算机处的对应信息保持同步。如应当认识到的,其它应用可以被加载到存储器2062中并在移动计算设备2000上运行。
根据一个方面,系统2002具有电源供应2070,其被实现为一个或多个电池。根据一个方面,电源供应2070还包括外部电源,例如,AC适配器或者对电池进行补充或重新充电的电力驱动的对接支架。
根据一个方面,系统2002包括执行发送和接收射频通信功能的无线电2072。无线电2072促进经由通信载波或服务供应商在系统2002与“外界”之间进行无线连接。到无线电2072的传输以及来自无线电2072的传输是在操作系统2064的控制下进行的。换言之,可以经由操作系统2064将由无线电2072接收的通信散播到应用程序2050,并且反之亦然。
根据一个方面,视觉指示器2020用于提供视觉通知和/或音频接口2074用于经由音频转换器2025产生可听通知。在所示出的示例中,视觉指示器2020是发光二极管(LED),并且音频转换器2025是扬声器。这些设备可以直接耦合到电源供应2070,以使得当这些设备被激活时,即使处理器2060和其它组件可能关闭以节约电池电力,这些设备在由通知机制规定的持续时间内也保持接通。LED可以被编程为无限期地保持接通,直到用户采取行动来指示设备的通电状态为止。音频接口2074用于向用户提供可听信号以及接收来自用户的可听信号。例如,除了耦合到音频转换器2025之外,音频接口2074还可以耦合到麦克风以接收可听输入,例如,用于促进电话会话。根据一个方面,系统2002还包括视频接口2076,其使得机载照相机2030的操作能够记录静止的图像、视频流等。
根据一个方面,实现系统2002的移动计算设备2000具有附加的特征或功能。例如,移动计算设备2000包括附加的数据存储设备(可移除的和/或不可移除的),例如,磁盘、光盘、或磁带。这种附加存储在图20B中由非易失性存储区域2068示出。
根据一个方面,由移动计算设备2000生成或捕获并且经由系统2002存储的数据/信息被本地存储在移动计算设备2000上,如上面描述的。根据另一方面,数据存储在任何数量的存储介质上,该任何数量的存储介质能够由设备经由无线电2072或经由移动计算设备2000和与移动计算设备2000相关联的分离的计算设备(例如,分布式计算网络中的服务器计算机)之间的有线连接(例如,互联网)进行访问。如应当认识到的,这些数据/信息能够经由移动计算设备2000经由无线电2072或经由分布式计算网络来进行访问。类似地,根据一个方面,这些数据/信息容易地在计算设备之间传递以用于根据公知的数据/信息传递和存储手段(包括电子邮件和协作数据/信息共享系统)进行存储和使用。在另一示例中,移动计算设备2000包含外围设备端口2040,例如,音频输入(例如,麦克风插孔)、音频输出(例如,耳机插孔)、以及视频输出(例如,HDMI端口),以用于向外部设备发送信号或接收来自外部设备的信号。
图21示出了用于将应用用户接口110转换为特定的体验模式配置的系统的架构的一个示例,如上面描述的。使得与体验模式模块106和应用UI体验模式模块114相关联地开发的、交互的、或编辑的内容能够存储在不同的通信通道或其它存储器类型中。例如,各种文档可以使用目录服务2122、网络入口2124、邮箱服务2126、即时消息传递存储库2128、或社交联网站点2130来存储。应用UI体验模式模块114可操作以使用这些类型的系统或诸如此类的系统中的任何系统来将应用用户接口110转换为特定的体验模式配置,如本文描述的。根据一个方面,服务器2115向客户端计算设备2105a、2105b、2105c提供应用UI体验模式模块114。作为一个示例,服务器2115是提供网络上的应用UI体验模式模块114的网络服务器。服务器2115通过网络2110向客户端2105提供网络上的应用UI体验模式模块114。通过示例的方式,客户端计算设备实现并实施在个人计算机2105a、平板计算设备2105b、或移动计算设备2105c(例如,智能手机)、或其它计算设备中。客户端计算设备的这些示例中的任何客户端计算设备均可操作以从存储库2116中获得内容。
上面参考根据方面的方法、系统、以及计算程序产品的框图和/或操作示例说明对示例进行了描述。框中指出的功能/动作可以不按照任何流程图所示的顺序发生。例如,取决于所涉及的功能/动作,连续示出的两个框实际上可以基本上并发地执行,或者框有时可以以相反的顺序来执行。
本申请中提供的一个或多个示例的描述和示例说明并非旨在以任何方式限制或约束权利要求的范围。本申请中提供的方面、示例、以及细节被视为足以传达所有权,并且使得其他技术人员能够制作和使用最佳模式。示例不应当被解释为限于本申请中提供的任何方面、示例、或细节。无论是组合地还是单独地示出和描述,各种特征(结构的和方法的二者)都旨在被选择性地包括或省略以产生具有特定特征集合的示例。在提供有本申请的描述和示例说明的情况下,本领域技术人员可以设想到落入在本申请中实施的总体发明构思的较宽方面的精神内的变型、修改、以及替代示例,这没有脱离较宽范围。

Claims (15)

1.一种用于将应用的用户接口从第一体验模式配置转换为第二体验模式配置以用于在计算设备上显示的方法,所述方法包括:
接收与所述计算设备的操作系统的体验模式从第一体验模式到第二体验模式的转换相关联的体验模式转换事件的指示;
将所述应用的体验模式从所述第一体验模式改变为所述第二体验模式;以及
将所述应用的用户接口的显示从所述第一体验模式配置改变为所述第二体验模式配置。
2.根据权利要求1所述的方法,其中:
将所述应用的体验模式从所述第一体验模式改变为所述第二体验模式包括将所述应用的体验模式从桌面体验模式改变为自然输入体验模式;以及
将所述应用的用户接口的显示从所述第一体验模式配置改变为所述第二体验模式配置包括将所述应用的用户接口的显示从桌面体验模式配置改变为自然输入体验模式配置。
3.根据权利要求2所述的方法,其中,将所述应用的体验模式从所述桌面体验模式改变为所述自然输入体验模式包括:
启动第二应用,所述第二应用包括所述自然输入体验模式;
在所述自然输入体验模式配置中生成所述第二应用的用户接口的显示;以及
恢复所述应用的相关上下文。
4.根据权利要求3所述的方法,其中,恢复所述应用的相关上下文包括在所述第二应用中打开文档,其中,所述文档是当所述体验模式转换事件的指示被接收时在所述应用中打开的文档。
5.根据权利要求1所述的方法,其中:
将所述应用的体验模式从所述第一体验模式改变为所述第二体验模式包括将所述应用的体验模式从自然输入体验模式改变为桌面输入体验模式;以及
将所述应用的用户接口的显示从所述第一体验模式配置改变为所述第二体验模式配置包括将所述应用的用户接口的显示从自然输入体验模式配置改变为桌面体验模式配置。
6.根据权利要求1所述的方法,还包括:
接收与手动选择将所述应用的体验模式从所述第二体验模式转换为所述第一体验模式相关联的体验模式转换事件的指示;
将所述应用的体验模式从所述第二体验模式改变为所述第一体验模式;以及
将所述应用的用户接口的显示从所述第二模式配置改变为所述第一体验模式配置。
7.根据权利要求6所述的方法,还包括:
接收与所述计算设备的操作系统的体验模式从所述第二体验模式到所述第一体验模式的转换相关联的体验模式转换事件的指示;
维持所述应用的所述第一体验模式;
接收与所述计算设备的操作系统的体验模式从所述第一体验模式到所述第二体验模式的转换相关联的体验模式转换事件的指示;以及
维持所述应用的所述第一体验模式。
8.一种用于将应用的用户接口从第一体验模式配置转换为第二体验模式配置以用于在计算设备上显示的系统,所述系统包括:
处理器;
存储器;
与所述计算设备的操作系统相关联的操作系统体验模式模块,所述操作系统体验模式模块可操作以用于:
接收与将所述操作系统的体验模式从第一体验模式转换为第二体验模式相关联的体验模式转换事件的指示;
将所述操作系统的体验模式从所述第一体验模式转换为所述第二体验模式;
将所述操作系统的用户接口的显示从所述第一体验模式配置改变为所述第二体验模式配置;以及
提供与所述操作系统的体验模式从所述第一体验模式到所述第二体验模式的转换相关联的所述体验模式转换事件的通知;以及
应用体验模式模块,所述应用体验模式模块可操作以用于:
接收与所述操作系统的体验模式从所述第一体验模式到所述第二体验模式的转换相关联的体验模式转换事件的所述通知;
将所述应用的体验模式从所述第一体验模式改变为所述第二体验模式;以及
将所述应用的用户接口的显示从所述第一体验模式配置改变为所述第二体验模式配置。
9.根据权利要求8所述的系统,其中:
所述第一体验模式是桌面体验模式;
所述第二体验模式是自然输入体验模式;
所述第一体验模式配置是桌面体验模式配置;
所述第二体验模式配置是自然输入体验模式配置;以及
在接收与将所述操作系统的体验模式从第一体验模式转换为第二体验模式相关联的体验模式转换事件的指示中,所述操作系统体验模式模块可操作以用于:
接收与以下中的一个相关联的体验模式转换事件的指示:
硬件输入设备的物理断开连接;
硬件输入设备的无线断开连接;以及
指导从所述桌面体验模式改变为所述自然输入体验模式的用户输入。
10.根据权利要求9所述的系统,其中,在将所述应用的体验模式从所述第一体验模式改变为所述第二体验模式中,所述应用体验模式模块可操作以用于:
启动第二应用,所述第二应用包括所述自然输入体验模式;
在所述自然输入体验模式配置中生成所述第二应用的用户接口的显示;以及
恢复所述应用的相关上下文。
11.根据权利要求10所述的系统,其中,在恢复所述应用的相关上下文中,所述应用体验模式模块可操作以在所述第二应用中打开文档,其中,所述文档是当所述体验模式转换事件的指示被接收时在所述应用中打开的文档。
12.根据权利要求11所述的系统,其中,在恢复所述应用的相关上下文中,所述应用体验模式模块可操作以滚动到所述文档中的位置,其中,所述文档中的位置是当所述体验模式转换事件的指示被接收时在所述应用中所述文档被滚动到的位置。
13.根据权利要求8所述的系统,其中:
所述第一体验模式是自然输入体验模式;
所述第二体验模式是桌面体验模式;
所述第一体验模式配置是自然输入体验模式配置;
所述第二体验模式配置是桌面体验模式配置;以及
在接收与将所述操作系统的体验模式从第一体验模式转换为第二体验模式相关联的体验模式转换事件的指示中,所述操作系统体验模式模块可操作以用于:
接收与以下中的一个相关联的体验模式转换事件的指示:
硬件输入设备的物理连接;
硬件输入设备的无线连接;以及
指导从所述自然输入体验模式改变为所述桌面体验模式的用户输入。
14.根据权利要求8所述的系统,其中:
所述应用体验模式模块还可操作以用于:
接收与手动选择将所述应用的体验模式从所述第二体验模式转换为所述第一体验模式相关联的体验模式转换事件的指示;
将所述应用的体验模式从所述第二体验模式改变为所述第一体验模式;以及
将所述应用的用户接口的显示从所述第二模式配置改变为所述第一体验模式配置;
接收与所述操作系统的体验模式从所述第二体验模式到所述第一体验模式的转换相关联的体验模式转换事件的指示;
维持所述应用的所述第一体验模式;
接收与所述操作系统的体验模式从所述第一体验模式到所述第二体验模式的转换相关联的体验模式转换事件的指示;以及
维持所述应用的所述第一体验模式。
15.一种计算设备,包括用于连接到提供基于网络的应用的网络服务器的网络连接,所述计算设备可操作以显示所述计算设备的操作系统的用户接口和所述基于网络的应用的用户接口,所述计算设备包括操作系统体验模式模块,所述操作系统体验模式模块可操作以用于:
接收与将所述操作系统的体验模式从第一体验模式转换为第二体验模式相关联的体验模式转换事件的指示;
将所述操作系统的体验模式从所述第一体验模式转换为所述第二体验模式;
将所述操作系统的用户接口的显示从所述第一体验模式配置改变为所述第二体验模式配置;以及
提供与所述操作系统的体验模式从所述第一体验模式到所述第二体验模式的转换相关联的所述体验模式转换事件的通知。
CN201680006865.6A 2015-01-21 2016-01-21 基于体验模式转换的应用用户接口重新配置 Withdrawn CN108027695A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201562105774P 2015-01-21 2015-01-21
US62/105,774 2015-01-21
US14/755,438 2015-06-30
US14/755,438 US20160209973A1 (en) 2015-01-21 2015-06-30 Application user interface reconfiguration based on an experience mode transition
PCT/US2016/014200 WO2016118675A1 (en) 2015-01-21 2016-01-21 Application user interface reconfiguration based on an experience mode transition

Publications (1)

Publication Number Publication Date
CN108027695A true CN108027695A (zh) 2018-05-11

Family

ID=56407895

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680006865.6A Withdrawn CN108027695A (zh) 2015-01-21 2016-01-21 基于体验模式转换的应用用户接口重新配置

Country Status (4)

Country Link
US (1) US20160209973A1 (zh)
EP (1) EP3248090A1 (zh)
CN (1) CN108027695A (zh)
WO (1) WO2016118675A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9928562B2 (en) 2012-01-20 2018-03-27 Microsoft Technology Licensing, Llc Touch mode and input type recognition
US9547375B2 (en) * 2012-10-10 2017-01-17 Microsoft Technology Licensing, Llc Split virtual keyboard on a mobile computing device
US9792014B2 (en) 2013-03-15 2017-10-17 Microsoft Technology Licensing, Llc In-place contextual menu for handling actions for a listing of items
US9785340B2 (en) * 2014-06-12 2017-10-10 Apple Inc. Systems and methods for efficiently navigating between applications with linked content on an electronic device with a touch-sensitive display
US9648062B2 (en) 2014-06-12 2017-05-09 Apple Inc. Systems and methods for multitasking on an electronic device with a touch-sensitive display
US10949075B2 (en) 2014-11-06 2021-03-16 Microsoft Technology Licensing, Llc Application command control for small screen display
US20160132301A1 (en) 2014-11-06 2016-05-12 Microsoft Technology Licensing, Llc Programmatic user interface generation based on display size
US10048856B2 (en) 2014-12-30 2018-08-14 Microsoft Technology Licensing, Llc Configuring a user interface based on an experience mode transition
US10453325B2 (en) 2015-06-01 2019-10-22 Apple Inc. Creation of reminders using activity state of an application
US20180203716A1 (en) * 2017-01-13 2018-07-19 Citrix Systems, Inc. Systems and methods for software event signaling of state changes of remote hardware devices for virtual desktop infrastructure environments
US11966578B2 (en) 2018-06-03 2024-04-23 Apple Inc. Devices and methods for integrating video with user interface navigation
US11782730B1 (en) * 2023-05-19 2023-10-10 Lowe's Companies, Inc. Operation-specific file system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004164307A (ja) * 2002-11-13 2004-06-10 Ricoh Co Ltd 表示装置、スクロール情報生成方法およびプログラム
CN1573689A (zh) * 2003-06-18 2005-02-02 Lg电子株式会社 用于控制便携式计算机中的显示模式的方法
US20080266255A1 (en) * 2007-04-27 2008-10-30 Richard James Lawson Switching display mode of electronic device
CN201188214Y (zh) * 2008-04-22 2009-01-28 杨开艳 一种笔记本电脑
US20140089833A1 (en) * 2012-09-24 2014-03-27 Samsung Electronics Co. Ltd. Method and apparatus for providing multi-window in touch device

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9021375B2 (en) * 2006-08-15 2015-04-28 International Business Machines Corporation Notification of state transition of an out-of-focus application
US20100207888A1 (en) * 2009-02-18 2010-08-19 Mr. Noam Camiel System and method for using a keyboard with a touch-sensitive display
US20120050183A1 (en) * 2010-08-27 2012-03-01 Google Inc. Switching display modes based on connection state
US20130191779A1 (en) * 2012-01-20 2013-07-25 Microsoft Corporation Display of user interface elements based on touch or hardware input
US9934047B2 (en) * 2014-03-20 2018-04-03 Intel Corporation Techniques for switching between operating systems

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004164307A (ja) * 2002-11-13 2004-06-10 Ricoh Co Ltd 表示装置、スクロール情報生成方法およびプログラム
CN1573689A (zh) * 2003-06-18 2005-02-02 Lg电子株式会社 用于控制便携式计算机中的显示模式的方法
US20080266255A1 (en) * 2007-04-27 2008-10-30 Richard James Lawson Switching display mode of electronic device
CN201188214Y (zh) * 2008-04-22 2009-01-28 杨开艳 一种笔记本电脑
US20140089833A1 (en) * 2012-09-24 2014-03-27 Samsung Electronics Co. Ltd. Method and apparatus for providing multi-window in touch device

Also Published As

Publication number Publication date
WO2016118675A1 (en) 2016-07-28
US20160209973A1 (en) 2016-07-21
EP3248090A1 (en) 2017-11-29

Similar Documents

Publication Publication Date Title
CN108027695A (zh) 基于体验模式转换的应用用户接口重新配置
KR102668131B1 (ko) 주변 장치들과 무선 페어링하고 주변 장치들에 관한 상태 정보를 디스플레이하기 위한 디바이스들, 방법들, 및 그래픽 사용자 인터페이스들
US11496600B2 (en) Remote execution of machine-learned models
US10616416B2 (en) User interface for phone call routing among devices
US11340778B2 (en) Restricted operation of an electronic device
US11714597B2 (en) Methods and user interfaces for sharing audio
CN106415468B (zh) 具有进入点保持的放射状菜单用户界面
CN105359121B (zh) 使用接收数据的应用远程操作
CN103229141B (zh) 管理用户界面中的工作空间
US11983551B2 (en) Multi-user configuration
CN102037436B (zh) 利用拖拽操作来访问菜单
US8893054B2 (en) Devices, systems, and methods for conveying gesture commands
EP2811420A2 (en) Method for quickly executing application on lock screen in mobile device, and mobile device therefor
US10042596B2 (en) Electronic device and method for controlling the same
CN110083282A (zh) 基于信息展示页面的人机交互方法、装置、终端及介质
CN106133826A (zh) 用于语言模型自定义的灵活模式
CN106462358A (zh) 在触敏装置上显示交互式通知
CN106164857A (zh) 可缩放用户界面显示
CN105518604A (zh) 对套索选择的反馈
WO2019236179A1 (en) User interfaces for updating network connection settings of external devices
KR102204141B1 (ko) 태스크를 리마인드하는 전자 장치 및 그 제어 방법
CN110069203A (zh) 提供图形用户界面的方法和装置
US20220391603A1 (en) Content translation user interfaces
CN108139895A (zh) 字体字型预览
EP4189520A1 (en) Navigating user interfaces using hand gestures

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20180511

WW01 Invention patent application withdrawn after publication