CN104428749A - 由用户动作触发的可视ui向导 - Google Patents

由用户动作触发的可视ui向导 Download PDF

Info

Publication number
CN104428749A
CN104428749A CN201380035458.4A CN201380035458A CN104428749A CN 104428749 A CN104428749 A CN 104428749A CN 201380035458 A CN201380035458 A CN 201380035458A CN 104428749 A CN104428749 A CN 104428749A
Authority
CN
China
Prior art keywords
user interface
given action
help
application
visual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380035458.4A
Other languages
English (en)
Inventor
A·A·塞利格
D·K·巴伐日亚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN104428749A publication Critical patent/CN104428749A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • G06F9/453Help systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供了帮助用户了解产品能力和实现给定动作所需的输入的可视帮助用户界面(UI)。可以通过触发器来启动可视帮助(UI),并且可视帮助UI可以用图形用户界面(GUI)来覆盖软件应用。触发器可以包括与应用中的给定动作相关联的用户动作的检测,接收与给定动作相关联的命令序列或接收来自用户的对帮助的请求。可视帮助UI可被用于演示特征、建议或演示工作流或示教姿势。可视帮助UI可以被动画化以暗示交互,并且可以在应用GUI中使用用户的内容来演示建议的工作流或输入序列。

Description

由用户动作触发的可视UI向导
背景
用户可能经常想要或需要发现与应用相关联的特征或能力的帮助。例如,用户可能需要知道完成应用内的任务所需的是哪种输入或快捷方式的协助,例如在待做列表中的核除(checking off)项。
当前帮助用户发现特征的方法包括可以包括文本和图像的帮助文章。这种方案的一种局限在于当查阅帮助文章时,用户不在应用的上下文中并且可能不知道在文章中所描述的动作如何以他的内容执行。而且,用户可能必须一次管理两个上下文——帮助文章用户界面窗格和应用用户界面窗格。随着诸如智能电话和平板计算设备之类的移动计算设备的增加使用,屏幕空间可能受限,并且在一些情况下,设备可能不能一次示出多个应用窗格。另外,通过帮助文章描述或解释姿势或动作序列可能是困难的。
本发明正是对于这些和其他考虑事项而做出的。
概述
本发明的实施例通过提供一种可视向导用户界面来帮助用户了解产品的能力和实现给定动作所需的输入来解决上述和其它问题。
根据各实施例,可以通过触发器来启动可视帮助用户界面(UI),并且可视帮助用户界面可以用图形用户界面(GUI)来覆盖软件应用。可视帮助UI可以被用于演示一个特征(例如姿势、功能、行为等),建议或演示一个工作流(例如如何参见待做列表),或可以示教一个姿势(例如演示姿势或校正未识别的姿势)。可视帮助UI可以被动画化以暗示交互,并且可以在应用UI中使用用户的内容来演示建议的工作流或输入序列。
一个或多个实施例的详情在附图及以下描述中阐述。通过阅读以下详细描述并查阅相关联的附图,其它特征和优点将是显而易见的。应该理解,下述详细的描述仅是说明性的,而不是对所要求保护的发明的限制。
提供本发明内容以便以简化的形式介绍将在以下具体实施方式中进一步描述的一些概念。本发明内容并不旨在标识所要求保护的主题的关键特征或必要特征,也不旨在用于帮助确定所要求保护的主题的范围。
附图说明
合并在本发明中并构成其一部分的附图示出本发明的各种实施方式。在附图中:
图1是在当前应用中的示例帮助文章的图示。
图2是在移动电话上的任务列表应用GUI上显示的演示姿势输入的示例可视帮助UI的图示;
图3是用户手动选择查阅可视帮助UI以遍历帮助或“如何做”文章的图示;
图4是演示工作流建议的可视帮助UI的图示;
图5A-C是在移动电话上的地图应用上显示的可视帮助UI的图示,其中罗盘或陀螺仪被用于感测设备的定向;
图6A和6B是在移动电话上的相机应用上显示的可视帮助UI的图示,其中加速度计被用于感测运动;
图7A和7B是在移动电话上的注释应用上显示的可视帮助UI的图示,其中麦克风被用于检测噪声;
图8是在IP电话上显示的可视帮助UI的图示,其中麦克风被用于检测噪声;
图9是提供可视向导用户界面以帮助用户了解产品的能力和实现给定动作所需的输入的方法的流程图;
图10是示出可用来实施本发明的各实施例的计算设备的示例物理组件的框图;
图11A和11B是可用来实施本发明的各实施例的移动计算设备的简化框图;以及
图12是可用来实施本发明的各实施例的分布式计算系统的简化框图。
具体实施方式
如上简要描述的,本发明的各实施例旨在提供一种可视向导用户界面来帮助用户了解产品的能力和实现给定动作所需的输入。各实施例可被用于通过在应用内演示给定动作的可能的工作流或输入序列来帮助用户发现或了解应用。各实施例不需要额外的应用用户界面窗格,并且可以通过智能触发器、与用户内容的交互和/或通过用户的选择来被启动以演示完成任务的工作流或输入序列。
下面的详细描述参考各个附图。只要可能,就在附图和以下描述中使用相同的附图标记来指示相同或相似的元件。尽管可能描述了本发明的各实施方式,但修改、改编和其他实现也是可能的。例如,可以对附图中所示出的要素进行置换、添加、或修改,且可以通过对所公开的方法置换、重新排序、或添加阶段来修改此处所描述的方法。因此,下文的详细描述不限制本发明,相反,本发明的合适范围由所附权利要求来限定。
现在参考其中相同的标号代表相同的元素的附图,描述各实施例。如前所述且如在图1中所示的示例显示100中所示出的,当前的帮助工具解决方案可以包括帮助文章106。如所示,当将帮助文章106用于应用时,帮助文章106通常可以被显示在与所述应用用户界面窗格102分开的用户界面窗格中,这可能要求用户一次管理两个上下文。还有,当使用具有较少屏幕空间的计算设备(例如移动电话或平板设备)时,可能不能同时打开多个应用用户界面窗格。除了在帮助文章106中可用的指令的方法是文本和图像形式之外,这可能使得用户难以发现或理解产品的特征。
本发明的实施例包括可以用图形用户界面(GUI)覆盖软件应用并且可以通过各种触发器来启动的可视用户界面(UI)。根据实施例,可视帮助UI可以被用于特征发现(例如姿势、功能、行为等),并可以通过用户手动触发或自动触发。用户可以选择特定任务或特征的可视帮助UI,或者替换地,可视帮助UI可以自动被触发。例如,可以做出用户正在进行多余的步骤来完成任务,而该任务可以通过快捷方式或通过涉及更少步骤的方法来完成的判断。作为另一个示例,可以在经过预定的时间段之后显示可视帮助UI,而无需用户输入。
如图2所示,用户可以使用移动计算设备200上的任务列表程序202。用户可能想要将项204标记成已完成。用户可以通过菜单,例如选择编辑功能208以使用一个功能来标记206项204。用户可能没有意识到任务列表应用202具有允许用户使用他的手指跨项204滑动来将其标记206为完成的特征。根据实施例,可视帮助UI(例如幻手210)可以被触发并在任务列表应用202上显示GUI 212,并且可以演示可被用于完成任务的输入,例如姿势输入。姿势输入可包括在没有机械设备(如用户身体移动)或机械输入设备(如用鼠标、触摸屏、指示笔等)的情况下做出的输入,该输入源自身体运动,可被接收、识别和转换成模仿身体运动的对图形用户界面上的元素或物体的选择和/或移动。
根据另一个实施例,可视帮助UI可以被用于工作流建议。工作流建议可以被手动触发或由用户动作被自动触发。例如,用户可以手动选择查阅可视帮助UI以遍历帮助或“如何做”文章302,如图3中所示。如所示,可能包含关于如何完成任务的指令的帮助文章302被显示在平板计算设备300上。可以提供一个控件,例如“向我显示”按钮,当选择该控件时,可以启动示出如在帮助文章302中详细描述的完成任务的输入序列的可视帮助UI(即演示)。例如,演示可以包括选择应用用户界面窗格306的工具栏308中的控件以完成任务(例如改变文档中的行距)的幻手310。
如上所述,可以自动触发演示工作流建议的可视帮助UI。例如,用户可以打开应用并创建新文档402,如图4所示。如果在执行下一动作之前用户犹豫不决,例如在检测到后续动作(例如点击“添加标题”控件404)之前预定时间段已过,可以提供可视帮助UI。例如,可以显示选择控件(例如“添加标题”控件404)的幻影动画406,或者该控件可以被高亮显示408或可以闪烁以向用户显示选择该控件404是所建议的下一步骤。
根据另一个实施例,可视帮助UI可被手动触发或自动触发以示教或演示可在应用中使用的姿势。例如,可视帮助UI,例如浮动的手或箭头,可以被显示在应用GUI上,例如任务列表应用GUI,并且能够演示可用于与应用的元素交互的姿势(例如,浮动手把任务项下拉到列表以演示任务项可以被记录)。根据实施例,可视帮助UI可以提供姿势反馈。例如,可以做出用户正在输入一姿势,该姿势不是经识别的姿势但却被标识为接近经识别的姿势的判断。可以显示向用户示出经识别的姿势的可视帮助UI。考虑到,例如,用户通过任务列表应用中的任务项正在使用对角滑动运动。可以做出该用户可能正尝试通过任务列表项作标记的判断,并且可以显示示出水平滑动通过所述任务项的运动并示出该项正被标记成完成的可视帮助UI。根据实施例,触发可视帮助UI的敏感度级别可以是可调节的。例如,可以依据任意不正确的姿势的判定来显示可视帮助UI,可以依据在预定次数之后检测到未经识别的姿势的输入来自动显示可视帮助UI,可以显示可视帮助UI一次,或可以显示可视帮助UI预定次数。根据实施例,可视帮助UI可以是可被打开/关闭的特征。
本发明的各实施例可被应用于各种软件应用,并可与各种输入法一起使用。尽管附图中所示的示例示出了移动200和平板300设备上的基于触摸的UI,但是各实施例可被用于大量设备上,包括但不限于台式计算机系统、有线和无线计算系统、移动计算系统(如移动电话、上网本、图形输入板或平板型计算机、笔记本计算机以及膝上型计算机)、手持设备、IP电话、游戏设备、相机、多处理器系统、基于微处理器或可编程消费电子产品、小型计算机、以及大型计算机。可视帮助UI可以包括,但不局限于,箭头或焦点指示符、幻手、指针或指示笔、经动画化的指针或化身、高亮显示、音频或触摸或选择的指示。可视可以被动画化以暗示交互或重点,并可以使用用户的实际内容来操纵或示出所建议的工作流或输入序列。
根据实施例,可视帮助UI可以由各种触发器激活,所述触发器包括,但不局限于,由设备或传感器检测到的用户动作、控件或命令序列的选择,或来自用户的明确请求。由设备或传感器激活的触发器可以包括各种类型的传感器,包括但不局限于,数字化仪、陀螺仪、罗盘、加速度计、麦克风、光传感器、接近度传感器、近场通信(NFC)传感器、GPS等。
数字化仪是可被用于通过感测人类手指、指示笔或其它输入设备在触摸屏界面上的触摸来接收输入的电子组件。数字化仪,例如,可以被用于当用户在屏幕上做出或重复未经识别的姿势时进行感测。罗盘或陀螺仪,例如,可以被用于感测设备、导航等的定向。例如,且如图5A-C所示,用户可以使用移动电话200或用于地图的GPS设备或GPS应用(例如增强现实应用)。用户可以握住设备200,以便如在图5A中所示可以在纵向取向500中显示地图,这可能不是应用使用的理想取向。罗盘或陀螺仪可以被用于感测设备200的定向,并且如在图5B中所示,可以在地图界面上显示可视帮助UI,例如旋转箭头502和/或文本,以向用户建议旋转设备200。用户可以如在图5C中所示转动设备200,其中,该地图可以被显示在横向取向504中,提供应用使用的更好显示。
加速度计,例如,可以被用于检测设备的移动或稳定性。作为示例,加速度计可以被用于检测设备并不稳定并且可能正在轿车内或公交车内被使用。实施例可以提供可视帮助UI以建议用户使用语音输入并且可以向用户示出点击哪里来启动所述语音输入。作为另一个示例,并且如在图6A和6B中所示,用户可以使用移动电话200、相机或其它类型的设备来拍照片。设备200上的加速度计可以被用于检测设备200没有被稳定地握住,导致模糊的照片602。可视帮助UI,例如在GUI上显示的幻手604,可以被提供以向用户演示可以使用稳定功能606来拍摄更好的照片。用户可以选择选定稳定功能606,如在图6B中所示,以产生用于相机应用功能的更好的输出。
麦克风,例如,可以被用于检测音频。作为示例且如在图7A和7B中所示,在设备(例如运行诸如注释应用704之类的应用的膝上型计算机700)上的麦克风702,可以被用于检测噪声,例如在环境中的声音。声音的检测可以触发可视帮助UI,例如显示的鼠标指针708选择录制音频功能706。
作为正被用于触发可视帮助UI的麦克风的另一个示例且如在图8中所示,在诸如IP电话800之类的设备上的麦克风702可以被用于检测噪声,例如当在电话会议中电话处于静默时用户向麦克风讲话。实施例可以检测到在电话处于静默时用户正在对电话800讲话802,并且可以通过可视帮助UI(例如可视通知804)向用户建议电话处于静默以取消静默电话。
光传感器,例如,可以被用于检测诸如相机上的闪光灯或移动电话上的扬声器之类的功能在用户正在将设备用于某个应用时是否应该被使用。作为示例,移动电话200上的光传感器可以检测当用户正在使用相机应用时光量可能产生显影不足的照片。这种检测可以触发可视帮助UI建议打开设备200上的闪光灯。
GPS可以被用于检测用户正在旅行并触发可视帮助UI。例如,GPS可以检测到用户正在开车同时用户在他的移动电话200上打开了一个应用,例如美食搜索应用。可视帮助UI可以被触发以建议使用应用上的“本地特色”来查找附近的餐馆。
邻近度传感器可以被用于检测设备和另一个对象之间的距离(例如移动电话200和用户面部之间的距离)。例如,用户可以使用移动电话200上的前置相机来与某人聊天。邻近度传感器可以被用于检测电话是否被握得太靠近用户面部。可视帮助UI可以被触发以建议将电话200保持地更远些。
近场通信(NFC)传感器可以被用于检测其它具有NFC能力的设备,并且还可以被用于便利于在具有NFC能力的设备之间的数据交换。例如,用户可以使用移动电话200来支付在咖啡店中的一杯咖啡。NFC传感器可以被用于检测用户是否没有将他的电话200保持在支付传感器之上足够长的距离以完成交易。可视帮助UI可以被触发以告知用户将他的电话保持在支付传感器之上更长距离上或可以警告用户交易并没有完成。
现在参考图9,示出了用于提供用于帮助用户了解产品的能力和实现给定动作所需的输入的可视向导用户界面的方法900的流程图。方法900在操作905开始并行进到操作910,在其中打开应用。该应用可以是各种类型的具有图形用户界面的应用之一。
在操作915,接收输入。例如,如上参考图2-8所述,输入可以包括由设备或设备上的传感器检测到的用户动作、设备上的按键、功能或命令序列的选择或可以是来自用户对帮助的请求。由设备检测到的用户动作可以包括,但不局限于,数字化仪感测在设备上做出的姿势、陀螺仪或罗盘感测到设备的定向、加速度计感测到设备的运动、麦克风感测到噪声、光传感器感测到光线、邻近度传感器感测到用户与设备的邻近度、近场通信(NFC)传感器检测到其它具有NFC能力的设备并便利在设备之间的数据交换,或GPS感测到设备的位置。如上所述,姿势输入可包括在没有机械设备(如用户身体移动)或机械输入设备(如用鼠标、触摸屏、指示笔等)的情况下做出的输入,该输入源自身体运动,可被接收、识别和转换成对模仿身体运动的图形用户界面上的元素或物体的选择和/或移动。设备上的按键、功能或命令序列的选择可以包括,例如,用户输入以完成任务的命令序列的检测或犹豫或者在打开应用之后或在完成任务之后的时间阈值的流逝。来自用户对帮助的请求可以包括,但不局限于,如图3所示在帮助中选择“向我显示”按键304或“如何做”文章302,选择“帮助”功能命令或者选择设置或帮助菜单中的“开启帮助提示”特征。
方法900行进至操作920,在其中,做出在操作915中接收到的输入是否满足用于触发可视帮助UI的准则的判断。响应于确定所述输入满足触发可视帮助UI的准则,在操作925显示可视帮助UI。根据实施例,可以在应用GUI上显示可视帮助UI,并且可以使用当前正被使用的应用并使用用户的内容来演示特征、工作流或姿势。例如,可视帮助UI可以在设备上演示特征,例如姿势、功能或行为。可视帮助UI可以建议一个工作流,例如,如何创建待做列表或在操作915处检测到暂停或犹豫后的所建议的下一步骤。可视帮助UI可以示教姿势语言。例如,可以演示跨越在待做列表中的任务项的滑动之类的姿势。作为另一个示例,如果在操作915,设备上的数字化仪检测到用户正在使用未被识别的姿势,在操作925,可以显示与用户所做的姿势相类似的可以被确定为经识别的姿势的姿势演示。
如上所述,可视帮助UI可以包括,但不局限于,箭头或焦点指示符、幻手、指针或指示笔、经动画化的指针或化身、高亮显示、音频或触摸或选择的指示。可视可以被动画化以暗示交互或重点,并可以使用用户的实际内容来操纵或示出所建议的工作流或输入序列。该方法在操作995结束。
本文描述的实施例和功能可通过多种计算系统来操作,包括但不限于台式计算机系统、有线和无线计算系统、移动计算系统(如移动电话、上网本、图形输入板或平板型计算机、笔记本计算机、膝上型计算机)、手持设备、IP电话、游戏设备、多处理器系统、基于微处理器或可编程消费电子产品、小型计算机、以及大型计算机。此外,本文所述的实施例和功能可在分布式系统上操作(如基于云的计算系统),其中应用功能、存储器、数据存储和检索、以及各种处理功能可在诸如因特网或内联网之类的分布式计算网络上彼此远程地操作。各种类型的用户界面和信息可经板载计算设备显示器或经与一个或多个计算设备相关联的远程显示单元被显示。例如,各种类型的用户界面和信息可在墙壁表面上被显示和交互,各种类型的用户界面和信息被投射在墙壁表面上。与可用于实施本发明的各实施例的许多计算系统的交互包括:键击输入、触摸屏输入、语音或其他音频输入、姿势输入(其中相关联的计算设备配备有用于捕捉和解释用于控制计算设备的功能的用户姿势的检测(如相机)功能)等。如上所述,手势输入也可包括用机械输入设备(如用鼠标、触摸屏、指示笔等)做出的输入,该输入源自身体运动,可被接收、识别和转换成对模仿身体运动的图形用户界面上的元素或物体的选择和/或移动。图10到12以及相关联的描述提供了其中可实施本发明的各实施例的各种操作环境的讨论。然而,关于图10到12所示出和讨论的设备和系统是用于示例的目的,而非对可被用于实施本文所述的本发明的各实施例的大量计算设备配置的限制。
图10是示出可用来实施本发明的各实施例的计算设备1000的示例物理组件(即硬件)的框图。下面描述的计算设备组件可适用于上述的计算设备。在基本配置中,计算设备1000可包括至少一个处理单元1002和系统存储器1004。取决于计算设备的配置和类型,系统存储器1004可包括,但不限于,易失性存储器(例如,随机存取存储器)、非易失性存储器(例如,只读存储器)、闪存、或这些存储器的任何组合。系统存储器1004可包括操作系统1005和适合于运行诸如可视帮助UI应用1050之类的软件应用1020的一个或多个程序模块1006。操作系统1005例如可适合于控制计算设备1000的操作。此外,本发明的各实施方式可以结合图形库、其他操作系统、或任何其他应用程序来实践,且不限于任何特定应用程序或系统。该基本配置在图10中由虚线1008内的那些组件示出。计算设备1300可具有附加特征或功能。例如,计算设备1000还可包括附加数据存储设备(可移动和/或不可移动),诸如,例如磁盘、光盘或磁带。这些附加存储在图10中由可移动存储设备1009和不可移动存储设备1010示出。
如上所述,可在系统存储器1004中存储多个程序模块和数据文件。当在处理单元1002上执行时,诸如可视帮助UI应用1050之类的程序模块1006可执行各过程,包括例如方法900的一个或多个阶段。上述过程是一示例,且处理单元1002可执行其他过程。根据本发明的各实施例可使用的其他程序模块可包括电子邮件和联系人应用、电子数据表应用、数据库应用、幻灯片演示应用、绘图或计算机辅助应用程序等。虽然如在此处所描述的是由电子表格应用1050来执行,实施例可以应用于具有表格或网格结构的数据的任意应用。
此外,本发明的各实施方式可在包括分立电子元件的电路、包含逻辑门的封装或集成电子芯片、利用微处理器的电路、或在包含电子元件或微处理器的单个芯片上实现。例如,可以通过片上系统(SOC)来实施本发明的各实施例,其中,可以将图10中示出的每个或许多组件集成到单个集成电路上。这样的SOC设备可包括一个或多个处理单元、图形单元、通信单元、系统虚拟化单元以及各种应用功能,所有这些都被集成到(或烧录到摂)芯片基板上作为单个集成电路。当通过SOC操作时,在此所述的关于电子表格应用1050的功能可以通过在单个集成电路(芯片)上集成有计算设备1000的其它组件的专用逻辑来操作。本发明的各实施方式还可以使用能够执行诸如,例如,AND(与)、OR(或)和NOT(非)等逻辑运算的其他技术来实践,包括但不限于,机械、光学、流体和量子技术。另外,本发明的各实施方式可以在通用计算机或任何其他电路或系统中实现。
计算设备1000也可具有一个或多个输入设备1012,如键盘、鼠标、笔、语音输入设备、触摸输入设备、麦克风、姿势识别设备等等。也可包括输出设备1014,如显示器、扬声器、打印机等等。上述设备是示例且可以使用其他设备。计算设备1000可包括允许与其他计算设备1018进行通信的一个或多个通信连接1016。合适的通信连接1016的示例包括但不限于RF发射机、接收机和/或收发机电路;通用串行总线(USB)、并行或串行端口、以及适用于与适用的计算机可读介质一起使用的其他连接。
例如,本发明的各实施方式可被实现为计算机进程(方法)、计算系统或诸如计算机程序产品或计算机可读介质等制品。计算机程序产品可以是计算机系统可读并编码了用于执行计算机过程的指令的计算机程序的计算机存储介质。
如此处所使用的术语计算机可读介质可包括计算机存储介质和通信介质。计算机存储介质可包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据等信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动介质。系统存储器1004、可移动存储设备1009和不可移动存储设备1010都是计算机存储介质(即,存储器存储)的示例。计算机存储介质可以包括,但不限于,RAM、ROM、电可擦除只读存储器(EEPROM)、闪存或其它存储器技术、CD-ROM、数字多功能盘(DVD)或其它光存储、磁带盒、磁带、磁盘存储或其它磁性存储设备、或可用于存储信息且可以由计算设备1000访问的任何其它介质。任何这样的计算机存储介质都可以是计算设备1000的一部分。
通信媒介可由诸如载波或其他传输机制等已调制数据信号中的计算机可读指令、数据结构、程序模块、或其他数据来体现,并且包括任何信息传递介质。术语“已调制数据信号”可以描述以对该信号中的信息进行编码的方式设定或者改变其一个或多个特征的信号。作为示例而非限制,通信介质包括诸如有线网络或直接线连接等有线介质,以及诸如声学、射频(RF)、红外线和其他无线介质等无线介质。
图11A和11B示出可用来实施本发明的各实施例的移动计算环境1100,例如移动电话200、智能电话、平板个人计算机300、膝上型计算机700等。参考图11A,示出了用于实现各实施例的示例性移动计算设备1100。在一基本配置中,移动计算设备1100是具有输入元件和输出元件两者的手持式计算机。移动计算设备1100通常包括显示器1105以及允许用户将信息输入到移动计算设备1100中的一个或多个输入按钮1110。移动计算设备1100的显示器1105也可充当输入设备(如触摸屏显示器)。如果包括,则可任选的侧输入元件1115允许进一步的用户输入。侧输入元件1115可以是旋转开关、按钮、或任何其他类型的手动输入元件。在替代实施例中,移动计算设备1100可结合更多或更少的输入元件。例如,在某些实施例中,显示器1105可以不是触摸屏。在又一替代实施例中,移动计算设备1100是诸如蜂窝电话之类的便携式电话系统。移动计算设备1100还可包括可选的小键盘1135。可选的小键盘1135可以是物理小键盘或者在触摸屏显示器上生成的“软”小键盘。在各种实施例中,输出元件包括用于示出图形用户界面(GUI)的显示器1105、可视指示器1120(如发光二极管)、和/或音频换能器1125(如扬声器)。在某些实施例中,移动计算设备1100结合振动换能器来向用户提供触觉反馈。在又一实施例中,移动计算设备1100结合诸如音频输入(如麦克风插孔)、音频输出(如耳机插孔)、以及视频输出(如HDMI端口)之类的输入和/或输出端口,用于将信号发送到外部设备或从外部设备接收信号。
图11B是示出移动计算设备的一个实施例的架构的框图。即,移动计算设备1100可结合系统(即架构)1102以实现某些实施例。在一个实施例中,系统1102被实现为能够运行一个或多个应用(如浏览器、电子邮件、日历、联系人管理器、消息收发客户端、游戏、以及媒体客户端/播放器)的“智能电话”。在某些实施例中,系统1102被集成为计算设备,诸如集成的个人数字助理(PDA)和无线电话。
一个或多个应用程序1166可被加载到存储器1162中并在操作系统1164上或与操作系统864相关联地运行。应用程序的示例包括电话拨号程序、电子邮件程序、个人信息管理(PIM)程序、文字处理程序、电子表格程序、因特网浏览器程序、消息收发程序等等。系统1102还包括存储器1162内的非易失性存储区1168。非易失性存储区1168可被用于存储在系统1102断电时不会丢失的持久信息。应用程序1166可使用信息并将信息存储在非易失性存储区1168中,如电子邮件应用使用的电子邮件或其他消息等。同步应用(未示出)也驻留于系统1102上且被编程为与驻留在主机计算机上的对应的同步应用交互,以保持非易失性存储区1168中存储的信息与主机计算机处存储的相应信息同步。应当理解,其它应用也可被加载到存储器1162中并在包括在此所述的可视帮助UI应用1050的移动计算设备1100上运行。
系统1102具有可被实现为一个或多个电池的电源1170。电源1170还可包括外部功率源,如补充电池或对电池重新充电的AC适配器或加电对接托架。系统1102还可包括执行发射和接收无线电频率通信的功能的无线电1172。无线电1172通过通信运营商或服务供应商方便了系统1102与“外部世界”之间的无线连接。来往无线电1172的传输是在操作系统1164的控制下进行的。换言之,无线电1172接收的通信可通过操作系统1164传播到应用程序1166,反之亦然。
无线电1172允许系统1102例如通过网络与其他计算设备通信。无线电1172是通信介质的一个示例。通信介质通常由诸如载波或其他传输机制之类的已调制数据信号中的计算机可读指令、数据结构、程序模块、或其他数据来体现,并且包括任何信息传送介质。术语“已调制数据信号”是指使得以在信号中编码信息的方式来设置或改变其一个或多个特性的信号。作为示例而非限制,通信介质包括诸如有线网络或直接线连接之类的有线介质,以及诸如声学、RF、红外及其他无线介质之类的无线介质。如此处所使用的术语计算机可读介质包括存储介质和通信介质两者。
系统1102的该实施例使用可用于提供可视通知的可视指示器1120和/或通过音频换能器1125来产生音频通知的音频接口1174来提供通知。在所示实施例中,可视指示器1120是发光二极管(LED),而音频换能器1125是扬声器。这些设备可直接耦合到电源1170,使得当被激活时,即使为了节省电池功率而可能关闭处理器1160和其它组件,它们也保留一段由通知机制指示的保持通电时间。LED可被编程为无限地保持通电,直到用户采取动作指示该设备的通电状态。音频接口1174用于向用户提供听觉信号并从用户接受听觉信号。例如,除了被耦合到音频换能器1125之外,音频接口1174还可被耦合到话筒来接收可听输入,例如便于电话通话。根据各本发明的各实施例,话筒也可充当音频传感器来便于对通知的控制,如下文将描述的。系统1102可进一步包括允许板载相机1130的操作来记录静止图像、视频流等的视频接口1176。
实现系统1102的移动计算设备1100可具有附加特征或功能。例如,移动计算设备1100还可包括附加数据存储设备(可移动和/或不可移动),例如磁盘、光盘或磁带。这种附加存储设备在图11B中用非易失性存储区1168示出。计算机存储介质可包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据等信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动介质。
移动计算设备1100生成或捕捉的且经系统1102存储的数据/信息可如上所述本地存储在移动计算设备1100上,或数据可被存储在可由设备通过无线电1172或通过移动计算设备1100和与移动计算设备1100相关联的一分开的计算设备之间的有线连接访问的任何数量的存储介质上,该计算设备如例如因特网之类的分布式计算网络中的服务器计算机。如应理解的,此类数据/信息可经移动计算设备1100、经无线电1172或经分布式计算网络来被访问。类似地,这些数据/信息可根据已知的数据/信息传送和存储手段来容易地在计算设备之间传送以供存储和使用,这些手段包括电子邮件和协作数据/信息共享系统。
图12示出了如上所述的用于如上所述向一个或多个客户机设备提供可视帮助UI应用1050的系统的架构的一个实施例。与该可视帮助UI应用1050相关联地被开发、交互或编辑的内容可被存储在不同通信信道或其他存储类型中。例如,各种文档可使用目录服务1222、web门户1224、邮箱服务1226、即时消息收发存储1228或社交联网网站1230来存储。可视帮助UI应用1050可以使用用于提供可视向导用户界面以帮助用户了解产品能力和实现给定动作所需的输入的这些类型的系统等等中的任意系统。服务器1220可向客户机提供可视帮助UI应用1050。作为一个示例,服务器1220可以是通过web提供可视帮助UI应用1050的web服务器。服务器1220可在web上通过网络1215向客户机提供可视帮助UI应用1050。作为示例,客户机计算设备1218可被实现为计算设备1000并被具体化在个人计算机1218a、平板计算设备1218b和/或移动计算设备2018c(如智能电话)中。客户端计算设备1218的这些实施例中的任一个可从存储1216获得内容。在各种实施例中,用于在构成本发明的计算设备之间进行通信的网络的类型包括但不限于互联网、内联网、广域网(WAN)、局域网(LAN)、以及虚拟专用网络(VPN)。在本申请中,网络包括企业网络和客户端计算设备用来访问企业网络的网络(即客户端网络)。在一个实施例中,客户端网络是企业网络的一部分。在另一实施例中,客户机网络是通过外部可用的接入点(如网关、远程访问协议、或公共或专用互联网地址)来访问企业网络的一分开的网络。
本申请中提供的一个或多个实施例的描述和说明不旨在以任何方式限制或约束如权利要求所要求保护的发明范围。本申请中提供的实施例、示例和细节被认为是足以传达所有权,且使得他人能够制作并使用所要求保护的发明的最佳模式。所要求保护的发明不应被理解为限制于本申请中所提供的任何实施例、示例或细节。不管是以组合的方式还是分开的方式示出和描述,各种特征(结构上的和方法逻辑上的)旨在被选择性地包括或忽略,以产生具有特定的特征集的实施例。在被提供本申请的描述和说明的情况下,本领域的技术人员能够想象到落在所要求保护的发明的更宽泛方面以及本申请中所具体化的一般发明概念的精神内的替代实施例并不背离该更宽泛的范围。

Claims (10)

1.一种用于提供可视向导用户界面以帮助用户了解产品的能力和实现给定动作所需的输入的方法,所述方法包括:
接收与打开的应用相关联的输入;
确定所述输入是否满足触发可视帮助用户界面的准则;以及
响应于确定所述输入满足触发可视帮助用户界面的准则,在所述打开的应用的图形用户界面之上显示所述可视帮助用户界面。
2.如权利要求1所述的方法,其特征在于,确定所述输入满足触发可视帮助用户界面的准则包括检测下述项之一:用户需要发现实现与所述应用相关联的给定动作的特征的帮助,所述用户需要发现实现与所述应用相关联的给定动作的工作流的帮助,或所述用户需要了解实现与所述应用相关联的给定动作的姿势的帮助。
3.如权利要求1所述的方法,其特征在于,接收输入包括感测影响实现与所述应用相关联的给定动作的活动、接收与所述给定动作相关联的命令序列,或接收用户对帮助的请求。
4.如权利要求3所述的方法,其特征在于,感测影响实现与所述应用相关联的给定动作的活动包括感测可由数字化仪、陀螺仪、罗盘、加速度计、麦克风、加速度计、麦克风、光传感器、邻近度传感器、近场通信传感器或GPS中的一个检测到的活动。
5.如权利要求4所述的方法,其特征在于,还包括确定实现与所感测到的活动相关联的所述给定动作所需的输入。
6.如权利要求1所述的方法,其特征在于,在所述打开的应用的图形用户界面上显示所述可视帮助用户界面包括演示实现与所感测到的活动相关联的所述给定动作所需的输入。
7.如权利要求1所述的方法,其特征在于,在所述打开的应用的图形用户界面上显示所述可视帮助用户界面包括显示:箭头、焦点指示符、幻手、指针、指示符、经动画化的图形或化身、高亮显示、音频或者触摸或选择的指示中的一个。
8.一种用于提供可视向导用户界面以帮助用户了解产品的能力和实现给定动作所需的输入的系统,所述系统包括:
存储器存储;以及
耦合到所述存储器存储的处理单元,其中所述处理单元用于:
接收与打开的应用相关联的输入;
确定所述输入是否满足触发可视帮助用户界面的准则;以及
响应于确定所述输入满足触发可视帮助用户界面的准则,在所述打开的应用的图形用户界面之上显示所述可视帮助用户界面,所述可视帮助用户界面演示下述项之一:
实现与所述应用相关联的给定动作的特征;
实现与所述应用相关联的给定动作的工作流;或
实现与所述应用相关联的给定动作的姿势。
9.如权利要求11所述的系统,其特征在于,用于接收输入包括用于:
感测影响实现与所述应用相关联的给定动作的活动;
接收与所述给定动作相关联的命令序列;或
接收用户对帮助的请求。
10.一种具有计算机可执行指令的计算机可读介质,所述计算机指令用于提供可视向导用户界面以帮助用户了解产品的能力和实现给定动作所需的输入,包括:
接收与打开的应用相关联的输入,所述输入包括:影响实现与所述应用相关联的给定动作的活动、与所述给定动作相关联的命令序列或用户对帮助的请求中的一个;
确定所述输入是否满足触发可视帮助用户界面的准则;以及
响应于确定所述输入满足触发可视帮助用户界面的准则,在所述打开的应用的图形用户界面之上显示所述可视帮助用户界面,所述可视帮助用户界面演示下述项之一:
实现与所述应用相关联的给定动作的特征;
实现与所述应用相关联的给定动作的工作流;或
实现与所述应用相关联的给定动作的姿势。
CN201380035458.4A 2012-07-02 2013-07-01 由用户动作触发的可视ui向导 Pending CN104428749A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/539,849 2012-07-02
US13/539,849 US20140006944A1 (en) 2012-07-02 2012-07-02 Visual UI Guide Triggered by User Actions
PCT/US2013/048978 WO2014008208A2 (en) 2012-07-02 2013-07-01 Visual ui guide triggered by user actions

Publications (1)

Publication Number Publication Date
CN104428749A true CN104428749A (zh) 2015-03-18

Family

ID=48808514

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380035458.4A Pending CN104428749A (zh) 2012-07-02 2013-07-01 由用户动作触发的可视ui向导

Country Status (4)

Country Link
US (1) US20140006944A1 (zh)
EP (1) EP2867765A2 (zh)
CN (1) CN104428749A (zh)
WO (1) WO2014008208A2 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107783786A (zh) * 2016-08-26 2018-03-09 华为数字技术(成都)有限公司 一种创建设备资源的方法和装置

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012014910A1 (de) * 2012-07-27 2014-01-30 Volkswagen Aktiengesellschaft Bedienschnittstelle, Verfahren zum Anzeigen einer eine Bedienung einer Bedienschnittstelle erleichternden Information und Programm
JP6188405B2 (ja) * 2013-05-01 2017-08-30 キヤノン株式会社 表示制御装置、表示制御方法、及びプログラム
MY178664A (en) * 2013-12-20 2020-10-20 Philip Morris Products Sa Smoking article having a filter including a capsule
US9390726B1 (en) 2013-12-30 2016-07-12 Google Inc. Supplementing speech commands with gestures
US9213413B2 (en) 2013-12-31 2015-12-15 Google Inc. Device interaction with spatially aware gestures
KR102155091B1 (ko) * 2014-01-22 2020-09-11 엘지전자 주식회사 이동단말기 및 그 제어방법
US9529605B2 (en) 2014-08-27 2016-12-27 Microsoft Technology Licensing, Llc Customizing user interface indicators based on prior interactions
US10496420B2 (en) * 2014-12-02 2019-12-03 Cerner Innovation, Inc. Contextual help within an application
US20160180352A1 (en) * 2014-12-17 2016-06-23 Qing Chen System Detecting and Mitigating Frustration of Software User
US20160179798A1 (en) * 2014-12-19 2016-06-23 Blackboard Inc. Method and system for navigating through a datacenter hierarchy in a mobile computer device
KR20160101605A (ko) * 2015-02-17 2016-08-25 삼성전자주식회사 제스처 입력 처리 방법 및 이를 지원하는 전자 장치
US9830249B2 (en) * 2015-03-04 2017-11-28 International Business Machines Corporation Preemptive trouble shooting using dialog manager
US20160306503A1 (en) * 2015-04-16 2016-10-20 Vmware, Inc. Workflow Guidance Widget with State-Indicating Buttons
US10455049B2 (en) 2015-07-13 2019-10-22 Facebook, Inc. Presenting content to an online system user based on content presented by a scrollable content unit
US10606466B2 (en) * 2015-07-13 2020-03-31 Facebook, Inc. Presenting additional content to an online system user based on user interaction with a scrollable content unit
US9910641B2 (en) 2015-10-14 2018-03-06 Microsoft Technology Licensing, Llc Generation of application behaviors
US11093210B2 (en) * 2015-10-28 2021-08-17 Smule, Inc. Wireless handheld audio capture device and multi-vocalist method for audiovisual media application
US10146397B2 (en) 2015-11-27 2018-12-04 International Business Machines Corporation User experience steering
US9843672B1 (en) 2016-11-14 2017-12-12 Motorola Mobility Llc Managing calls
US9843673B1 (en) * 2016-11-14 2017-12-12 Motorola Mobility Llc Managing calls
US9924313B1 (en) 2017-02-23 2018-03-20 International Business Machines Corporation Location based generation of pertinent information
US10671602B2 (en) 2017-05-09 2020-06-02 Microsoft Technology Licensing, Llc Random factoid generation
CN109614174B (zh) * 2017-09-30 2022-03-18 华为技术有限公司 显示方法、移动终端及图形用户界面
KR102480728B1 (ko) * 2017-11-10 2022-12-23 삼성전자주식회사 전자장치 및 그 제어방법
US10733000B1 (en) * 2017-11-21 2020-08-04 Juniper Networks, Inc Systems and methods for providing relevant software documentation to users
US11093118B2 (en) 2019-06-05 2021-08-17 International Business Machines Corporation Generating user interface previews
US10956015B1 (en) 2019-09-11 2021-03-23 International Business Machines Corporation User notification based on visual trigger event
US11150923B2 (en) * 2019-09-16 2021-10-19 Samsung Electronics Co., Ltd. Electronic apparatus and method for providing manual thereof
US11900320B2 (en) * 2020-11-09 2024-02-13 Accenture Global Solutions Limited Utilizing machine learning models for identifying a subject of a query, a context for the subject, and a workflow
CN114461063B (zh) * 2022-01-18 2022-09-20 深圳时空科技集团有限公司 一种基于车载屏幕的人机交互方法
US11995457B2 (en) * 2022-06-03 2024-05-28 Apple Inc. Digital assistant integration with system interface

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1603031A2 (en) * 2004-05-28 2005-12-07 Microsoft Corporation Strategies for providing just-in-time user assistance
CN101196793A (zh) * 2006-12-04 2008-06-11 三星电子株式会社 基于手势的用户界面方法和设备
US20110191675A1 (en) * 2010-02-01 2011-08-04 Nokia Corporation Sliding input user interface

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050138559A1 (en) * 2003-12-19 2005-06-23 International Business Machines Corporation Method, system and computer program for providing interactive assistance in a computer application program
US8196042B2 (en) * 2008-01-21 2012-06-05 Microsoft Corporation Self-revelation aids for interfaces
US9053088B2 (en) * 2008-03-31 2015-06-09 Qualcomm Incorporated Displaying mnemonic abbreviations for commands
US8418085B2 (en) * 2009-05-29 2013-04-09 Microsoft Corporation Gesture coach
US10387175B2 (en) * 2009-10-23 2019-08-20 Autodesk, Inc. Method and system for providing software application end-users with contextual access to text and video instructional information
US9063757B2 (en) * 2010-04-06 2015-06-23 Microsoft Technology Licensing, Llc Interactive application assistance, such as for web applications
TWI438675B (zh) * 2010-04-30 2014-05-21 Ibm 提供情境感知援助說明之方法、裝置及電腦程式產品
US8751419B2 (en) * 2010-11-19 2014-06-10 Shipjo, Llc Shipping system and method with taxonomic tariff harmonization
US8990689B2 (en) * 2011-02-03 2015-03-24 Sony Corporation Training for substituting touch gestures for GUI or hardware keys to control audio video play
US9602453B2 (en) * 2011-02-10 2017-03-21 International Business Machines Corporation Smart attachment to electronic messages
US8630822B2 (en) * 2011-02-11 2014-01-14 International Business Machines Corporation Data center design tool
US9129324B2 (en) * 2011-10-05 2015-09-08 The Okanjo Company, Llc Social platform ecommerce system and method of operation

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1603031A2 (en) * 2004-05-28 2005-12-07 Microsoft Corporation Strategies for providing just-in-time user assistance
CN101196793A (zh) * 2006-12-04 2008-06-11 三星电子株式会社 基于手势的用户界面方法和设备
US20110191675A1 (en) * 2010-02-01 2011-08-04 Nokia Corporation Sliding input user interface

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107783786A (zh) * 2016-08-26 2018-03-09 华为数字技术(成都)有限公司 一种创建设备资源的方法和装置
CN107783786B (zh) * 2016-08-26 2021-06-15 华为数字技术(成都)有限公司 一种创建设备资源的方法和装置

Also Published As

Publication number Publication date
WO2014008208A2 (en) 2014-01-09
EP2867765A2 (en) 2015-05-06
WO2014008208A3 (en) 2014-02-27
US20140006944A1 (en) 2014-01-02

Similar Documents

Publication Publication Date Title
CN104428749A (zh) 由用户动作触发的可视ui向导
AU2019208255B2 (en) Environmentally aware dialog policies and response generation
CN105378624B (zh) 在交互出现于白板上时显示交互
CN104471520B (zh) 用于提供用于呈现应用功能的用户界面的方法和系统
CN105009062B (zh) 浏览被显示为瓦块的电子消息
CN105027077A (zh) 将机会匹配于上下文
CN104583909B (zh) 经由输入设备的反馈以及涂写识别
CN105264516A (zh) 文档协作和对改变的通知
US20140201629A1 (en) Collaborative learning through user generated knowledge
CN106133826A (zh) 用于语言模型自定义的灵活模式
CN105378817A (zh) 将外部动态内容合并到白板中
CN104364819B (zh) 增强的电子通信草稿管理
CN105431807A (zh) 在导航日历的同时显示生活事件
CN104221011A (zh) 使用文档评论来跟踪共同创作冲突
CN105229632A (zh) 在提交文档中建议改变之前查看该改变的效果
CN105144069A (zh) 对于显示内容的基于语义缩放的导航
CN106164908A (zh) 现代文档保存与同步状况
CN104094251A (zh) Web应用中的协作通信
CN105493481A (zh) 自动改变图形用户界面的显示
CN105308565A (zh) 深度并行的源代码编译
CN105518604A (zh) 对套索选择的反馈
CN109766160A (zh) 基于情境提供信息的方法和系统
CN104081384A (zh) 用于为在线文档提供计算web服务的系统和方法
CN104704486A (zh) 用于内容选择和扩大内容选择的用户界面元素
CN105706037A (zh) 管理以结构化格式的墨水内容

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20171017

Address after: Washington State

Applicant after: Micro soft technique license Co., Ltd

Address before: Washington State

Applicant before: Microsoft Corp.

TA01 Transfer of patent application right
RJ01 Rejection of invention patent application after publication

Application publication date: 20150318

RJ01 Rejection of invention patent application after publication