CN107870709A - 计算设备处输入选项的交互式教程支持 - Google Patents

计算设备处输入选项的交互式教程支持 Download PDF

Info

Publication number
CN107870709A
CN107870709A CN201710770469.7A CN201710770469A CN107870709A CN 107870709 A CN107870709 A CN 107870709A CN 201710770469 A CN201710770469 A CN 201710770469A CN 107870709 A CN107870709 A CN 107870709A
Authority
CN
China
Prior art keywords
interactive tutorial
computing device
input
gesture
interactive
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710770469.7A
Other languages
English (en)
Inventor
M·R·莱里安
E·P·霍根
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Publication of CN107870709A publication Critical patent/CN107870709A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/0053Computers, e.g. programming
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/177Editing, e.g. inserting or deleting of tables; using ruled lines
    • G06F40/18Editing, e.g. inserting or deleting of tables; using ruled lines of spreadsheets
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • G06F9/453Help systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/08Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
    • G09B5/12Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations different stations being capable of presenting different information simultaneously
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04804Transparency, e.g. transparent or translucent windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Software Systems (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Computer Hardware Design (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开涉及计算设备处输入选项的交互式教程支持。本文所述的实施方案阐述了用于提供计算设备处输入选项的交互式教程支持的技术。根据一些实施方案,给定应用程序的交互式教程管理器可相对于各种可用交互式教程对输入信息进行分析以识别要显示的适当的交互式教程。交互式教程管理器然后可利用与交互式教程相关联的教程逻辑部件根据输入信息在计算设备处显示交互式教程用户界面(UI)。继而,并且当(根据与交互式教程相关联的可用输入/操作)接收后续输入时,可更新交互式教程UI以反映后续输入。最后,当对具体操作的输入要求被满足时,可在应用程序内停用/隐藏交互式教程UI,并且可适当地执行操作。

Description

计算设备处输入选项的交互式教程支持
技术领域
本文所述的实施方案阐述了用于提供计算设备处输入选项的交互式教程支持的技术。特别地,输入选项可关联到能在计算设备处执行的可用操作,由此为用户提供丰富的特征而不使用户不知所措。
背景技术
先进输入技术诸如基于触摸的输入、基于语音的输入等已成为用户与现代计算设备(例如智能电话、平板电脑、可穿戴设备、膝上型电脑等)交互的主要方式。例如,给定计算设备可包括使得能够在计算设备的表面(例如屏幕、触控板等)上检测用户的物理触摸的硬件部件。继而,物理触摸被翻译成在计算设备上执行的软件(例如操作系统、守护进程、用户应用程序等)理解的输入事件,于是软件能立即对输入事件进行响应。考虑例如屏幕的特定区域上的基本单指轻击,其已发展成鼠标左击的替代。值得注意的是,单指轻击有利地消除了对于用户在对鼠标左击之前首先将光标移动到屏幕区域的需要,这个需要可能是耗时且枯燥乏味的。因此,如果现代输入方法感觉更自然直观,则可显著增强用户体验。
硬件和软件随着时间发展的巨大进步已经有助于先进输入技术的整体有效性。例如,多触摸手势已变得司空见惯并且可以使用户能执行多种有用操作而同时保持与基本触摸输入相关联的相同自然直观的感觉。因此,基于鼠标的输入在许多领域中正被逐渐淘汰,这在用户中已经形成了一个一般性的预期,即所有软件应用程序(不管是老的还是新的)都具有自然与基于触摸的输入一起工作的UI。然而,众所周知,很多软件应用程序(例如电子表格应用程序、呈现应用程序等)具有专门为基于鼠标的输入设计的UI,并且不期望只为了支持触摸输入而彻底地改变这些UI。因此,软件开发者面对他们必须在保留被很好理解/接受的基于鼠标的UI布局(和忽视基于触摸的输入)或者迁移到新的/不熟悉的基于触摸的UI布局(和提供基于触摸的输入)之间进行选择的不期望情形。此外,与现代输入方法相关联的可用输入随着时间发展而在数量和复杂性上不断增大,这在用户面对并未很好理解的输入选项时对于用户可能是令人怯步的。
发明内容
为了消除前述缺陷,本文所述的实施方案阐述了用于提供计算设备处输入选项的交互式教程支持的技术。根据一些实施方案,给定应用程序的交互式教程管理器可相对于各种可用交互式教程对输入信息进行分析以识别要显示的适当的交互式教程。交互式教程管理器然后可利用与交互式教程相关联的教程逻辑部件根据输入信息在计算设备处显示交互式教程用户界面(UI)。继而,并且当(根据与交互式教程相关联的可用输入/操作)接收后续输入时,可更新交互式教程UI以反映后续输入。最后,当对具体操作的输入要求被满足时,可在应用程序内停用/隐藏交互式教程UI,并且可适当地执行操作。
一个实施方案阐述了一种用于提供计算设备处交互式教程UI的技术。特别地,所述方法可以在计算设备处执行,并且包括以下步骤:(1)接收对包括在计算设备处所显示的UI中的UI元素的选择;(2)响应于所述选择而显示交互式教程UI,其中交互式教程UI基于(i)所述选择的类型和(ii)所述UI元素的类型指示可用输入类型(例如手势)/操作(例如应用程序功能);(3)基于与所述选择相关联地接收的连续/顺序输入在可用输入类型中识别输入类型;和(4)响应于(i)所述操作的完成或(ii)所述连续/顺序输入的停止来隐藏交互式教程UI。
其他实施方案包括被配置为存储指令的至少一种非暂态计算机可读介质,所述指令在被包括在计算设备中的至少一个处理器执行时使计算设备实施本文所述的技术中的任一者。另外的实施方案包括一种计算设备,其包括至少一个存储器和至少一个处理器,它们共同使计算设备能够实施本文所述的各种技术。
提供所述发明内容仅仅是为了概述一些示例性实施方案,以便提供对本文所述主题的一些方面的基本了解。因此,应当理解,上文所述的特征仅为示例并且不应理解为以任何方式缩小本文所述主题的范围或实质。本文所述主题的其他特征、方面和优点将根据以下具体实施方式、附图和权利要求书而变得显而易见。
根据结合以举例的方式示出所述实施方案的原理的附图而进行的以下详细描述,本文所述的实施方案的其他方面和优点将变得显而易见。
附图说明
所包括的附图用于说明性目的,并且仅用于提供本文所公开的发明性装置以及将其应用到计算设备的方法的可能结构和布置的示例。这些附图决不限制本领域的技术人员在不脱离实施方案的实质和范围的前提下可对实施方案进行的在形式和细节方面的任何更改。所述实施方案通过下面结合附图的具体描述将更易于理解,其中类似的附图标记表示类似的结构元件。
图1A至图1B示出了根据一些实施方案被配置为实施本文所述的各种技术的一种计算设备的不同部件的框图。
图2A至图2D示出了根据一些实施方案涉及结合在电子表格应用程序内执行的列操作显示交互式教程界面的序列的概念图。
图3A至图3D示出了根据一些实施方案涉及结合在电子表格应用程序内执行的行操作显示交互式教程界面的序列的概念图。
图4示出了根据一些实施方案用于根据所接收的输入在图1A至图1B的计算设备处显示交互式教程用户界面(UI)的一种方法。
图5示出了可代表用于实现本文所述方法、系统、装置和实施方案中任一者的计算设备或任何其他合适的设备或部件的部件的计算设备的框图。
具体实施方式
在本部分中提供了根据本文所述实施方案的装置和方法的代表性应用。提供这些示例仅是为了添加上下文并有助于理解所述实施方案。对于本领域的技术人员因此将显而易见的是,本发明所述的实施方案可在不具有这些具体细节中的一些或全部的情况下实施。在其它情况下,未详细描述熟知的工艺步骤,以便避免不必要地模糊本发明所述的实施方案。其它应用也是可能的,使得以下示例不应视为是限制性的。
本文所述的实施方案阐述了用于提供计算设备处输入选项的交互式教程支持的技术。根据一些实施方案,输入管理器和一个或多个应用程序可在计算设备处执行(例如借助于被配置为在计算设备上执行的操作系统)。根据一些实施方案,输入管理器可代表操作系统的充当对计算设备进行的输入与应用程序之间的翻译层的守护进程。例如,输入管理器可被配置为接收来自计算设备的输入接口的输入信息,将输入信息翻译成限定的输入事件(例如触摸保持事件、轻击事件、轻扫事件等),然后将输入事件提供给在计算设备处活动的应用程序。继而,应用程序可适当地处理输入事件并根据输入事件显示适当的交互式教程,其中交互式教程指示可执行的多个操作、以及用于触发这些操作的相应输入事件。继而,在(匹配与交互式教程相关联的输入事件的)后续输入事件被接收时,交互式教程UI可被更新以反映用于触发一个或多个相应操作的后续输入事件的完成进度。最后,当对应于具体操作的输入事件被满足时,可在应用程序内停用/隐藏交互式教程UI,并且可适当地执行操作。
这些技术的更详细的讨论在下面阐述并结合图1至图5进行描述,图1至图5示出了可用于实施这些技术的系统和方法的详细图示。
图1A示出了根据一些实施方案被配置为实施本文所述的各种技术的一种计算设备102的不同部件的框图100。更具体地讲,图1A示出了计算设备102的高层级概述,计算设备102如图所示可包括至少一个处理器104、至少一个存储器106、至少一个输入接口114和至少一个存储装置116。根据一些实施方案,存储装置116可代表计算设备102能够访问的存储设备,例如硬盘驱动器、固态驱动器、大容量存储设备、远程存储设备等。在一些示例中,存储装置116可代表计算设备102经由局域网(LAN)、个域网(PAN)等能够访问的存储装置。
根据一些实施方案,处理器104可被配置为结合存储器106和存储装置116工作以使计算设备102能够根据本公开操作。例如,处理器104可被配置为加载/执行操作系统108,操作系统108使多种进程能在计算设备102上执行,例如OS守护进程、本地OS应用程序、用户应用程序等。例如,如图1A所示,操作系统108可包括输入管理器110和一个或多个应用程序112。根据一些实施方案,输入管理器110可代表操作系统108的充当对计算设备102进行的输入与应用程序112之间的翻译层的守护进程。例如,输入管理器110可被配置为接收来自输入接口114的输入信息,将输入信息翻译成限定的输入事件(例如触摸保持事件、轻击事件、轻扫事件等),然后将输入事件提供给应用程序112(例如在计算设备102处活动的应用程序112)。继而,应用程序112可处理输入事件并根据应用程序112管理的交互式教程管理器113显示适当的交互式教程,其细节在下文中结合图1B更详细地描述。
根据一些实施方案,输入接口114可代表计算设备102的被配置为接收和处理计算设备102处的输入的至少一个部件。例如,输入接口114可被配置为接收基于鼠标的输入、基于键盘的输入、基于操纵杆的输入、基于触摸的输入、基于运动的输入、基于音频的输入、基于图像/相机的输入等,并将输入提供给输入管理器110/应用程序112/交互式教程管理器113以用于后续处理。根据一些实施方案,输入接口114能够在将输入信息提供给输入管理器110/应用程序112/交互式教程管理器113以用于处理之前对输入信息进行预处理。例如,当接收到基于运动的输入时,输入接口114可被配置为滤除无关输入信息(例如噪声)以便简化输入管理器110的职责并提高整体处理精度。虽然未在图1A中示出,但计算设备102可包括使输入接口114能接收来自各种输入设备的前述输入类型的通信接口,例如通用串行总线(USB)接口、蓝牙接口、近场通信(NFC)接口、WiFi接口等。还应指出,各种输入设备例如鼠标、键盘、操纵杆、识别笔、触控板/触摸屏、相机、麦克风等可以在计算设备102外部或内部。这样,计算设备102能够结合接收和处理对计算设备102进行的几乎任何形式的输入来显示交互式教程。
如本文前面所述,输入管理器110、应用程序112和交互式教程管理器113可被配置为在如本文所述提供交互式教程时一起工作。图1B示出了根据一些实施方案可包括在应用程序112的交互式教程管理器113中的不同部件的层级划分的框图150。如图1B所示,交互式教程管理器113可管理多个交互式教程154,其中每个交互式教程154引用:不同用户界面(UI)元素类型158、不同输入事件类型160、教程逻辑部件162和操作164。根据一些实施方案,并且如下文更详细所述,交互式教程管理器113可被配置为在对应用程序112进行输入时分析UI元素类型158、输入事件类型160、和/或其他信息以识别适当的交互式教程154来在计算设备102处显示。
根据一些实施方案,UI元素类型158可代表与交互式教程154相关联的UI元素的不同类型。例如,当交互式教程管理器113与实施电子表格的应用程序112相关联时,给定交互式教程154的UI元素类型158可涉及行标题UI元素。类似地,另一交互式教程154的UI元素类型158可涉及列标题UI元素。这样,当在应用程序112内进行对行标题UI元素或列标题UI元素的选择时,交互式教程管理器113可通过分析不同交互式教程154的UI元素类型158以识别最好地对应于所述选择的交互式教程154来进行响应。
另外,并且如前面在上文中所述,每个交互式教程154也可包括使交互式教程管理器113在对应用程序112接收的输入事件进行响应时能够进一步收窄交互式教程154选择过程的输入事件类型160。例如,继续上述电子表格示例,当所述选择指示列标题UI元素处的触摸保持事件时,交互式教程管理器113可通过分析不同交互式教程154的输入事件类型160以进一步识别最好地对应于所述选择的交互式教程154来进行响应。
因此,当交互式教程管理器113识别适当的交互式教程154时,教程逻辑部件162可用于在计算设备102处显示交互式教程UI 163。根据一些实施方案,教程逻辑部件162可包括用于适当地显示交互式教程UI 163的逻辑/信息。例如,继续上述电子表格示例,当所述选择与列标题UI元素的触摸保持事件相关联时,适当的交互式教程154被识别,并且相关联的交互式教程UI 163可被配置为显示根据所述选择能执行的可用操作164的列表。根据一些实施方案,并且如图1B所示,每个操作164可与在执行时导致操作164在应用程序112的范围内执行的至少一个输入事件类型160相关联。例如,继续上述电子表格示例,当所述选择与列标题UI元素的触摸保持事件相关联时,交互式教程UI 163可指示“上拉”输入事件将导致对应的列被从应用程序112内的活动电子表格删除。在该示例中,当上拉事件发生时,教程逻辑部件162可识别对应于上拉事件的操作164,然后导致操作164(即删除对应列)在应用程序112内执行。交互式教程154的特定示例在下文中结合图2A至图2D和图3A至图3D来描述。
应当指出,任意数量的交互式教程154、以及UI元素类型158/输入事件类型160的任何组合可在交互式教程管理器113内实施,以使应用程序112能形成丰富的交互式教程集合以改善用户的整体体验。在一些情况下,具有基本上重叠的UI元素类型158和输入事件类型160的交互式教程154的集合可由交互式教程管理器113管理。为了处理此类情形,交互式教程管理器113可被配置为根据选择信息(例如所选UI元素的类型、选择的本质/类型等)分析交互式教程154,并选择作为最强候选者的交互式教程154。此外应当指出,交互式教程管理器113不只限于分析UI元素类型158和输入事件类型160(例如在试图识别对应交互式教程154时),并且在实施本文所述技术时交互式教程管理器113可使用任何形式的输入信息。
另外应当指出,本文讨论的输入类型仅仅是例示性的,并不代表与本文所述实施方案兼容的输入类型的详尽列表。相反,本文所述的实施方案可以任何类型的输入来运行,例如基于鼠标的输入(例如鼠标路径/点击序列)、基于键盘的输入(例如键击序列)、基于操纵杆的输入(例如输入路径)、基于触摸的输入(例如输入路径/手势)、基于运动的输入(例如输入路径/手势)、基于音频的输入(例如语音命令)、基于图像/相机的输入(例如视觉命令)等等。换句话讲,交互式教程可结合任何形式的输入事件显示,其中1)交互式教程基于与输入事件相关联的信息(例如输入事件的类型、输入事件的位置等)、与所选UI元素相关联的信息(例如所选UI元素的类型、所选UI元素的位置等)和/或其他信息来显示可用操作;2)交互式教程根据所接收的连续/顺序输入事件来更新;和3)交互式教程在所述连续/顺序输入事件停止时或在操作完成时被停用/隐藏。
因此,图1A至图1B示出了可包括在计算设备102中用于使得本文所述的实施方案能正确实施的不同部件/实体的概述。在本文中参考电子表格描述示例,但是可为任何类型的应用程序诸如(但不限于)web浏览器、文字处理器、呈现程序、电子邮件程序等呈现教程。概括地说,并且如下文结合图2A至图2D和图3A至图3D更详细所述,给定应用程序112的交互式教程管理器113可相对于各种交互式教程154分析从输入管理器110接收的输入信息(例如输入事件类型160)以识别适当的交互式教程154。交互式教程管理器113然后可利用交互式教程154的教程逻辑部件162根据输入信息在计算设备102处显示交互式教程UI 163。继而,在后续输入事件被接收时(当用户逐步使一个或多个操作164被执行时),交互式教程UI163可被更新以反映后续输入事件。最后,当对具体操作164的输入要求被满足时,可在应用程序112内停用/隐藏交互式教程UI 163,并且可适当地执行操作164。
另外需要指出,虽然本文所述的实施方案涉及在操作系统102/应用程序112的控制下在计算设备102上执行的交互式教程管理器113实施的技术,但这些实施方案并不因此受限。相反,这些技术可实施在计算设备102被配置为与之通信的一个或多个计算设备上。例如,计算设备102可被配置为提供输入事件/其他相应信息(例如与在计算设备102上执行的活动应用程序112相关联的信息、与在活动应用程序112内选择的UI元素相关联的信息等等)给服务器设备。继而,服务器设备可以用使交互式教程UI163能够在计算设备102处显示的信息来进行响应。这样,与本文所述技术相关联的处理开销可被服务器设备分担或分流到服务器设备。
另外需要指出,计算设备102和/或服务器设备可被配置为实施机器学习技术以动态地修改不同交互式教程154的布局/内容,从而确保最大操作效率。例如,计算设备102和/或服务器设备可被配置为监视/处理在用户利用交互式教程UI 163浏览应用程序112时所接收到的反馈,并在必需时进行调节以改善整体可用性。例如,计算设备102和/或服务器设备可确定给定应用程序112的特定操作164最常被用户访问,并且作为响应,相应交互式教程UI 163可被更新以将所述特定操作164与用户最容易执行的输入事件类型160(例如简单手势输入)相关联。在另一示例中,计算设备102和/或服务器设备可确定用户在试图提供特定输入事件类型160(例如复杂手势)以导致特定操作164被执行时常失败。作为响应,计算设备102和/或服务器设备可更新对应交互式教程UI 163并将所述特定操作164与用户理解良好且更容易执行的不同输入事件类型160相关联。这种方法可有利地促进更自然直观的操作环境,并且可显著地改善用户整体体验。
图2A至图2D示出了根据一些实施方案涉及结合在电子表格应用程序112内执行的列操作显示交互式教程UI 163的序列的概念图。如图2A所示,步骤200可涉及(与应用程序112相关联的)交互式教程管理器113接收对电子表格应用程序112内的UI元素的选择。如图2A所示,所述选择与电子表格应用程序112内活动电子表格的列标题UI元素相关联。继而,并且根据本文所述技术,交互式教程管理器113相对于可用交互式教程154分析所述选择,以识别引用对应于列标题UI元素的UI元素类型158的任何交互式教程154。此外,所述选择可指示一种类型的输入事件160(例如触摸保持),并且交互式教程管理器113可识别引用对应于在所述选择中指示的输入事件160的输入事件类型160的任何交互式教程154。这样,交互式教程管理器113可有效地识别最佳地对应于所述选择的交互式教程154,继而利用教程逻辑部件162显示适当的交互式教程UI 163。
如图2A所示,交互式教程UI 163可显示基于与交互式教程154相关联(并且可用于应用程序112内基于列的操作)的输入事件类型160和操作164的可用输入/操作的列表。例如,图2A所示的交互式教程UI 163包括八个不同输入事件类型160(被图示为基于触摸的手势路径),其中每个输入事件类型160与不同操作164(例如左移、删除、右移等)相关联。这样,为应用程序112的用户提供对于可进行(即在其初始选择列标题UI元素之后)以使应用程序112执行不同操作164的输入的清晰理解。根据一些实施方案,交互式教程UI 163可以是部分透明的,以便使对于应该对用户保持可见的应用程序112的任何下面的UI的阻挡最小化。
现在转向图2B,步骤210示出了涉及交互式教程管理器113接收连续/顺序输入(结合初始选择)的过程。特别地,并且如图2B所示,连续/顺序输入与对应于“右移”操作164的输入事件类型160手势相符。根据一些实施方案,交互式教程管理器113结合交互式教程154的教程逻辑部件162可被配置为更新交互式教程UI 163以指示连续/顺序输入被识别并且对应于“右移”操作164。例如,如图2B所示,与“右移”操作164相关联的手势路径被加亮以指示将最终导致应用程序112执行“右移”操作164的手势路径的完成状态。例如,图2C的步骤220指示图2B的步骤210的过程继续,其中交互式教程UI 163被更新以指示与“右移”操作164相关联的手势路径正接近完成。
现在转向图2D,步骤230指示与“右移”操作164相关联的手势路径的完成结果。如图2D所示,交互式教程UI 163可在应用程序112内被停用/隐藏。需指出,交互式教程管理器113也可被配置为响应于连续/顺序输入的停止(例如,当用户未能完成任何与输入事件类型160相关联的可用手势路径时)来停用/隐藏交互式教程UI 163。在任何情况下,当与“右移”操作164相关联的手势路径完成时,应用程序112可被配置为执行必要动作,例如导致列在电子表格内适当地移位,如图2D所示。
因此,本文所述的技术使得在用户执行应用程序112内UI元素的初始选择时,能够便利地向用户告知可用操作164/引导用户通过可用操作164,这可显著地增强其整体用户体验。此外,交互式教程管理器113可被配置为使用户能够以任何可能的方式自定义交互式教程UI 163,以便支持其偏好/所期望选项。例如,交互式教程UI 163可被配置为包括在被选择时将交互式教程UI 163置于编辑模式的按钮,编辑模式使用户能够从不同的可用输入事件类型160、不同的可用操作164等等中进行选择。此外,交互式教程管理器113可被配置为使用户能够创建其自己的输入事件类型160(例如手势路径)以及选择/创建操作164以进一步增强可用的自定义水平。另外,交互式教程管理器113可实施使用户能够顺序/逻辑地将输入事件类型160与不同操作164相关联的向导类型界面。例如,交互式教程管理器113可指示用户选择可用的一个或多个操作164(或提供自定义操作164),并且还选择一个或多个相关联的输入事件类型160(或提供自定义事件类型160),由此使用户能够建立根据用户偏好操作的自定义交互式教程UI163/下层功能。
同样需注意,本文所讨论的基于触摸的输入/操作仅仅是例示性的,并不以任何方式限制本文所述实施方案的范围。相反,可使用/自定义任何形式的输入,例如基于鼠标的输入(例如鼠标路径/点击序列等)、基于键盘的输入(例如键击序列等)、基于操纵杆的输入(例如输入路径等)、基于触摸的输入(例如输入路径/手势等)、基于运动的输入(例如输入路径/手势等)、基于音频的输入(例如语音命令等)、基于图像/相机的输入(例如视觉命令等)等等。
图3A至图3D示出了根据一些实施方案涉及结合在电子表格应用程序112内执行的行操作显示交互式教程UI 163的序列的概念图。如图3A所示,步骤300可涉及交互式教程管理器113接收对电子表格应用程序112内的UI元素的选择。更具体地,并且如图3A所示,所述选择与电子表格应用程序112内活动电子表格的行标题UI元素相关联。作为响应,交互式教程管理器113相对于可用交互式教程154分析所述选择,以识别引用对应于行标题UI元素的UI元素类型158的任何交互式教程154。此外,所述选择可指示输入事件类型160(例如触摸保持),并且交互式教程管理器113可识别引用对应于在所述选择中指示的输入类型的输入事件类型160的任何交互式教程154。这样,交互式教程管理器113可有效地识别最佳地对应于所述选择的交互式教程154,继而利用教程逻辑部件162显示适当的交互式教程UI 163。
如图3A所示,交互式教程UI 163可显示基于与交互式教程154相关联并且可用于基于行的操作的输入事件类型160和操作164的可用输入/操作的列表。例如,图3A所示的交互式教程UI 163包括八个不同输入事件类型160(被图示为基于触摸的手势路径),其中每个输入事件类型160与不同操作164(例如下移、增长、后面插入等)相关联。这样,为应用程序112的用户提供对于可被进行(在其初始选择行标题UI元素之后)以使应用程序112执行不同操作164的输入的清晰理解。
现在转向图3B,步骤310示出了涉及交互式教程管理器113接收连续/顺序输入(结合初始选择)的过程。特别地,并且如图3B所示,连续/顺序输入与对应于“增长”操作164的输入事件类型160手势相符。根据一些实施方案,交互式教程管理器113结合交互式教程154的教程逻辑部件162可被配置为更新交互式教程UI 163以指示连续/顺序输入被识别并且对应于“增长”操作164。例如,如图2B所示,与“增长”操作164相关联的手势路径被加亮以指示将最终导致应用程序112执行“增长”操作164的手势路径的完成状态。
现在转向图3C,步骤320示出了涉及交互式教程管理器113接收对行标题UI元素的另一初始选择并随后接收连续/顺序输入(结合初始选择)的过程。特别地,并且如图3C所示,连续/顺序输入与对应于“前面插入”操作164的输入事件类型160手势相符。如本文前面所述,交互式教程管理器113结合交互式教程154的教程逻辑部件162可被配置为更新交互式教程UI 163以指示连续/顺序输入被识别并且对应于“前面插入”操作164。例如,并且如图3C的步骤330所示,与“前面插入”操作164相关联的手势路径被加亮以指示将最终导致应用程序112执行“前面插入”操作164的手势路径的完成状态,这在图3D所示的步骤340有所反映。
现在转向图3D,步骤340指示与“前面插入”操作164相关联的手势路径的完成结果,其中在图3C中步骤320处选择的行前面已经添加新的行。如图3D所示,交互式教程UI163可在应用程序112内被停用/隐藏。同样需指出,交互式教程管理器113可被配置为响应于连续/顺序输入的停止(例如当用户未能完成与输入事件类型160相关联的任何可用手势路径时)来隐藏/停用交互式教程UI 163。
图4示出了根据一些实施方案用于在图1A至图1B的计算设备102处提供交互式教程UI 163的一种方法400。如图4所示,方法400开始于步骤402,其中交互式教程管理器113接收对显示在计算设备102处的(例如应用程序112的)UI中所包括的UI元素的选择。虽然在图4中未示出,但步骤402可涉及交互式教程管理器113基于与对UI元素的选择相关联的信息(例如UI元素类型158、UI元素的位置、UI元素的状态等)、与选择相关联的信息(例如与选择相关联的输入事件类型160、所述选择的位置等)和使交互式教程管理器113能够选择适当交互式教程154的任何其他信息来识别适当的交互式教程154。
在步骤404,交互式教程管理器113响应于在步骤402接收的选择来显示交互式教程UI 163,其中交互式教程UI 163指示与交互式教程154相关联的可用输入事件类型160(例如手势)/操作164。在步骤406,交互式教程管理器113基于与在步骤402进行的选择相关联地接收的连续/顺序输入来识别输入事件类型160/一个或多个操作164。最后,在步骤408,交互式教程管理器113响应于(1)一个或多个操作164的完成、或(2)连续/顺序输入的停止来隐藏交互式教程UI 163,如本文前面结合图2A至图2D和图3A至图3D所述。
总之,本文所述的实施方案阐述了用于提供计算设备处输入选项的交互式教程支持的技术。给定应用程序的交互式教程管理器可相对于各种可用交互式教程对输入信息进行分析以识别适当的交互式教程。交互式教程管理器然后可利用与交互式教程相关联的教程逻辑部件根据输入信息在计算设备处显示交互式教程UI。继而,当(根据与交互式教程相关联的可用输入/操作)接收连续/后续输入时,可更新交互式教程UI以反映后续输入。最后,当对具体操作的输入要求被满足时,可在应用程序内停用/隐藏交互式教程UI,并且可适当地执行操作。
图5示出了根据一些实施方案可用于实施本文所述各种技术的一种计算设备500的详细视图。具体地讲,该详细视图示出了图1A至图1B所示计算设备102中可包括的各个部件。如图5所示,计算设备500可包括处理器502,处理器502表示用于控制计算设备500的总体操作的微处理器或控制器513。计算设备500还可包括用户输入设备508,用户输入设备508允许计算设备500的用户与计算设备500进行交互。另外,计算设备500可包括可被处理器502控制以向用户显示信息的显示器510(屏幕显示器)。数据总线516可有利于在存储设备540、处理器502和控制器513之间进行数据传输。控制器513可用于通过设备控制总线514与不同设备进行交互并对其进行控制。计算设备500还可包括耦接至数据链路512的网络/总线接口511。在无线连接的情况下,网络/总线接口511可包括无线收发器。
计算设备500还包括可包括单个盘或多个盘(例如,硬盘驱动器)的存储设备540,并且包括管理存储设备540内的一个或多个分区的存储管理模块。在一些实施方案中,另选地或除此之外,存储设备540可包括闪存存储器、持久性存储器、半导体(固态)存储器等。计算设备500还可包括随机存取存储器(RAM)520和只读存储器(ROM)522。ROM 522可以以非易失性方式存储待执行的程序、实用程序或进程。RAM 520可提供易失性数据存储,并存储与计算设备500的操作相关的指令。
可单独地或以任何组合方式来使用所述实施方案的各个方面、实施方案、具体实施或特征。可由软件、硬件或硬件与软件的组合来实现所述实施方案的各个方面。所述实施方案还可体现为计算机可读介质上的计算机可读代码。计算机可读介质为可存储数据的任何数据存储设备,所述数据其后可由计算机系统读取。计算机可读介质的示例包括只读存储器、随机存取存储器、CD-ROM、DVD、磁带、硬盘驱动器、固态驱动器和光学数据存储设备。计算机可读介质还可分布在网络耦接的计算机系统中使得计算机可读代码以分布式方式来存储和执行。
上述描述为了进行解释使用了特定命名来提供对所述实施方案的彻底理解。然而,对于本领域的技术人员而言将显而易见的是,实践所述实施方案不需要这些具体细节。因此,对特定实施方案的上述描述是出于例示和描述的目的而呈现的。这些描述不旨在被认为是穷举性的或将所述的实施方案限制为所公开的精确形式。对于本领域的普通技术人员而言将显而易见的是,根据上述教导内容,许多修改和变型是可能的。

Claims (20)

1.一种用于在计算设备处提供交互式教程用户界面(UI)的方法,所述方法包括:
接收对在所述计算设备处显示的UI中所包括的UI元素的选择;
响应于所述选择显示所述交互式教程UI,其中所述交互式教程UI基于(1)所述选择的类型和(2)所述UI元素的类型来指示可用手势;
基于与所述选择相关联地接收的连续输入来识别所述可用手势中的手势;以及
响应于(1)所述手势的完成或(2)所述连续输入的中止而隐藏所述交互式教程UI。
2.根据权利要求1所述的方法,其中所述选择的所述类型是触摸和保持事件或鼠标按下事件。
3.根据权利要求1所述的方法,其中所述UI元素的所述类型是电子表格的列的标题,并且所述可用手势与以下操作相关联:删除所述列、重定位所述列、调整所述列的尺寸、相对于所述列插入另一列、隐藏所述列、和/或对所述列归类。
4.根据权利要求1所述的方法,其中所述UI元素的所述类型是电子表格的行的标题,所述可用手势与以下操作相关联:删除所述行、重定位所述行、调整所述行的尺寸、相对于所述行插入另一行、隐藏所述行、和/或对所述行归类。
5.根据权利要求1所述的方法,其中所述可用手势中的每个手势与相应输入移动路径相关联,并且所述相应输入移动路径的图示包括在所述交互式教程UI中。
6.根据权利要求5所述的方法,其中所述交互式教程UI包括使所述可用手势能够与不同的相应输入移动路径相关联的自定义特征。
7.根据权利要求5所述的方法,还包括:
在所述交互式教程UI内以及与所述连续输入相关地显示所述手势的所述相应输入移动路径的完成指示符。
8.根据权利要求7所述的方法,其中所述UI元素和至少一个相关联UI元素的图像与所述连续输入相关地被显示。
9.根据权利要求1所述的方法,其中所述交互式教程UI是半透明的,并且局部地显示到接收所述选择的地方。
10.根据权利要求1所述的方法,其中当所述交互式教程UI响应于(1)所述手势的完成而被隐藏时,所述方法还包括:
执行与所述手势相关联的操作。
11.一种被配置为提供交互式教程用户界面(UI)的计算设备,所述计算设备包括:
用于接收对在所述计算设备处显示的UI中所包括的UI元素的选择的装置;
用于响应于所述选择而显示所述交互式教程UI的装置,其中所述交互式教程UI基于(1)所述选择的类型和(2)所述UI元素的类型来指示可用手势;
用于基于与所述选择相关联地接收的连续输入来识别所述可用手势中的手势的装置;和
用于响应于(1)所述手势的完成或(2)所述连续输入的中止而隐藏所述交互式教程UI的装置。
12.根据权利要求11所述的计算设备,其中所述可用手势中的每个手势与相应输入移动路径相关联,并且所述相应输入移动路径的图示被包括在所述交互式教程UI中。
13.根据权利要求12所述的计算设备,其中所述交互式教程UI包括使所述可用手势能够与不同的相应输入移动路径相关联的自定义特征。
14.根据权利要求12所述的计算设备,还包括:
用于在所述交互式教程UI内以及与所述连续输入相关地显示所述手势的所述相应输入移动路径的完成指示符的装置。
15.根据权利要求11所述的计算设备,还包括:
用于在所述交互式教程UI响应于(1)所述手势的完成而被隐藏时执行与所述手势相关联的操作的装置。
16.一种被配置为提供交互式教程用户界面(UI)的计算设备,所述计算设备包括:
显示设备;
至少一个存储器;
通信地耦接到所述显示设备和所述至少一个存储器的至少一个处理器,所述至少一个处理器被配置为使所述计算设备:
接收对在所述计算设备处显示的UI中所包括的UI元素的选择;
响应于所述选择显示所述交互式教程UI,其中所述交互式教程UI基于(1)所述选择的类型和(2)所述UI元素的类型来指示可用手势;
基于与所述选择相关联地接收的连续输入来识别所述可用手势中的手势;以及
响应于(1)所述手势的完成或(2)所述连续输入的中止而隐藏所述交互式教程UI。
17.根据权利要求16所述的计算设备,其中所述可用手势中的每个手势与相应输入移动路径相关联,并且所述相应输入移动路径的图示被包括在所述交互式教程UI中。
18.根据权利要求17所述的计算设备,其中所述交互式教程UI包括使所述可用手势能够与不同的相应输入移动路径相关联的自定义特征。
19.根据权利要求17所述的计算设备,其中所述至少一个处理器被配置为使所述计算设备:
在所述交互式教程UI内以及与所述连续输入相关地显示所述手势的所述相应输入移动路径的完成指示符。
20.根据权利要求16所述的计算设备,其中当所述交互式教程UI响应于(1)所述手势的完成而被隐藏时,所述至少一个处理器被进一步配置为使所述计算设备:
执行与所述手势相关联的操作。
CN201710770469.7A 2016-09-23 2017-08-31 计算设备处输入选项的交互式教程支持 Pending CN107870709A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/275,221 US20180090027A1 (en) 2016-09-23 2016-09-23 Interactive tutorial support for input options at computing devices
US15/275,221 2016-09-23

Publications (1)

Publication Number Publication Date
CN107870709A true CN107870709A (zh) 2018-04-03

Family

ID=61686560

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710770469.7A Pending CN107870709A (zh) 2016-09-23 2017-08-31 计算设备处输入选项的交互式教程支持

Country Status (2)

Country Link
US (1) US20180090027A1 (zh)
CN (1) CN107870709A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110111647A (zh) * 2018-05-10 2019-08-09 马特 交互式学习系统及信息处理方法和装置

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11263030B2 (en) * 2020-06-11 2022-03-01 Atlassian Pty Ltd. Dynamically guided document interaction
WO2022234580A1 (en) * 2021-05-04 2022-11-10 Wix.Com Ltd. Toolcast management system

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090100383A1 (en) * 2007-10-16 2009-04-16 Microsoft Corporation Predictive gesturing in graphical user interface
US7840912B2 (en) * 2006-01-30 2010-11-23 Apple Inc. Multi-touch gesture dictionary
CN102156614A (zh) * 2010-01-06 2011-08-17 苹果公司 使用多接触姿态来操作表格的设备、方法和图形用户界面
US20130191787A1 (en) * 2012-01-06 2013-07-25 Tourwrist, Inc. Systems and Methods for Acceleration-Based Motion Control of Virtual Tour Applications
US8622742B2 (en) * 2009-11-16 2014-01-07 Microsoft Corporation Teaching gestures with offset contact silhouettes
US20140068410A1 (en) * 2012-09-06 2014-03-06 Elena Dolinina User interface for composing test scenarios
CN104740875A (zh) * 2015-04-13 2015-07-01 四川天上友嘉网络科技有限公司 游戏角色移动中的指引方法
US20150205516A1 (en) * 2012-09-24 2015-07-23 Google Inc. System and method for processing touch input
US20160077734A1 (en) * 2014-09-13 2016-03-17 Microsoft Corporation Disambiguation of keyboard input

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101304461B1 (ko) * 2006-12-04 2013-09-04 삼성전자주식회사 제스처 기반 사용자 인터페이스 방법 및 장치
JP4618346B2 (ja) * 2008-08-07 2011-01-26 ソニー株式会社 情報処理装置および情報処理方法
KR101857564B1 (ko) * 2009-05-15 2018-05-15 삼성전자 주식회사 휴대 단말기의 이미지 처리 방법
US20110119216A1 (en) * 2009-11-16 2011-05-19 Microsoft Corporation Natural input trainer for gestural instruction
US8773370B2 (en) * 2010-07-13 2014-07-08 Apple Inc. Table editing systems with gesture-based insertion and deletion of columns and rows
US9747270B2 (en) * 2011-01-07 2017-08-29 Microsoft Technology Licensing, Llc Natural input for spreadsheet actions
WO2012066591A1 (ja) * 2010-11-15 2012-05-24 株式会社ソニー・コンピュータエンタテインメント 電子機器、メニュー表示方法、コンテンツ画像表示方法、機能実行方法
US9658733B2 (en) * 2012-08-03 2017-05-23 Stickshift, LLC User interface with selection patterns
US20150007117A1 (en) * 2013-06-26 2015-01-01 Microsoft Corporation Self-revealing symbolic gestures
US10387444B2 (en) * 2015-08-10 2019-08-20 Successfactors, Inc. Tools for auto-visualizations of data

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7840912B2 (en) * 2006-01-30 2010-11-23 Apple Inc. Multi-touch gesture dictionary
US20090100383A1 (en) * 2007-10-16 2009-04-16 Microsoft Corporation Predictive gesturing in graphical user interface
US8622742B2 (en) * 2009-11-16 2014-01-07 Microsoft Corporation Teaching gestures with offset contact silhouettes
CN102156614A (zh) * 2010-01-06 2011-08-17 苹果公司 使用多接触姿态来操作表格的设备、方法和图形用户界面
US20130191787A1 (en) * 2012-01-06 2013-07-25 Tourwrist, Inc. Systems and Methods for Acceleration-Based Motion Control of Virtual Tour Applications
US20140068410A1 (en) * 2012-09-06 2014-03-06 Elena Dolinina User interface for composing test scenarios
US20150205516A1 (en) * 2012-09-24 2015-07-23 Google Inc. System and method for processing touch input
US20160077734A1 (en) * 2014-09-13 2016-03-17 Microsoft Corporation Disambiguation of keyboard input
CN104740875A (zh) * 2015-04-13 2015-07-01 四川天上友嘉网络科技有限公司 游戏角色移动中的指引方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110111647A (zh) * 2018-05-10 2019-08-09 马特 交互式学习系统及信息处理方法和装置

Also Published As

Publication number Publication date
US20180090027A1 (en) 2018-03-29

Similar Documents

Publication Publication Date Title
JP7377319B2 (ja) タッチ感知式セカンダリディスプレイにおいてユーザインタフェースコントロールを動的に提供するシステム、デバイス、及び方法
US10366629B2 (en) Problem solver steps user interface
US20160277387A1 (en) Multi-persona management and devices
US9269110B2 (en) System and method for interface and interaction with internet applications
CN105453017B (zh) 提供图形用户界面的方法和装置
TWI728419B (zh) 交互方法、裝置及設備
CN104036196A (zh) 用于配置口令和用于解锁的装置和方法
CN103229141A (zh) 管理用户界面中的工作空间
JP7433822B2 (ja) アプリケーションビルダ
CN107301038A (zh) 应用生产设备、系统、方法和非临时性计算机可读媒介
CN105518604A (zh) 对套索选择的反馈
CN107209628A (zh) 自适应用户界面窗格对象
JP2018198083A (ja) アニメーションのモーションシーケンスを生成するための方法、システム及びコンピュータ読み取り可能な記録媒体
US11907741B2 (en) Virtual input device-based method and system for remotely controlling PC
CN107463543A (zh) 一种表单信息录入方法及设备
CN105630271A (zh) 用于电子表单数据输入的方法和装置
CN107870709A (zh) 计算设备处输入选项的交互式教程支持
EP2965181B1 (en) Enhanced canvas environments
CN106462409A (zh) 定制的准备就绪部件化的应用定义
Whitlock et al. MRCAT: In situ prototyping of interactive AR environments
Alvina et al. Where is that feature? Designing for cross-device software learnability
CN107506200A (zh) 一种屏幕内容切换方法、终端及计算机可读存储介质
Kocieliński et al. Improving the accessibility of touchscreen-based mobile devices: Integrating Android-based devices and Braille notetakers
US10853029B2 (en) Computerized system including rules for a rendering system accessible to non-literate users via a touch screen
WO2021046718A1 (zh) 一种基于悬浮按钮的快捷操作方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180403

WD01 Invention patent application deemed withdrawn after publication