CN1091898C - 图形用户界面指示系统和响应光标控制驱动器压力的方法 - Google Patents

图形用户界面指示系统和响应光标控制驱动器压力的方法 Download PDF

Info

Publication number
CN1091898C
CN1091898C CN94119746A CN94119746A CN1091898C CN 1091898 C CN1091898 C CN 1091898C CN 94119746 A CN94119746 A CN 94119746A CN 94119746 A CN94119746 A CN 94119746A CN 1091898 C CN1091898 C CN 1091898C
Authority
CN
China
Prior art keywords
pressure
display
cursor
control driver
axis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN94119746A
Other languages
English (en)
Other versions
CN1113020A (zh
Inventor
R·F·马克斯
E·J·赛尔克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of CN1113020A publication Critical patent/CN1113020A/zh
Application granted granted Critical
Publication of CN1091898C publication Critical patent/CN1091898C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0338—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of limited linear or angular displacement of an operating part of the device from a neutral position, e.g. isotonic or isometric joysticks

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)

Abstract

一种用于控制计算机显示设备上光标的指示系统，包括一个控制驱动器，它正常地控制在显示器设备上光标的移动并且检测所施加的控制驱动器压力是否与预定的按压模式相符。如果是的话，则系统将通过起动一个或多个显示动作来响应所施加的压力，而不移动显示器光标。该系统检测沿着该控制驱动器的X、Y和Z轴施加的符合按压模式的压力，并通过从队列中取得包括窗口显示和相应光标位置的光标上下文以及打开相关窗口来予以响应。

Description

图形用户界面指示系统和响应光标控制驱动器压力的方法
本发明总的来说与带有指示设备的计算机显示器控制有关，更具体地说与在图形用户界面中增强了的指示设备功能有关。
正如千百万IBM公司的PC-AT、PS/1和PS/2个人计算机及其他类似机器的用户所感受到的，交互式的计算机系统操作环境的特征就是操作越来越简单方便。在这些计算机的操作变得越来越简单方便的过程中，图形用户界面(GUI)作出了重大的贡献。GUI使得计算机的操作变得更直观且能提高用户的效率。
例如，GUI系统允许用户通过使用连在计算机上的显示器鼠标或轨迹球之类的GUI指示设备移动计算机系统显示器的光标。通过在桌面上移动鼠标或在轨迹球托台中转动轨迹球产生控制输入，根据控制输入的功能，光标在相同的方向上移动。因而，指示设备的控制输入与光标响应之间的关系很直观。许多GUI系统允许多个程序同时在计算机显示器上以窗口的形式显示出来。为了激活或重新进入一个程序，普遍来说用户必须将光标移动到所期望的程序的窗口之中并点按鼠标或轨迹球设备的按钮。这样，为了激活或重新进入某个程序所需要的击键动作就不再必要或者至少是大为减少了，这就使得计算机的使用变得更为简单和方便。将光标指向所期望的实体是高度直观的，因而学会如何操作计算机也就同样变得更为简单和方便。
在光标控制方面正在迅速取得更多的进展。例如，IBM公司在其一种称为“ThinkPad 750”的笔记本大小的便携机中引入了一种光标控制特点，ThinkPad 750提供了一种称为TrackPoint II的控制驱动器，它是一种很小且较硬的“游戏杆”类型的驱动器，安置在其传统的计算机键盘的中央附近。该TrackPoint II控制驱动器大体上处于键盘中央，也就是打字员两只手的回归位置之间，而且非常短小，不至于影响正常的键盘打字操作。计算机用户可以通过对这个控制驱动器侧向用力来移动计算机显示器上的光标，而不必使用显示器鼠标。对于那些膝上或笔记本之类的便携机来说特别需要这种特点，其原因是若要在这些计算机上连上鼠标或轨迹球来控制光标的移动会有困难或不便。
该TrackPoint II控制器作为计算机键盘的有效部件，通过给键盘上的一个单个控制增加光标功能提高了效率。传统的计算机键盘提供的是一组相互独立的光标控制键，当击按这些键时，光标就会在显示器上沿着单一的上下左右的轴向不连续地移动，而TrackPoint II控制器则提供了一个单一的综合控制驱动器，当它受到向左右上下的按压时能够将测向压力转变成光标在显示器上相应的连续且可变的移动。虽然TrackPoint II控制器带来了计算机GUI系统操作的简便性和方便性，但是使其更简便、效率更高仍将是很有利的。
所以，为了维持指示设备对显示器光标的控制和GUI的直观操作，用于GUI的指示设备需要增加额外的功能。这些增强的功能将允许执行额外的控制功能(例如访问程序)，而不必增加控制驱动器的数目。本发明满足了这样的需求。
根据本发明，一种用于控制计算机显示设备上图形用户界面的光标的指示系统包含一个单一的控制驱动器，该控制驱动器以通常的方式控制光标在显示器设备上的移动，并检测所施加的压力是否处于某些预定的力度和方向范围内，即是否符合某些改变显示的击压模式。如果所施压的压力本质上符合预定的击压模式，那么系统将通过起动第一显示动作而不是移动显示器光标来响应该压力。用于起动第一显示动作的压力模式最好由时间短且力度小的压力构成，例如在光标控制驱动器上轻轻一击。例如，该压力模式可以是一中锯齿形的脉冲，具有快速上升的前沿和缓慢下降的后沿。第一显示动作可以由许多频繁执行的计算机动作构成。例如，该第一显示器动作可以包括当出现显示器命令时将光标移动到前一窗口中相应的光标位置上。各个显示器窗口的光标位置在活动窗口发生改变时最好予以保存。这样，当向光标控制驱动器施加平稳的压力时，该光标控制驱动器将控制显示器光标快速移动。而如果以某些可辨识的压力模式或在规定的时间间隔内轻推或轻击该驱动器，该光标控制驱动器将在图形用户界面中执行各种不同的功能。
根据本发明一个方面，该控制驱动器能够检测沿着三个轴向的压力，这三个轴包括X轴、Y轴和Z轴，在例如TrackPoint II杆式控制器的控制驱动器实例中，X轴和Y轴分别定义为在键盘平面内的横向和纵向，而Z轴则定义为指向键盘平面且与该平面垂直的方向。对于可由该光标控制驱动器检测的各个轴向压力，都会使系统执行相应的系统功能或显示器动作。对于那些不是基本上沿着三个轴向的非轴向压力，可以予以忽略，以防止在无意中触碰了控制驱动器时引发不期望的动作。
本发明另一方面是使用多轴控制驱动器和循环队列来选择光标上下文。该循环队列最好是一种由包含显示器窗口和相应的光标位置的光标上下文构成的队列。光标上下文进入该队列可以是自动的，也可以是对用户指示的响应。这样，通过按压控制驱动器就可以循环移动光标上下文队列。例如，作为对施加在该驱动器上的左右(横向)上下(纵向)按压的响应，第二显示动作可以是相应地前后移动由各显示窗口和光标位置构成的循环队列，而第三显示动作可以是在施加了下压(向内)压力时，通过在诸显示窗口中切换获得对根窗口的访问。
本发明的其它特征和优点可以通过以下对一个最佳实施例的描述获得清晰的了解，这些描述以举例的方式说明了本发明的原理。
图1表示根据本发明构造的一个计算机系统。
图2是图1所示的计算机系统的光标控制细节的框图。
图3是一张曲线图，其中反映了图2所示的显示控制器用来响应控制驱动器压力的一种按压模式的波形。
图4是图2所示的显示控制器用来响应控制驱动器压力的压力与时间传输的函数曲线。
图5是图2所示的显示控制器用于控制光标移动的传输函数曲线。
图6、7和8代表显示器，它们说明了图1所示系统所提供的程序访问功能。
图9和10代表显示器，它们说明了图1所示系统所提供的更多的程序访问功能。
图11是一张流程图，它说明了图2所示的显示控制器在响应控制驱动器压力时所执行的处理步骤。
图12、13和14是图2所示的显示控制器所执行的其它处理步骤的流程图。
图1表示根据本发明构造的计算机系统10。该计算机系统含有主机处理器12，处理器12从相连的键盘14接收控制输入并在与主处理器相连的显示器设备18的显示屏16上显示系统响应。显示屏上显示的光标20可用来指定系统任务以及改变显示等等，计算机系统10含有两个光标控制驱动器；杠式显示控制设备22和可选的鼠标显示控制设备24。通过使用这些光标控制驱动器将显示屏16上的光标20移动到某个任务图标之上，再按击鼠标按纽25或键盘本位键(Keyboard hand rest)26，可以产生起动任务或改变显示的显示器命令。根据本发明，系统10的光标驱动器也可以在不必移动光标和按击按纽25的情况下用来起动改变显示等。简单而有方向地轻击或轻推两种控制驱动器之一就能自动引起改变显示或起动系统任务，从而提供了增强的功能。用户可以同时选用两种控制驱动器，或者更典型地，只选用杠式控制器22，就能获得这一增强的功能。总之。当光标控制驱动器22(24)受到平稳的压力时就控制显示器光标20的移动，而当它们受到快速轻击时则执行不同的功能，这样在不必增加控制驱动器数目或驱动器操作数目的情况下就能增加显示功能的数量。
键盘14的杠式控制器22包括一个坚韧并且通常较为细长的棒状物，有时也称其为游戏杆，它从键盘的中央、打字员两手本位位置之间的位置伸出，而且足够低矮不会影响正常的键盘打字。例如，杆式控制设备可以由IBM公司的TrackPoint II控制设备构成，它目前是该类设备中较为先进的一种，在转让给IBM公司的题为“Controllerfor Improved Compnter Pointing Devices”并且于1990年11月20日提交的共同未决美国专利申请中描述了这种设备。
系统10的操作将根据施加在杆式控制器22上的动作予以描述。然而，需要明确的是，类似结构和系统响应也可以与鼠标24一起应用。
对杆式控制设备22侧向用力可以直观地控制光标20在显示屏16上四处移动。如图1所示，当所施加的压力指向键盘14的左边或右边时，将使得光标在显示器上相应地向左或向右移动。同样，如图1所示，当所施加的压力指向键盘的顶部或底部时，将使得光标分别向显示器的顶部或底部移动。
杆式控制设备22含有压力传感器阵列28，它检测所施加的压力的方向和大小并将其转变成用于移动光标的电信号。一个或多个有关的开关，例如鼠标24的按纽25或键盘14上的本位键26或“回车”键(未画出)，传统上可用来选择光标目标化的显示屏。控制驱动器(例如这里为该最佳实施例所描述的TrackPoint II型的设备)的增强功能原理上可以扩展到鼠标或外部游戏杆控制设备上。主机处理器12可以由诸如IBM公司“PS/2”或“ThinkPad 750”之类的个人计算机处理单元等构成。显示器设备18由传统的视频显示终端或平板式显示器构成。
图2更为详细地表示了计算机系统10。为简单起见，其中未画键盘14。图2表明主机处理器12包括一个中央处理单元(CPU)32，CPU32与显示控制器34通信从而控制显示在显示设备18的显示屏16上的图象。杆式控制器22和鼠标24分别经由杆式控制器和鼠标接口36和38与显示控制器及CPU相连。图2同时还表明主机处理器12包含存储器40，存储器40的一部分用于保存光标上下文队列42。正如以下进一步的讨论所述，光标上下文队列所保存的是显示窗口标识符和各显示窗口的光标位置。按压模式辨识器44用于辨识施压于杆式控制器22和鼠标24之上的压力是否与某预定的按压模式匹配，若匹配则构成了引发预定显示功能的有向按压。
在运行中，杆式压力传感器28检测施加在杆式控制器22之上的压力，并向杆接口36提供所施加的控制压力的大小和方向。显示控制器34接受此信息并将其提供给按压模式辨识器44。按压模式辨识器最好包括一个控制驱动器缓冲区46和计时器48，以便将由传感器信号代表的所施加的控制驱动器压力的时间间隔与预定的按压模式进行对比。例如，按压模式辨识器能够确定在几分之一秒的时间内施加在杆式控制器22上的压力波形是否具有锯齿形模式，也即是否具有快速上升的前沿和缓慢下降的后沿。这样，控制驱动器缓冲区46不断拾取所施加压力的传感器信号，而按压模式辨识器44则对缓冲区内容进行关联处理，以评测所施加压力是按压、还是无意中无方向的触碰，或者是连接的光标控制输入的开始。
图3说明了按压模式波形50，它表示时间(横轴)和控制驱动器压力(纵轴)的之间的函数关系。可由按压模式辨识器44用来确定何时更新显示。该曲线表明所施加的压力开始于时刻t0并维持一个时段t1，并且含有一个相对较快的上升前沿52并到达峰值压力ft，以及一个相对较慢的下降后沿54。如果控制驱动器缓冲区46的内容相对于预定的按压模式波形的相关系数足够大，那么显示控制器就将执行相应的显示更新动作或系统功能。而若施加于驱动器22之上的压力相对于按压模式波形50的相关性不够高，就将被认为是别的控制输入或者认为是无意无方向的按压而不会引起显示变化。本领域的一般技术人员将能认识到，该按压模式波形及其与缓冲区内容的关联可按不同应用和取舍进行相应的裁剪。
按压模式辨识器44可以使用更为简单的按压模式关联参数，而不必将所施压力与预定波形进行比较。特别地，按压模式辨识器可以利用定时器48简单地确定所施压力维持的时间长度，并将该信息提供给显示控制器34，控制器34将根据所施压力的大小和时间长度确定是否有必要改变显示。如果控制驱动器传感器28新指示的压力大小属于预定的范围，而且计时器48表明该压力在控制驱动器上维持了一段预定的时间后消失，那么显示控制器34将如下述那样更新显示，只要施加在控制驱动器上的压力超过了预定的短的时间间隔，它就可能是持续的压力，显示控制器从而将根据所施加的压力移动显示屏16上的光标，而不是更新显示。
图4给出了用于显示更新的最简单的临时模式标准曲线，它表示时间(横轴)和控制驱动器压力(纵轴)之间函数关系。图中阴影部分表明导致显示更新动作的控制驱动器压力维持时间和幅度。这就是，维持时间若小于预定时间间隔t1而且传感器信号幅度小于ft施加在驱动器22上的压力就将引起下述显示更新动作。本领域的一般技术人员将能想到有关该问题的其他选择。例如，可以在压力维持时间小于t1，而不管压力幅度大小如何的条件下，就执行显示更新动作。另外，图4所示的t1时间间隔可以与图3所示的按压模式波形中的时间间隔tt有所不同。
在该最佳实施例中，显示控制器34要求图3和图4所示的按压模式标准之前有一个无压力的短时间间隔，即一段空白时间间隔。这样，活动的光标移动的改变就不至于解释成更新显示器的轻击动作。例如，可以避免将光标移动方向的变化解释成更新显示的轻击。该空白时间间隔最好选取为相对较短的时间间隔，大致上等于按压模式显示更新时间间隔。定时器44为确定显示更新按压提供了方便的方法。
这样，按压模式辨识器44的定时器48只用于起动显示更新的短时间间隔控制驱动器压力而不是引起光标移动的其它压力。这就需要将旨在更新显示而对显示控制驱动器22的短时间间隔按压和旨在起动光标移动的连续压力区分开来。显示控制器34通过从计时器48中检测所施压力的维持时间来检测短时间间隔按压。较为可取地，只有向控制驱动器施加力量相对较少，维持时间较短的压力才能引发显示更新。这样，施加于控制驱动器之上时间间隔大于预定时间间隔的压力将引起光标移动，而时间间隔小于预定时间间隔的压力将导致屏幕更新。然而，其他各种响应也可以按这里的描述进行选择，修改或加入。
光标20在显示屏上移动的速度例如可以与施加在控制驱动器上的压力的幅度及其维持时间有关。光标20可以根据施加在控制驱动器中的一个之上的压力进行控制，这种控制方法在已转让给IBM公司并已于1993年1月20日提交的名称为“Tactile Feedback Mechanismof Cursor Control”的Selker等人的共同未决专利申请中有述。
在计算机系统10的最佳实施例中，支持图形用户界面，而且显示设备18显示传统的窗口操作环境，在显示屏16上可同时显示多个窗口。那么本领域的一般技术人员都知道，每个窗口都代表着一个“打开的”程序或一个“打开的”系统操作。所以当光标20指向某个窗口且鼠标或本位键25被击按或“回车”键被击按时就能访问相应的程序或系统操作。在显示屏上可以同时打开并显示多个窗口构成桌面显示(desktop dispbay)，窗口之间可能相互交叠，某些窗口可能都分不可见。通常这些交叠窗口中只有处于窗口栈最顶部的那个窗口被指定为“活动”窗口。
因响应按压模式压力或显示更新按压而起动的显示更新操作可包括许多动作。例如，计算机系统10可以在显示屏上显示本领域的一般技术人员所熟知的系统操作窗口，其他对显示更新按压的响应可以包括由称为PF键的可编程键执行的功能或者用户定义功能。如果控制驱动器的压力传感器能够确定控制驱动器压力沿各个轴向的分量，那么沿不同轴向的按压模式压力可以与不同的显示更新操作联系起来，例如，如果控制驱动器包括从键盘14中伸出的控制杆22，而且与其相连的传感器28能够检测压力沿X轴、Y轴和Z轴的分量，那么可以将不同的显示更新操作分别与三个轴联系。
根据系统10的一个方面，显示控制器34利用循环光标上下文队列42来追踪显示屏16上打开的窗口和各窗口中最后的光标位置。光标上下文不仅包括窗口状态或者正在显示的窗口，还包括窗口中的光标位置。当窗口被打开或成为活动窗口时，光标上下文队列可用来保存窗口状态标识和光标位置列表，或者当窗口被置示显示器上其它窗口之上时，使用光标上下文队列来保存窗口和光标位置列表，或者同时维护两个队列用来同时维护两组信息。对于那些本领域的一般技术人员来说，很容易想到其他用来追踪显示器上打开的窗口和活动窗口的技术。控制驱动器所执行的功能可用来有选择地在已定义的各光标上下文队列中循环移动。不管显示控制器34所维护的是几个队列，都有一个窗口标识符被指定为活动窗口，而且在显示器上占有最顶部的位置。
在本最佳实施例中，光标上下文队列42包括一个自动队列和一个用户定义队列。自动队列将在系统用户发出窗口显示命令时自动填入窗口标识符和相应的光标位置，而用户定义队列则在响应用户发出的队列控制命令时填入窗口标识符和相应的光标位置。当用户将光标移向一个窗口或窗口中的命令图标，并通过按击鼠标或本位键25或“回车”键进行选择时，就会产生窗口显示命令。而用户队列控制命令则包括按压预定功能键或一系列的键盘键。
特别地，当用户发出窗口显示命令时，系统10将自动地将命令发出时的窗口状态，其中包括窗口中显示的任何下拉菜单或其他命令的显示结束，与光标在窗口中所处的位置一起存入光标上下文队列42的自动队列中。当用户发出窗口显时命令时，自动队列最终将会填入内容，而且队列的变化将依据先进先出的原则。这就是，新的窗口显示命令所产生的新的光标上下文项将替代自动队列中旧光标上下文项。那么本领域的一般技术人员将会认识到，必须将那些因为指向菜单项并按“回车”键而激发。并且将产生自动光标上下文队列项的窗口显示命令必项与那些按压按键时不会与窗口显示命令发生联系、并且不会产生光标上下文队列项的按键动作区分开来。
这样，当用户发出窗口显示控制命令，从一个程序移动到另一个程序，从而从一个活动窗口移动到另一个活动窗口，指定、拉下菜单或使用窗口的其他特点的时候，含有窗口显示命令发出时的窗口标识符、窗口状态以及光标位置的光标上下文将会放入光标上下文队列42中的下一个可用位置。用户可以通过沿着某个控制轴(例如X轴)重复按击控制驱动器，经历光标上下文队列的全部的自动队列项。例如，向左按击控制杆可以向后经历自动队列而向右按击控制杆时则可以向前经历自动队列。
正如前面所指出的，当用户发出预定的队列控制命令(例如按击键盘上的功能键)时，将会有光标上下文加入用户定义队列。用户可以通过这种方式在执行了某些其他动作之后指定想要返回的特定程序或窗口。在本最佳实施例中，用户可以通过沿着某一控制轴(例如Y轴)重复按击控制驱动器来经历光标上下文队列42中的用户定义队列项。当用户产生新的队列项时，新定义的光标上下文将替代队列中旧的光标上下文。这样，用户可以通过沿着Y轴重复按击控制杆22回到先前窗口并在原光标位置下继续工作。例如，向上按击控制杆可以向后经历用户定义队列，而向下按击控制杆则可以向前经历该队列。
也可以提供其他类型的光标上下文队列。例如，如果光标上下文队列42按屏幕位置次序(例如交叠窗口的层次次序)排列窗口，那么与图3和图4相符合，按压模式压力，并且其施加方向沿着X轴的压力可用来将处在窗口队列其他位置的窗口移动到队列顶部，从而使得该相关窗口作为新的活动最顶层窗口显示出来，并恢复其先前光标位置。如果光标上下文队列同时还按窗口的打开次序排列窗口，那么沿着Y轴所施加的按压模式压力可用来将处于时间队列中不同窗口移动到队列顶部，从而使得该相关窗口作为新的活动窗口显示出来，并恢复其先前光标位置。沿着Z轴施加的按压模式压力可用于其他动作。由于本领域的一般技术人员所知的实际的原因，Z轴压力的测量只能响应向内(下压)压力，所以沿着Z轴施加的按压模式压力最适合用于切换功能，例如对预定的、也可以是用户定义的窗口或其他显示更新操作进行选择。
图5给出了光标速度与控制驱动器压力的函数关系。图5表明，小于预定义压力f1的压力将不会引起光标移动。若控制驱动器压力大于f1而小于f2，那么光标将以相对较低的速度移动因而便于放置光标。相应于幅度处于f2和f3之间的控制驱动器压力，光标则以第二速度v2移动。若控制驱动器压力大于f3而小于f4，光标移动速度则线性增长至速度v3。由于速度v3大致是人眼所能跟踪的极限速度，因而在f4到f5的相对较大的范围内光标移动速度维持在v3不变，以便用户在按压驱动器时不至在显示屏上丢失光标。最后，大于f5的控制驱动器压力将使光标移动速度急剧上升，这将允许用户几乎可在瞬间将光标移过屏幕。需要指出的是，图5所示的用于光标移动的压力值f1可以与图4所示的用于显示更新动作的压力值f1有所不同。
图6、7和8显示了根据它们在光标上下文队列42中的相对位置而交叠的多个窗口，同时也说明了一系列沿着某轴施加的按压模式压力所引起的显示屏变化。在本最佳实施例中，沿着X轴施加的压力可用来从光标上下文队列42的自动队列中选取光标上下文，沿X轴方向向右(或向左)的力将激活队列中的下一个窗口(或上一个窗口)并恢复该窗口中的相应光标位置。作为另一种选择，沿着X轴施加的压力也可以用于从包含交叠压栈的显示窗口中选择窗口，沿X轴方向施加的向右(或向左)的压力将激活顶部显示窗口的右邻(或左邻)窗口，并且该新定义的最顶部窗口立即变为活动窗口，而且根据光标上下文队列42中的信息将其光标位置设置成光标先前在窗口中的位置。
图6给出了一个含有四个相互交叠的显示窗口的显示屏，其中四个显示窗口102、104、106和108是以本领域的一般技术人员所熟悉的方式显示的，它们构成了窗口102为栈顶的窗口栈。图7显示的是在向右施加了符合显示更新操作按压模式的压力之后同样的四个窗口。在图7中，窗口104替代图4中先前的最顶层窗口102而成为新的最顶层窗口。这个新的最顶层窗口对应于下一显示而且具有从光标上下文队列中获取的相应的光标位置。图8所显示的是另一次向右的显示更新操作按压产生的显示结果。这个过程具有循环或“绕回”的特点，对于图8的显示，若再发出两次向右的显示更新操作按压，将会恢复图6的显示，这是因为这里的光标上下文队列只含有所示的四个光标上下文。那么本领域的一般技术人员将能想到，也可以通过两次向左的显示更新操作按压来完成上述的显示恢复过程，而不必使用循环回绕特点。在各情形中，显示器的最顶层窗口都被指定为活动窗口。
如前所述，基本上沿着各轴向的显示更新操作按压可以控制不同的显示更新操作。例如，沿着控制驱动器Y轴的显示更新按压可用来从光标上下文队列42的用户定义队列中选取显示窗口。另一种选择是，将Y轴按压用于从含有按打开时间排列的显示和光标位置信息的队列中选取不同的窗口显示。虽然GUT可以缺省地创造符合一定的时间和空间上的窗口对应关系的显示，但是诸如缩放或拖曳窗口的用户动作将改变这种对应关系。将Y轴按压用于时间队列将能提供更大的使用便利。
另一种选择是，沿着X轴的显示更新按压用来在交叠窗口栈中循环移动窗口，使得顶层窗口移动到底部而原顶部的第二个窗口移动到顶部。沿着Y轴的显示更新按压可用来将栈底部的窗口移动到顶部，而先前的顶部显示窗口相应下移一个窗口位置。
在另一个实施例中，杆式控制设备22可以检测沿着Z轴的运动。最好该杆式控制器检测沿着Z方向的压力。亦即，只通过检测沿轴向按(下压)杆式控制器的显示更新按压来反映状态变化，而不登记和辩认沿轴向的拉力。例如，显示控制器34可以通过打开一预定义根窗口(例如主窗口或程序管理器窗口)或用户定义窗口来响应Z轴压力。
图9和10显示了对应于Z轴压力的如前所述的显示变化。图9显示了四个相互交叠并且部分不可见的窗口102、104、106和108。图10说明了显示处理器34在响应Z轴显示更新压力时在正在显示的诸窗口顶部显示一个根窗口110。本领域的一般技术人员知道，该根窗口可以由主窗口或程序管理器窗口构成。
图11是一个流程图，它说明了图1所示的计算机系统的处理步骤。在图11中，该处理过程开始于标号为202的开始框。下一个流程图框204表明对控制驱动器取样。图11表明控制驱动器能够检测含有沿X轴、Y轴和Z轴方向分量的合力。在决定框206，按压模式辩识器将检测所施压力是否属于按压模式显示更新压力。若所施压力不属于显示更新压力，那么将由标号为208的流程图框执行正常的光标控制处理。其后处理返回到取样框204。
若所施压力具有可辩识的显示更新按压模式，例如图3所示的锯齿波形或图4所示的短时间间隔小力度标准，那么将由标号为210的选择框对该压力进行检查，以确定本次按压是否沿着X轴向，若是的话，则将开始对X轴压力的处理，该处理如标号为212的流程图框所示。其后处理返回到标号为204的取样框。若该压力不是沿着X轴向，则转向选择框214执行Y轴压力检查。若该压力是沿着Y轴方向，则转到标号为216的处理框对Y轴进行处理。处理其后返回到取样框204。接着，若该压力实际上是沿着Z轴方向的，则转向流程图框220，开始对Z轴的处理。最后，若所施压力具有所要求的波形或短时间间隔，但其方向不是主体上沿着X轴或Y轴或Z轴的轴向，那么该压力就被认为来自于无意的触压，从而按流程图框222所示的那样予以忽略。其后处理返回到标号为204的取样框。
图12说明了根据本最佳实施例对X轴压力的处理(图10中的212框)，其中X轴压力被映射到自动定义的光标上下文中。亦即，X轴压力导致光标上下文队列42发生如下变化，窗口显示标识符和光标位置将按窗口命令发生的次序压入窗口栈。首先，由标号为302的流程图框检测改变窗口显示的按压模式；其次，如选择框304所示，显示控制器根据对X轴压力的处理以及所施压力是向左还是向右，相应循环移动光标上下文队列的各入口项。对于向右的压力，将循环移动窗口显示，使得先前处于队列顶部的光标上下文移动到底部而先前的第二下光标上下文则移动到顶部，这一处理在标号为306的流程图框中有说明。其后，如标号为308的流程图框所示，处于队列顶部的窗口显示被指定为新的活动窗口，该窗口及其相应的光标位置都将在显示屏上显示出来。在标号为310的继续框，计算机系统的处理将重新开始，亦即，处理返回到图11中的204框，对于向左的压力，如312框所示，也将相应循环移动窗口显示，使得处于队列底部的光标上下文移动到顶部，而先前处于顶部的光标上下文则相应移动到队列中的第二个位置。这个新的顶部光标上下文在到达308框时与前述情况一样由带有相应光标位置的窗口构成，其后将转至310框继续处理。
图13说明了根据本最佳实施例对Y轴压力的处理(图11的框216)，Y轴压力将被映射到用户定义的窗口显示中。这样Y轴压力就将引起光标上下文队列42的变化。首先，由标号为402的流程图框检测改变窗口显示的按压模式；其次如选择框404所示，显示控制器根据对Y轴压力的处理以及所施压力是向上还是向下，相应地循环移动光标上下文中的各项。对于向下的压力，将循环移动窗口显示，使得队列中先前的第二个光标上下文移动到队列顶部，而原处顶部的光标上下文则相应移动到底部。标号为406的流程图标表示了这一处理。其后，如标号为408的流程图框所示，处于队列顶部的光标上下文连同其相应光标位置一起将作为活动窗口在显示屏上显示出来。计算机系统的处理转到标号为410的继续框后将重新开始。对于向上的按压，也将循环移动窗口显示，使得先前处于队列底部的光标上下文移动到光标上下文队列顶部，而队列中其他光标上下文则都下推一个位置。标号为412的流程图框表示了这一移动处理。与前述相同，队列中的这一新的顶部光标上下文将在408框中作为新的活动窗口进行显示，并恢复其相应的光标位置。到达410框后系统处理将继续进行。需要指出的是，由于不是所有的窗口都会相会交叠，所以按时间排序的光标上下文队列不一定与按位置排序的光标上下文队列有对应关系。
图14说明了根据本最佳实施例对Z轴显示更新按压进行的处理，这种处理将把Z轴按压映射为起动一个预定根窗口的操作。首先，由标号为502的流程图框对改变窗口显示的按压模式进行检测。Z轴输入的检测是对施加于控制器上的下压压力进行的，若检测到输入将引起状态改变。在判定框504，显示控制器检查根窗口是否是活动的。若是活动的，显示控制器则通过流程图框506，从根窗口返回到先前的活动窗口，同时恢复其光标位置。处理转到508框继续进行。若检测到Z轴按压模式而根窗口又不是活动的，那么显示控制器将通过流程图框510的处理显示二个预定的窗口(例如根窗口)并恢复相应的光标位置。这样，若使用光标上下文队列来选择活动窗口进行显示，那么根窗口标识符应放置在光标上下文队列的顶部位置或者标识为活动窗口。到达流程图框508时处理将重新开始。这里要再次指出的是，相应于不同的控制轴处理和光标上下文队列排序，可以选择许多不同的参数。
上述的指示系统提供了这样一种计算机系统，系统中的控制驱动器可以通过响应连续的压力正常地控制光标在计算机系统显示设备上移动，还可以通过响应符合特定按压模式条件。(例如预定的时间间隔和压力值范围)的压力相应改变显示。这样就提供了增强的显示屏控制，使得可以通过单个控制驱动器来控制光标的移动，起动显示屏更新以及提供程序访问途径。当访问或重入一个程序时，上述的指示系统能够用上次窗口活动时的光标位置来恢复(窗口本次活动时的)光标位置。这种增强了的程序访问功能为访问图形用户界面中的各个程序提供了方便快捷的途径。
对于能够检测的沿着控制驱动器各轴的动作，可以赋予不同的系统功能。这些功能可以包括预定的显示更新(如前面结合图6-10进行的描述)，或者扩充由传统计算机键盘可编程功能键所提供的功能，或者是用户定义功能。不管系统功能如何，该控制驱动器都将提供鼠标移动控制和增强的系统访问。
本发明是通过一个最佳实施例进行说明的，目的是为了便于理解本发明。然而，本以明可适用于未在此作特别说明的显示光标控制系统的多种配置，因而不可将本发明视为仅限于这里所述的一个特定实施例。恰恰相反，本发明可以普通地适用于各种显示光标控制系统。属于后面的权利要求指出的范围中的所有修改、翻版或等价的改编都应视为属于本发明的范围。

Claims (34)

1.用于控制计算机系统显示设备上显示的图形用户界面的指示系统，具有用于移动图形用户界面上的光标的控制驱动器和能够检测施加在控制驱动器上压力的压力传感器，该指示系统包括：
一个检测施加于控制驱动器上的压力的按压模式辨别器，检测所施加的压力是否维持一个预定的时间间隔后释放，以致压力大小和方向对应于某个预定的按压模式因而构成引发显示更新的按压；和
一个显示控制器，当按压模式辨别器检测到符合引发显示更新的按压模式的压力时，该显示控制器将起动第一显示动作作为响应，否则该显示控制器按照施加于控制驱动器上的压力相应地在显示器上移动光标来响应该控制驱动器压力。
2.权利要求1所定义的指示系统，其特征在于只有当显示更新按压维持时间间隔之前有一段没有检测到控制驱动器压力的预定时间间隔时，显示控制器才会引起将要起动的第一显示动作。
3.权利要求1所定义的指示系统，其特征在于显示器设备上可显示多个相互交叠的计算机系统操作窗口，而且该第一显示动作是将一个另外的窗口移动到显示顶部。
4.权利要求3所定义的指示系统，其特征在于该指示系统含有一个光标上下文队列，该队列为每个窗口记录了已显示的操作窗口及其相应的光标位置，以便显示出处于该队列顶部的操作窗口。
5.权利要求1所定义的指示系统，其特征在于该控制驱动器包含一个杆式控制设备。
6.权利要求5所定义的指示系统，其特征在于
该压力传感器能够确定沿着控制驱动器的X轴或Y轴施加的控制驱动器压力的组合；以及
仅当该控制驱动器压力的方向本质上沿着X轴或Y轴时，该显示控制器才会引起将要起动的第一显示动作。
7.权利要求6所定义的指示系统，其特征在于显示设备可以显示多个相互交叠的计算机操作窗口，而且该第一显示动作是将其中一个不同的窗口移动到显示顶部。
8.权利要求5所定义的指示系统，其特征在于该压力传感器能够确定沿着控制驱动器的X轴或Y轴施加的控制驱动器压力的组合；显示设备可以显示多个相互交叠的计算机操作窗口，而且该第一显示动作是将其中一个不同的窗口移动到显示顶部；以及
仅当控制驱动器压力的施加方向本质上沿着X轴时，该显示控制器才会导致第一显示动作起动，仅当控制驱动器压力的施加方向本质上沿着Y轴时，才会导致第二显示动作起动。
9.权利要求8所定义的指示系统，其特征在于该系统进一步含有光标上下文队列，该队列包含了已显示的操作窗口及其各窗口相应光标位置的列表，而且该第一显示动作包括显示处于队列顶部的操作窗口以及窗口中相应的光标位置。
10.权利要求9所定义的指示系统，其特征在于该光标上下文队列包括自动队列项和用户定义项，以便在响应用户窗口显示命令时自动将当前窗口显示和相应的光标位置存入该光标上下文队列，并且在响应预定的用户队列控制命令时将当前窗口显示和相应的光标位置存入该光标上下文队列。
11.权利要求10所定义的指示系统，其特征在于该显示控制器在响应沿着X轴的显示更新模式按压时将循环移动光标上下文队列中的自动队列项中最顶部的光标上下文，并将把该最顶部光标上下文作为活动窗口进行显示；并且在响应沿着Y轴的显示更新按压时循环移动光标上下文队列中的用户定义队列中最顶部的光标上下文，并将把该最顶部的光标上下文作为活动窗口显示。
12.由权利要求5所定义的指示系统，其特征在于该压力传感器能够确定沿着X-Y平面和Z轴施加的控制器压力的组合；并且
仅当该压力本质上处于X-Y平面内时，该显示控制器才含引起第一显示动作的起动，仅当压力本质上沿着Z轴方向时才会引起第二显示动作的起动。
13.由权利要求12所定义的指示系统，其特征在于该显示设备显示了多个相互交叠的计算机系统操作窗口，且第一显示动作是将某个不同的窗口移动到显示顶部。
14.由权利要求5所定义的指示系统，其特征在于该压力传感器能够确定沿着X轴、Y轴和Z轴施加的压力的组合；而且
如果该压力本质上只沿着X轴向，那么该显示控制器则起动第一显示动作，如果该压力本质上只沿着Y轴向，那么就起动第二显示动作；如果该压力本质上沿着Z轴，那么就起动第三显示动作。
15.权利要求14所定义的指示系统，其特征在于该显示设备显示了多个相互交叠的计算机系统操作窗口而且该第一显示动作就是将这些窗口中一个不同的窗口移动到显示顶部。
16.由权利要求14所定义的指示系统，其特征在于该显示设备显示了多个相互交叠的计算机系统操作窗口；而且
该系统进一步包括一个光标上下文队列，该队列包括按交叠次序组织的已显示的操作窗口以及各窗口的相应光标位置的列表，以便处于该队列顶部的操作窗口显示成顶层窗口，而队列中的其他窗口则依照队列中次序交叠。
17.由权利要求16所定义的指示系统，其特征在于该第一显示动作包括循环移动该光标上下文队列中的各项，使得第二个交叠窗口移动到队列顶部；第二显示动作包括循环移动该光标上下文队列中的各项，使得底部光标上下文移动到该光标队列的顶部；以及第三显示动作包括将某个预定的光标上下文移动到光标上下文队列的顶部。
18.一个计算机系统，包括：
一个主机处理器；
一个包括一组用于为主机处理器提供输入数据的本质上处于同一平面内的字符数字键的键盘；
一台能显示光标的显示设备；
一个能用来移动显示器光标的光标控制驱动器；
一个检测施加在控制驱动器上压力的方向和大小的压力传感器；
一个检测施加在控制驱动器上压力的按压模式辨别器，检测维持一个预定时间间隔后再消失的压力的大小和方向是否对应于某个预定的按压模式并构成显示更新按压；以及
一个响应控制驱动器压力的显示控制器，当按模式辨别器检测到含有引发显示更新的按压时，该显示控制器将起动第一显示动作作为响应，否则就按照施加在控制驱动器上的压力相应地移动显示器上的光标来作为对该压力的响应。
19.由权利要求18所定义的指示系统，其特征在于该指示系统包括一个光标上下文队列，该队列包括已显示的操作窗口和各窗口的相应光标位置的列表，使得处于该队列顶部的操作窗口作为顶部窗口显示。
20.由权利要求19所定义的计算机系统，其特征在于该按压模式辨识器包括检测施加在该控制驱动器上的压力维持时间间隔的计时器，当计时器检测出这些压力维持了一个预定的第一时间间隔后消失，并且压力传感器表明这些压力幅度小于预定按压压力时，该按压模式辨识器就会将这些压力识别为显示更新按压。
21.由权利要求18所定义的计算机系统，其特征在于该按压模式辨识器将控制驱动器压力与预定波形进行比较，当这些压力本质上与预定波形相符时就识别为显示更新按压。
22.由权利要求18所定义的计算机系统，其特征在于仅当该控制驱动器压力是在期间没有压力被施加的第二预定时间间隔之后施加在控制驱动器上时该显示控制器才会引起第一显示动作的起动。
23.由权利要求18所定义的计算机系统，其特征在于：
该控制驱动器包括一个与键盘垂直的杆式控制设备；以及
该压力传感器能够确定施加在该控制驱动器上的压力，该压力是沿着与键盘行平行的X轴的压力与沿着在键盘平面内与X轴垂直的Y轴的压力的组合。
24.由权利要求18所定义的计算机系统，其特征在于：
该控制驱动器包括一个与键盘垂直的杆式控制设备；以及
该压力传感器能够确定施加在该控制驱动器上的压力，可以沿着X轴、Y轴和Z轴向该控制驱动器施加压力，而且当压力本质上沿着X轴时，该控制驱动器则使得第一显示动作的起动，若压力本质上沿着Y轴时则使得第二显示动作起动。
25.权利要求18所定义的计算机系统，其特征在于该控制驱动器包括一个与键盘垂直的杆式控制设备；该压力传感器能确定在X-Y平面内和沿着Z轴施加的压力的组合；而且如果所施加的压力本质上在X-Y平面内则使得第一显示动作起动，而如果所施加的压力本质上沿着Z轴则使得第二显示动作起动。
26.由权利要求18所定义的计算机系统，其特征在于该控制驱动器包括一个与键盘垂直的杆式控制设备；该压力传感器能够确定沿着X轴、Y轴和Z轴向该控制驱动器施加的压力的组合；而且如果所施加的压力本质上沿着X轴，那么该显示控制器就将使得第一显示动作起动；而若压力本质上沿着Y轴，则相应使得第二显示动作起动；假如压力本质上沿着Z轴，则相应使得第三显示动作起动。
27.一种响应光标控制驱动器上的压力的方法，该光标控制驱动器用于控制显示在计算机系统的计算机显示设备上的光标，该方法包括以下步骤：
检测施加在光标控制驱动器上的压力；
确定施加在控制驱动器上的压力的维持时间间隔，这个时间间隔之后压力消失；以及
如果控制驱动器压力大小和方向经测定与预定按压模式波形相符，那么就起动第一显示动作作为响应，否则就按照施加在该控制驱动器上的压力相应地在显示器上移动光标来作为响应。
28.权利要求27所定义的方法，其特征在于该预定按压模式波形包括一个持续时间短的波形，该波形具有相对快的上升沿和相对慢的下降沿。
29.权利要求27所定义的方法，其特征在于该预定按压模式波形包括压力大小属于预定的压力值范围，压力是第一预定时间间隔施加在控制驱动器上的压力。
30.权利要求27所定义的方法，其特征在于起动第一显示动作的步骤进一步包括以下步骤：
确定符合按压模式波形的压力是否发生在一个没有检测到控制驱动器压力的预定空白时间间隔之后，
仅当所施加的压力出现在该预定空白时间间隔之后才起动第一显示动作，否则就按照施加在该控制驱动器上的压力相应地在显示器上移动光标。
31.权利要求27所定义的方法，其特征在于该显示设备上显示了多个在显示器上相互交叠的计算机系统操作窗口，而且该第一显示动作包括将这些操作窗口中的一个不同的窗口移动到显示顶部。
32.权利要求27所定义的方法，其特征在于：
检测施加在光标控制驱动器上的控制驱动器压力的步骤包括确定施加在该控制驱动器之上沿着X轴和Y轴的压力的组合；
起动第一显示动作的步骤包括：如果压力本质上沿着X轴，就起动第一显示动作，而若压力本质上沿着Y轴则相应起动第二显示动作。
33.权利要求27所定义的方法，其特征在于：
检测施加在光标控制驱动器上的控制驱动器压力的步骤包括确定施加该控制驱动器之上沿着X轴、Y轴和Z轴的压力的组合；而且，
起动第一显示动作的步骤包括：如果压力本质上处于X-Y平面，就起动第一显示动作，而若压力沿着Z轴，则起动第二显示动作。
34.权利要求27所定义的方法，其特征在于：
检测施加在光标控制驱动器上的控制驱动器压力的步骤包括确定施加在控制驱动器之上的沿着X轴、Y轴和Z轴的压力的组合；
并且起动第一显示动作的步骤包括：如果压力本质上沿着X轴，就起动第一显示动作，而若压力本质上沿着Y轴则起动第二显示动作；
再若压力本质上沿着Z轴则起动第三显示动作。
CN94119746A 1993-12-30 1994-12-19 图形用户界面指示系统和响应光标控制驱动器压力的方法 Expired - Fee Related CN1091898C (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US175878 1988-04-01
US175,878 1988-04-01
US17587893A 1993-12-30 1993-12-30

Publications (2)

Publication Number Publication Date
CN1113020A CN1113020A (zh) 1995-12-06
CN1091898C true CN1091898C (zh) 2002-10-02

Family

ID=22642029

Family Applications (1)

Application Number Title Priority Date Filing Date
CN94119746A Expired - Fee Related CN1091898C (zh) 1993-12-30 1994-12-19 图形用户界面指示系统和响应光标控制驱动器压力的方法

Country Status (8)

Country Link
US (1) US5699082A (zh)
EP (1) EP0662654B1 (zh)
JP (1) JP2610114B2 (zh)
KR (1) KR0167464B1 (zh)
CN (1) CN1091898C (zh)
DE (1) DE69424145T2 (zh)
MY (1) MY117103A (zh)
TW (1) TW279949B (zh)

Families Citing this family (163)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7113171B2 (en) * 1997-06-10 2006-09-26 Mark Vayda Universal input device
US5973670A (en) * 1996-12-31 1999-10-26 International Business Machines Corporation Tactile feedback controller for computer cursor control device
US8279169B2 (en) * 1997-06-10 2012-10-02 Mark Vayda Universal input device and system
US20030107557A1 (en) * 1997-07-30 2003-06-12 Gateway, Inc. Control of unintended single-tap actuation of a computer touch pad pointing device
US5926175A (en) * 1997-09-30 1999-07-20 Compaq Computer Corporation Method and apparatus to prevent top-most windows from interfering with TV mode in a PC/TV
GB2335024A (en) * 1998-03-06 1999-09-08 Ibm Joystick for portable computer system
US6098184A (en) * 1998-05-08 2000-08-01 Spotware Technologies, Inc. Method for improving mouse performance and virtual device driver therefor
WO1999060556A1 (en) * 1998-05-20 1999-11-25 Chan Kwan Ho Finger controlled computer mouse
US6452586B1 (en) 1998-11-30 2002-09-17 Microsoft Corporation Computer input device providing tactile feedback
US6697506B1 (en) * 1999-03-17 2004-02-24 Siemens Corporate Research, Inc. Mark-free computer-assisted diagnosis method and system for assisting diagnosis of abnormalities in digital medical images using diagnosis based image enhancement
US7170499B1 (en) * 1999-05-25 2007-01-30 Silverbrook Research Pty Ltd Handwritten text capture via interface surface
US6728675B1 (en) * 1999-06-03 2004-04-27 International Business Machines Corporatiion Data processor controlled display system with audio identifiers for overlapping windows in an interactive graphical user interface
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US6983063B1 (en) 2000-06-29 2006-01-03 Siemens Corporate Research, Inc. Computer-aided diagnosis method for aiding diagnosis of three dimensional digital image data
US7257777B1 (en) * 2000-07-19 2007-08-14 International Business Machines Corporation System and method for automatic control of window viewing
US6944330B2 (en) * 2000-09-07 2005-09-13 Siemens Corporate Research, Inc. Interactive computer-aided diagnosis method and system for assisting diagnosis of lung nodules in digital volumetric medical images
FR2821446B1 (fr) * 2001-02-26 2003-06-13 Eads Airbus Sa Dispositif de dialogue d'aeronef, pour dialoguer avec un systeme dudit aeronef
WO2003052569A1 (fr) * 2001-12-07 2003-06-26 Ntt Docomo, Inc. Terminal de communication mobile, procede et programme de commande d'execution d'applications et support d'enregistrement lisible par ordinateur
US6690387B2 (en) * 2001-12-28 2004-02-10 Koninklijke Philips Electronics N.V. Touch-screen image scrolling system and method
WO2005062681A1 (en) * 2003-12-08 2005-07-07 Thomson Licensing System and method for applying power to high intensity discharge lamps
US8744852B1 (en) * 2004-10-01 2014-06-03 Apple Inc. Spoken interfaces
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
KR20070036429A (ko) * 2005-09-29 2007-04-03 엘지전자 주식회사 문자편집 기능이 구비되는 이동통신 단말기 및 그 동작방법
US8689134B2 (en) * 2006-02-24 2014-04-01 Dana W. Paxson Apparatus and method for display navigation
CN100517205C (zh) * 2006-04-21 2009-07-22 邱波 用于it领域的同时多维、增速、省空间的系统显示方法
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8675847B2 (en) 2007-01-03 2014-03-18 Cisco Technology, Inc. Scalable conference bridge
CN101246382B (zh) 2007-02-14 2011-09-28 普安科技股份有限公司 可以容置不同尺寸硬盘的数据储存系统
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US20100127983A1 (en) * 2007-04-26 2010-05-27 Pourang Irani Pressure Augmented Mouse
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
TWI419041B (zh) * 2008-06-06 2013-12-11 Hon Hai Prec Ind Co Ltd 控制觸摸屏圖示顯示之方法
JP2010020502A (ja) * 2008-07-10 2010-01-28 Alps Electric Co Ltd ポインティングデバイス
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
US9141087B2 (en) 2009-04-26 2015-09-22 Nike, Inc. Athletic watch
CN103955131B (zh) 2009-04-26 2017-04-12 耐克创新有限合伙公司 在运动手表系统中的gps特征和功能
US20100295774A1 (en) * 2009-05-19 2010-11-25 Mirametrix Research Incorporated Method for Automatic Mapping of Eye Tracker Data to Hypermedia Content
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9262002B2 (en) * 2010-11-03 2016-02-16 Qualcomm Incorporated Force sensing touch screen
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US20140040819A1 (en) * 2011-09-09 2014-02-06 Adobe Systems Incorporated Methods and systems for managing the presentation of windows on a display device
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
CN103309583B (zh) * 2012-03-09 2016-01-20 艾默生过程控制流量技术有限公司 对操作时间进行显示的变送器
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US9265458B2 (en) 2012-12-04 2016-02-23 Sync-Think, Inc. Application of smooth pursuit cognitive testing paradigms to clinical drug development
DE112014000709B4 (de) 2013-02-07 2021-12-30 Apple Inc. Verfahren und vorrichtung zum betrieb eines sprachtriggers für einen digitalen assistenten
US9380976B2 (en) 2013-03-11 2016-07-05 Sync-Think, Inc. Optical neuroinformatics
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
AU2014233517B2 (en) 2013-03-15 2017-05-25 Apple Inc. Training an at least partial voice command system
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
EP3937002A1 (en) 2013-06-09 2022-01-12 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
AU2014278595B2 (en) 2013-06-13 2017-04-06 Apple Inc. System and method for emergency calls initiated by voice command
DE112014003653B4 (de) 2013-08-06 2024-04-18 Apple Inc. Automatisch aktivierende intelligente Antworten auf der Grundlage von Aktivitäten von entfernt angeordneten Vorrichtungen
CN104469256B (zh) * 2013-09-22 2019-04-23 思科技术公司 沉浸式和交互式的视频会议房间环境
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
TWI566107B (zh) 2014-05-30 2017-01-11 蘋果公司 用於處理多部分語音命令之方法、非暫時性電腦可讀儲存媒體及電子裝置
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10291597B2 (en) 2014-08-14 2019-05-14 Cisco Technology, Inc. Sharing resources across multiple devices in online meetings
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US10542126B2 (en) 2014-12-22 2020-01-21 Cisco Technology, Inc. Offline virtual participation in an online conference meeting
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US9948786B2 (en) 2015-04-17 2018-04-17 Cisco Technology, Inc. Handling conferences using highly-distributed agents
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10291762B2 (en) 2015-12-04 2019-05-14 Cisco Technology, Inc. Docking station for mobile computing devices
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
US10574609B2 (en) 2016-06-29 2020-02-25 Cisco Technology, Inc. Chat room access control
US10592867B2 (en) 2016-11-11 2020-03-17 Cisco Technology, Inc. In-meeting graphical user interface display using calendar information and system
US10516707B2 (en) 2016-12-15 2019-12-24 Cisco Technology, Inc. Initiating a conferencing meeting using a conference room device
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US10515117B2 (en) 2017-02-14 2019-12-24 Cisco Technology, Inc. Generating and reviewing motion metadata
US9942519B1 (en) 2017-02-21 2018-04-10 Cisco Technology, Inc. Technologies for following participants in a video conference
US10440073B2 (en) 2017-04-11 2019-10-08 Cisco Technology, Inc. User interface for proximity based teleconference transfer
US10375125B2 (en) 2017-04-27 2019-08-06 Cisco Technology, Inc. Automatically joining devices to a video conference
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10404481B2 (en) 2017-06-06 2019-09-03 Cisco Technology, Inc. Unauthorized participant detection in multiparty conferencing by comparing a reference hash value received from a key management server with a generated roster hash value
US10375474B2 (en) 2017-06-12 2019-08-06 Cisco Technology, Inc. Hybrid horn microphone
US10477148B2 (en) 2017-06-23 2019-11-12 Cisco Technology, Inc. Speaker anticipation
US10516709B2 (en) 2017-06-29 2019-12-24 Cisco Technology, Inc. Files automatically shared at conference initiation
US10706391B2 (en) 2017-07-13 2020-07-07 Cisco Technology, Inc. Protecting scheduled meeting in physical room
US10091348B1 (en) 2017-07-25 2018-10-02 Cisco Technology, Inc. Predictive model for voice/video over IP calls
US10771621B2 (en) 2017-10-31 2020-09-08 Cisco Technology, Inc. Acoustic echo cancellation based sub band domain active speaker detection for audio and video conferencing applications

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4680577A (en) * 1983-11-28 1987-07-14 Tektronix, Inc. Multipurpose cursor control keyswitch
US5195179A (en) * 1986-01-29 1993-03-16 Hitachi, Ltd. Coordinate input apparatus
JP2557358B2 (ja) * 1986-12-26 1996-11-27 株式会社東芝 情報処理装置
DE3711582A1 (de) * 1987-04-06 1988-10-27 Cordell Steve Verfahren zur steuerungseingabe, rechnerverarbeitung und anzeige
US5237651A (en) * 1987-08-21 1993-08-17 Eden Group Limited Electronic personal organizer
US5079723A (en) * 1988-03-04 1992-01-07 Xerox Corporation Touch dialogue user interface for reproduction machines
US5146556A (en) * 1988-10-11 1992-09-08 Next Computer, Inc. System and method for managing graphic images
GB8904800D0 (en) * 1989-03-02 1989-04-12 Interox Chemicals Ltd Iodo compounds
US5155806A (en) * 1989-03-15 1992-10-13 Sun Microsystems, Inc. Method and apparatus for displaying context sensitive help information on a display
US5189403A (en) * 1989-09-26 1993-02-23 Home Row, Inc. Integrated keyboard and pointing device system with automatic mode change

Also Published As

Publication number Publication date
EP0662654A1 (en) 1995-07-12
TW279949B (zh) 1996-07-01
JP2610114B2 (ja) 1997-05-14
US5699082A (en) 1997-12-16
JPH07210362A (ja) 1995-08-11
DE69424145T2 (de) 2000-11-09
EP0662654B1 (en) 2000-04-26
DE69424145D1 (de) 2000-05-31
MY117103A (en) 2004-05-31
KR950020281A (ko) 1995-07-24
KR0167464B1 (ko) 1999-01-15
CN1113020A (zh) 1995-12-06

Similar Documents

Publication Publication Date Title
CN1091898C (zh) 图形用户界面指示系统和响应光标控制驱动器压力的方法
CN100336000C (zh) 输入处理方法和输入控制装置
CN1110736C (zh) 触摸屏输入的自适应抽样
US5272470A (en) Apparatus and method for reducing system overhead while inking strokes in a finger or stylus-based input device of a data processing system
US8508489B2 (en) System and method for injecting ink into an application
CN1113287C (zh) 计算设备多模手写输入和手导控制的方法和装置
EP0536554A1 (en) Method and apparatus for reducing system overhead for a touch screen device
JPH03166618A (ja) タッチ形ディスプレイ上に模擬キーボードを表示する方法及び装置
JPH0683512A (ja) コマンド及びデータ入力方法及び入力装置
CN101893956A (zh) 显示控制设备、显示控制方法和计算机程序
KR20120005741A (ko) 하이브리드 터치패널의 작동방법
CN1049053C (zh) 对来自输入装置的宽带数据进行缓存的方法及系统
Moyle et al. Analysing mouse and pen flick gestures
CN101872266A (zh) 输入处理装置
KR101447542B1 (ko) 터치 패널 제어장치 및 그의 구동방법
WO1993008559A1 (en) Computer input system
JP2000194493A (ja) ポインティングデバイス
CN1475892A (zh) 用于控制设备的直观按键程序设计
KR960032156A (ko) 터치 판넬을 이용한 가상 마우스 장치의 가상 마우스 제어방법
JPH1195912A (ja) 座標入力装置、座標入力方法及び座標入力プログラムを記録したコンピュータ読み取り可能な記録媒体
JPH10154224A (ja) データ処理装置
Armbrüster et al. Target size and distance: Important factors for designing user interfaces for older notebook users
CN100388266C (zh) 具书写教学功能的可携式电子装置
Yim et al. Palmrest+: Expanding Laptop Input Space with Shear Force on Palm-Resting Area
US20150067592A1 (en) Methods and Systems for Interacting with a Digital Marking Surface

Legal Events

Date Code Title Description
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C06 Publication
PB01 Publication
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20021002

Termination date: 20101219