CN102884500A - 控制选择近似 - Google Patents

控制选择近似 Download PDF

Info

Publication number
CN102884500A
CN102884500A CN2011800229941A CN201180022994A CN102884500A CN 102884500 A CN102884500 A CN 102884500A CN 2011800229941 A CN2011800229941 A CN 2011800229941A CN 201180022994 A CN201180022994 A CN 201180022994A CN 102884500 A CN102884500 A CN 102884500A
Authority
CN
China
Prior art keywords
contact
respective area
application program
primary importance
subarea
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800229941A
Other languages
English (en)
Other versions
CN102884500B (zh
Inventor
托马斯·安德鲁·库克·戴尔
克里斯托弗·布莱恩·弗雷扎克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Priority to CN201610455059.9A priority Critical patent/CN106126097B/zh
Publication of CN102884500A publication Critical patent/CN102884500A/zh
Application granted granted Critical
Publication of CN102884500B publication Critical patent/CN102884500B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

一种方法包含在装置的触敏显示器上显示应用程序的用户接口。所述用户接口包含多个区,所述多个区在相应层次等级处包含相应区。所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区。所述方法包含检测对应于所述相应区且不对应于所述两个或两个以上子区中的任一者的位置处的第一接触。当所述应用程序经配置以不结合所述相应区而是结合所述两个或两个以上子区中的至少一个子区处理所述第一接触时,所述方法包含根据所述子区相对于所述位置的方位来识别相应子区,且使用所述应用程序结合所述所识别的相应子区处理所述第一接触。

Description

控制选择近似
技术领域
本发明大体上涉及用户接口处理,包含(但不限于)用于辨识触摸输入的设备和方法。
背景技术
近年来,将触敏表面用作计算机和其它电子计算装置的输入装置已显著增加。示范性触敏表面包含触摸板和触摸屏显示器。此些表面广泛用于在显示器上选择和/或操纵用户接口对象。
触摸输入通常基于手指接触。然而,手指(或指尖)的大小可使准确地选择为不同用户接口方法(例如,传统的基于鼠标的输入)设计和定大小的用户接口对象成为挑战。另外,出于各种原因(例如,提供较多屏幕/显示器占用面积,使得可在单个视图中显示更多信息),可将用户接口对象的大小设计得较小。此外,具有暂时或永久残疾、障碍或疾病(例如,降低的视觉感知和/或减少的动作技能)的人可能难以精确地选择和/或操纵用户接口对象。
因此,将希望具有用于辨识基于触摸的示意动作和事件以及来自其它输入源的示意动作和事件的综合框架或机制,即使在既定用户接口对象之外检测到基于触摸的示意动作和事件也是如此。
发明内容
为了解决前面提到的缺点,根据一些实施例,在具有触敏显示器的电子装置处执行一种方法。所述方法包含在所述触敏显示器上显示应用程序的用户接口。所述所显示的用户接口包含布置在多个分层等级中的多个区。所述多个区在相应层次等级处包含相应区。所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区。所述方法还包含在所述触敏显示器上检测对应于所述相应区且不对应于所述相应区的所述两个或两个以上子区中的任一者的第一位置处的第一接触。所述方法包含响应于检测到所述第一接触,确定所述应用程序是否经配置以结合所述相应区处理所述第一接触。所述方法进一步包含在应用程序不经配置以结合相应区处理第一接触时,确定应用程序是否经配置以结合所述相应区的两个或两个以上子区中的至少一个子区处理第一接触。所述方法包含当所述应用程序经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触时,根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区,且使用所述应用程序结合所述所识别的相应子区处理所述第一接触。
根据一些实施例,在具有触敏显示器的电子装置处执行一种方法。所述方法包含在所述触敏显示器上显示包含多个可激活用户接口对象的网页(或其它文档)。所述方法还包含在所述触敏显示器上检测对应于所述所显示的网页的第一位置处的第一接触。所述方法包含响应于检测到所述第一位置处的所述第一接触,确定所述第一位置是否对应于所述可激活用户接口对象中的至少一者。所述方法进一步包含当第一位置不对应于可激活用户接口对象中的至少一者时,如果存在的话那么识别最满足相对于所述第一位置的预定义规则的用户接口对象,且执行对应于所述所识别的用户接口对象的动作。
根据一些实施例,一种电子装置包含:触敏显示器、一个或一个以上用于执行程序的处理器,以及存储供所述一个或一个以上处理器执行的一个或一个以上程序的存储器。所述一个或一个以上程序包含供所述一个或一个以上处理器执行以便实施前面提到的方法中的任一者的指令。
根据一些实施例,一种计算机可读存储媒体存储经配置以供电子装置中的一个或一个以上处理器执行的一个或一个以上程序。所述一个或一个以上程序包含用于执行前面提到的方法中的任一者的指令。
根据一些实施例,一种电子装置包含:触敏显示器、一个或一个以上处理器,以及存储供所述一个或一个以上处理器执行的一个或一个以上程序的存储器。所述一个或一个以上程序包含在由所述一个或一个以上处理器执行时致使电子装置在触敏显示器上显示应用程序的用户接口的指令。所述所显示的用户接口包含布置在多个分层等级中的多个区。所述多个区在相应层次等级处包含相应区。所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区。所述一个或一个以上程序还包含在由所述一个或一个以上处理器执行时致使电子装置在触敏显示器上检测对应于相应区且不对应于相应区的两个或两个以上子区中的任一者的第一位置处的第一接触的指令。所述一个或一个以上程序包含在由所述一个或一个以上处理器执行时致使电子装置响应于检测到第一接触而确定应用程序是否经配置以结合相应区处理第一接触的指令。所述一个或一个以上程序包含在由所述一个或一个以上处理器执行时致使电子装置在应用程序不经配置以结合相应区处理第一接触时确定应用程序是否经配置以结合相应区的两个或两个以上子区中的至少一个子区处理第一接触的指令。所述一个或一个以上程序进一步包含以下指令,其在由所述一个或一个以上处理器执行时致使电子装置在应用程序经配置以结合相应区的两个或两个以上子区中的至少一个子区处理第一接触时,根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区,且使用所述应用程序结合所述所识别的相应子区处理所述第一接触。
根据一些实施例,一种计算机可读存储媒体存储供具有触敏显示器的电子装置中的一个或一个以上处理器执行的一个或一个以上程序。所述一个或一个以上程序包含在由所述一个或一个以上处理器执行时致使电子装置提供应用程序的用户接口以在触敏显示器上显示的指令。所述所显示的用户接口包含布置在多个分层等级中的多个区。所述多个区在相应层次等级处包含相应区。所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区。所述一个或一个以上程序还包含在由所述一个或一个以上处理器执行时致使电子装置响应于在触敏显示器上检测到第一接触而确定应用程序是否经配置以结合相应区处理第一接触的指令。第一位置处的第一接触对应于相应区,且不对应于相应区的所述两个或两个以上子区中的任一者。所述一个或一个以上程序包含在由所述一个或一个以上处理器执行时致使电子装置在应用程序不经配置以结合相应区处理第一接触时确定应用程序是否经配置以结合相应区的两个或两个以上子区中的至少一个子区处理第一接触的指令。所述一个或一个以上程序进一步包含以下指令,其在由所述一个或一个以上处理器执行时致使电子装置在应用程序经配置以结合相应区的两个或两个以上子区中的至少一个子区处理第一接触时,根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区,且使用所述应用程序结合所述所识别的相应子区处理所述第一接触。
根据一些实施例,一种电子装置包含:触敏显示器;以及用于在所述触敏显示器上显示应用程序的用户接口的构件。所显示的用户接口包含布置在多个分层等级中的多个区,且所述多个区在相应层次等级处包含相应区。所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区。所述电子装置还包含:用于在所述触敏显示器上检测对应于所述相应区且不对应于所述相应区的所述两个或两个以上子区中的任一者的第一位置处的第一接触的构件;以及响应于检测到所述第一接触而启用的用于确定所述应用程序是否经配置以结合所述相应区处理所述第一接触的构件。所述电子装置更进一步包含在所述应用程序不经配置以结合所述相应区处理所述第一接触时启用的构件,其包含:用于确定所述应用程序是否经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触的构件;以及在所述应用程序经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触时启用的构件,其包含:用于根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区的构件;以及用于使用所述应用程序结合所述所识别的相应子区处理所述第一接触的构件。
根据一些实施例,一种供具有触敏显示器的电子装置中使用的信息处理设备包含用于在所述触敏显示器上显示应用程序的用户接口的构件。所显示的用户接口包含布置在多个分层等级中的多个区,且所述多个区在相应层次等级处包含相应区。所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区。所述信息处理设备还包含:用于在所述触敏显示器上检测对应于所述相应区且不对应于所述相应区的所述两个或两个以上子区中的任一者的第一位置处的第一接触的构件;以及响应于检测到所述第一接触而启用的用于确定所述应用程序是否经配置以结合所述相应区处理所述第一接触的构件。所述信息处理设备更进一步包含在所述应用程序不经配置以结合所述相应区处理所述第一接触时启用的构件,其包含:用于确定所述应用程序是否经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触的构件;以及在所述应用程序经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触时启用的构件,其包含:用于根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区的构件;以及用于使用所述应用程序结合所述所识别的相应子区处理所述第一接触的构件。
根据一些实施例,一种电子装置包含:触敏显示器、一个或一个以上处理器,以及存储供所述一个或一个以上处理器执行的一个或一个以上程序的存储器。所述一个或一个以上程序包含以下指令,其在由一个或一个以上处理器执行时致使电子装置在触敏显示器上显示包含多个可激活用户接口对象的网页(或其它文档),且在触敏显示器上检测对应于所显示网页的第一位置处的第一接触。所述一个或一个以上程序还包含以下指令,其在由一个或一个以上处理器执行时致使电子装置响应于检测到第一位置处的第一接触,确定第一位置是否对应于可激活用户接口对象中的至少一者。所述一个或一个以上程序进一步包含以下指令,其在由一个或一个以上处理器执行时致使电子装置在所述第一位置不对应于所述可激活用户接口对象中的至少一者时,如果存在的话那么识别最满足相对于所述第一位置的接近性准则的用户接口对象,且执行对应于所述所识别的用户接口对象的动作。
根据一些实施例,一种计算机可读存储媒体存储供具有触敏显示器的电子装置中的一个或一个以上处理器执行的一个或一个以上程序。所述一个或一个以上程序包含以下指令,其在由一个或一个以上处理器执行时致使电子装置在触敏显示器上显示包含多个可激活用户接口对象的网页(或其它文档),且在触敏显示器上检测对应于所显示网页的第一位置处的第一接触。所述一个或一个以上程序还包含以下指令,其在由一个或一个以上处理器执行时致使电子装置响应于检测到第一位置处的第一接触,确定第一位置是否对应于可激活用户接口对象中的至少一者。所述一个或一个以上程序进一步包含以下指令,其在由一个或一个以上处理器执行时致使电子装置在所述第一位置不对应于所述可激活用户接口对象中的至少一者时,如果存在的话那么识别最满足相对于所述第一位置的接近性准则的用户接口对象,且执行对应于所述所识别的用户接口对象的动作。
根据一些实施例,一种电子装置包含:触敏显示器;以及用于在所述触敏显示器上显示包含多个可激活用户接口对象的网页的构件。所述电子装置还包含:用于在所述触敏显示器上检测对应于所显示的网页的第一位置处的第一接触的构件;以及响应于检测到第一位置处的所述第一接触而启用的用于确定所述第一位置是否对应于可激活用户接口对象中的至少一者的构件。所述电子装置更进一步包含在所述第一位置不对应于所述可激活用户接口对象中的至少一者时启用的构件,其包含:用于如果存在的话那么识别最满足相对于所述第一位置的预定义规则的用户接口对象的构件;以及用于执行对应于所述所识别的用户接口对象的动作的构件。
根据一些实施例,一种供具有触敏显示器的电子装置中使用的信息处理设备包含:用于在所述触敏显示器上显示包含多个可激活用户接口对象的网页的构件;用于在所述触敏显示器上检测对应于所述所显示的网页的第一位置处的第一接触的构件;以及响应于检测到所述第一位置处的所述第一接触而启用的用于确定所述第一位置是否对应于所述可激活用户接口对象中的至少一者的构件。所述信息处理设备还包含在所述第一位置不对应于所述可激活用户接口对象中的至少一者时启用的构件,其包含:用于如果存在的话那么识别最满足相对于所述第一位置的预定义规则的用户接口对象的构件;以及用于执行对应于所述所识别的用户接口对象的动作的构件。
根据一些实施例,一种电子装置包含触敏显示器单元,其经配置以显示应用程序的用户接口且接收手指接触。所显示的用户接口包含布置在多个分层等级中的多个区,且所述多个区在相应层次等级处包含相应区。所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区。所述电子装置还包含处理单元,其耦合到所述触敏显示器单元。所述处理单元经配置以:在所述触敏显示器单元上检测对应于所述相应区且不对应于所述相应区的所述两个或两个以上子区中的任一者的第一位置处的第一接触;且响应于检测到所述第一接触,确定所述应用程序是否经配置以结合所述相应区处理所述第一接触。所述处理单元进一步经配置以在应用程序不经配置以结合相应区处理第一接触时,确定应用程序是否经配置以结合所述相应区的两个或两个以上子区中的至少一个子区处理第一接触。所述处理单元进一步经配置以在应用程序经配置以结合所述相应区的两个或两个以上子区中的至少一个子区处理第一接触时:根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区;且使用所述应用程序结合所述所识别的相应子区处理所述第一接触。
根据一些实施例,一种电子装置包含触敏显示器单元,其经配置以接收手指接触,且显示包含多个可激活用户接口对象的网页。所述电子装置还包含处理单元,其耦合到所述触敏显示器单元。所述处理单元经配置以:在所述触敏显示器单元上检测对应于所显示的网页的第一位置处的第一接触;且响应于检测到第一位置处的所述第一接触,确定所述第一位置是否对应于可激活用户接口对象中的至少一者。处理单元进一步经配置以在第一位置不对应于可激活用户接口对象中的至少一者时:如果存在的话那么识别最满足相对于所述第一位置的预定义规则的用户接口对象;且执行对应于所述所识别的用户接口对象的动作。
附图说明
图1是说明根据一些实施例的电子装置的框图。
图2是根据一些实施例的示范性电子装置的输入/输出处理堆叠的图。
图3说明根据一些实施例的示范性视图层次。
图4A到4C是根据一些实施例的包含视图层次的示范性用户接口。
图5A到5D是说明根据一些实施例的处理相应接触的示范性方法的流程图。
图6是说明根据一些实施例的处理网页或其它文档上的相应接触的示范性方法的流程图。
图7是说明根据一些实施例的用于事件处置的示范性组件的框图。
图8是根据一些实施例的电子装置的功能框图。
图9是根据一些实施例的电子装置的功能框图。
相同参考标号在图式中始终指代对应部分。
具体实施方式
现在将详细参考实施例,其实例在附图中说明。在以下详细描述中,陈述大量具体细节以便提供对本发明的全面理解。然而,所属领域的技术人员将明白,可在没有这些具体细节的情况下实践本发明。在其它例子中,尚未详细地描述众所周知的方法、程序、组件、电路和网络以免不必要地混淆所述实施例的方面。
还将理解,尽管本文中可使用术语第一、第二等来描述各种元件,但这些元件不应受这些术语限制。这些术语仅用于区分一个元件与另一元件。举例来说,在不脱离本发明的范围的情况下,第一接触可称为第二接触,且类似地,第二接触可称为第一接触。第一接触和第二接触均为接触,但它们不是同一接触。
本文对本发明的描述中所使用的术语是仅用于描述特定实施例的目的,且无意限制本发明。如在本发明的描述以及所附权利要求书中所使用,除非上下文另外清楚地指示,否则单数形式“一”和“所述”既定也包含复数形式。还将理解,术语“和/或”在本文中使用时指代且包含相关联所列项目中的一者或一者以上的任一和所有可能组合。将进一步理解,术语“包括”在用于本说明书中时指定所陈述的特征、整体、步骤、操作、元件和/或组件的存在,但并不排除一个或一个以上其它特征、整体、步骤、操作、元件、组件和/或其群组的存在或添加。
如本文所使用,术语“如果”可被解释为意指“当……时”或“在……后”或“响应于确定”或“响应于检测到”,这取决于上下文。类似地,短语“如果确定”或“如果检测到[所规定的条件或事件]”可被解释为意指“在确定……后”或“响应于确定”或“在检测到(所规定的条件或事件)后”或“响应于检测到(所规定的条件或事件)”,这取决于上下文。
如本文所使用,术语“事件”指代由装置的一个或一个以上传感器检测到的输入。明确地说,术语“事件”包含在触敏表面上的触摸。事件包括一个或一个以上子事件。子事件通常指代对事件的改变(例如,触摸-向下、触摸-移动以及触摸的提离可为子事件)。一个或一个以上子事件的序列中的子事件可包含许多形式,包含(但不限于)按键按压、按键按压保持、按键按压释放、按钮按压、按钮按压保持、按钮按压释放、操纵杆移动、鼠标移动、鼠标按钮按压、鼠标按钮释放、手写笔触摸、手写笔移动、手写笔释放、手指接触、手指移动、手指提离、口头指令、检测到的眼睛移动、生物计量输入以及检测到的用户体内的生理变化,等等。由于事件可包括单个子事件(例如,在触敏显示器上的手指接触),因此术语“子事件”在本文中使用时也指代事件。
如本文所使用,术语“事件辨识器”和“示意动作辨识器”可互换使用以指代可辨识示意动作的辨识器。在一些实施例中,事件辨识器可辨识其它事件(例如,装置的运动)。
当使用基于触摸的示意动作来控制在具有触敏表面的装置中运行的应用程序时,触摸具有时间和空间方面两者。时间方面(称为相位)指示触摸何时已开始,其正在移动还是静止的,以及其何时结束,即手指何时提离屏幕。触摸的空间方面是其中发生触摸的视图或用户接口区的集合。其中检测到触摸的视图或区可对应于视图层次内的程序等级。举例来说,其中检测到触摸的最低等级视图被称为命中视图,且可至少部分地基于开始基于触摸的示意动作的初始触摸的命中视图来确定辨识为恰当输入的事件集合。
图1是说明根据一些实施例的电子装置102的不同实施例的框图。电子装置102可为任何电子装置,包含(但不限于)桌上型计算机系统、膝上型计算机系统、笔记本型计算机系统、移动电话、智能电话、个人数字助理或导航系统。电子装置还可为具有经配置以呈现用户接口的触摸屏显示器(例如,触敏显示器156)的便携式电子装置、具有经配置以呈现用户接口的触摸屏显示器的计算机、具有经配置以呈现用户接口的触敏表面和显示器的计算机,或任何其它形式的计算装置,包含(但不限于)消费型电子装置、移动电话、视频游戏系统、电子音乐播放器、平板PC、电子书阅读系统、电子书、PDA、电子辨识器、电子邮件装置、膝上型计算机、笔记本型计算机或其它计算机、信息亭计算机、自动售货机、智能家电等。电子装置102包含用户接口113。
电子装置102包含触摸屏显示器(例如,触敏显示器156)。在一些实施例中,用户接口113可包含屏幕上键盘(未描绘),其由用户用于与电子装置102交互。在一些实施例中,电子装置102还包含一个或一个以上输入装置128(例如,键盘、鼠标、跟踪球、麦克风、物理按钮、触摸板等)。在一些实施例中,触敏显示器156具有检测两个或两个以上不同的并发(或部分并发)触摸的能力,且在这些实施例中,显示器156在本文中有时称为多触摸显示器或多触敏显示器。
当在电子装置102的触敏显示器156上执行基于触摸的示意动作时,用户产生由电子装置102的一个或一个以上CPU 110处理的子事件序列。在一些实施例中,电子装置102的一个或一个以上CPU 110处理子事件序列以辨识事件。
电子装置102通常分别包含一个或一个以上单核或多核处理单元(“CPU”)110,以及一个或一个以上网络或其它通信接口112。电子装置102分别包含存储器111以及一个或一个以上通信总线115以用于互连这些组件。通信总线115可包含互连系统组件(本文中未描绘)并控制系统组件之间的通信的电路(有时称为芯片组)。存储器111可包含高速随机存取存储器,例如DRAM、SRAM、DDR RAM或其它随机存取固态存储器装置;且可包含非易失性存储器,例如一个或一个以上磁盘存储装置、光盘存储装置、快闪存储器装置或其它非易失性固态存储装置。存储器111可任选地包含定位在CPU 110远处的一个或一个以上存储装置。存储器111或者在存储器111内的非易失性存储器装置包括计算机可读存储媒体。在一些实施例中,存储器111或在存储器111内的非易失性存储器装置包括非暂时计算机可读存储媒体。在一些实施例中,存储器111或存储器111的计算机可读存储媒体存储以下程序、模块和数据结构或其子集:
·操作系统118,其包含用于处置各种基础系统服务且用于执行依赖硬件的任务的程序;
·可接入性模块126,其用于修改应用软件132中的一个或一个以上软件应用程序(包含浏览器应用程序133)的行为,或修改来自触敏显示器156或输入装置128的数据,以改进应用软件132中的一个或一个以上软件应用程序的可接入性或对其中所显示的内容(例如,网页)的可接入性;
·通信模块120,其用于经由一个或一个以上相应通信接口112(有线或无线)以及一个或一个以上通信网络(例如因特网、其它广域网、局域网、城域网等等)各电子装置102分别连接到其它装置;
·用户接口模块122,其用于在触敏显示器156上显示包含用户接口对象的用户接口;
·控制应用程序124,其用于控制进程(例如,命中视图确定、线程管理和/或事件监视等);在一些实施例中,控制应用程序124包含运行时应用程序;在其它实施例中,运行时应用程序包含控制应用程序124;
·事件递送系统130,其在各种替代实施例中可在操作系统118内或应用软件132中实施;然而,在一些实施例中,事件递送系统130的一些方面可在操作系统118中实施,而其它方面(例如,事件处置器的至少一子集)在应用软件132中实施;
·应用软件132,其可包含一个或一个以上软件应用程序(例如,电子邮件应用程序、网络浏览器应用程序133、文本消息接发应用程序等);相应的软件应用程序通常具有(至少在执行时)应用程序状态,其指示软件应用程序及其组件(例如,示意动作辨识器和代表)的状态;见下文描述的应用程序内部状态792(图7);
·文档134(例如,网页,或相应应用程序132或嵌入式应用程序144的用户接口),其可包含内容以及对象/区的层次;在一些实施例中,所述层次中的一个或一个以上对象/区136具有一个或一个以上子对象/区(例如,140-1和140-2);在一些实施例中,对象/区136和子对象/区140的至少一子集具有一个或一个以上性质138,例如可见性(其指示当文档134由应用程序132/133渲染且在显示器156上显示时是显示还是隐藏对应的对象/区)、静态特性(其指示当显示文档134时对应的对象/区是否经配置以由用户改变),以及预定义的近似性质(其在下文参考图5D中的操作546来描述);在一些实施例中,对象/区的层次还包含母区/对象,且在一些情况下,包含处于高于对象/区136的层次等级的层次等级处的额外区/对象和/或任何子对象/区140的较低层次区/对象;在一些实施例中,文档134还包含嵌入式应用程序144,其可基于爪哇(Java)脚本、爪哇小应用程序、Ajax、Comet、Active X或任何其它编程语言和工具;以及
·装置/全局内部状态146,其包含以下各项中的一者或一者以上:应用程序状态,其指示软件应用程序及其组件(例如,示意动作辨识器)的状态;显示器状态,其指示什么应用程序、视图或其它信息占用触敏显示器156的各个区;传感器状态,其包含从装置的各个传感器(未图示)、输入装置128和/或触敏显示器156获得的信息;以及关于装置的位置和/或姿势的位置信息。
上文所识别的元件中的每一者可存储在先前提到的存储器装置中的一者或一者以上中。上文所识别的模块、应用程序或系统元件中的每一者对应于用于执行本文中所描述的功能的一组指令。所述组指令可由一个或一个以上处理器(例如,一个或一个以上CPU 110)执行。上文所识别的模块或程序(即,指令集)无需实施为单独的软件程序、过程或模块,且因此这些模块的各个子集可在各种实施例中组合或以其它方式重新布置。在一些实施例中,存储器111可存储上文所识别的模块和数据接口的子集。此外,存储器111可存储上文未描述的额外模块和数据结构。
图2是根据本发明的一些实施例的示范性电子装置或设备(例如,装置102)的输入/输出处理堆叠200的图。装置的硬件(例如,电子电路)212位于输入/输出处理堆叠200的基础等级处。硬件212可包含各种硬件接口组件,例如图1中所描绘的组件。硬件212还可包含上文所提到的传感器130中的一者或一者以上。输入/输出处理堆叠200的所有其它元件(132、204到210)为软件程序或软件程序的部分,其处理从硬件212接收到的输入,且产生经由硬件用户接口(例如,显示器、扬声器、装置振动制动器中的一者或一者以上)呈现的各种输出。
驱动器或一组驱动器210与硬件212通信。驱动器210可接收并处理从硬件212接收的输入数据。核心操作系统(“OS”)208可与驱动器210通信。核心OS 208可处理从驱动器210接收的原始输入数据。在一些实施例中,可将驱动器210视为核心OS 208的部分。
一组OS应用程序编程接口(“OS API”)206为与核心OS 208通信的软件程序。在一些实施例中,API 206包含在装置的操作系统中,但位于核心OS 208上方的等级处。将API 206设计为供在本文所论述的电子装置或设备上运行的应用程序使用。用户接口(UI)API 204可利用OS API 206。在装置上运行的应用软件(“应用程序”)132可利用UI API 204以便与用户通信。UI API 204又可与较低等级元件通信,从而最终与各种用户接口硬件(例如,多触摸显示器156)通信。
虽然每一层输入/输出处理堆叠200可利用其下面的层,但并不总是需要这样。举例来说,在一些实施例中,应用程序132可偶尔与OS API 206通信。一般来说,OS API层206处或上方的层可能不直接接入核心OS 208、驱动器210或硬件212,因为这些层被视为私有的。层132和UIAPI 204中的应用程序通常将呼叫指向OS API 206,OS API206又接入层核心OS 208、驱动器210和硬件212。
换句话说,电子装置102的一个或一个以上硬件元件212以及在装置(例如驱动器210)上运行的软件、核心OS(操作系统)208、操作系统API软件206和应用程序与用户接口API软件204在输入装置128和/或触敏显示器156中的一者或一者以上处检测输入事件(其可对应于示意动作中的子事件),且产生或更新各种数据结构(存储在装置102的存储器中),其由一组当前活动的事件辨识器使用以确定输入事件是否以及何时对应于待递送到应用程序132的事件。下文更详细地描述事件辨识方法、设备和计算机程序产品的实施例。
图3描绘示范性视图层次300(也称为区层次),其在此实例中为在最外视图302(其通常为最高视图)中显示的搜索程序。如本文中所使用,在一些实施例中,相应视图对应于相应区,且在一些实施例中,相应的用户接口对象对应于相应区。最外视图302(或最外区)通常包含用户可直接与之交互的整个用户接口,且包含下级视图(也称为子区),例如,
·搜索结果面板视图304,其对搜索结果进行分组,且可垂直滚动;
·搜索字段视图306,其接受文本输入;以及
·引导行视图310,其对应用程序进行分组以用于快速存取。
在此实例中,每一下级视图包含下部等级下级视图(或相应子区的子区)。在其它实例中,层次300中的视图等级的数目在层次的不同分支中可有所不同,其中一个或一个以上下级视图具有下部等级下级视图,且一个或一个以上其它下级视图可不具有任何此类下部等级下级视图。继续图3中所展示的实例,搜索结果面板视图304含有每一搜索结果的相应下级视图305(在面板304的下级)。此处,此实例展示称为地图视图305的下级视图中的一个搜索结果。搜索字段视图306包含本文中称为清除内容图标视图307的下级视图,其在用户对视图307中的清除内容图标执行特定动作(例如,单个触摸或轻拍示意动作)时清除搜索字段视图306中的搜索字段的内容。引导行视图310包含下级视图310-1、310-2、310-3和310-4,其分别对应于联系人应用程序、电子邮件应用程序、网络浏览器和iPod音乐接口。
换句话说,搜索结果面板视图304为地图视图305的母区,且最外视图302为搜索结果面板视图304的母区。同时,搜索结果面板视图304为最外视图302的子区,且地图视图305为搜索结果面板视图304的子区。类似地,搜索字段视图306和引导行视图310也是最外视图302的子区。
在图3中,在最外视图302中表示触摸子事件301-1。在给定触摸子事件301-1在搜索结果面板304和地图视图305两者上方的位置的情况下,触摸子事件在那些视图上方也分别表示为301-2和301-3。触摸子事件的积极参与的视图包含对应于触摸子事件301-1的位置的所有视图(例如,视图搜索结果面板304、地图视图305以及最外视图302)。命中视图是积极参与视图当中的最低等级视图,其在此实例中为地图视图305。下文参考图7提供关于子事件递送和积极参与视图的额外信息。
视图(以及对应的程序等级)可嵌套。换句话说,视图可包含其它视图。因此,与第一视图相关联的软件元件(例如,事件辨识器)可包含或链接到与第一视图内的视图相关联的一个或一个以上软件元件。虽然一些视图可与应用程序相关联,但其它视图可与高级OS元件(例如图形用户接口、窗口管理器等)相关联。
图4A到4C是根据一些实施例的包含视图层次的示范性用户接口。
在图4A中,应用程序132-1包含视图层次402中的多个视图408(例如,408-1和408-2到408-N)。在此实例中,命中视图408-1包含多个子视图408-A、408-B和408-C,以及子视图(408-A到408-C)中的多个用户接口对象(文本1416-1到文本3416-3)。命中视图+1408-2(也称为命中视图408-1的母视图)包含多个子视图(408-1、408-D和408-E)以及所述多个子视图(408-1、408-D和408-E)中的多个用户接口对象(文本1416-1、文本2416-2、文本3416-3、文本4416-4和文本5416-5)。尽管相应子视图可与包含在所述相应子视图中的用户接口对象的大小匹配,但在此实例中,每一子视图大于其包含的相应用户接口对象(例如,子视图408-A大于文本1416-1)。可将此视图或区用作其包含的相应用户接口对象的命中区,使得当在对应于命中区的位置处检测到接触时,激活与所述相应用户接口对象相关联的任何功能,即使是在相应用户接口对象外部检测到所述接触也是如此。在一些实施例中,子视图子集中的相应子视图大于对应的相应用户接口对象,而其余子视图与对应的相应用户接口对象的大小匹配。
图4A还说明在触敏显示器上检测到接触405。视图层次402中对应于接触的最低视图称为命中视图。在此实例中,命中视图408-1为视图层次402中对应于接触405的最低视图。在此实例中,在接触405的位置处,命中视图408-1不包含任何用户接口对象。
当应用程序132-1经配置以结合命中视图408-1处理接触405时,使用应用程序132-1结合命中视图408-1来处理接触405。当应用程序132-1不经配置以结合命中视图408-1处理接触405(例如,命中视图408-1不具有任何示意动作辨识器;或者,不存在附接到命中视图408-1的经配置以辨识或尝试辨识接触405的示意动作辨识器)时,评估其它视图以确定应用程序132-1是否可结合任何其它视图408处理接触405。举例来说,首先评估命中视图408-1的子视图408-A到408-C。在此实例中,命中视图408-1不具有经配置以辨识或尝试辨识接触405的任何示意动作辨识器,因为接触405的位置未重叠命中视图408-1中的任何用户接口对象的命中区。
当应用程序132-1经配置以结合子视图408-A到408-C中的一者处理接触405时(例如,当子视图408-A到408-C中仅子视图408-C具有经配置以辨识或尝试辨识接触405的示意动作辨识器时),使用应用程序结合所述子视图处理接触405。当应用程序132-1经配置以结合子视图408-A到408-C中的两者或两者以上处理接触405时(例如,当子视图408-A到408-C中的每一者具有经配置以辨识或尝试辨识接触405的示意动作辨识器时),选择所述两个或两个以上子视图中的一者来处理接触405。通常,选择最靠近接触405的子视图(例如,包含文本2416-2的视图408-B)。
当应用程序132-1不经配置以结合命中视图408-1的子视图408-A到408-C中的任一者处理接触405时,评估命中视图408-1的母视图(例如,408-2)。当应用程序132-1经配置以结合母视图408-2(也称为命中视图+1)处理接触405时,使用应用程序132-1结合母视图408-2处理接触405。如果应用程序不经配置以结合母视图408-2处理接触405,那么评估母视图408-2的其它子视图(即,母视图408-2的除了命中视图408-1以外的子视图,例如子视图408-D和408-E)。将命中视图408-1从母视图408-2的子视图中排除,因为在相对于母视图408-2评估接触405之前,已经将所述视图(命中视图408-1)相对于接触405进行评估。
类似于使用命中视图408-1的一个或一个以上子视图来处理接触405,当应用程序132-1经配置以用子视图408-D到408-E中的一者处理接触405时,使用所述应用程序结合所述一个子视图处理接触405。当应用程序132-1经配置以结合子视图中的两者或两者以上(例如,408-D和408-E两者)处理接触405时,选择所述两个或两个以上子视图中的一者来处理接触405。通常,选择最靠近接触405的子视图(例如,包含文本4416-4的视图408-D)。通常,一旦选择相应视图来处理接触,就将所述接触绑定到所述视图(意味着针对所述接触的所有事件处理以及示意动作或事件的任何后续部分),直到与所述接触相关联的事件完成为止。
当应用程序132-1不经配置以结合母视图408-2的子视图408-D和408-E中的任一者处理接触405时,评估子视图408-D和408-E的子视图(未图示),随后评估所述母视图的母视图(例如,祖母视图),且接着评估祖母视图的子视图。在整个视图层次402中重复此些评估,直到评估最高视图408-N的所有下部视图为止。
在一些实施例中,当应用程序132-1不经配置以结合视图层次402中的任一视图处理接触405时,忽略接触405。在其它实施例中,执行预定义的动作(例如,默认动作,例如选择默认用户接口对象)。
尽管图4A中未展示,但在一些实施例中,命中视图408-1包含包括单个用户接口对象(例如,按钮)的单个子视图。当应用程序132-1不经配置以结合命中视图408-1处理命中视图408-1上的接触而是经配置以结合命中视图408-1的单个子视图处理所述接触时,使用应用程序132-1结合单个子视图处理所述接触。
类似于图4A,图4B说明应用程序132-2包含显示在触敏显示器上的视图层次412中的多个视图418(例如,418-1A、418-1B以及418-2到418-N)。在此实例中,母视图418-2(命中视图+1)包含两个工具栏(418-1A和418-1B)。对应于接触407的命中视图418-1A包含第一工具栏(工具栏1),且在多个视图(418-F到418-H)中在所述工具栏上包含多个按钮或图标(416-6到416-8)。在此实例中,相应子视图与包含于其中的相应用户接口对象的大小和形状匹配。视图418-1B包含第二工具栏(工具栏2)以及多个视图(418-I到418-K)中的多个按钮(416-10到416-12)。
图4B还说明在触敏显示器上检测到接触407。当应用程序132-2不经配置以结合命中视图418-1A处理接触407而是经配置以结合子视图418-F到418-H中的两者或两者以上处理接触407时,选择所述两个或两个以上子视图中的一者。通常,选择所述两个或两个以上子视图中的最靠近接触407的一者。
当应用程序132-2不经配置以结合子视图418-F到418-H中的任一者处理接触407时,评估母视图418-2且随后评估视图418-1B,接着评估视图418-1B的子视图408-I到418-K。如果应用程序132-2经配置以结合子视图418-I到418-K中的任一者处理接触407,那么接触407可激活应用程序132-2的对应于工具栏2上的按钮中的一者(例如,按钮D 416-10、按钮E 416-11或按钮F 416-12)的功能,尽管是在工具栏1上检测到接触407。
类似于图4A,图4C说明应用程序132-3包含显示在触敏显示器上的视图层次422中的多个视图428(例如,428-1和428-2到428-N)。在此实例中,命中视图428-1包含不同大小的两个用户接口对象(例如,图像416-21和按钮416-22)。
当相应视图包含不同大小和/或形状的用户接口对象(或不同大小和/或形状的子视图)时,存在识别最靠近接触的用户接口对象的多种方式。在一些实施例中,使用质心到质心距离(其为从接触(例如,409)的质心(例如,409-1)到用户接口对象的质心的距离)来确定最靠近的用户接口对象。在一些实施例中,使用最短距离,其为从最靠近的用户接口对象上的第一点到接触(例如,409)的质心(例如,409-1)的距离。在一些实施例中,使用预定义数目个点(例如,八个点)来简化距离计算。举例来说,可使用八个点(左上角、右上角、左下角、右下角、顶部边缘的中点、底部边缘的中点、左边缘的中点以及右边缘的中点)来计算每个候选用户接口对象的八个距离,且为每一候选用户接口对象选择所述八个距离中的最短距离。在一些实施例中,从接触到用户接口对象的距离包括从接触到相应子视图或用户接口对象的预定数目(例如,三)个最靠近点的距离的经加权平均值。举例来说,可从九个预定义点(包含上文所提到的八个点以及对象的质心(或对象内部的其它“中心”点))当中选择相应子视图或对象的三个最靠近点。在一些实施例中,将不同权重用于预定数目个最靠近点中的每一者。举例来说,当最靠近点的预定数目为三时,权重可对于最靠近点为0.5,对于第二靠近点为0.3,且对于第三靠近点为0.2(经加权距离=0.5d1+0.3d2+0.2d3,其中d1、d2和d3为从第一点到最靠近点、第二靠近点和第三靠近点的距离)。
相对于图4C,尽管已针对识别最靠近的用户接口对象来描述前述内容,但可使用类似方法来识别最靠近的视图或区。
在一些实施例中,视图层次402中的至少一个视图包含网页或其它文档的一部分。在一些实施例中,视图层次402中的视图包含网页或其它文档的不同部分。
图5A到5D是说明根据一些实施例的处理相应接触的示范性方法的流程图。
在具有触敏显示器(例如,156)的电子装置(例如,102)处执行(502)方法500。
装置在触敏显示器上显示(504)应用程序的用户接口,所显示的用户接口包含多个区(例如,图4A中的视图408),其布置在多个分层等级(例如,视图层次402)中。所述多个区在相应的层次等级处包含相应的区(例如,命中视图408-1)。所述相应区在相应层次等级下方的层次等级处具有两个或两个以上子区(例如,视图408-A、408-B和408-C)。
装置在触敏显示器上检测(508)对应于所述相应区且不对应于所述相应区的两个或两个以上子区中的任一者的第一位置处的第一接触(例如,405)。在图4A中,命中视图408-1为最低等级命中视图,因为不存在“命中”接触405或与接触405重叠的下部等级视图。第一位置通常是第一接触区的质心,但可替代地根据用于将特定位置指派给接触的任何适当方法从第一接触区确定。
在一些实施例中,所述两个或两个以上子区中的相应子区具有(510)相应的命中区,所述命中区中的至少一者不同于对应的子区(例如,文本1416-1为视图408-1的子区,且视图408-A为文本1416-1的命中区,图4A)。检测第一接触(508)对应于相应区包含确定第一位置不对应于所述相应区的子区的命中区中的任一者。在一些用户接口中,相应命中区包含且大于对应的子区(例如,视图408-A包含且大于文本1416-1)。用户接口对象或区可具有与所述用户接口对象或区不同大小(例如,大于、小于和/或偏斜)的命中区,以促进对用户接口的特定对象或区的选择。另一方面,相应用户接口对象或区的命中区可与所述用户接口对象或区同延(具有相同大小、形状和位置)。
通常,为了使第一接触对应于相应区,将第一位置定位(512)在相应区的子区中的任一者外部(例如,接触405位于子视图408-A到408-C中的任一者的外部,图4A)。
响应于检测到第一接触,装置确定(514)应用程序是否经配置以结合相应区处理第一接触(例如,装置确定命中视图408-1是否包含经配置以辨识或尝试辨识接触405的示意动作辨识器)。
在一些实施例中,当相应区包含具有一组预定义性质中的至少一个性质的用户接口对象时,认为(520,图5B)应用程序经配置以结合相应区处理第一接触。举例来说,当所述视图408-A中的用户接口对象(例如,文本1416-1)具有预定义“近似”性质(其即使在用户接触不重叠对象时也启用对象选择或激活)时,认为图4A中的应用程序132-1经配置以结合视图408-A处理第一接触(例如,405)。在一些实施例中,当相应区本身具有一组预定义性质中的至少一个性质时,认为应用程序132-1经配置以结合相应区处理第一接触。举例来说,当选择视图428-1且启用用于说出待说出文本的可接入性选项时,假如视图428-1将具有指定此文本的文本性质,那么将认为图4C中的应用程序132-3经配置以结合视图428-1处理第一接触(例如,409)。
在一些实施例中,当相应区为用于一组预定义用户接口对象类型(例如,按钮、复选框、组合框、链接、列表框、菜单按钮、弹出按钮、单选按钮、滑块和文本字段)中的类型的用户接口对象的区时,认为相应区经配置以处理第一接触。在一些实施例中,所述组预定义用户接口对象类型还包含以下各项中的一者或一者以上:提示三角、标题、图像、静态文本以及文本区域。
在一些实施例中,当相应区包含经配置以响应于包含第一接触(在所述第一接触的位置处)的示意动作而激活的用户接口对象时,认为(522)应用程序经配置以结合所述相应区处理第一接触。举例来说,当视图480-A包含经配置以响应于包含第一接触的示意动作而激活的用户接口对象(例如,文本1416-1)时,认为图4A中的应用程序132-1经配置以结合视图408-A处理第一接触(例如,405)。不经配置以响应于包含第一接触的示意动作而激活的用户接口对象的非限制性实例包含:1)静态用户接口对象(例如,用于显示文本或图形的标签,其不具有任何所指派功能),以及2)经配置以响应于不同示意动作(例如,双手指接触)而激活的用户接口对象。不经配置以响应于包含第一接触的示意动作而激活的用户接口区的实例为:命中视图408-1,因为第一接触405不重叠命中视图408-1中的任何可选择/可激活对象。此外,当相应区本身具有经配置以响应于包含第一接触的示意动作而激活的用户接口对象时,认为应用程序经配置以结合相应区处理第一接触。
在一些实施例中,当至少一个事件辨识器与相应区相关联时,认为(524)所述应用程序经配置以结合相应区处理第一接触。关于图7详细描述事件辨识器(或示意动作辨识器)。较典型的是以下实施例,其中当经配置以辨识包含第一接触的示意动作的事件辨识器与相应区相关联时,认为(526)应用程序经配置以结合相应区处理第一接触。相反,当检测到特定类型的接触(例如,单手指接触)且相应区(或视图)不包含经配置以辨识以所述类型的接触开始的示意动作的事件辨识器时,不认为相应区经配置以结合所述相应区处理第一接触。
当应用程序经配置以结合相应区处理第一接触时,装置使用所述应用程序结合相应区处理(516,图5A)第一接触。举例来说,装置激活与相应区相关联的功能(例如,如果所述相应区包含保存按钮,那么装置起始对应内容或文档的保存)。在另一实例中,如果相应区包含超链接(例如,统一资源定位符),那么装置起始打开对应于所述超链接的资源(例如,网页)。
在一些实施例中,使用应用程序结合相应区处理第一接触包含呈现确认信息。在一些实施例中,呈现确认消息包含提供可供性。举例来说,装置可在视觉上区分(例如,粗体化、闪烁、放大和/或改变色彩)对应于相应区的文本(例如,包含在相应区中的文本、对应于所述相应区的功能的名称,或对应于所述相应区的嵌入式文本,例如帮助文本)。呈现确认信息可包含非视觉信号。举例来说,装置可使用文本到语音软件来将对应于所述相应区的文本转换成可听语音信号,且可播放对应于所述相应区的声音剪辑。在另一实例中,装置可使用布莱叶(Braille)装置(未图示)来将对应于相应区的文本转换成布莱叶符号以用于呈现。
在一些实施例中,使用应用程序结合相应区处理第一接触包含接收确认示意动作。举例来说,在呈现确认信息之后,装置接收确认示意动作(例如,单拍示意动作、双拍示意动作或轻拍并保持示意动作,其位于装置的触敏显示器上的任何地方或触敏显示器上的特定区内,例如触敏显示器的下半部)。
当应用程序不经配置以结合相应区处理第一接触时(图5A和5C中的518),装置执行以下操作的至少一子集(例如,操作528、530、532、534以及包含于其中的操作,以及在一些实施例中,操作536、538和/或540)。
装置确定(图5C中的528)应用程序是否经配置以结合相应区的两个或两个以上子区中的至少一个子区处理第一接触(例如,在图4A中,装置确定应用程序132-1是否经配置以结合视图408-A、408-B和408-C中的任一者处理接触405)。
当应用程序经配置以结合相应区的两个或两个以上子区中的至少一个子区处理第一接触时(530),装置执行以下操作(例如,操作532和534以及包含于其中的操作)。
装置根据相应区的两个或两个以上子区相对于第一位置的方位来识别(532)子区中的相应子区。举例来说,装置根据子视图408-A到408-C相对于接触405的方位将子视图408-A到408-C中的子视图408-B识别为最靠近的子视图。
在一些实施例中,根据相应区的两个或两个以上子区相对于第一位置的方位来识别子区中的相应子区(操作532)包含(542,图5D)识别相应区的两个或两个以上子区中的最满足相对于第一位置的接近性准则的子区。举例来说,装置基于所述接近性准则识别最靠近第一位置的子区。接近性准则是基于以下各项中的至少一者:质心到质心距离、用户接口对象或子视图到第一位置之间的最短距离、基于预定数目的点(针对每一子视图)的到第一位置的最短距离,以及基于距预定数目的点(针对每一子视图)的距离的经加权平均值的到第一位置的最短距离。
在一些实施例中,根据相应区的两个或两个以上子区相对于第一位置的方位来识别子区中的相应子区(操作532)包含(544)识别相应区的两个或两个以上子区中的最满足相对于第一位置的接近性准则的子区,且确认所识别的子区满足相对于第一位置的最大距离限制。举例来说,如果从所识别的子视图到第一位置的距离超过最大距离限制,那么忽略所识别的子区。在一些实施例中,当子区全都不在第一位置的接触的最大距离限制内时,装置忽略第一位置处的接触。在其它实施例中,装置继续评估其它区,包含相应区的母区。
在一些用户接口中,所述两个或两个以上子区中的一个或一个以上子区具有(546)预定义近似性质,且至少一个其它子区不具有预定义近似性质。识别相应子区包含根据相应区的具有预定义近似性质的一个或一个以上子区相对于第一位置的方位来识别子区中的相应子区。举例来说,子区的至少一子集可经配置以具有预定义近似性质。预定义近似性质指示对应区对于激活/选择是否符合条件,甚至是在不对应于所述区的位置处检测到接触时。预定义近似性质可位于子区子集中的每一者中的性质(例如,图1中的138)内。当使用预定义近似性质时,装置识别具有预定义近似性质的子区当中的子区。
当已识别到用户接口的适当区(例如,所识别的子区)时,装置使用所述应用程序结合所述区(例如,所识别的相应子区)处理(534,图5C和5D)第一接触。
在一些实施例中,所述多个区包括(548)对应于所述区的多个分层布置的视图。所述多个视图中的每一者通常具有与所述相应视图相关联的至少一个事件辨识器。使用应用程序结合所识别的相应子区处理第一接触包括产生待由对应于所识别的相应子区的视图的至少一个事件辨识器处理的事件(或子事件,当接触对应于示意动作或事件的第一部分时)。
在一些实施例中,所述多个区包括(550)对应于所述区的多个分层布置的视图。使用应用程序结合所识别的相应子区处理第一接触包括将第一接触处理为所识别的相应子区中的接触。在一些实施例中,将第一接触处理为所识别的相应子区中的接触包含在对应于所识别的相应子区的位置处产生新事件(或子事件,如上文所阐释)。举例来说,在图4A中,当装置将接触405处理为子视图408-B中的接触时,装置产生指示对应于子视图408-B的位置处的虚拟接触的新事件。
在一些用户接口中,相应区具有(536,图5C)在相应层次等级上方的层次等级处的母区(例如,命中视图+1408-2)。任选地,在此情形中,当应用程序不经配置以结合相应区的两个或两个以上子区中的至少一个子区处理第一接触且应用程序经配置以结合母区处理第一接触时,装置使用应用程序结合母区处理(538)第一接触。举例来说,在图4A中,如果应用程序132-1不经配置以结合子视图408-A到408-C中的任一者处理接触405,那么如果应用程序132-1经配置以结合命中视图+1408-2处理接触405,则装置结合命中视图+1408-2处理接触405。
在一些实施例中,当应用程序不经配置以结合相应区的两个或两个以上子区中的至少一个子区处理第一接触时,装置将第一接触处理(540)为母区中的接触。在一些实施例中,将第一接触处理为母区中的接触包含在对应于母区的位置处产生新事件(或子事件,如上文所阐释)。举例来说,在图4A中,当装置将接触405处理为命中视图+1408-2中的接触时,装置产生指示对应于命中视图+1408-2的位置处的虚拟接触的新事件。
在一些用户接口中,母区在相应层次等级处具有位于一层次等级处的一个或一个以上子区,且当应用程序不经配置以结合母区处理第一接触时,装置基于应用程序经配置以结合母区的一个或一个以上子区中的至少一者处理第一接触的条件而结合母区的一个或一个以上子区中的至少一者处理第一接触。
注意,上文相对于方法500描述的过程的细节也以类似方式适用于下文所描述的方法600。为简明起见,下文不重复这些细节。
图6是说明根据一些实施例的处理网页或其它文档上的相应接触的示范性方法的流程图。
在具有触敏显示器(例如,156)的电子装置(例如,102)处执行(602)方法600。
装置在触敏显示器上显示(604)包含多个可激活用户接口对象的网页或其它文档134(图1)(例如,在图4C中,视图层次422中的一个或一个以上视图在一些实施例中包含网页或其它文档,且所述视图还包含用户接口对象416-21和416-22)。在一些实施例中,所有用户接口对象均可激活。在一些实施例中,具有某些用户接口对象性质的用户接口对象(例如,隐藏或静态用户接口对象)不可激活,而其它用户接口对象可激活。在一些实施例中,某些类型的用户接口对象(例如,标签)不可激活。任选地,所显示的文档中的一些或所有对象可由嵌入式应用程序产生,嵌入在文档中,这与由文档中的HTML或XML指令(例如,标记或元素)静态定义相反。另一方面,所显示的文档中的一些或所有对象可由文档中的HTML或XML指令定义。
装置在触敏显示器上检测(606)对应于所显示网页的第一位置处的第一接触(例如,接触409)。
响应于检测到第一位置处的第一接触,装置确定(608)第一位置是否对应于可激活用户接口对象中的至少一者(例如,在图4C中,接触409不对应于用户接口对象中的任一者)。
在一些实施例中,当第一位置对应于可激活用户接口对象中的一者时,装置执行(624)与对应于第一位置的可激活用户接口对象对应的动作(例如,对象的命中区重叠第一位置)。
当第一位置不对应于可激活用户接口对象中的至少一者时(610),装置执行以下动作(例如,612和620,以及在一些实施例中,包含于其中的操作)。
如果存在的话,那么装置识别(612)最满足相对于第一位置的预定义规则的用户接口对象。在一些实施例中,预定义规则要求识别最靠近的可激活用户接口对象,且装置识别最靠近的用户接口对象。在一些实施例中,预定义规则要求识别最大距离限制内的最靠近的可激活用户接口对象,且如果存在的话,那么装置识别最靠近的可激活用户接口对象。然而,如果可激活用户接口对象全都不在最大距离限制内,那么装置可不识别任何可激活用户接口对象。
在一些实施例中,预定义规则包含(614)相对于第一位置的接近性准则。如上文所论述,接近性准则是基于以下各项中的至少一者:对象质心到第一位置的距离;从用户接口对象到第一位置的最短距离;基于每一可激活用户接口对象的预定义数目个点(例如,以下八个候选点中的最靠近点:对象的四个隅角、四个边缘中点)的从用户接口对象到第一位置的最短距离;以及从用户接口对象到第一位置的最短经加权平均距离,其中从用户接口对象到第一位置的经加权平均距离是基于以下九个候选点中的预定义数目(例如,3)个点:用户接口对象的四个隅角、四个边缘中点以及质心。
在一些实施例中,检测第一接触包含确定第一位置处的第一接触的速度和方向,且预定义规则是基于包含相对于第一位置的接近性准则以及第一接触的移动方向和速度的多种因素的经加权组合。举例来说,在图4C中,尽管图像416-21是最靠近接触409的可激活用户接口对象,但当接触409正以充足速度向按钮416-22移动时,装置可将按钮416-22识别为最满足预定义规则的用户接口对象。类似地,当接触409正远离特定按钮移动时,在应用预定义规则时考虑接触远离按钮的移动方向(操作612),这降低了将所述按钮识别为最满足预定义规则的对象的可能性。
在一些实施例中,识别用户接口对象包含(616)确定从第一位置到可激活用户接口对象的至少一子集的相应距离(例如,在图4C中,装置确定从接触409到图像416-21和按钮416-22的相应距离),以便识别最满足预定义规则的用户接口对象。
在一些实施例中,相应距离中的每一者包括(618)从第一位置到相应的可激活用户接口对象的多个点的距离的经加权平均值。举例来说,接触409与图像416-21之间的距离可为从第一位置到图像416-21的预定数目(例如,三)个点的距离的经加权平均值(例如,以下各项的经加权平均值:从接触质心409-1到点420-3的距离、从接触质心409-1到点420-2的距离,以及从接触质心409-1到点420-4的距离)。在一些实施例中,对最短距离比对第二短距离较重地加权(例如,对从接触质心409-1到点420-3的距离比对接触质心409-1到点420-2的距离较重地加权)。
装置执行(620)对应于所识别的用户接口对象的动作。所执行的动作通常取决于所识别的用户接口对象的一个或一个以上特性。举例来说,当所识别的用户接口对象为图4C中的图像416-21时,装置执行对应于图像416-21的动作(例如,其改变416-21中所显示的图像,或指导装置显示与图像416-21相关联的网页等)。
在一些实施例中,执行所述动作包括(622)激活所识别的用户接口对象。
在一些实施例中,装置在触敏显示器上确定多个可激活用户接口对象中的相应可激活用户接口对象的相应位置。举例来说,当渲染网页时,装置确定相应的可激活用户接口对象(例如,网页中的超链接)的相应位置,且将所述相应位置用于确定接触是否与用户接口对象中的一者重叠(例如,操作608)和/或识别最满足预定义规则的用户接口对象(例如,操作612)。
上文参考图5A到5D以及6所述的操作可在可接入性模块126(在图1中)、应用软件132(明确地说,浏览器应用程序133)和/或嵌入式应用程序144中实施。除了可接入性模块126、应用软件132和/或嵌入式应用程序144之外,或代替于可接入性模块126、应用软件132和/或嵌入式应用程序144,上文所述的操作可由图7中所描绘的组件实施。
图7是说明根据一些实施例的用于事件处置的示范性组件390的框图。在一些实施例中,存储器111(在图1中)包含事件分类器770(例如,在操作系统118中)以及相应的应用程序132-1。
事件分类器770接收事件信息,并确定将所述事件信息递送到的应用程序132-1以及应用程序132-1的应用程序视图791。事件分类器770包含事件监视器771和事件调度器模块774。在一些实施例中,应用程序132-1包含应用程序内部状态792,其指示当应用程序正活动或执行时显示在触敏显示器156上的当前应用程序视图。在一些实施例中,装置/全局内部状态146由事件分类器770用以确定哪个(哪些)应用程序当前为活动的,且应用程序内部状态792由事件分类器770用以确定将事件信息递送到的应用程序视图791。
在一些实施例中,应用程序内部状态792包含额外信息,例如以下各项中的一者或一者以上:将在应用程序132-1重新开始执行时使用的重新开始信息、指示正被显示或准备好供应用程序132-1(其又可由文档134中的嵌入式应用程序控制)显示的信息的用户接口状态信息、用于使用户能够返回到应用程序132-1的先前状态或视图的状态队列,以及用户所采取的先前动作的重做/撤销队列。
时间监视器771从触敏显示器156和/或输入装置128接收事件信息。事件信息包含关于事件(例如,触敏显示器156上的用户触摸,作为多触摸示意动作或装置102的运动的一部分)和/或子事件(例如,触摸越过触敏显示器156的移动)的信息。举例来说,用于触摸事件的事件信息包含以下各项中的一者或一者以上:触摸的位置和时戳。类似地,刷过事件的事件信息包含以下各项中的两者或两者以上:刷过的位置、时戳、方向和速度。触敏显示器156和输入装置128直接或通过外围接口将事件信息和子事件信息发射到事件监视器771,其检索和存储事件信息。在一些实施例中,电子装置102还包含一个或一个以上传感器(未图示),例如接近性传感器、加速计、陀螺仪、麦克风以及摄像机,且传感器将信息事件和子事件信息发射到事件监视器771。
在一些实施例中,事件分类器770还包含命中视图确定模块772和/或活动事件辨识器确定模块773。
命中视图确定模块772提供用于确定子事件在一个或一个以上视图内何处发生、触敏显示器156何时显示一个以上视图的软件程序。视图由用户可在显示器上看到的控制件和其它元素(例如,用户接口对象)组成。
与应用程序相关联的用户接口的另一方面为一组视图,在本文中有时称为应用程序视图或用户接口窗口,在其中显示信息且发生基于触摸的示意动作。其中检测到触摸的(相应应用程序的)应用程序视图可对应于应用程序的程序或视图层次内的程序等级。举例来说,其中检测到触摸的最低等级视图可被称为命中视图,且可至少部分地基于开始基于触摸的示意动作的初始触摸的命中视图来确定辨识为恰当输入的事件集合。
命中视图确定模块772接收与基于触摸的示意动作的子事件有关的信息。当应用程序具有组织在层次中的多个视图时,命中视图确定模块772将命中视图识别为所述层次中的应处置子事件的最低视图。在大多数情况下,命中视图是其中发生起始子事件(即,形成事件或潜在事件的子事件序列中的第一子事件)的最低等级视图。一旦命中视图被命中视图确定模块识别到,命中视图通常便接收与其被识别为命中视图所针对的同一触摸或输入源有关的所有子事件。
活动事件辨识器确定模块773确定视图层次内的哪一视图应接收特定的子事件序列。在一些实施例中,当命中视图不具有经配置以辨识特定子事件序列的事件辨识器时,活动事件辨识器确定模块773确定命中视图的子区或母区或者视图层次中与命中视图有关的任何其它区应接收特定的子事件序列。类似地,活动事件辨识器确定模块773重复确定操作,直到活动事件辨识器确定模块773识别到具有经配置以辨识特定子事件序列的事件辨识器的区为止。
事件调度器模块774将事件信息调度给事件辨识器(例如,事件辨识器780)。在包含活动事件辨识器确定模块773的实施例中,事件调度器模块774将事件信息递送到由活动事件辨识器确定模块773确定的事件辨识器。在一些实施例中,事件调度器模块774将事件信息存储在事件队列中,所述事件信息由相应的事件接收器模块782检索。
在一些实施例中,操作系统126包含事件分类器770。或者,应用程序132-1包含事件分类器770。在另外其它实施例中,事件分类器770为独立模块,或存储在存储器102中的另一模块(例如,接触/运动模块130)的一部分。
在一些实施例中,应用程序132-1包含多个事件处置器790以及一个或一个以上应用程序视图791,其中的每一者包含用于处置发生在应用程序的用户接口的相应视图内的触摸事件的指令。应用程序132-1的每一应用程序视图791包含一个或一个以上事件辨识器780。通常,相应应用程序视图791包含多个事件辨识器780。在其它实施例中,事件辨识器780中的一者或一者以上是单独模块(例如用户接口套件(未图示)或应用程序132-1从中继承方法和其它性质的较高等级对象)的一部分。在一些实施例中,相应事件处置器790包含以下各项中的一者或一者以上:数据更新器776、对象更新器777、GUI更新器778和/或从事件分类器770接收到的事件数据779。事件处置器790可利用或调用数据更新器776、对象更新器777或GUI更新器778来更新应用程序内部状态792。或者,应用程序视图791中的一者或一者以上包含一个或一个以上相应事件处置器790。并且,在一些实施例中,数据更新器776、对象更新器777和GUI更新器778中的一者或一者以上包含于相应的应用程序视图791中。
相应事件辨识器780从事件分类器770接收事件信息(例如,事件数据779),且从事件信息识别事件。事件辨识器780包含事件接收器782和事件比较器784。在一些实施例中,事件辨识器780还包含以下各项的至少一子集:元数据783,以及事件递送指令788(其可包含子事件递送指令)。
事件接收器782从事件分类器770接收事件信息。事件信息包含关于子事件(例如,触摸或触摸移动)的信息。取决于子事件,事件信息还包含额外信息,例如子事件的位置。当子事件涉及触摸的运动时,事件信息还可包含子事件的速度和方向。在一些实施例中,事件包含装置从一个定向到另一定向(例如,从竖排定向到横排定向,或反之亦然)的旋转,且事件信息包含关于装置的当前定向(也称为装置姿势)的对应信息。
事件比较器784将事件信息与预定义事件或子事件定义进行比较,且基于所述比较,确定事件或子事件,或确定或更新事件或子事件的状态。在一些实施例中,事件比较器784包含事件定义786。事件定义786含有事件(例如,预定义子事件序列)(例如,事件1(787-1)、事件2(787-2)以及其它事件)的定义。在一些实施例中,事件787中的子事件包含(例如)触摸开始、触摸结束、触摸移动、触摸取消以及多次触摸。在一个实例中,事件1(787-1)的定义为在所显示的对象上双拍。举例来说,双拍包括在所显示对象上的第一次触摸(触摸开始)持续预定阶段、第一次提离(触摸结束)持续预定阶段、在所显示对象上的第二次触摸(触摸开始)持续预定阶段,以及第二次提离(触摸结束)持续预定阶段。在另一实例中,事件2(787-2)的定义为在所显示的对象上拖曳。举例来说,拖曳包括在所显示对象上的触摸(或接触)持续预定阶段、触摸越过触敏显示器156的移动,以及触摸的提离(触摸结束)。在一些实施例中,事件还包含一个或一个以上相关联事件处置器790的信息。
在一些实施例中,事件定义787包含用于相应用户接口对象的事件的定义。在一些实施例中,事件比较器784执行命中测试,以确定哪一用户接口对象与子事件相关联。举例来说,在其中三个用户接口对象显示在触敏显示器156上的应用程序视图中,当在触敏显示器156上检测到触摸时,事件比较器784执行命中测试,以确定所述三个用户接口对象中的哪一者与所述触摸(子事件)相关联。如果每一所显示的对象与相应事件处置器790相关联,那么事件比较器使用命中测试的结果来确定应激活哪一事件处置器790。举例来说,事件比较器784选择与触发命中测试的子事件和对象相关联的事件处置器。
在一些实施例中,相应事件787的定义还包含被延迟的动作,其延迟事件信息的递送,直到在已确定子事件序列确实对应于或确实不对应于事件辨识器的事件类型之后为止。
当相应事件辨识器780确定子事件系列确实不与事件定义786中的事件中的任一者匹配时,相应事件辨识器780输入事件不可能、事件失败或事件结束状态,此后其忽视基于触摸的示意动作的后续子事件。在此情形中,针对命中视图保持活动的其它事件辨识器(如果存在的话)继续跟踪并处理正在进行的基于触摸的示意动作的子事件。
在一些实施例中,相应事件辨识器780包含元数据783,其具有可配置性质、旗标和/或列表,所述可配置性质、旗标和/或列表指示事件递送系统应如何执行向积极参与的事件辨识器的子事件递送。在一些实施例中,元数据783包含可配置性质、旗标和/或列表,其指示事件辨识器可如何彼此交互。在一些实施例中,元数据783包含可配置性质、旗标和/或列表,其指示是否将子事件递送到视图或程序层次中的不同等级。
在一些实施例中,当辨识到事件的一个或一个以上特定子事件时,相应事件辨识器780激活与事件相关联的事件处置器790。在一些实施例中,相应事件辨识器780将与事件相关联的事件信息递送到事件处置器790。激活事件处置器790与将子事件发送(以及延期的发送)到相应命中视图不同。在一些实施例中,事件辨识器780投掷与所辨识的事件相关联的旗标,且与所述旗标相关联的事件处置器790抓住所述旗标,并执行预定义过程。
在一些实施例中,事件递送指令788包含子事件递送指令,其在不激活事件处置器的情况下递送关于子事件的事件信息。代替地,子事件递送指令将事件信息递送到与子事件系列相关联的事件处理器或递送到积极参与的视图。与子事件系列或与积极参与的视图相关联的事件处置器接收事件信息,且执行预定过程。
在一些实施例中,事件处置器790包含或可利用数据更新器776、对象更新器777以及GUI更新器778。在一些实施例中,数据更新器776、对象更新器777以及GUI更新器778包含于相应应用程序132-1或应用程序视图791的单个模块中。在其它实施例中,它们包含在两个或两个以上软件模块中。在一些实施例中,数据更新器776创建并更新应用程序132-1中所使用的数据。在一些实施例中,对象更新器777创建并更新应用程序132-1中所使用的对象。GUI更新器778更新GUI。
将理解,前面关于触敏显示器上的用户触摸的事件处置的论述也适用于用以操作具有输入装置的电子装置102的其它形式的用户输入,其并非全部在触摸屏上起始,例如协调鼠标移动和鼠标按钮按压(具有或不具有单次或多次键盘按压或保持)、触摸板上的用户移动(例如轻拍、拖曳、滚动等)、手写笔输入、装置的移动、口头指令、检测到的眼睛移动、生物计量输入和/或其任何组合,其可用作对应于定义待辨识事件的事件和/或子事件的输入。
根据一些实施例,图8展示根据如上文所述的实施例而配置的电子装置800的功能框图。装置的功能块可由用以实行所描述操作的硬件、软件或硬件与软件的组合来实施。所属领域的技术人员理解,图800中所描述的功能块可组合或分为子块,以实施如上文所述的本发明的原理。因此,本文的描述可支持本文所述的功能块的任何可能组合或分离或进一步定义。
如图8中所示,电子装置800包含触敏显示器单元802,其经配置以显示应用程序的用户接口且接收手指接触。所显示的用户接口包含布置在多个分层等级中的多个区,且所述多个区在相应层次等级处包含相应区。所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区。电子装置800还包含处理单元804,其耦合到触敏显示器单元802。在一些实施例中,处理单元804包含检测单元806、确定单元808、识别单元810、接触处理单元812、确认单元814以及产生单元816。
处理单元804经配置以在触敏显示器单元802上检测对应于所述相应区且不对应于所述相应区的两个或两个以上子区中的任一者的第一位置处的第一接触(例如,使用检测单元806)。处理单元804经配置以响应于检测到第一接触,确定应用程序是否经配置以结合相应区处理第一接触(例如,使用确定单元808)。处理单元804进一步经配置以在应用程序不经配置以结合相应区处理第一接触时,确定应用程序是否经配置以结合所述相应区的两个或两个以上子区中的至少一个子区处理第一接触(例如,使用确定单元808)。处理单元804进一步经配置以在应用程序经配置以结合所述相应区的两个或两个以上子区中的至少一个子区处理第一接触时:根据所述相应区的两个或两个以上子区相对于第一位置的方位来识别子区中的相应子区(例如,使用识别单元810);且使用应用程序结合所识别的相应子区处理第一接触(例如,使用接触处理单元812)。
在一些实施例中,处理单元804经配置以在应用程序经配置以结合所述相应区处理第一接触时,使用应用程序结合相应区处理第一接触(例如,使用接触处理单元812)。
在一些实施例中,所述两个或两个以上子区中的相应子区具有相应的命中区,所述命中区中的至少一者不同于对应子区,且处理单元经配置以确定第一位置不对应于子区的相应命中区中的任一者。
在一些实施例中,第一位置位于相应区的两个或两个以上子区中的任一者外部。
在一些实施例中,相应区在相应层次等级上方的层次等级处具有母区。
在一些实施例中,处理单元804进一步经配置以在应用程序不经配置以结合相应区的两个或两个以上子区中的至少一个子区处理第一接触且应用程序经配置以结合母区处理第一接触时,使用应用程序结合母区处理第一接触(例如,使用接触处理单元812)。
在一些实施例中,处理单元804进一步经配置以在应用程序不经配置以结合所述相应区的两个或两个以上子区中的至少一个子区处理第一接触时,将第一接触处理为母区中的接触(例如,使用接触处理单元812)。
在一些实施例中,处理单元804进一步经配置以识别所述相应区的两个或两个以上子区中的最满足相对于第一位置的接近性准则的子区(例如,使用识别单元810)。
在一些实施例中,处理单元804经配置以:识别所述相应区的两个或两个以上子区中的最满足相对于第一位置的接近性准则的子区(例如,使用识别单元810);且确认所识别的子区满足相对于第一位置的最大距离限制(例如,使用确认单元814)。
在一些实施例中,所述两个或两个以上子区中的一个或一个以上子区具有预定义近似性质,且至少一个其它子区不具有预定义近似性质。在这些实施例中,处理单元804经配置以根据相应区的具有预定义近似性质的一个或一个以上子区相对于第一位置的方位来识别子区中的相应子区(例如,使用识别单元810)。
在一些实施例中,当相应区包含具有一组预定义性质中的至少一个性质的用户接口对象时,认为应用程序经配置以结合相应区处理第一接触。
在一些实施例中,当相应区包括经配置以响应于包含第一接触的示意动作而激活的用户接口对象时,认为应用程序经配置以结合所述相应区处理第一接触。
在一些实施例中,当至少一个事件辨识器与相应区相关联时,认为所述应用程序经配置以结合相应区处理第一接触。
在一些实施例中,当经配置以辨识包含第一接触的示意动作的事件辨识器与相应区相关联时,认为所述应用程序经配置以结合相应区处理第一接触。
在一些实施例中,所述多个区包括对应于所述区的多个分层布置的视图。所述多个所述视图中的每一者具有与所述相应视图相关联的至少一个事件辨识器。处理单元804经配置以产生待由对应于所识别的相应子区的视图的至少一个事件辨识器处理的事件(例如,使用产生单元816)。
在一些实施例中,所述多个区包括对应于所述区的多个分层布置的视图。处理单元804经配置以将第一接触处理为所识别的相应子区中的接触(例如,使用接触处理单元812)。
根据一些实施例,图9展示根据如上文所述的实施例而配置的电子装置900的功能框图。装置的功能块可由用以实行所描述操作的硬件、软件或硬件与软件的组合来实施。所属领域的技术人员理解,图900中所描述的功能块可组合或分为子块,以实施如上文所述的本发明的原理。因此,本文的描述可支持本文所述的功能块的任何可能组合或分离或进一步定义。
如图9中所示,电子装置900包含:触敏显示器单元902,其经配置以接收手指接触且显示包含多个可激活用户接口对象的网页;以及处理单元904,其耦合到触敏显示器单元。在一些实施例中,处理单元904包含检测单元906、确定单元908、识别单元910、执行单元912以及激活单元914。
处理单元904经配置以在触敏显示器单元902上检测对应于所显示网页的第一位置处的第一接触(例如,使用检测单元906);且响应于检测到第一位置处的第一接触,确定第一位置是否对应于可激活用户接口对象中的至少一者(例如,使用确定单元908)。处理单元904经配置以在第一位置不对应于可激活用户接口对象中的至少一者时:如果存在的话,那么识别最满足相对于第一位置的预定义规则的用户接口对象(例如,使用识别单元910);且执行对应于所识别的用户接口对象的动作(例如,使用执行单元912)。
在一些实施例中,处理单元904经配置以在第一位置对应于可激活用户接口对象中的一者时,执行与对应于第一位置的可激活用户接口对象对应的动作(例如,使用执行单元912)。
在一些实施例中,预定义规则包含相对于第一位置的接近性准则。
在一些实施例中,处理单元904经配置以确定从第一位置到可激活用户接口对象的至少一子集的相应距离(例如,使用确定单元908)。
在一些实施例中,相应距离中的每一者包括从第一位置到相应的可激活用户接口对象的多个点的距离的经加权平均值。
在一些实施例中,处理单元904经配置以激活所识别的用户接口对象(例如,使用激活单元914)。
出于阐释的目的,已参考特定实施例描述了先前描述。然而,上文的说明性论述无意为详尽的或将本发明限于所揭示的精确形式。鉴于以上教示,许多修改和变化是可能的。选择和描述所述实施例是为了最佳地阐释本发明的原理及其实际应用,进而使所属领域的其他技术人员能够最佳地利用本发明以及具有适用于所预期的特定用途的各种修改的各种实施例。

Claims (78)

1.一种方法,其包括:
在具有触敏显示器的电子装置处:
在所述触敏显示器上显示应用程序的用户接口,所述所显示的用户接口包含布置在多个分层等级中的多个区,所述多个区在相应层次等级处包含相应区,所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区;
在所述触敏显示器上检测对应于所述相应区且不对应于所述相应区的所述两个或两个以上子区中的任一者的第一位置处的第一接触;
响应于检测到所述第一接触,确定所述应用程序是否经配置以结合所述相应区处理所述第一接触;
当所述应用程序不经配置以结合所述相应区处理所述第一接触时:
确定所述应用程序是否经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触;
当所述应用程序经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触时:
根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区;以及
使用所述应用程序结合所述所识别的相应子区处理所述第一接触。
2.根据权利要求1所述的方法,其包含在所述应用程序经配置以结合所述相应区处理所述第一接触时,使用所述应用程序结合所述相应区处理所述第一接触。
3.根据权利要求1到2中任一权利要求所述的方法,其中所述两个或两个以上子区中的相应子区具有相应的命中区,所述命中区中的至少一者不同于所述对应子区,且所述检测包含确定所述第一位置不对应于所述子区的所述相应命中区中的任一者。
4.根据权利要求1到3中任一权利要求所述的方法,其中所述第一位置位于所述相应区的所述两个或两个以上子区中的任一者外部。
5.根据权利要求1到4中任一权利要求所述的方法,其中所述相应区在所述相应层次等级上方的层次等级处具有母区。
6.根据权利要求5所述的方法,其包含在所述应用程序不经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触且所述应用程序经配置以结合所述母区处理所述第一接触时,使用所述应用程序结合所述母区处理所述第一接触。
7.根据权利要求5所述的方法,其包含在所述应用程序不经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触时,将所述第一接触处理为所述母区中的接触。
8.根据权利要求1到7中任一权利要求所述的方法,其中根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的所述相应子区包含识别所述相应区的所述两个或两个以上子区中的最满足相对于所述第一位置的接近性准则的所述子区。
9.根据权利要求1到7中任一权利要求所述的方法,其中根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的所述相应子区包含识别所述相应区的所述两个或两个以上子区中的最满足相对于所述第一位置的接近性准则的所述子区,且确认所述所识别的子区满足相对于所述第一位置的最大距离限制。
10.根据权利要求1到7中任一权利要求所述的方法,其中所述两个或两个以上子区中的一个或一个以上子区具有预定义近似性质,且至少一个其它子区不具有所述预定义近似性质;且识别所述相应子区包含根据所述相应区的具有所述预定义近似性质的所述一个或一个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区。
11.根据权利要求1到10中任一权利要求所述的方法,其中当所述相应区包含具有一组预定义性质中的至少一个性质的用户接口对象时,认为所述应用程序经配置以结合所述相应区处理所述第一接触。
12.根据权利要求1到10中任一权利要求所述的方法,其中当所述相应区包括经配置以响应于包含所述第一接触的示意动作而激活的用户接口对象时,认为所述应用程序经配置以结合所述相应区处理所述第一接触。
13.根据权利要求1到10中任一权利要求所述的方法,其中当至少一个事件辨识器与所述相应区相关联时,认为所述应用程序经配置以结合所述相应区处理所述第一接触。
14.根据权利要求1到10中任一权利要求所述的方法,其中当经配置以辨识包含所述第一接触的示意动作的事件辨识器与所述相应区相关联时,认为所述应用程序经配置以结合所述相应区处理所述第一接触。
15.根据权利要求1到10中任一权利要求所述的方法,其中所述多个区包括对应于所述区的多个分层布置的视图,所述多个所述视图中的每一者具有与所述相应视图相关联的至少一个事件辨识器;且使用所述应用程序结合所述所识别的相应子区处理所述第一接触包括产生待由对应于所述所识别的相应子区的所述视图的至少一个事件辨识器处理的事件。
16.根据权利要求1到10中任一权利要求所述的方法,其中所述多个区包括对应于所述区的多个分层布置的视图;且使用所述应用程序结合所述所识别的相应子区处理所述第一接触包括将所述第一接触处理为所述所识别的相应子区中的接触。
17.一种电子装置,其包括触敏显示器、一个或一个以上处理器以及存储供所述一个或一个以上处理器执行的一个或一个以上程序的存储器,所述一个或一个以上程序包含用于以下操作的指令:
在所述触敏显示器上显示应用程序的用户接口,所述所显示的用户接口包含布置在多个分层等级中的多个区,所述多个区在相应层次等级处包含相应区,所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区;
在所述触敏显示器上检测对应于所述相应区且不对应于所述相应区的所述两个或两个以上子区中的任一者的第一位置处的第一接触;
响应于检测到所述第一接触,确定所述应用程序是否经配置以结合所述相应区处理所述第一接触;
当所述应用程序不经配置以结合所述相应区处理所述第一接触时:
确定所述应用程序是否经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触;
当所述应用程序经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触时:
根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区;以及
使用所述应用程序结合所述所识别的相应子区处理所述第一接触。
18.根据权利要求17所述的电子装置,其中所述一个或一个以上程序包含用于在所述应用程序经配置以结合所述相应区处理所述第一接触时使用所述应用程序结合所述相应区处理所述第一接触的指令。
19.根据权利要求17到18中任一权利要求所述的电子装置,其中所述相应区在所述相应层次等级上方的层次等级处具有母区。
20.根据权利要求19所述的电子装置,其中所述一个或一个以上程序包含用于在所述应用程序不经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触且所述应用程序经配置以结合所述母区处理所述第一接触时使用所述应用程序结合所述母区处理所述第一接触的指令。
21.根据权利要求19所述的电子装置,其中所述一个或一个以上程序包含用于在所述应用程序不经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触时将所述第一接触处理为所述母区中的接触的指令。
22.根据权利要求17到21中任一权利要求所述的电子装置,其中所述用于根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的所述相应子区的指令包含用于识别所述相应区的所述两个或两个以上子区中的最满足相对于所述第一位置的接近性准则的所述子区的指令。
23.根据权利要求17到22中任一权利要求所述的电子装置,其中所述多个区包括对应于所述区的多个分层布置的视图,所述多个所述视图中的每一者具有与所述相应视图相关联的至少一个事件辨识器;且所述用于使用所述应用程序结合所述所识别的相应子区处理所述第一接触的指令包括用于产生待由对应于所述所识别的相应子区的所述视图的至少一个事件辨识器处理的事件的指令。
24.一种非暂时计算机可读存储媒体,其存储供具有触敏显示器的电子装置中的一个或一个以上处理器执行的一个或一个以上程序,所述一个或一个以上程序包含用于以下操作的指令:
在所述触敏显示器上显示应用程序的用户接口,所述所显示的用户接口包含布置在多个分层等级中的多个区,所述多个区在相应层次等级处包含相应区,所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区;
在所述触敏显示器上检测对应于所述相应区且不对应于所述相应区的所述两个或两个以上子区中的任一者的第一位置处的第一接触;
响应于检测到所述第一接触,确定所述应用程序是否经配置以结合所述相应区处理所述第一接触;
当所述应用程序不经配置以结合所述相应区处理所述第一接触时:
确定所述应用程序是否经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触;
当所述应用程序经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触时:
根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区;以及
使用所述应用程序结合所述所识别的相应子区处理所述第一接触。
25.根据权利要求24所述的计算机可读存储媒体,其中所述一个或一个以上程序包含用于在所述应用程序经配置以结合所述相应区处理所述第一接触时使用所述应用程序结合所述相应区处理所述第一接触的指令。
26.根据权利要求24到25中任一权利要求所述的计算机可读存储媒体,其中所述相应区在所述相应层次等级上方的层次等级处具有母区。
27.根据权利要求26所述的计算机可读存储媒体,其中所述一个或一个以上程序包含用于在所述应用程序不经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触且所述应用程序经配置以结合所述母区处理所述第一接触时使用所述应用程序结合所述母区处理所述第一接触的指令。
28.根据权利要求26所述的计算机可读存储媒体,其中所述一个或一个以上程序包含用于在所述应用程序不经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触时将所述第一接触处理为所述母区中的接触的指令。
29.根据权利要求24到28中任一权利要求所述的计算机可读存储媒体,其中所述用于根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的所述相应子区的指令包含用于识别所述相应区的所述两个或两个以上子区中的最满足相对于所述第一位置的接近性准则的所述子区的指令。
30.根据权利要求24到29中任一权利要求所述的计算机可读存储媒体,其中所述多个区包括对应于所述区的多个分层布置的视图,所述多个所述视图中的每一者具有与所述相应视图相关联的至少一个事件辨识器;且所述用于使用所述应用程序结合所述所识别的相应子区处理所述第一接触的指令包括用于产生待由对应于所述所识别的相应子区的所述视图的至少一个事件辨识器处理的事件的指令。
31.一种方法,其包括:
在具有触敏显示器的电子装置处:
在所述触敏显示器上显示包含多个可激活用户接口对象的网页;
在所述触敏显示器上检测对应于所述所显示的网页的第一位置处的第一接触;
响应于检测到所述第一位置处的所述第一接触,确定所述第一位置是否对应于所述可激活用户接口对象中的至少一者;
当所述第一位置不对应于所述可激活用户接口对象中的至少一者时:
如果存在的话,那么识别最满足相对于所述第一位置的预定义规则的用户接口对象;以及
执行对应于所述所识别的用户接口对象的动作。
32.根据权利要求31所述的方法,其包含在所述第一位置对应于所述可激活用户接口对象中的一者时执行与对应于所述第一位置的可激活用户接口对象对应的动作。
33.根据权利要求31到32中任一权利要求所述的方法,其中所述预定义规则包含相对于所述第一位置的接近性准则。
34.根据权利要求31到33中任一权利要求所述的方法,其中识别所述用户接口对象包含确定从所述第一位置到所述可激活用户接口对象的至少一子集的相应距离。
35.根据权利要求34所述的方法,其中所述相应距离中的每一者包括从所述第一位置到相应的可激活用户接口对象的多个点的距离的经加权平均值。
36.根据权利要求31到35中任一权利要求所述的方法,其中执行所述动作包括激活所述所识别的用户接口对象。
37.一种电子装置,其包括触敏显示器、一个或一个以上处理器以及存储供所述一个或一个以上处理器执行的一个或一个以上程序的存储器,所述一个或一个以上程序供所述一个或一个以上处理器执行,所述一个或一个以上程序包含用于以下操作的指令:
在所述触敏显示器上显示包含多个可激活用户接口对象的网页;
在所述触敏显示器上检测对应于所述所显示的网页的第一位置处的第一接触;
响应于检测到所述第一位置处的所述第一接触,确定所述第一位置是否对应于所述可激活用户接口对象中的至少一者;
当所述第一位置不对应于所述可激活用户接口对象中的至少一者时:
如果存在的话,那么识别最满足相对于所述第一位置的预定义规则的用户接口对象;以及
执行对应于所述所识别的用户接口对象的动作。
38.根据权利要求37所述的电子装置,其中所述一个或一个以上程序包含用于在所述第一位置对应于所述可激活用户接口对象中的一者时执行与对应于所述第一位置的可激活用户接口对象对应的动作的指令。
39.根据权利要求37到38中任一权利要求所述的电子装置,其中所述预定义规则包含相对于所述第一位置的接近性准则。
40.根据权利要求37到39中任一权利要求所述的电子装置,其中所述用于识别所述用户接口对象的指令包含用于确定从所述第一位置到所述可激活用户接口对象的至少一子集的相应距离的指令。
41.根据权利要求40所述的电子装置,其中所述相应距离中的每一者包括从所述第一位置到相应的可激活用户接口对象的多个点的距离的经加权平均值。
42.根据权利要求37到41中任一权利要求所述的电子装置,其中所述用于执行所述动作的指令包含用于激活所述所识别的用户接口对象的指令。
43.一种非暂时计算机可读存储媒体,其存储供具有触敏显示器的电子装置中的一个或一个以上处理器执行的一个或一个以上程序,所述一个或一个以上程序包含用于以下操作的指令:
在所述触敏显示器上显示包含多个可激活用户接口对象的网页;
在所述触敏显示器上检测对应于所述所显示的网页的第一位置处的第一接触;
响应于检测到所述第一位置处的所述第一接触,确定所述第一位置是否对应于所述可激活用户接口对象中的至少一者;
当所述第一位置不对应于所述可激活用户接口对象中的至少一者时:
如果存在的话,那么识别最满足相对于所述第一位置的预定义规则的用户接口对象;以及
执行对应于所述所识别的用户接口对象的动作。
44.根据权利要求43所述的计算机可读存储媒体,其中所述一个或一个以上程序包含用于在所述第一位置对应于所述可激活用户接口对象中的一者时执行与对应于所述第一位置的可激活用户接口对象对应的动作的指令。
45.根据权利要求43到44中任一权利要求所述的计算机可读存储媒体,其中所述预定义规则包含相对于所述第一位置的接近性准则。
46.根据权利要求43到45中任一权利要求所述的计算机可读存储媒体,其中所述用于识别所述用户接口对象的指令包含用于确定从所述第一位置到所述可激活用户接口对象的至少一子集的相应距离的指令。
47.根据权利要求46所述的计算机可读存储媒体,其中所述相应距离中的每一者包括从所述第一位置到相应的可激活用户接口对象的多个点的距离的经加权平均值。
48.根据权利要求43到47中任一权利要求所述的计算机可读存储媒体,其中所述用于执行所述动作的指令包含用于激活所述所识别的用户接口对象的指令。
49.一种电子装置,其包括:
触敏显示器;
用于在所述触敏显示器上显示应用程序的用户接口的构件,所述所显示的用户接口包含布置在多个分层等级中的多个区,所述多个区在相应层次等级处包含相应区,所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区;
用于在所述触敏显示器上检测对应于所述相应区且不对应于所述相应区的所述两个或两个以上子区中的任一者的第一位置处的第一接触的构件;
响应于检测到所述第一接触而启用的用于确定所述应用程序是否经配置以结合所述相应区处理所述第一接触的构件;以及
当所述应用程序不经配置以结合所述相应区处理所述第一接触时启用的构件,其包含:
用于确定所述应用程序是否经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触的构件;以及
当所述应用程序经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触时启用的构件,其包含:
用于根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区的构件;以及
用于使用所述应用程序结合所述所识别的相应子区处理所述第一接触的构件。
50.一种供在具有触敏显示器的电子装置中使用的信息处理设备,其包括:
用于在所述触敏显示器上显示应用程序的用户接口的构件,所述所显示的用户接口包含布置在多个分层等级中的多个区,所述多个区在相应层次等级处包含相应区,所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区;
用于在所述触敏显示器上检测对应于所述相应区且不对应于所述相应区的所述两个或两个以上子区中的任一者的第一位置处的第一接触的构件;
响应于检测到所述第一接触而启用的用于确定所述应用程序是否经配置以结合所述相应区处理所述第一接触的构件;以及
当所述应用程序不经配置以结合所述相应区处理所述第一接触时启用的构件,其包含:
用于确定所述应用程序是否经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触的构件;以及
当所述应用程序经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触时启用的构件,其包含:
用于根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区的构件;以及
用于使用所述应用程序结合所述所识别的相应子区处理所述第一接触的构件。
51.一种电子装置,其包括:
触敏显示器;
用于在所述触敏显示器上显示包含多个可激活用户接口对象的网页的构件;
用于在所述触敏显示器上检测对应于所述所显示的网页的第一位置处的第一接触的构件;
响应于检测到所述第一位置处的所述第一接触而启用的用于确定所述第一位置是否对应于所述可激活用户接口对象中的至少一者的构件;以及
当所述第一位置不对应于所述可激活用户接口对象中的至少一者时启用的构件,其包含:
用于如果存在的话那么识别最满足相对于所述第一位置的预定义规则的用户接口对象的构件;以及
用于执行对应于所述所识别的用户接口对象的动作的构件。
52.一种供在具有触敏显示器的电子装置中使用的信息处理设备,其包括:
用于在所述触敏显示器上显示包含多个可激活用户接口对象的网页的构件;
用于在所述触敏显示器上检测对应于所述所显示的网页的第一位置处的第一接触的构件;
响应于检测到所述第一位置处的所述第一接触而启用的用于确定所述第一位置是否对应于所述可激活用户接口对象中的至少一者的构件;以及
当所述第一位置不对应于所述可激活用户接口对象中的至少一者时启用的构件,其包含:
用于如果存在的话那么识别最满足相对于所述第一位置的预定义规则的用户接口对象的构件;以及
用于执行对应于所述所识别的用户接口对象的动作的构件。
53.一种电子装置,其包括触敏显示器、一个或一个以上处理器以及存储供所述一个或一个以上处理器执行的一个或一个以上程序的存储器,所述一个或一个以上程序供所述一个或一个以上处理器执行,所述一个或一个以上程序包含用于执行根据权利要求1到16以及31到36所述的任一方法的指令。
54.一种非暂时计算机可读存储媒体,其存储供具有触敏显示器的电子装置中的一个或一个以上处理器执行的一个或一个以上程序,所述一个或一个以上程序包含用于执行根据权利要求1到16以及31到36所述的任一方法的指令。
55.一种电子装置,其包括:
触敏显示器;以及
用于执行根据权利要求1到16以及31到36所述的任一方法的构件。
56.一种供在具有触敏显示器的电子装置中使用的信息处理设备,其包括用于执行根据权利要求1到16以及31到36所述的任一方法的构件。
57.一种电子装置,其包括:
触敏显示器单元,其经配置以显示应用程序的用户接口且接收手指接触,所述所显示的用户接口包含布置在多个分层等级中的多个区,所述多个区在相应层次等级处包含相应区,所述相应区在所述相应层次等级下方的层次等级处具有两个或两个以上子区;以及
处理单元,其耦合到所述触敏显示器单元,所述处理单元经配置以:
在所述触敏显示器单元上检测对应于所述相应区且不对应于所述相应区的所述两个或两个以上子区中的任一者的第一位置处的第一接触;
响应于检测到所述第一接触,确定所述应用程序是否经配置以结合所述相应区处理所述第一接触;
当所述应用程序不经配置以结合所述相应区处理所述第一接触时:
确定所述应用程序是否经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触;
当所述应用程序经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触时:
根据所述相应区的所述两个或两个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区;以及
使用所述应用程序结合所述所识别的相应子区处理所述第一接触。
58.根据权利要求57所述的电子装置,其中所述处理单元经配置以在所述应用程序经配置以结合所述相应区处理所述第一接触时,使用所述应用程序结合所述相应区处理所述第一接触。
59.根据权利要求57到58中任一权利要求所述的电子装置,其中所述两个或两个以上子区中的相应子区具有相应的命中区,所述命中区中的至少一者不同于所述对应子区,且所述处理单元经配置以确定所述第一位置不对应于所述子区的所述相应命中区中的任一者。
60.根据权利要求57到59中任一权利要求所述的电子装置,其中所述第一位置位于所述相应区的所述两个或两个以上子区中的任一者外部。
61.根据权利要求57到60中任一权利要求所述的电子装置,其中所述相应区在所述相应层次等级上方的层次等级处具有母区。
62.根据权利要求61所述的电子装置,其中所述处理单元经配置以在所述应用程序不经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触且所述应用程序经配置以结合所述母区处理所述第一接触时,使用所述应用程序结合所述母区处理所述第一接触。
63.根据权利要求61所述的电子装置,其中所述处理单元经配置以在所述应用程序不经配置以结合所述相应区的所述两个或两个以上子区中的至少一个子区处理所述第一接触时,将所述第一接触处理为所述母区中的接触。
64.根据权利要求57到63中任一权利要求所述的电子装置,其中所述处理单元经配置以识别所述相应区的所述两个或两个以上子区中的最满足相对于所述第一位置的接近性准则的所述子区。
65.根据权利要求57到63中任一权利要求所述的电子装置,其中所述处理单元经配置以:
识别所述相应区的所述两个或两个以上子区中的最满足相对于所述第一位置的接近性准则的所述子区;以及
确认所述所识别的子区满足相对于所述第一位置的最大距离限制。
66.根据权利要求57到63中任一权利要求所述的电子装置,其中所述两个或两个以上子区中的一个或一个以上子区具有预定义近似性质,且至少一个其它子区不具有所述预定义近似性质;且所述处理单元经配置以根据所述相应区的具有所述预定义近似性质的所述一个或一个以上子区相对于所述第一位置的方位来识别所述子区中的相应子区。
67.根据权利要求57到66中任一权利要求所述的电子装置,其中当所述相应区包含具有一组预定义性质中的至少一个性质的用户接口对象时,认为所述应用程序经配置以结合所述相应区处理所述第一接触。
68.根据权利要求57到66中任一权利要求所述的电子装置,其中当所述相应区包括经配置以响应于包含所述第一接触的示意动作而激活的用户接口对象时,认为所述应用程序经配置以结合所述相应区处理所述第一接触。
69.根据权利要求57到66中任一权利要求所述的电子装置,其中当至少一个事件辨识器与所述相应区相关联时,认为所述应用程序经配置以结合所述相应区处理所述第一接触。
70.根据权利要求57到66中任一权利要求所述的电子装置,其中当经配置以辨识包含所述第一接触的示意动作的事件辨识器与所述相应区相关联时,认为所述应用程序经配置以结合所述相应区处理所述第一接触。
71.根据权利要求57到66中任一权利要求所述的电子装置,其中所述多个区包括对应于所述区的多个分层布置的视图,所述多个所述视图中的每一者具有与所述相应视图相关联的至少一个事件辨识器;且所述处理单元经配置以产生待由对应于所述所识别的相应子区的所述视图的至少一个事件辨识器处理的事件。
72.根据权利要求57到66中任一权利要求所述的电子装置,其中所述多个区包括对应于所述区的多个分层布置的视图;且所述处理单元经配置以将所述第一接触处理为所述所识别的相应子区中的接触。
73.一种电子装置,其包括:
触敏显示器单元,其经配置以接收手指接触且显示包含多个可激活用户接口对象的网页;以及
处理单元,其耦合到所述触敏显示器单元,所述处理单元经配置以:
在所述触敏显示器单元上检测对应于所述所显示的网页的第一位置处的第一接触;
响应于检测到所述第一位置处的所述第一接触,确定所述第一位置是否对应于所述可激活用户接口对象中的至少一者;以及
当所述第一位置不对应于所述可激活用户接口对象中的至少一者时:
如果存在的话,识别最满足相对于所述第一位置的预定义规则的用户接口对象;以及
执行对应于所述所识别的用户接口对象的动作。
74.根据权利要求73所述的电子装置,其中所述处理单元经配置以在所述第一位置对应于所述可激活用户接口对象中的一者时,执行与对应于所述第一位置的可激活用户接口对象对应的动作。
75.根据权利要求73到74中任一权利要求所述的电子装置,其中所述预定义规则包含相对于所述第一位置的接近性准则。
76.根据权利要求73到75中任一权利要求所述的电子装置,其中所述处理单元经配置以确定从所述第一位置到所述可激活用户接口对象的至少一子集的相应距离。
77.根据权利要求76所述的电子装置,其中所述相应距离中的每一者包括从所述第一位置到相应的可激活用户接口对象的多个点的距离的经加权平均值。
78.根据权利要求73到77中任一权利要求所述的电子装置,其中所述处理单元经配置以激活所述所识别的用户接口对象。
CN201180022994.1A 2010-06-14 2011-06-08 用于辨识触摸输入的设备和方法 Active CN102884500B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610455059.9A CN106126097B (zh) 2010-06-14 2011-06-08 控制选择近似

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US35466610P 2010-06-14 2010-06-14
US61/354,666 2010-06-14
US12/892,848 US8552999B2 (en) 2010-06-14 2010-09-28 Control selection approximation
US12/892,851 2010-09-28
US12/892,848 2010-09-28
US12/892,851 US10216408B2 (en) 2010-06-14 2010-09-28 Devices and methods for identifying user interface objects based on view hierarchy
PCT/US2011/039583 WO2011159531A2 (en) 2010-06-14 2011-06-08 Control selection approximation

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201610455059.9A Division CN106126097B (zh) 2010-06-14 2011-06-08 控制选择近似

Publications (2)

Publication Number Publication Date
CN102884500A true CN102884500A (zh) 2013-01-16
CN102884500B CN102884500B (zh) 2016-05-18

Family

ID=44514954

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201610455059.9A Active CN106126097B (zh) 2010-06-14 2011-06-08 控制选择近似
CN201180022994.1A Active CN102884500B (zh) 2010-06-14 2011-06-08 用于辨识触摸输入的设备和方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201610455059.9A Active CN106126097B (zh) 2010-06-14 2011-06-08 控制选择近似

Country Status (7)

Country Link
US (2) US10216408B2 (zh)
EP (1) EP2545432B1 (zh)
JP (3) JP5621042B2 (zh)
KR (1) KR101453641B1 (zh)
CN (2) CN106126097B (zh)
AU (1) AU2011268047C1 (zh)
WO (1) WO2011159531A2 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017185327A1 (zh) * 2016-04-29 2017-11-02 华为技术有限公司 一种用户界面显示方法及终端

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9256356B2 (en) * 2001-03-29 2016-02-09 International Business Machines Corporation Method and system for providing feedback for docking a content pane in a host window
US20080168402A1 (en) 2007-01-07 2008-07-10 Christopher Blumenberg Application Programming Interfaces for Gesture Operations
US20080168478A1 (en) 2007-01-07 2008-07-10 Andrew Platzer Application Programming Interfaces for Scrolling
US8717305B2 (en) 2008-03-04 2014-05-06 Apple Inc. Touch event model for web pages
US8645827B2 (en) 2008-03-04 2014-02-04 Apple Inc. Touch event model
US9684521B2 (en) 2010-01-26 2017-06-20 Apple Inc. Systems having discrete and continuous gesture recognizers
US8285499B2 (en) 2009-03-16 2012-10-09 Apple Inc. Event recognition
US8566045B2 (en) 2009-03-16 2013-10-22 Apple Inc. Event recognition
US10216408B2 (en) 2010-06-14 2019-02-26 Apple Inc. Devices and methods for identifying user interface objects based on view hierarchy
US20120210261A1 (en) * 2011-02-11 2012-08-16 Apple Inc. Systems, methods, and computer-readable media for changing graphical object input tools
US8967456B2 (en) * 2011-05-26 2015-03-03 International Business Machines Corporation Method for tagging elements in a user interface
US9727227B2 (en) * 2011-07-28 2017-08-08 Microsoft Technology Licensing, Llc Multi-touch remoting
US20130055222A1 (en) * 2011-08-31 2013-02-28 Robert David Darrow Magnetic resonance imaging system with programmable subsystem and method for programming
JP5805601B2 (ja) * 2011-09-30 2015-11-04 京セラ株式会社 装置、方法、及びプログラム
JP5852392B2 (ja) * 2011-09-30 2016-02-03 京セラ株式会社 装置、方法、及びプログラム
US9261961B2 (en) 2012-06-07 2016-02-16 Nook Digital, Llc Accessibility aids for users of electronic devices
BR112014030783B1 (pt) * 2012-06-20 2021-02-17 Maquet Critical Care Ab aparelho para respiração que tem um visor com plano de fundo selecionável por usuário e método de controle interno de um visor
US20140026101A1 (en) 2012-07-20 2014-01-23 Barnesandnoble.Com Llc Accessible Menu Navigation Techniques For Electronic Devices
US9516088B2 (en) * 2012-08-29 2016-12-06 Ebay Inc. Systems and methods to consistently generate web content
CA2892071A1 (en) 2012-11-27 2014-06-05 Lg Electronics Inc. Method and apparatus for processing digital service signal
DE112013001305B4 (de) * 2013-01-06 2024-08-22 Intel Corporation Ein Verfahren, eine Vorrichtung und ein System zur verteilten Vorverarbeitung von Berührungsdaten und Anzeigebereichsteuerung
US9971495B2 (en) * 2013-01-28 2018-05-15 Nook Digital, Llc Context based gesture delineation for user interaction in eyes-free mode
US9703477B2 (en) * 2013-02-19 2017-07-11 Facebook, Inc. Handling overloaded gestures
CN105074700A (zh) 2013-03-01 2015-11-18 奎克西公司 产生含有到应用程序的状态链接的搜索结果
US11096668B2 (en) 2013-03-13 2021-08-24 Samsung Electronics Co., Ltd. Method and ultrasound apparatus for displaying an object
WO2014142468A1 (en) 2013-03-13 2014-09-18 Samsung Electronics Co., Ltd. Method of providing copy image and ultrasound apparatus therefor
US9696872B2 (en) 2013-05-21 2017-07-04 International Business Machines Corporation Treemap perspective manipulation
US9733716B2 (en) 2013-06-09 2017-08-15 Apple Inc. Proxy gesture recognizer
US10684740B2 (en) * 2013-11-04 2020-06-16 Facebook, Inc. Intervention conditions
US9720672B2 (en) * 2014-01-06 2017-08-01 Quixey, Inc. Searching and accessing application functionality
US20150242420A1 (en) 2014-02-21 2015-08-27 Quixey, Inc. Location-Based Searching
US9430142B2 (en) * 2014-07-17 2016-08-30 Facebook, Inc. Touch-based gesture recognition and application navigation
US10146409B2 (en) * 2014-08-29 2018-12-04 Microsoft Technology Licensing, Llc Computerized dynamic splitting of interaction across multiple content
US9626443B2 (en) 2014-10-23 2017-04-18 Quixey, Inc. Searching and accessing application functionality
JP2016148965A (ja) * 2015-02-12 2016-08-18 三菱電機株式会社 表示制御装置および表示制御方法
US20170123598A1 (en) * 2015-10-29 2017-05-04 Hand Held Products, Inc. System and method for focus on touch with a touch sensitive screen display
US10705723B2 (en) 2015-11-23 2020-07-07 Verifone, Inc. Systems and methods for authentication code entry in touch-sensitive screen enabled devices
WO2017091558A1 (en) 2015-11-23 2017-06-01 Verifone, Inc. Systems and methods for authentication code entry in touch-sensitive screen enabled devices
CN107016010A (zh) * 2016-06-30 2017-08-04 阿里巴巴集团控股有限公司 超链接对象的处理方法和装置
CN106325668B (zh) * 2016-08-11 2019-10-18 网易(杭州)网络有限公司 触摸事件响应处理方法及系统
US10163184B2 (en) * 2016-08-17 2018-12-25 Adobe Systems Incorporated Graphics performance for complex user interfaces
JP6582203B2 (ja) * 2016-10-05 2019-10-02 株式会社大都技研 遊技台
US10606448B2 (en) 2017-01-04 2020-03-31 International Business Machines Corporation Searching and displaying child objects of a parent object
KR20200028485A (ko) * 2017-09-08 2020-03-16 미쓰비시덴키 가부시키가이샤 측거 장치 및 측거 방법
US10678404B2 (en) * 2017-12-15 2020-06-09 International Business Machines Corporation Operation of a data processing system during graphical user interface transitions
WO2019143335A1 (en) 2018-01-18 2019-07-25 Hewlett-Packard Development Company, L.P. Touchscreen devices to transmit input selectively
JP6616052B1 (ja) * 2018-02-05 2019-12-04 楽天株式会社 提示装置、提示方法、及び、プログラム
JPWO2019239450A1 (ja) * 2018-06-11 2021-02-12 三菱電機株式会社 入力制御装置、操作装置および入力制御方法
USD976268S1 (en) * 2019-10-10 2023-01-24 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US11308259B2 (en) * 2020-03-09 2022-04-19 Servicenow, Inc. Web element retargeting
US11648481B2 (en) * 2020-10-20 2023-05-16 Nvidia Corporation Game event recognition

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050017957A1 (en) * 2003-07-25 2005-01-27 Samsung Electronics Co., Ltd. Touch screen system and control method therefor capable of setting active regions
WO2008030879A2 (en) * 2006-09-06 2008-03-13 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
WO2008030880A1 (en) * 2006-09-06 2008-03-13 Apple Inc. Methods for determining a cursor position from a finger contact with a touch screen display
CN101356492A (zh) * 2006-09-06 2009-01-28 苹果公司 对于不同姿势进行类似操作的可携带电子装置
US20090058830A1 (en) * 2007-01-07 2009-03-05 Scott Herz Portable multifunction device, method, and graphical user interface for interpreting a finger gesture

Family Cites Families (530)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB1517521A (en) 1975-09-01 1978-07-12 Tilgate Pallets Ltd Pallets
US4455452A (en) 1982-09-13 1984-06-19 Touch Activated Switch Arrays, Inc. Touch activated controller for generating X-Y output information
US4674066A (en) 1983-02-18 1987-06-16 Houghton Mifflin Company Textual database system using skeletonization and phonetic replacement to retrieve words matching or similar to query words
JPH02140822A (ja) 1988-11-22 1990-05-30 Nec Corp マルチウインドディスプレイ方式
US5252951A (en) 1989-04-28 1993-10-12 International Business Machines Corporation Graphical user interface with gesture recognition in a multiapplication environment
JP2862626B2 (ja) 1990-03-22 1999-03-03 株式会社東芝 電子辞書及び情報検索方法
US5046434A (en) 1990-05-02 1991-09-10 Penda Corporation Plastic reinforced thermoformed pallet
JP3145735B2 (ja) 1991-07-17 2001-03-12 富士通株式会社 入力制御方式
JPH05197573A (ja) 1991-08-26 1993-08-06 Hewlett Packard Co <Hp> タスク指向パラダイムによるタスク管理システム
JP2827612B2 (ja) 1991-10-07 1998-11-25 富士通株式会社 タッチパネル装置およびタッチパネル装置におけるオブジェクトの表示方法。
US5233547A (en) 1991-11-12 1993-08-03 Ncr Corporation Electronic checking account apparatus and method having a digitizer to receive information as a check is being written
JP2787523B2 (ja) 1992-04-15 1998-08-20 沖電気工業株式会社 キーボード
US5880411A (en) 1992-06-08 1999-03-09 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
US5488204A (en) 1992-06-08 1996-01-30 Synaptics, Incorporated Paintbrush stylus for capacitive touch sensor pad
US7084859B1 (en) 1992-09-18 2006-08-01 Pryor Timothy R Programmable tactile touch screen displays and man-machine interfaces for improved vehicle instrumentation and telematics
US5583543A (en) 1992-11-05 1996-12-10 Sharp Kabushiki Kaisha Pen input processing apparatus
JP2999335B2 (ja) 1992-11-05 2000-01-17 シャープ株式会社 ジェスチャー処理装置およびジェスチャー処理方法
US5612719A (en) 1992-12-03 1997-03-18 Apple Computer, Inc. Gesture sensitive buttons for graphical user interfaces
US5463725A (en) 1992-12-31 1995-10-31 International Business Machines Corp. Data processing system graphical user interface which emulates printed material
US5513309A (en) 1993-01-05 1996-04-30 Apple Computer, Inc. Graphic editor user interface for a pointer-based computer system
DE4406668C2 (de) * 1993-04-27 1996-09-12 Hewlett Packard Co Verfahren und Vorrichtung zum Betreiben eines berührungsempfindlichen Anzeigegeräts
JP2986047B2 (ja) 1993-04-29 1999-12-06 インターナショナル・ビジネス・マシーンズ・コーポレイション ディジタル入力用表示装置並びに入力処理装置および方法
EP0626635B1 (en) 1993-05-24 2003-03-05 Sun Microsystems, Inc. Improved graphical user interface with method for interfacing to remote devices
US6035343A (en) 1993-06-11 2000-03-07 Fujitsu Limited Method for executing software formed of software components and a system for executing such software
CA2124505C (en) * 1993-07-21 2000-01-04 William A. S. Buxton User interface having simultaneously movable tools and cursor
US5818455A (en) 1993-07-21 1998-10-06 Xerox Corporation Method and apparatus for operating on the model data structure of an image to produce human perceptible output using a viewing operation region having explicit multiple regions
US5581670A (en) 1993-07-21 1996-12-03 Xerox Corporation User interface having movable sheet with click-through tools
US5627959A (en) 1993-09-20 1997-05-06 Oracle Corporation Method for manipulating graphic objects
US5564112A (en) 1993-10-14 1996-10-08 Xerox Corporation System and method for generating place holders to temporarily suspend execution of a selected command
US5454960A (en) 1993-11-10 1995-10-03 Advanced Building Technologies, Inc. Oil change and recycling system
US5534893A (en) 1993-12-15 1996-07-09 Apple Computer, Inc. Method and apparatus for using stylus-tablet input in a computer system
US5588072A (en) 1993-12-22 1996-12-24 Canon Kabushiki Kaisha Method and apparatus for selecting blocks of image data from image data having both horizontally- and vertically-oriented blocks
US5686940A (en) 1993-12-24 1997-11-11 Rohm Co., Ltd. Display apparatus
US5566337A (en) 1994-05-13 1996-10-15 Apple Computer, Inc. Method and apparatus for distributing events in an operating system
JP2939119B2 (ja) 1994-05-16 1999-08-25 シャープ株式会社 手書き文字入力表示装置および方法
US5570113A (en) 1994-06-29 1996-10-29 International Business Machines Corporation Computer based pen system and method for automatically cancelling unwanted gestures and preventing anomalous signals as inputs to such system
US5510061A (en) 1994-07-26 1996-04-23 Norton Chemical Process Products Corp. Non-welded support plate member
EP0701220B1 (en) 1994-09-12 2001-07-04 Adobe Systems Inc. Method and apparatus for viewing electronic documents
DE69408995T2 (de) 1994-11-15 1998-08-06 Uop Inc Verfahren zur adsorptiven Abtrennung von meta-Xylol von aromatischen Kohlenwasserstoffen
US5495566A (en) 1994-11-22 1996-02-27 Microsoft Corporation Scrolling contents of a window
JP2944439B2 (ja) 1994-12-27 1999-09-06 シャープ株式会社 手書き文字入力装置および方法
JPH08307954A (ja) 1995-05-12 1996-11-22 Sony Corp 座標入力装置および方法、並びに情報処理装置
US5708460A (en) 1995-06-02 1998-01-13 Avi Systems, Inc. Touch screen
US6496182B1 (en) 1995-06-07 2002-12-17 Microsoft Corporation Method and system for providing touch-sensitive screens for the visually impaired
JPH0969037A (ja) 1995-08-31 1997-03-11 Sharp Corp データ処理装置
JP3636792B2 (ja) 1995-10-18 2005-04-06 株式会社リコー ペン先座標入力装置
US5676064A (en) 1996-04-22 1997-10-14 Shuert; Lyle H. Pallet and pallet package
US5745116A (en) 1996-09-09 1998-04-28 Motorola, Inc. Intuitive gesture-based graphical user interface
US5903902A (en) 1996-09-09 1999-05-11 Design Intelligence, Inc. Design engine with tree and component structure
US5995083A (en) 1996-11-20 1999-11-30 Alps Electric Co., Ltd. Coordinates input apparatus
JP3889466B2 (ja) 1996-11-25 2007-03-07 ソニー株式会社 文章入力装置及び方法
US5917477A (en) 1997-02-28 1999-06-29 Samsung Electronics Co., Ltd. Touch screen input apparatus for chip mounter, chip mounter including the same and method for controlling the chip mounter
US6141018A (en) 1997-03-12 2000-10-31 Microsoft Corporation Method and system for displaying hypertext documents with visual effects
JPH1185354A (ja) 1997-09-04 1999-03-30 Internatl Business Mach Corp <Ibm> キーボード組込み型座標指示装置、キーボード・ユニット、及び情報処理機器
US9098297B2 (en) 1997-05-08 2015-08-04 Nvidia Corporation Hardware accelerator for an object-oriented programming language
US6049326A (en) 1997-05-12 2000-04-11 Siemens Information And Communication Networks, Inc. System and method for dual browser modes
US5983190A (en) 1997-05-19 1999-11-09 Microsoft Corporation Client server animation system for managing interactive user interface characters
FI115689B (fi) 1997-05-21 2005-06-15 Nokia Corp Menetelmä ja järjestely matkaviestimen näytöllä esitettävän tiedon vierittämiseksi
US6028602A (en) 1997-05-30 2000-02-22 Telefonaktiebolaget Lm Ericsson Method for managing contents of a hierarchical data model
JP3968477B2 (ja) 1997-07-07 2007-08-29 ソニー株式会社 情報入力装置及び情報入力方法
US6034688A (en) 1997-09-15 2000-03-07 Sony Corporation Scrolling navigational display system
US6377965B1 (en) 1997-11-07 2002-04-23 Microsoft Corporation Automatic word completion system for partially entered data
JP4471250B2 (ja) 1997-12-01 2010-06-02 シー エイチ アイ デベロップメント エムジーエムティー リミテッド エックス ヴィ アイ エルエルシー アプリケーションフレームワーク用アーキテクチャ
WO1999031571A1 (en) 1997-12-16 1999-06-24 Microsoft Corporation Soft input panel system and method
US7834855B2 (en) 2004-08-25 2010-11-16 Apple Inc. Wide touchpad on a portable computer
US7614008B2 (en) 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
IL137478A (en) 1998-01-26 2005-11-20 Westerman Wayne Method and apparatus for integrating manual input
US7844914B2 (en) * 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
US7840912B2 (en) 2006-01-30 2010-11-23 Apple Inc. Multi-touch gesture dictionary
US20070177804A1 (en) 2006-01-30 2007-08-02 Apple Computer, Inc. Multi-touch gesture dictionary
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US20040080541A1 (en) 1998-03-20 2004-04-29 Hisashi Saiga Data displaying device
US7346850B2 (en) 1998-06-12 2008-03-18 Cygnus Systems, Inc. System and method for iconic software environment management
US6429846B2 (en) 1998-06-23 2002-08-06 Immersion Corporation Haptic feedback for touchpads and other touch controls
US6570594B1 (en) 1998-06-30 2003-05-27 Sun Microsystems, Inc. User interface with non-intrusive display element
US6061063A (en) 1998-06-30 2000-05-09 Sun Microsystems, Inc. Method and apparatus for providing feedback while scrolling
US6188391B1 (en) 1998-07-09 2001-02-13 Synaptics, Inc. Two-layer capacitive touchpad and method of making same
US7559039B2 (en) 1998-07-14 2009-07-07 Brad Ridgley Method and device for finding, collecting and acting upon units of information
CA2244431C (en) 1998-07-30 2002-02-19 Ibm Canada Limited-Ibm Canada Limitee Touchscreen keyboard support for multi-byte character languages
US6068124A (en) 1998-08-27 2000-05-30 Nanya Plastics Plastic pallet and separator for packaging yarn spools
US6628835B1 (en) 1998-08-31 2003-09-30 Texas Instruments Incorporated Method and system for defining and recognizing complex events in a video sequence
US20020018051A1 (en) 1998-09-15 2002-02-14 Mona Singh Apparatus and method for moving objects on a touchscreen display
US6985178B1 (en) 1998-09-30 2006-01-10 Canon Kabushiki Kaisha Camera control system, image pick-up server, client, control method and storage medium therefor
JP4159674B2 (ja) 1998-10-22 2008-10-01 富士通株式会社 オブジェクト指向業務システムおよび方法
JP2000163443A (ja) 1998-11-25 2000-06-16 Seiko Epson Corp 携帯情報機器及び情報記憶媒体
JP4542637B2 (ja) 1998-11-25 2010-09-15 セイコーエプソン株式会社 携帯情報機器及び情報記憶媒体
US8938688B2 (en) 1998-12-04 2015-01-20 Nuance Communications, Inc. Contextual prediction of user words and user actions
US6963937B1 (en) 1998-12-17 2005-11-08 International Business Machines Corporation Method and apparatus for providing configurability and customization of adaptive user-input filtration
US6259436B1 (en) 1998-12-22 2001-07-10 Ericsson Inc. Apparatus and method for determining selection of touchable items on a computer touchscreen by an imprecise touch
US6643824B1 (en) 1999-01-15 2003-11-04 International Business Machines Corporation Touch screen region assist for hypertext links
US7469381B2 (en) 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
JP2000222130A (ja) 1999-02-02 2000-08-11 Toshiba Corp 入力装置および方法および記憶媒体
US20060061551A1 (en) 1999-02-12 2006-03-23 Vega Vista, Inc. Motion detection and tracking system to control navigation and display of portable displays including on-chip gesture detection
US6486896B1 (en) 1999-04-07 2002-11-26 Apple Computer, Inc. Scalable scroll controller
WO2000065191A1 (en) 1999-04-21 2000-11-02 Barrie Weatherall Stabiliser for ladders
JP4939682B2 (ja) 1999-04-27 2012-05-30 エーユー オプトロニクス コーポレイション 表示装置
US6714936B1 (en) 1999-05-25 2004-03-30 Nevin, Iii Rocky Harry W. Method and apparatus for displaying data stored in linked nodes
AUPQ439299A0 (en) 1999-12-01 1999-12-23 Silverbrook Research Pty Ltd Interface system
US7030863B2 (en) 2000-05-26 2006-04-18 America Online, Incorporated Virtual keyboard system with automatic correction
US7286115B2 (en) 2000-05-26 2007-10-23 Tegic Communications, Inc. Directional input system with automatic correction
US6631501B1 (en) 1999-06-30 2003-10-07 Microsoft Corporation Method and system for automatic type and replace of characters in a sequence of characters
US6639584B1 (en) 1999-07-06 2003-10-28 Chuang Li Methods and apparatus for controlling a portable electronic device using a touchpad
US6335725B1 (en) 1999-07-14 2002-01-01 Hewlett-Packard Company Method of partitioning a touch screen for data input
JP2001027924A (ja) 1999-07-14 2001-01-30 Sharp Corp 表示画面を用いる入力装置
US6636242B2 (en) 1999-08-31 2003-10-21 Accenture Llp View configurer in a presentation services patterns environment
US6448986B1 (en) 1999-09-07 2002-09-10 Spotware Technologies Llc Method and system for displaying graphical objects on a display screen
US6664989B1 (en) 1999-10-18 2003-12-16 Honeywell International Inc. Methods and apparatus for graphical display interaction
EP1208476A2 (en) 1999-10-20 2002-05-29 Koninklijke Philips Electronics N.V. Device and method of browsing an image collection
JP2001134382A (ja) 1999-11-04 2001-05-18 Sony Corp 図形処理装置
JP2001167227A (ja) 1999-12-07 2001-06-22 Hitachi Ltd 情報端末装置
US6778992B1 (en) 1999-12-21 2004-08-17 Lockstream Corporation Flexible and hierarchical user interfaces defined using a data definition language
US6664991B1 (en) 2000-01-06 2003-12-16 Microsoft Corporation Method and apparatus for providing context menus on a pen-based device
US6809724B1 (en) 2000-01-18 2004-10-26 Seiko Epson Corporation Display apparatus and portable information processing apparatus
US6820237B1 (en) 2000-01-21 2004-11-16 Amikanow! Corporation Apparatus and method for context-based highlighting of an electronic document
US6856326B1 (en) 2000-01-28 2005-02-15 International Business Machines Corporation Smooth scrolling system and method
US6757068B2 (en) 2000-01-28 2004-06-29 Intersense, Inc. Self-referenced tracking
JP4803883B2 (ja) 2000-01-31 2011-10-26 キヤノン株式会社 位置情報処理装置及びその方法及びそのプログラム。
US7138983B2 (en) 2000-01-31 2006-11-21 Canon Kabushiki Kaisha Method and apparatus for detecting and interpreting path of designated position
US6590595B1 (en) 2000-02-08 2003-07-08 Sun Microsystems, Inc. Mechanism for providing intuitive scrolling feedback
US6922810B1 (en) 2000-03-07 2005-07-26 Microsoft Corporation Grammar-based automatic data completion and suggestion for user input
WO2001069367A2 (en) 2000-03-17 2001-09-20 Vizible.Com Inc. A three dimensional spatial user interface
US7142205B2 (en) 2000-03-29 2006-11-28 Autodesk, Inc. Single gesture map navigation graphical user interface for a personal digital assistant
MXPA02009369A (es) 2000-03-30 2003-02-12 Qualcomm Inc Metodo y aparato para notificar a la aplicacion de una estacion movil eventos especificos.
JP4124402B2 (ja) 2000-03-31 2008-07-23 株式会社リコー 画像入力装置
AU2001251202A1 (en) 2000-04-07 2001-10-23 Rsa Security, Inc. System and method for authenticating a user
US6765557B1 (en) 2000-04-10 2004-07-20 Interlink Electronics, Inc. Remote control having touch pad to screen mapping
US7009626B2 (en) 2000-04-14 2006-03-07 Picsel Technologies Limited Systems and methods for generating visual representations of graphical data and digital document processing
WO2001082309A1 (en) 2000-04-19 2001-11-01 Analogic Corporation Backlash-resistant drive assembly for collimator in a ct scanner
JP2001299733A (ja) 2000-04-27 2001-10-30 Konica Corp Pci放射線画像処理装置、pci放射線画像検出処理装置、pci放射線画像出力装置及びpci画像診断支援装置
US6559869B1 (en) 2000-05-04 2003-05-06 Microsoft Corporation Adaptive auto-scrolling merge for hand written input
NZ523065A (en) * 2000-05-11 2004-11-26 Nes Stewart Irvine A graphical user interface where a procedure is activated by movement of a pointer over a predetermined path
US6446083B1 (en) 2000-05-12 2002-09-03 Vastvideo, Inc. System and method for classifying media items
US6912694B1 (en) 2000-06-28 2005-06-28 Intel Corporation Providing a scrolling function for a multiple frame web page
US6677965B1 (en) 2000-07-13 2004-01-13 International Business Machines Corporation Rubber band graphical user interface control
GB0017793D0 (en) 2000-07-21 2000-09-06 Secr Defence Human computer interface
US6704024B2 (en) 2000-08-07 2004-03-09 Zframe, Inc. Visual content browsing using rasterized representations
US20020015064A1 (en) 2000-08-07 2002-02-07 Robotham John S. Gesture-based user interface to multi-level and multi-modal sets of bit-maps
JP2002062983A (ja) 2000-08-21 2002-02-28 Hitachi Ltd ポインティングデバイス
US6791530B2 (en) 2000-08-29 2004-09-14 Mitsubishi Electric Research Laboratories, Inc. Circular graphical user interfaces
US6562929B2 (en) 2000-08-30 2003-05-13 Jsr Corporation Conjugated diene-based rubber and method of producing the same, oil extended rubber and rubber composition containing the same
US6912462B2 (en) 2000-08-31 2005-06-28 Sony Corporation Information processing apparatus, information processing method and program storage media
US20020138617A1 (en) 2000-09-06 2002-09-26 Jacob Christfort Providing content from multiple services
US6757673B2 (en) 2000-10-09 2004-06-29 Town Compass Llc Displaying hierarchial relationship of data accessed via subject index
US7761541B1 (en) 2000-10-25 2010-07-20 Nortel Networks Limited Service enabling technology
US6735583B1 (en) 2000-11-01 2004-05-11 Getty Images, Inc. Method and system for classifying and locating media content
US7072501B2 (en) 2000-11-22 2006-07-04 R2 Technology, Inc. Graphical user interface for display of anatomical information
US7184796B2 (en) 2000-12-04 2007-02-27 International Business Machines Corporation Personal communication device having a built in projection display
US7240291B2 (en) 2000-12-21 2007-07-03 Xerox Corporation Methods, systems, and computer program products for display of information relating to a virtual three-dimensional book
US6976172B2 (en) 2000-12-28 2005-12-13 Intel Corporation System and method for protected messaging
US6839721B2 (en) 2001-01-12 2005-01-04 Hewlett-Packard Development Company, L.P. Integration of a database into file management software for protecting, tracking, and retrieving data
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US7030861B1 (en) 2001-02-10 2006-04-18 Wayne Carl Westerman System and method for packing multi-touch gestures onto a hand
US20040027398A1 (en) 2001-02-15 2004-02-12 Denny Jaeger Intuitive graphic user interface with universal tools
US6972776B2 (en) 2001-03-20 2005-12-06 Agilent Technologies, Inc. Scrolling method using screen pointing device
GB2373778B (en) 2001-03-30 2003-08-06 Robin Lewis Corner elements for packaging
US6741996B1 (en) 2001-04-18 2004-05-25 Microsoft Corporation Managing user clips
EP1393148B1 (en) 2001-05-02 2010-03-03 Bitstream Inc. Methods, systems, and programming for producing and displaying subpixel-optimized font bitmaps using non-linear color balancing
US20020194589A1 (en) 2001-05-08 2002-12-19 Cristofalo Michael Technique for optimizing the delivery of advertisements and other programming segments by making bandwidth tradeoffs
US7730401B2 (en) 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
US20050024341A1 (en) 2001-05-16 2005-02-03 Synaptics, Inc. Touch screen with user interface enhancement
US6498590B1 (en) 2001-05-24 2002-12-24 Mitsubishi Electric Research Laboratories, Inc. Multi-user touch surface
TW521205B (en) 2001-06-05 2003-02-21 Compal Electronics Inc Touch screen capable of controlling amplification with pressure
US6868383B1 (en) 2001-07-12 2005-03-15 At&T Corp. Systems and methods for extracting meaning from multimodal inputs using finite-state devices
US6985137B2 (en) 2001-08-13 2006-01-10 Nokia Mobile Phones Ltd. Method for preventing unintended touch pad input due to accidental touching
US6661409B2 (en) 2001-08-22 2003-12-09 Motorola, Inc. Automatically scrolling handwritten input user interface for personal digital assistants and the like
US6972749B2 (en) 2001-08-29 2005-12-06 Microsoft Corporation Touch-sensitive device for scrolling a document on a display
US6690365B2 (en) 2001-08-29 2004-02-10 Microsoft Corporation Automatic scrolling
US6907575B2 (en) 2001-09-06 2005-06-14 Danger, Inc. Method of scrolling a display window
JP2003173237A (ja) 2001-09-28 2003-06-20 Ricoh Co Ltd 情報入出力システム、プログラム及び記憶媒体
US7254775B2 (en) 2001-10-03 2007-08-07 3M Innovative Properties Company Touch panel system and method for distinguishing multiple touch inputs
US20030071850A1 (en) 2001-10-12 2003-04-17 Microsoft Corporation In-place adaptive handwriting input method and system
US7046230B2 (en) 2001-10-22 2006-05-16 Apple Computer, Inc. Touch pad handheld device
US7345671B2 (en) 2001-10-22 2008-03-18 Apple Inc. Method and apparatus for use of rotational user inputs
TW528981B (en) 2001-10-25 2003-04-21 Compal Electronics Inc Portable computer and related method for preventing input interruption by write-tracking input region
US7009599B2 (en) 2001-11-20 2006-03-07 Nokia Corporation Form factor for portable device
CA2366183A1 (en) 2001-12-21 2003-06-21 Ibm Canada Limited-Ibm Canada Limitee Dynamic status tree facility
US6690387B2 (en) 2001-12-28 2004-02-10 Koninklijke Philips Electronics N.V. Touch-screen image scrolling system and method
US7414616B2 (en) 2002-01-03 2008-08-19 Mahesh Jayachandra User-friendly Brahmi-derived Hindi keyboard
US6957392B2 (en) 2002-01-16 2005-10-18 Laszlo Systems, Inc. Interface engine providing a continuous user interface
GB0201074D0 (en) * 2002-01-18 2002-03-06 3G Lab Ltd Graphic user interface for data processing device
US7603627B2 (en) 2002-02-05 2009-10-13 Microsoft Corporation Systems and methods for creating and managing graphical user interface lists
JP3951727B2 (ja) 2002-02-06 2007-08-01 松下電器産業株式会社 情報処理装置
US7075512B1 (en) 2002-02-07 2006-07-11 Palmsource, Inc. Method and system for navigating a display screen for locating a desired item of information
AU2003220400A1 (en) 2002-03-19 2003-10-08 America Online, Inc. Controlling content display
US20030184525A1 (en) 2002-03-29 2003-10-02 Mitac International Corp. Method and apparatus for image processing
JP2003296024A (ja) 2002-04-01 2003-10-17 Nec Engineering Ltd タッチパネル制御方式
US7466307B2 (en) 2002-04-11 2008-12-16 Synaptics Incorporated Closed-loop sensor on a solid-state object position detector
US20030197689A1 (en) 2002-04-23 2003-10-23 May Gregory J. Input device that allows multiple touch key input
TWI238348B (en) 2002-05-13 2005-08-21 Kyocera Corp Portable information terminal, display control device, display control method, and recording media
US7203911B2 (en) 2002-05-13 2007-04-10 Microsoft Corporation Altering a display on a viewing device based upon a user proximity to the viewing device
US8166388B2 (en) 2002-05-14 2012-04-24 Microsoft Corporation Overlaying electronic ink
US20030214553A1 (en) 2002-05-14 2003-11-20 Microsoft Corporation Ink regions in an overlay control
US7158675B2 (en) 2002-05-14 2007-01-02 Microsoft Corporation Interfacing with ink
US20030214531A1 (en) 2002-05-14 2003-11-20 Microsoft Corporation Ink input mechanisms
CN1666169B (zh) 2002-05-16 2010-05-05 索尼株式会社 输入方法和输入装置
US7519918B2 (en) 2002-05-30 2009-04-14 Intel Corporation Mobile virtual desktop
FI20021655A (fi) 2002-06-19 2003-12-20 Nokia Corp Menetelmä lukituksen avaamiseksi ja kannettava elektroninen laite
US7062090B2 (en) 2002-06-28 2006-06-13 Microsoft Corporation Writing guide for a free-form document editor
US7023427B2 (en) 2002-06-28 2006-04-04 Microsoft Corporation Method and system for detecting multiple touches on a touch-sensitive screen
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
JP4338364B2 (ja) 2002-07-02 2009-10-07 ソニー株式会社 携帯情報通信端末、プログラムおよび該プログラムを記録した記録媒体
TW591488B (en) 2002-08-01 2004-06-11 Tatung Co Window scrolling method and device thereof
EP1394692A1 (en) 2002-08-05 2004-03-03 Alcatel Method, terminal, browser application, and mark-up language for multimodal interaction between a user and a terminal
US20040021698A1 (en) 2002-08-05 2004-02-05 Baldwin Amanda K. Intuitive touchscreen interface for a multifunction device and method therefor
US7263721B2 (en) 2002-08-09 2007-08-28 International Business Machines Corporation Password protection
JP2004084111A (ja) 2002-08-26 2004-03-18 Tsudakoma Corp 織機の情報表示装置
US7739604B1 (en) * 2002-09-25 2010-06-15 Apple Inc. Method and apparatus for managing windows
US7002560B2 (en) 2002-10-04 2006-02-21 Human Interface Technologies Inc. Method of combining data entry of handwritten symbols with displayed character data
GB0223883D0 (en) 2002-10-15 2002-11-20 Seamless Display Ltd Visual display screen arrangement
US7281248B2 (en) 2002-11-19 2007-10-09 Microsoft Corporation Virtualized and realized user interface controls
ATE332528T1 (de) 2002-11-20 2006-07-15 Nokia Corp Verfahren und benutzerschnittstelle zur zeicheneingabe
CA2414047A1 (en) 2002-12-09 2004-06-09 Corel Corporation System and method of extending scalable vector graphics capabilities
US6903927B2 (en) 2002-12-17 2005-06-07 Nokia Corporation Convertible mobile computing device
US20040125136A1 (en) 2002-12-30 2004-07-01 Jukka Wallenius Provision of services through a display system
US20040135817A1 (en) 2003-01-14 2004-07-15 Daughtery Joey L. Interface for selecting and performing operations on objects
US7117453B2 (en) 2003-01-21 2006-10-03 Microsoft Corporation Media frame object visualization system
US7490296B2 (en) 2003-01-31 2009-02-10 Microsoft Corporation Utility object for specialized data entry
US20040225965A1 (en) 2003-05-06 2004-11-11 Microsoft Corporation Insertion location tracking for controlling a user interface
US20040155888A1 (en) 2003-02-11 2004-08-12 Padgitt David Gary Method for displaying the contents of a collection of media objects
US20040160419A1 (en) 2003-02-11 2004-08-19 Terradigital Systems Llc. Method for entering alphanumeric characters into a graphical user interface
US7103852B2 (en) * 2003-03-10 2006-09-05 International Business Machines Corporation Dynamic resizing of clickable areas of touch screen applications
US7894177B2 (en) 2005-12-29 2011-02-22 Apple Inc. Light activated hold switch
US7088374B2 (en) 2003-03-27 2006-08-08 Microsoft Corporation System and method for managing visual structure, timing, and animation in a graphics processing system
US7187801B2 (en) 2003-03-31 2007-03-06 Microsoft Corporation Multiple handwriting recognition engine selection
KR100465969B1 (ko) 2003-04-11 2005-01-13 (주)모비솔 손가락 표면을 이용한 소형 포인팅 장치
US7098776B2 (en) 2003-04-16 2006-08-29 Massachusetts Institute Of Technology Methods and apparatus for vibrotactile communication
US8484576B2 (en) 2003-04-17 2013-07-09 Supersonic Aerospace International, Llc System and method for customizing multiple windows of information on a display
US7102626B2 (en) 2003-04-25 2006-09-05 Hewlett-Packard Development Company, L.P. Multi-function pointing device
US7627343B2 (en) 2003-04-25 2009-12-01 Apple Inc. Media player system
GB2401272B (en) 2003-04-30 2007-11-21 Hewlett Packard Development Co Method and apparatus for enhancing user interest in static digital images
US8555165B2 (en) 2003-05-08 2013-10-08 Hillcrest Laboratories, Inc. Methods and systems for generating a zoomable graphical user interface
US7173623B2 (en) 2003-05-09 2007-02-06 Microsoft Corporation System supporting animation of graphical display elements through animation object instances
US7738916B2 (en) 2003-05-21 2010-06-15 Hitachi High-Technologies Corporation Portable terminal device with built-in fingerprint sensor
JP2006527439A (ja) 2003-06-13 2006-11-30 ユニヴァーシティ オブ ランカスター ユーザインタフェース
US7567239B2 (en) 2003-06-26 2009-07-28 Motorola, Inc. Method and system for message and note composition on small screen devices
WO2005008444A2 (en) 2003-07-14 2005-01-27 Matt Pallakoff System and method for a portbale multimedia client
US20050027666A1 (en) 2003-07-15 2005-02-03 Vente, Inc Interactive online research system and method
JP2005056286A (ja) 2003-08-07 2005-03-03 Nec Engineering Ltd ウェブブラウザにおける拡大表示方法および拡大表示プログラム
CN100444154C (zh) 2003-08-21 2008-12-17 微软公司 使用空中点的聚焦管理
US9024884B2 (en) 2003-09-02 2015-05-05 Apple Inc. Touch-sensitive electronic apparatus for media applications, and methods therefor
US20050052427A1 (en) 2003-09-10 2005-03-10 Wu Michael Chi Hung Hand gesture interaction with touch surface
JP4360871B2 (ja) 2003-09-10 2009-11-11 富士通テン株式会社 情報端末における入力装置
US7411575B2 (en) 2003-09-16 2008-08-12 Smart Technologies Ulc Gesture recognition method and touch system incorporating the same
JP2005092476A (ja) 2003-09-17 2005-04-07 Elo Touchsystems Inc マルチユーザー/マルチポインチングデバイスグラフィカルユーザーインターフェースシステム
CN1860429A (zh) 2003-09-30 2006-11-08 皇家飞利浦电子股份有限公司 定义内容窗口在显示器上的位置、尺寸和/或内容的姿势
US7034834B2 (en) 2003-10-24 2006-04-25 Microsoft Corporation Communication protocol for synchronizing animation systems
US20050183035A1 (en) 2003-11-20 2005-08-18 Ringel Meredith J. Conflict resolution for graphic multi-user interface
US7962862B2 (en) * 2003-11-24 2011-06-14 International Business Machines Corporation Method and data processing system for providing an improved graphics design tool
US7298367B2 (en) 2003-11-25 2007-11-20 3M Innovative Properties Company Light emitting stylus and user input device using same
US7814419B2 (en) 2003-11-26 2010-10-12 Nokia Corporation Changing an orientation of a user interface via a course of motion
JP3962718B2 (ja) 2003-12-01 2007-08-22 キヤノン株式会社 情報処理装置及びその制御方法、プログラム
US7337412B2 (en) 2003-12-15 2008-02-26 International Business Machines Corporation Methods, systems and computer program products for providing multi-dimensional tree diagram graphical user interfaces
US20050162402A1 (en) 2004-01-27 2005-07-28 Watanachote Susornpol J. Methods of interacting with a computer using a finger(s) touch sensing input device with visual feedback
US7366995B2 (en) 2004-02-03 2008-04-29 Roland Wescott Montague Combination tool that zooms in, zooms out, pans, rotates, draws, or manipulates during a drag
FI117308B (fi) 2004-02-06 2006-08-31 Nokia Corp Eleohjausjärjestelmä
US7319457B2 (en) 2004-02-12 2008-01-15 Sentelic Corporation Method of scrolling window screen by means of controlling electronic device
US7358965B2 (en) 2004-02-18 2008-04-15 Microsoft Corporation Tapping to create writing
US20050193015A1 (en) 2004-02-19 2005-09-01 Sandraic Logic, Llc A California Limited Liability Company Method and apparatus for organizing, sorting and navigating multimedia content
GB2411331A (en) 2004-02-19 2005-08-24 Trigenix Ltd Rendering user interface using actor attributes
FR2866726B1 (fr) 2004-02-23 2006-05-26 Jazzmutant Controleur par manipulation d'objets virtuels sur un ecran tactile multi-contact
US7406696B2 (en) 2004-02-24 2008-07-29 Dialogic Corporation System and method for providing user input information to multiple independent, concurrent applications
JP4438448B2 (ja) 2004-02-26 2010-03-24 セイコーエプソン株式会社 構造化文書表示処理装置、構造化文書表示方法、構造化文書表示プログラム
US7327349B2 (en) 2004-03-02 2008-02-05 Microsoft Corporation Advanced navigation techniques for portable devices
JP2005275652A (ja) 2004-03-24 2005-10-06 Canon Inc 入力軌跡処理装置および入力軌跡処理方法
EP1735733A1 (en) 2004-04-02 2006-12-27 Nokia Corporation Apparatus and method for handwriting recognition
US7623119B2 (en) 2004-04-21 2009-11-24 Nokia Corporation Graphical functions by gestures
EP1625513B1 (en) 2004-04-30 2018-04-18 Microsoft Technology Licensing, LLC Rules framework for definition and execution of end-user rules logic
JP4387242B2 (ja) 2004-05-10 2009-12-16 株式会社バンダイナムコゲームス プログラム、情報記憶媒体及びゲーム装置
US7624355B2 (en) 2004-05-27 2009-11-24 Baneth Robin C System and method for controlling a user interface
JP4855654B2 (ja) 2004-05-31 2012-01-18 ソニー株式会社 車載装置、車載装置の情報提供方法、車載装置の情報提供方法のプログラム及び車載装置の情報提供方法のプログラムを記録した記録媒体
US7358962B2 (en) 2004-06-15 2008-04-15 Microsoft Corporation Manipulating association of data with a physical object
US7773950B2 (en) 2004-06-16 2010-08-10 Telefonaktiebolaget Lm Ericsson (Publ) Benign interference suppression for received signal quality estimation
KR101146750B1 (ko) 2004-06-17 2012-05-17 아드레아 엘엘씨 터치 스크린 상에서 2개-손가락에 의한 입력을 탐지하는 시스템 및 방법과, 터치 스크린 상에서 적어도 2개의 손가락을 통한 3-차원 터치를 센싱하는 시스템 및 방법
US7519223B2 (en) 2004-06-28 2009-04-14 Microsoft Corporation Recognizing gestures and using gestures for interacting with software applications
EP1763732A2 (en) 2004-06-29 2007-03-21 Koninklijke Philips Electronics N.V. Discontinuous zoom
US7786980B2 (en) 2004-06-29 2010-08-31 Koninklijke Philips Electronics N.V. Method and device for preventing staining of a display device
JP4903371B2 (ja) 2004-07-29 2012-03-28 任天堂株式会社 タッチパネルを用いたゲーム装置およびゲームプログラム
EP1774427A2 (en) 2004-07-30 2007-04-18 Apple Computer, Inc. Mode-based graphical user interfaces for touch sensitive input devices
US7506799B2 (en) 2004-07-30 2009-03-24 Nokia Corporation Method for the monitoring of system security in electronic devices
EP1774429B1 (en) 2004-07-30 2018-06-06 Apple Inc. Gestures for touch sensitive input devices
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
US7719523B2 (en) 2004-08-06 2010-05-18 Touchtable, Inc. Bounding box gesture recognition on a touch detecting interactive display
US20070046643A1 (en) 2004-08-06 2007-03-01 Hillis W Daniel State-Based Approach to Gesture Identification
US7724242B2 (en) 2004-08-06 2010-05-25 Touchtable, Inc. Touch driven method and apparatus to integrate and display multiple image layers forming alternate depictions of same subject matter
US7728821B2 (en) 2004-08-06 2010-06-01 Touchtable, Inc. Touch detecting interactive display
US7721197B2 (en) 2004-08-12 2010-05-18 Microsoft Corporation System and method of displaying content on small screen computing devices
US7181373B2 (en) 2004-08-13 2007-02-20 Agilent Technologies, Inc. System and methods for navigating and visualizing multi-dimensional biological data
US7434173B2 (en) 2004-08-30 2008-10-07 Microsoft Corporation Scrolling web pages using direct interaction
JP4366695B2 (ja) * 2004-09-13 2009-11-18 日本ビクター株式会社 メニュー画像表示方法及び電子情報機器
US7761814B2 (en) 2004-09-13 2010-07-20 Microsoft Corporation Flick gesture
US20060055669A1 (en) 2004-09-13 2006-03-16 Mita Das Fluent user interface for text entry on touch-sensitive display
JP4355639B2 (ja) 2004-09-15 2009-11-04 キヤノン株式会社 画像処理装置およびその制御方法
US7728823B2 (en) 2004-09-24 2010-06-01 Apple Inc. System and method for processing raw data of track pad device
JP3786669B2 (ja) 2004-10-06 2006-06-14 株式会社バンダイナムコゲームス ゲームシステム、プログラム及び情報記憶媒体
US20060077183A1 (en) 2004-10-08 2006-04-13 Studt Peter C Methods and systems for converting touchscreen events into application formatted data
WO2006045530A2 (en) 2004-10-22 2006-05-04 Novo Nordisk A/S An apparatus and a method of providing information to a user
JP3770499B1 (ja) 2004-11-02 2006-04-26 任天堂株式会社 ゲーム装置及びゲームプログラム
US7925996B2 (en) 2004-11-18 2011-04-12 Microsoft Corporation Method and system for providing multiple input connecting user interface
US7665031B2 (en) 2004-12-08 2010-02-16 Microsoft Corporation Method and system of taskbar button interfaces
US20060136833A1 (en) 2004-12-15 2006-06-22 International Business Machines Corporation Apparatus and method for chaining objects in a pointer drag path
WO2006067711A2 (en) 2004-12-21 2006-06-29 Koninklijke Philips Electronics N.V. Method and device for displaying animated buttons
CN100377055C (zh) 2004-12-22 2008-03-26 盛群半导体股份有限公司 触控感应装置的判读方法
WO2006073272A1 (en) 2005-01-05 2006-07-13 Jaewoo Ahn Method and apparatus for inputting character through pointing device
US20060176403A1 (en) 2005-01-05 2006-08-10 Hillcrest Laboratories, Inc. Distributed software construction for user interfaces
US20060156249A1 (en) 2005-01-12 2006-07-13 Blythe Michael M Rotate a user interface
US20070185876A1 (en) 2005-02-07 2007-08-09 Mendis Venura C Data handling system
GB0503253D0 (en) 2005-02-17 2005-03-23 Univ Northumbria Newcastle User control of a hand-held device
US8819569B2 (en) 2005-02-18 2014-08-26 Zumobi, Inc Single-handed approach for navigation of application tiles using panning and zooming
JP4613078B2 (ja) 2005-03-01 2011-01-12 学校法人 名城大学 半導体基板の製造方法
KR102305019B1 (ko) 2005-03-04 2021-09-27 애플 인크. 다기능 휴대용 장치
CN1841284A (zh) 2005-03-28 2006-10-04 上海桐港信息科技有限公司 触摸屏式移动设备微浏览器页面显示漂移方法
US20060221061A1 (en) 2005-03-31 2006-10-05 Tyco Electronic Corporation Touch sensor and control with random pulse spacing
US7750893B2 (en) 2005-04-06 2010-07-06 Nintendo Co., Ltd. Storage medium storing input position processing program, and input position processing device
CN1845046A (zh) 2005-04-07 2006-10-11 技嘉科技股份有限公司 具有触控式功能键的键盘和鼠标
US7355595B2 (en) 2005-04-15 2008-04-08 Microsoft Corporation Tactile device for scrolling
US7673255B2 (en) 2005-04-22 2010-03-02 Microsoft Corporation Interface and system for manipulating thumbnails of live windows in a window manager
US7692637B2 (en) 2005-04-26 2010-04-06 Nokia Corporation User input device for electronic device
US7499027B2 (en) 2005-04-29 2009-03-03 Microsoft Corporation Using a light pointer for input on an interactive display surface
JP4490326B2 (ja) 2005-05-09 2010-06-23 株式会社土井製作所 地中埋設ケーブル等に対する地盤変動時の保護方法及びその保護装置
DE112006001209T5 (de) 2005-05-16 2008-04-30 General Motors Global Technology Operations, Inc., Detroit Katalysator für Brennstoffzellenelektrode
US8117540B2 (en) 2005-05-18 2012-02-14 Neuer Wall Treuhand Gmbh Method and device incorporating improved text input mechanism
US20060262104A1 (en) 2005-05-19 2006-11-23 Sullivan Darius M Systems and methods for distinguishing contact-induced plate vibrations from acoustic noise-induced plate vibrations
US9785329B2 (en) 2005-05-23 2017-10-10 Nokia Technologies Oy Pocket computer and associated methods
US20070024646A1 (en) 2005-05-23 2007-02-01 Kalle Saarinen Portable electronic apparatus and associated method
US7487447B1 (en) 2005-05-25 2009-02-03 Google Inc. Web page zoom feature
US20060271520A1 (en) 2005-05-27 2006-11-30 Ragan Gene Z Content-based implicit search query
US7561159B2 (en) 2005-05-31 2009-07-14 Magnifi Group Inc. Control of animation timeline
US20090049388A1 (en) 2005-06-02 2009-02-19 Ronnie Bernard Francis Taib Multimodal computer navigation
US7710397B2 (en) 2005-06-03 2010-05-04 Apple Inc. Mouse with improved input mechanisms using touch sensors
US9019209B2 (en) 2005-06-08 2015-04-28 3M Innovative Properties Company Touch location determination involving multiple touch location processes
JP4849300B2 (ja) 2005-06-14 2012-01-11 ソニー株式会社 表示信号処理装置および方法、記録媒体、並びにプログラム
KR20060133389A (ko) 2005-06-20 2006-12-26 엘지전자 주식회사 이동 단말기의 데이터 처리 장치 및 그 방법
TW200701082A (en) 2005-06-23 2007-01-01 Elan Microelectronics Corp Scroll control method used in the touch panel
US20070006078A1 (en) 2005-07-01 2007-01-04 Microsoft Corporation Declaratively responding to state changes in an interactive multimedia environment
US7463263B2 (en) 2005-07-15 2008-12-09 Sap Portals Israel Ltd. Declarative specification of model visualizations
CN101228570B (zh) 2005-07-22 2010-05-19 马特·帕尔拉科夫 可用拇指操作的触摸屏用户界面的系统和方法
US7808478B2 (en) 2005-08-22 2010-10-05 Samsung Electronics Co., Ltd. Autonomous handheld device having a drawing tool
EP1758345B1 (en) 2005-08-26 2016-12-28 Microsoft Technology Licensing, LLC Mobile telecommunication handset having touch pad
US7568035B2 (en) 2005-08-30 2009-07-28 Microsoft Corporation Command binding determination and implementation
US20070061126A1 (en) 2005-09-01 2007-03-15 Anthony Russo System for and method of emulating electronic input devices
JP2009523267A (ja) 2005-09-15 2009-06-18 アップル インコーポレイテッド トラックパッドデバイスの未加工データを処理するシステム及び方法
US20070152980A1 (en) 2006-01-05 2007-07-05 Kenneth Kocienda Touch Screen Keyboards for Portable Electronic Devices
US7694231B2 (en) 2006-01-05 2010-04-06 Apple Inc. Keyboards for portable electronic devices
US20070064004A1 (en) 2005-09-21 2007-03-22 Hewlett-Packard Development Company, L.P. Moving a graphic element
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
CN1949161B (zh) 2005-10-14 2010-05-26 鸿富锦精密工业(深圳)有限公司 多层次菜单显示装置及显示控制方法
KR100717047B1 (ko) 2005-10-20 2007-05-10 삼성전자주식회사 간편하게 웹 페이지를 표시하는 방법 및 장치
US20070109275A1 (en) 2005-11-16 2007-05-17 Chen-Ting Chuang Method for controlling a touch screen user interface and device thereof
JP2007148927A (ja) 2005-11-29 2007-06-14 Alps Electric Co Ltd 入力装置及びこれを用いたスクロール制御方法
US9069877B2 (en) 2005-12-07 2015-06-30 Ziilabs Inc., Ltd. User interface with variable sized icons
JP4908518B2 (ja) 2005-12-08 2012-04-04 ノキア コーポレイション 電子デバイスの改善された文章入力
US20070132789A1 (en) 2005-12-08 2007-06-14 Bas Ording List scrolling in response to moving contact over list of index symbols
US7786975B2 (en) 2005-12-23 2010-08-31 Apple Inc. Continuous scrolling list with acceleration
US7480870B2 (en) 2005-12-23 2009-01-20 Apple Inc. Indication of progress towards satisfaction of a user input condition
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US7650137B2 (en) 2005-12-23 2010-01-19 Apple Inc. Account information display for portable communication device
US7509588B2 (en) 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
US20070152983A1 (en) 2005-12-30 2007-07-05 Apple Computer, Inc. Touch pad with symbols based on mode
JP2009522669A (ja) 2005-12-30 2009-06-11 アップル インコーポレイテッド マルチタッチ入力を備えた携帯電子装置
US8018440B2 (en) 2005-12-30 2011-09-13 Microsoft Corporation Unintentional touch rejection
US7574672B2 (en) 2006-01-05 2009-08-11 Apple Inc. Text entry interface for a portable communication device
US7860536B2 (en) 2006-01-05 2010-12-28 Apple Inc. Telephone interface for a portable communication device
WO2007084852A2 (en) 2006-01-18 2007-07-26 Roxse, Llc Systems and methods for providing sorted search results
US20070176903A1 (en) 2006-01-31 2007-08-02 Dahlin Jeffrey J Capacitive touch sensor button activation
US8312479B2 (en) 2006-03-08 2012-11-13 Navisense Application programming interface (API) for sensory events
US20070214436A1 (en) * 2006-03-13 2007-09-13 Myers Raymond L Jr Positional navigation graphic link system
US7620901B2 (en) 2006-03-21 2009-11-17 Microsoft Corporation Simultaneous input across multiple applications
US8866750B2 (en) 2006-04-10 2014-10-21 Microsoft Corporation Universal user interface device
US8587526B2 (en) 2006-04-12 2013-11-19 N-Trig Ltd. Gesture recognition feedback for a dual mode digitizer
US20070242607A1 (en) 2006-04-13 2007-10-18 Tellabs Operations, Inc. Method and system for controlling distribution of network topology information
KR20070113025A (ko) 2006-05-24 2007-11-28 엘지전자 주식회사 터치스크린 장치 및 이의 작동방법
US8077153B2 (en) 2006-04-19 2011-12-13 Microsoft Corporation Precise selection techniques for multi-touch screens
TWI328185B (en) 2006-04-19 2010-08-01 Lg Electronics Inc Touch screen device for potable terminal and method of displaying and selecting menus thereon
US9063647B2 (en) 2006-05-12 2015-06-23 Microsoft Technology Licensing, Llc Multi-touch uses, gestures, and implementation
US8775820B1 (en) 2006-06-02 2014-07-08 Sprint Communications Company L.P. System and method of enterprise administrative password generation and control
US7844661B2 (en) 2006-06-15 2010-11-30 Microsoft Corporation Composition of local media playback with remotely generated user interface
KR101277256B1 (ko) 2006-06-16 2013-07-05 삼성전자주식회사 사용자 인터페이스를 위한 장치 및 방법
US8169421B2 (en) 2006-06-19 2012-05-01 Cypress Semiconductor Corporation Apparatus and method for detecting a touch-sensor pad gesture
GB0612624D0 (en) 2006-06-26 2006-08-02 Symbian Software Ltd Speed of gesture
US8269725B2 (en) 2006-06-28 2012-09-18 Microsoft Corporation Input simulation system for touch based devices
US8086971B2 (en) 2006-06-28 2011-12-27 Nokia Corporation Apparatus, methods and computer program products providing finger-based and hand-based gesture commands for portable electronic device applications
RU2008149112A (ru) 2006-06-30 2010-06-20 Теле Атлас Норт Америка, Инк. (Us) Способ и система для сбора пользовательских запросов на обновление относительно географических данных для поддержки автоматизированного анализа, обработки и обновлений географических данных
WO2008007372A2 (en) 2006-07-12 2008-01-17 N-Trig Ltd. Hover and touch detection for a digitizer
JP4762070B2 (ja) 2006-07-19 2011-08-31 富士通株式会社 手書き入力装置、手書き入力方法、及びコンピュータプログラム
JP4280759B2 (ja) 2006-07-27 2009-06-17 キヤノン株式会社 情報処理装置およびユーザインタフェース制御方法
JP4514830B2 (ja) 2006-08-15 2010-07-28 エヌ−トリグ リミテッド デジタイザのためのジェスチャ検出
US20080043020A1 (en) 2006-08-18 2008-02-21 Microsoft Corporation User interface for viewing street side imagery
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US8253695B2 (en) 2006-09-06 2012-08-28 Apple Inc. Email client for a portable multifunction device
US7941760B2 (en) 2006-09-06 2011-05-10 Apple Inc. Soft keyboard display for a portable multifunction device
US8056007B2 (en) 2006-11-15 2011-11-08 Yahoo! Inc. System and method for recognizing and storing information and associated context
US20080114614A1 (en) 2006-11-15 2008-05-15 General Electric Company Methods and systems for healthcare application interaction using gesture-based interaction enhanced with pressure sensitivity
US7694240B2 (en) 2006-11-22 2010-04-06 General Electric Company Methods and systems for creation of hanging protocols using graffiti-enabled devices
JP5191119B2 (ja) 2006-12-06 2013-04-24 株式会社ジャパンディスプレイウェスト 表示装置、表示装置の制御方法、及びプログラム
CN101206659B (zh) 2006-12-15 2013-09-18 谷歌股份有限公司 自动搜索查询校正
TW200828089A (en) 2006-12-29 2008-07-01 Inventec Appliances Corp Method for zooming image
US7777732B2 (en) 2007-01-03 2010-08-17 Apple Inc. Multi-event input system
US8489783B2 (en) 2007-01-03 2013-07-16 Apple Inc. Multi buffer asynchronous scheme for processing incoming information
US7924271B2 (en) 2007-01-05 2011-04-12 Apple Inc. Detecting gestures on multi-event sensitive devices
US7956847B2 (en) 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US7907125B2 (en) 2007-01-05 2011-03-15 Microsoft Corporation Recognizing multiple input point gestures
US8656295B2 (en) 2007-01-05 2014-02-18 Apple Inc. Selecting and manipulating web content
US8214768B2 (en) 2007-01-05 2012-07-03 Apple Inc. Method, system, and graphical user interface for viewing multiple application windows
US20080168395A1 (en) 2007-01-07 2008-07-10 Bas Ording Positioning a Slider Icon on a Portable Multifunction Device
US7872652B2 (en) 2007-01-07 2011-01-18 Apple Inc. Application programming interfaces for synchronization
US20080168478A1 (en) 2007-01-07 2008-07-10 Andrew Platzer Application Programming Interfaces for Scrolling
US7903115B2 (en) 2007-01-07 2011-03-08 Apple Inc. Animations
US8091045B2 (en) 2007-01-07 2012-01-03 Apple Inc. System and method for managing lists
US7844915B2 (en) 2007-01-07 2010-11-30 Apple Inc. Application programming interfaces for scrolling operations
US7671756B2 (en) 2007-01-07 2010-03-02 Apple Inc. Portable electronic device with alert silencing
US7966578B2 (en) 2007-01-07 2011-06-21 Apple Inc. Portable multifunction device, method, and graphical user interface for translating displayed content
US20080168402A1 (en) 2007-01-07 2008-07-10 Christopher Blumenberg Application Programming Interfaces for Gesture Operations
US8656311B1 (en) 2007-01-07 2014-02-18 Apple Inc. Method and apparatus for compositing various types of content
US8519963B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture on a touch screen display
US7912700B2 (en) 2007-02-08 2011-03-22 Microsoft Corporation Context based word prediction
JP4866262B2 (ja) 2007-02-16 2012-02-01 ソフトバンクモバイル株式会社 操作入力処理方法及び携帯型情報処理装置
JP4793287B2 (ja) 2007-02-28 2011-10-12 ブラザー工業株式会社 通信装置および通信システム
KR101383709B1 (ko) 2007-03-07 2014-04-09 삼성디스플레이 주식회사 표시 장치 및 그의 구동 방법
JP4888165B2 (ja) * 2007-03-12 2012-02-29 富士ゼロックス株式会社 画像処理装置及びプログラム
EP1970799B1 (en) 2007-03-15 2017-08-16 LG Electronics Inc. Electronic device and method of controlling mode thereof and mobile communication terminal
US8436815B2 (en) 2007-05-25 2013-05-07 Microsoft Corporation Selective enabling of multi-input controls
JP5117121B2 (ja) 2007-06-18 2013-01-09 パイオニア株式会社 Av機器の操作制御システム
US8350815B2 (en) 2007-06-20 2013-01-08 Sony Mobile Communications Portable communication device including touch input with scrolling function
US8059101B2 (en) 2007-06-22 2011-11-15 Apple Inc. Swipe gestures for touch screen keyboards
US8171432B2 (en) 2008-01-06 2012-05-01 Apple Inc. Touch screen device, method, and graphical user interface for displaying and selecting application options
US8181122B2 (en) 2007-07-30 2012-05-15 Perceptive Pixel Inc. Graphical user interface for large-scale, multi-user, multi-touch systems
JP5192486B2 (ja) * 2007-07-30 2013-05-08 京セラ株式会社 入力装置
US8471823B2 (en) 2007-08-16 2013-06-25 Sony Corporation Systems and methods for providing a user interface
US20090051671A1 (en) 2007-08-22 2009-02-26 Jason Antony Konstas Recognizing the motion of two or more touches on a touch-sensing surface
US7949516B2 (en) 2007-08-31 2011-05-24 Research In Motion Limited Handheld electronic device and method employing logical proximity of characters in spell checking
KR101348721B1 (ko) 2007-09-03 2014-01-08 엘지전자 주식회사 휴대 단말기 및 그 휴대 단말기의 터치 인식 방법
KR20090024541A (ko) * 2007-09-04 2009-03-09 삼성전자주식회사 하이퍼링크 선택 방법 및 이를 이용하는 이동통신 단말기
US8667412B2 (en) 2007-09-06 2014-03-04 Google Inc. Dynamic virtual input device configuration
US20110047459A1 (en) 2007-10-08 2011-02-24 Willem Morkel Van Der Westhuizen User interface
US7917584B2 (en) 2007-10-22 2011-03-29 Xcerion Aktiebolag Gesture-based collaboration
JP2009110286A (ja) 2007-10-30 2009-05-21 Toshiba Corp 情報処理装置、ランチャー起動制御プログラムおよびランチャー起動制御方法
AU2008323700B2 (en) 2007-11-09 2014-01-16 Wms Gaming, Inc. Interface for wagering game environments
JP2009189646A (ja) * 2008-02-15 2009-08-27 Konami Digital Entertainment Co Ltd ゲームプログラム、ゲーム装置、およびゲーム制御方法
JP2009169825A (ja) 2008-01-18 2009-07-30 Kyocera Mita Corp 表示入力装置、電子機器及び表示入力制御プログラム
US20090207140A1 (en) 2008-02-19 2009-08-20 Sony Ericsson Mobile Communications Ab Identifying and responding to multiple time-overlapping touches on a touch panel
TWI352924B (en) 2008-02-21 2011-11-21 Wintek Corp Touch panel and driving method of touch panel
US8717305B2 (en) 2008-03-04 2014-05-06 Apple Inc. Touch event model for web pages
US8174502B2 (en) 2008-03-04 2012-05-08 Apple Inc. Touch event processing for web pages
US8289283B2 (en) 2008-03-04 2012-10-16 Apple Inc. Language input interface on a device
US8645827B2 (en) 2008-03-04 2014-02-04 Apple Inc. Touch event model
US8416196B2 (en) 2008-03-04 2013-04-09 Apple Inc. Touch event model programming interface
US8352877B2 (en) 2008-03-06 2013-01-08 Microsoft Corporation Adjustment of range of content displayed on graphical user interface
US20090231281A1 (en) 2008-03-11 2009-09-17 Microsoft Corporation Multi-touch virtual keyboard
US8289289B2 (en) 2008-04-03 2012-10-16 N-trig, Ltd. Multi-touch and single touch detection
KR101513024B1 (ko) 2008-04-22 2015-04-17 엘지전자 주식회사 단말기 및 이것의 이미지 인식 방법
US8526767B2 (en) 2008-05-01 2013-09-03 Atmel Corporation Gesture recognition
US20100177053A2 (en) 2008-05-09 2010-07-15 Taizo Yasutake Method and apparatus for control of multiple degrees of freedom of a display
US20090282332A1 (en) 2008-05-12 2009-11-12 Nokia Corporation Apparatus, method and computer program product for selecting multiple items using multi-touch
US9268483B2 (en) 2008-05-16 2016-02-23 Microsoft Technology Licensing, Llc Multi-touch input platform
WO2009155092A2 (en) 2008-05-29 2009-12-23 Telcordia Technologies, Inc. Method and system for multi-touch-based browsing of media summarizations on a handheld device
US20090309847A1 (en) 2008-06-12 2009-12-17 You I Labs, Inc. Apparatus and method for providing multi-touch interface capability
US7864037B2 (en) 2008-06-16 2011-01-04 International Business Machines Corporation Pattern-driven communication architecture
US20090322699A1 (en) 2008-06-25 2009-12-31 Sony Ericsson Mobile Communications Ab Multiple input detection for resistive touch panel
US8754855B2 (en) 2008-06-27 2014-06-17 Microsoft Corporation Virtual touchpad
US20090322700A1 (en) 2008-06-30 2009-12-31 Tyco Electronics Corporation Method and apparatus for detecting two simultaneous touches and gestures on a resistive touchscreen
JP2010015238A (ja) 2008-07-01 2010-01-21 Sony Corp 情報処理装置、及び補助情報の表示方法
US8154428B2 (en) 2008-07-15 2012-04-10 International Business Machines Corporation Gesture recognition control of electronic devices using a multi-touch device
US8237807B2 (en) 2008-07-24 2012-08-07 Apple Inc. Image capturing device with touch screen for adjusting camera settings
US8390577B2 (en) 2008-07-25 2013-03-05 Intuilab Continuous recognition of multi-touch gestures
KR101482120B1 (ko) 2008-08-01 2015-01-21 엘지전자 주식회사 스케줄 관리가 가능한 휴대 단말기 및 그 제어방법
CN101339453B (zh) 2008-08-15 2012-05-23 广东威创视讯科技股份有限公司 基于交互式输入设备的模拟鼠标输入方法
US8135171B2 (en) 2008-08-19 2012-03-13 Au Optronics Corp. Multipoint tracking method and related device
CN101661361A (zh) 2008-08-27 2010-03-03 比亚迪股份有限公司 多点触摸检测系统
US8279241B2 (en) * 2008-09-09 2012-10-02 Microsoft Corporation Zooming graphical user interface
US20100088628A1 (en) 2008-10-07 2010-04-08 Sony Ericsson Mobile Communications Ab Live preview of open windows
US20100107116A1 (en) 2008-10-27 2010-04-29 Nokia Corporation Input on touch user interfaces
JP4853507B2 (ja) 2008-10-30 2012-01-11 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US8732576B2 (en) 2008-12-04 2014-05-20 Nvidia Corporation Operating system providing multi-touch support for applications in a mobile device
TW201023018A (en) 2008-12-12 2010-06-16 Asustek Comp Inc Touch panel with multi-touch function and multi-touch detecting method thereof
US8217909B2 (en) 2008-12-19 2012-07-10 Cypress Semiconductor Corporation Multi-finger sub-gesture reporting for a user interface device
US8869070B2 (en) 2008-12-30 2014-10-21 T-Mobile Usa, Inc. Handwriting manipulation for conducting a search over multiple databases
KR101521932B1 (ko) 2009-01-19 2015-05-20 엘지전자 주식회사 단말기 및 그 제어 방법
CN102317949A (zh) 2009-02-10 2012-01-11 夏普株式会社 认证设备、认证方法以及用于使计算机执行认证方法的程序
US9684521B2 (en) 2010-01-26 2017-06-20 Apple Inc. Systems having discrete and continuous gesture recognizers
US9311112B2 (en) 2009-03-16 2016-04-12 Apple Inc. Event recognition
US8285499B2 (en) 2009-03-16 2012-10-09 Apple Inc. Event recognition
US8566045B2 (en) 2009-03-16 2013-10-22 Apple Inc. Event recognition
US8566044B2 (en) 2009-03-16 2013-10-22 Apple Inc. Event recognition
KR101510484B1 (ko) 2009-03-31 2015-04-08 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
US20100281435A1 (en) 2009-04-30 2010-11-04 At&T Intellectual Property I, L.P. System and method for multimodal interaction using robust gesture processing
US8427440B2 (en) 2009-05-05 2013-04-23 Microsoft Corporation Contact grouping and gesture recognition for surface computing
US10705692B2 (en) 2009-05-21 2020-07-07 Sony Interactive Entertainment Inc. Continuous and dynamic scene decomposition for user interface
US8681106B2 (en) 2009-06-07 2014-03-25 Apple Inc. Devices, methods, and graphical user interfaces for accessibility using a touch-sensitive surface
US20110069021A1 (en) 2009-06-12 2011-03-24 Hill Jared C Reducing false touchpad data by ignoring input when area gesture does not behave as predicted
DE102009024656A1 (de) * 2009-06-12 2011-03-24 Volkswagen Ag Verfahren zum Steuern einer grafischen Benutzerschnittstelle und Bedienvorrichtung für eine grafische Benutzerschnittstelle
KR101608532B1 (ko) 2009-08-11 2016-04-01 엘지전자 주식회사 이동 통신 단말기에서의 데이터 표시방법 및 이를 적용한 이동 통신 단말기
US8310459B2 (en) 2009-09-23 2012-11-13 Nokia Corporation Touch detection
US9223590B2 (en) 2010-01-06 2015-12-29 Apple Inc. System and method for issuing commands to applications based on contextual information
TWI400638B (zh) 2009-10-20 2013-07-01 Acer Inc 觸控顯示裝置、觸控顯示系統及其調整觸控區域之方法
KR20110047349A (ko) 2009-10-30 2011-05-09 주식회사 팬택 휴대용 단말기에서 터치와 가압을 이용하는 사용자 인터페이스 장치 및 방법
US8957918B2 (en) 2009-11-03 2015-02-17 Qualcomm Incorporated Methods for implementing multi-touch gestures on a single-touch touch surface
US8390600B2 (en) 2009-11-13 2013-03-05 Microsoft Corporation Interactive display system with contact geometry interface
US8436821B1 (en) 2009-11-20 2013-05-07 Adobe Systems Incorporated System and method for developing and classifying touch gestures
US20100085323A1 (en) 2009-12-04 2010-04-08 Adam Bogue Segmenting a Multi-Touch Input Region by User
US8432368B2 (en) 2010-01-06 2013-04-30 Qualcomm Incorporated User interface methods and systems for providing force-sensitive input
US8140570B2 (en) 2010-03-11 2012-03-20 Apple Inc. Automatic discovery of metadata
US8296332B2 (en) 2010-04-01 2012-10-23 Apple Inc. Visual manipulation of database schema
KR20110110940A (ko) 2010-04-02 2011-10-10 삼성전자주식회사 휴대용 단말기의 터치 입력 장치 및 방법
US8839122B2 (en) 2010-04-07 2014-09-16 Apple Inc. Device, method, and graphical user interface for navigation of multiple applications
US20110252376A1 (en) 2010-04-07 2011-10-13 Imran Chaudhri Device, Method, and Graphical User Interface for Managing Concurrently Open Software Applications
US8131898B2 (en) 2010-05-27 2012-03-06 Adobe Systems Incorporated Event handling in an integrated execution environment
EP2390766B1 (en) 2010-05-28 2013-09-25 BlackBerry Limited Electronic device including touch-sensitive display and method of controlling same
US8669946B2 (en) 2010-05-28 2014-03-11 Blackberry Limited Electronic device including touch-sensitive display and method of controlling same
US20130120280A1 (en) 2010-05-28 2013-05-16 Tim Kukulski System and Method for Evaluating Interoperability of Gesture Recognizers
CN102262890A (zh) 2010-05-31 2011-11-30 鸿富锦精密工业(深圳)有限公司 电子装置及其标记方法
US8836643B2 (en) 2010-06-10 2014-09-16 Qualcomm Incorporated Auto-morphing adaptive user interface device and methods
US10216408B2 (en) 2010-06-14 2019-02-26 Apple Inc. Devices and methods for identifying user interface objects based on view hierarchy
JP5663980B2 (ja) 2010-06-29 2015-02-04 ブラザー工業株式会社 画像処理装置
TWI407346B (zh) 2010-07-30 2013-09-01 Ind Tech Res Inst 觸控輸入裝置之軌跡補償方法與系統,及其電腦程式產品
KR20120024247A (ko) 2010-09-06 2012-03-14 삼성전자주식회사 사용자의 제스처를 인식하여 이동 장치를 동작하는 방법 및 그 이동 장치
US20120133579A1 (en) 2010-11-30 2012-05-31 Microsoft Corporation Gesture recognition management
CN102768608B (zh) 2010-12-20 2016-05-04 苹果公司 事件识别
US8438473B2 (en) 2011-01-05 2013-05-07 Research In Motion Limited Handling of touch events in a browser environment
US20120242584A1 (en) 2011-03-22 2012-09-27 Nokia Corporation Method and apparatus for providing sight independent activity reports responsive to a touch gesture
US9298363B2 (en) 2011-04-11 2016-03-29 Apple Inc. Region activation for touch sensitive surface
AU2011202182B1 (en) 2011-05-11 2011-10-13 Frequency Ip Holdings, Llc Creation and presentation of selective digital content feeds
TWI467463B (zh) 2011-05-27 2015-01-01 Asustek Comp Inc 具觸控式螢幕的電腦系統及其手勢的處理方法
US9389679B2 (en) 2011-11-30 2016-07-12 Microsoft Technology Licensing, Llc Application programming interface for a multi-pointer indirect touch input device
US9071970B2 (en) 2011-12-05 2015-06-30 Sony Corporation Terminal device
US9046958B2 (en) 2012-03-15 2015-06-02 Nokia Technologies Oy Method, apparatus and computer program product for user input interpretation and input error mitigation
US9733716B2 (en) 2013-06-09 2017-08-15 Apple Inc. Proxy gesture recognizer
US9430142B2 (en) 2014-07-17 2016-08-30 Facebook, Inc. Touch-based gesture recognition and application navigation

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050017957A1 (en) * 2003-07-25 2005-01-27 Samsung Electronics Co., Ltd. Touch screen system and control method therefor capable of setting active regions
WO2008030879A2 (en) * 2006-09-06 2008-03-13 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
WO2008030880A1 (en) * 2006-09-06 2008-03-13 Apple Inc. Methods for determining a cursor position from a finger contact with a touch screen display
CN101356492A (zh) * 2006-09-06 2009-01-28 苹果公司 对于不同姿势进行类似操作的可携带电子装置
CN101529368A (zh) * 2006-09-06 2009-09-09 苹果公司 用于从手指与触摸屏显示器的接触来确定光标位置的方法
US20090058830A1 (en) * 2007-01-07 2009-03-05 Scott Herz Portable multifunction device, method, and graphical user interface for interpreting a finger gesture

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017185327A1 (zh) * 2016-04-29 2017-11-02 华为技术有限公司 一种用户界面显示方法及终端

Also Published As

Publication number Publication date
JP5977788B2 (ja) 2016-08-24
EP2545432B1 (en) 2019-04-17
AU2011268047A1 (en) 2012-11-01
KR20130018870A (ko) 2013-02-25
WO2011159531A3 (en) 2012-02-09
EP2545432A2 (en) 2013-01-16
AU2011268047C1 (en) 2014-07-10
US8552999B2 (en) 2013-10-08
JP5621042B2 (ja) 2014-11-05
JP6163592B2 (ja) 2017-07-12
US20110304560A1 (en) 2011-12-15
WO2011159531A2 (en) 2011-12-22
JP2016197448A (ja) 2016-11-24
JP2015018572A (ja) 2015-01-29
AU2011268047B2 (en) 2014-02-20
US20110307833A1 (en) 2011-12-15
CN102884500B (zh) 2016-05-18
CN106126097A (zh) 2016-11-16
US10216408B2 (en) 2019-02-26
KR101453641B1 (ko) 2014-10-22
CN106126097B (zh) 2020-06-05
JP2013532335A (ja) 2013-08-15

Similar Documents

Publication Publication Date Title
CN102884500B (zh) 用于辨识触摸输入的设备和方法
AU2021201777B2 (en) Devices, methods, and graphical user interfaces for wireless pairing with peripheral devices and displaying status information concerning the peripheral devices
JP6887400B2 (ja) 1つのデバイスの使用から別のデバイスの使用への移行
US20170090749A1 (en) Systems and Methods for Disambiguating Intended User Input at an Onscreen Keyboard Using Dual Strike Zones
CN102763079A (zh) 用自定义控件取代键盘的应用程序编程接口(api)
DK201670624A1 (en) Handwriting keyboard for monitors
CN102422264A (zh) 事件识别
CN103052935A (zh) 用于对对象的前后位置进行重新排序的装置、方法和图形用户接口
CN102763077A (zh) 自动显示及隐藏屏幕上键盘
AU2016204284B2 (en) Control selection approximation
AU2014200702B2 (en) Control selection approximation
DK201670727A1 (en) Devices, Methods, and Graphical User Interfaces for Wireless Pairing with Peripheral Devices and Displaying Status Information Concerning the Peripheral Devices

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant