CN102169382B - 用于修改用户界面行为的方法、装置及多功能设备 - Google Patents

用于修改用户界面行为的方法、装置及多功能设备 Download PDF

Info

Publication number
CN102169382B
CN102169382B CN201010292409.7A CN201010292409A CN102169382B CN 102169382 B CN102169382 B CN 102169382B CN 201010292409 A CN201010292409 A CN 201010292409A CN 102169382 B CN102169382 B CN 102169382B
Authority
CN
China
Prior art keywords
gesture
motion
user interface
respondent behavior
sensitive surface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201010292409.7A
Other languages
English (en)
Other versions
CN102169382A (zh
Inventor
P·W·拉普
A·D·莱弗特
J·R·马尔
C·D·威尔德雷尔
J·C·卡佩拉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US12/567,689 external-priority patent/US20110074695A1/en
Priority claimed from US12/567,695 external-priority patent/US20110074696A1/en
Priority claimed from US12/567,677 external-priority patent/US20110074830A1/en
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Publication of CN102169382A publication Critical patent/CN102169382A/zh
Application granted granted Critical
Publication of CN102169382B publication Critical patent/CN102169382B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本发明涉及修改用户界面行为的方法和设备以及多功能设备。所述方法包括:显示用户界面;在检测触敏表面上的接触的同时检测相应于第一手势的第一部分的接触的第一运动;根据第一手势的第一部分执行第一响应行为;检测相应于第二手势的接触的第二运动;响应第二手势执行第二响应行为,第二响应行为不同于第一响应行为;检测接触的第三运动,第三运动相应于第一手势的第二部分;和根据第一手势的第二部分执行第三响应行为,第三响应行为不同于第一响应行为。本发明减小了修改用户界面行为时的用户认知负担,创建了更高效的人机界面。对于以电池操作的计算设备,使用户能够使用中间拖动手势更快和更高效的使用用户界面,从而节省了电能,并且增加了电池充电之间的时间。

Description

用于修改用户界面行为的方法、装置及多功能设备
技术领域
公开的实施例一般地涉及具有触敏表面的电子设备,并且更具体地,涉及具有使用中间拖动手势、手势内的微手势和其它手势修改运动等修改或改变用户界面行为的触敏表面的电子设备。
背景技术
近年来,使用触敏表面作为计算机和其它电子计算设备的输入设备已经显著增多。触敏表面的例子包括触控板和触摸屏显示器。这些表面被广泛用于操作显示器上的用户界面对象。
在这些设备内,对用于修改或改变用户界面行为的迅速对象操作、模式改变和简单程序性输入的需要是至关重要的。在某些情况下,用户由于能够在飞行中或实时地改变其输入手势而受益。
但是用于实时用户界面输入手势改变和修改的已有方法麻烦并且效率低。例如,使用至少一个手势用作行为修改器(beheviormodifier)的不连续手势输入序列是繁琐的,并且给用户造成了重大认知负担。另外,已有方法花费的时间比所需时间长,从而浪费能量。这后一种考虑在以电池操作的设备中特别重要。
因此,需要具有用于修改或改变用户界面行为的更快、更有效的方法和接口的计算设备。这些方法和接口可以补充或替代用于修改或改变用户界面行为的常规方法。这些方法和接口减少了用户的认知负担,并且产生更有效的人机界面。对于以电池操作的计算设备,这些方法和接口节省电能,并且增加了电池充电之间的时间。
发明内容
通过公开的设备减小或消除与用于具有触敏表面的计算设备的用户接口相关联的上述缺陷和其它问题。在某些实施例中,该设备是台式计算机。在某些实施例中,该设备是便携式(例如,笔记本计算机、平板计算机或手持设备)。在某些实施例中,该设备具有触控板。在某些实施例中,该设备具有触敏显示器(也被称为“触摸屏”或“触摸屏显示器”)。在某些实施例中,该设备具有图形用户界面(GUI)、一个或多个处理器、存储器和存储在存储器内用于执行多个功能的一个或多个模块、程序和指令集合。在某些实施例中,用户主要通过触敏表面上的手指接触和手势与GUI交互。在某些实施例中,所述功能可以包括图像编辑、绘图、呈现、字处理、网站创建、盘创作、电子表格制作、游戏、电话、视频会议、电子邮件、即时消息发送、健身助手(workoutsupport)、数字照片、数字视频、网络浏览、数字音乐播放和/或数字视频播放。用于执行这些功能的可执行指令可被包括在计算机可读存储介质或配置为由一个或多个处理器执行的其它计算机程序产品内。
根据某些实施例,一种在具有显示器和触敏表面的多功能设备处执行的方法。该方法包括:在显示器上显示用户界面,并且在检测触敏表面上的单个手指接触的同时:检测相应于触敏表面上的第一手势的第一部分的单个手指接触的第一运动;根据第一手势的第一部分在用户界面内执行第一响应行为;在检测到第一运动之后,检测触敏表面上的相应于第二手势的单个手指接触的第二运动,所述第二手势不同于第一手势;响应第二手势在用户界面内执行第二响应行为,其中第二响应行为不同于第一响应行为;在检测到第二运动之后,检测触敏表面上的单个手指接触的第三运动,其中第三运动相应于第一手势的第二部分;和根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种多功能设备包括:显示器、触敏表面、一个或多个处理器、存储器和一个或多个程序。所述一个或多个程序存储在存储器内并且配置为由一个或多个处理器执行。所述一个或多个程序包括用于下列的指令:在显示器上显示用户界面,并且在检测触敏表面上的单个手指接触的同时:检测相应于触敏表面上的第一手势的第一部分的单个手指接触的第一运动;根据第一手势的第一部分在用户界面内执行第一响应行为;在检测到第一运动之后,检测触敏表面上的相应于第二手势的单个手指接触的第二运动,所述第二手势不同于第一手势;响应第二手势在用户界面内执行第二响应行为,其中第二响应行为不同于第一响应行为;在检测到第二运动之后,检测触敏表面上的单个手指接触的第三运动,其中第三运动相应于第一手势的第二部分;和根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种计算机可读存储介质具有存储在其内的指令,当被具有显示器和触敏表面的多功能设备执行时,所述指令使得该设备:在显示器上显示用户界面,并且在检测触敏表面上的单个手指接触的同时:检测相应于触敏表面上的第一手势的第一部分的单个手指接触的第一运动;根据第一手势的第一部分在用户界面内执行第一响应行为;在检测到第一运动之后,检测触敏表面上的相应于第二手势的单个手指接触的第二运动,所述第二手势不同于第一手势;响应第二手势在用户界面内执行第二响应行为,其中第二响应行为不同于第一响应行为;在检测到第二运动之后,检测触敏表面上的单个手指接触的第三运动,其中第三运动相应于第一手势的第二部分;和根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种多功能设备上的图形用户界面,所述多功能设备具有显示器、触敏表面、存储器和一个或多个处理器以便执行存储在存储器内的一个或多个程序,所述图形用户界面包括该显示器上的用户界面,其中在检测触敏表面上的单个手指接触的同时:相应于第一手势的第一部分的单个手指接触的第一运动在触敏表面上被检测;根据第一手势的第一部分第一响应行为在用户界面内被执行;在检测到第一运动之后,相应于不同于第一手势的第二手势的单个手指接触的第二运动在触敏表面上被检测;响应第二手势第二响应行为在用户界面内被执行,其中第二响应行为不同于第一响应行为;在检测到第二运动之后,单个手指接触的第三运动在触敏表面上被检测,其中第三运动相应于第一手势的第二部分;和根据第一手势的第二部分第三响应行为在用户界面内被执行,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种多功能设备包括:显示器;触敏表面;用于在显示器上显示用户界面的部件,并且在检测触敏表面上的单个手指接触的同时:用于检测相应于触敏表面上的第一手势的第一部分的单个手指接触的第一运动的部件;用于根据第一手势的第一部分在用户界面内执行第一响应行为的部件;用于在检测到第一运动之后,检测触敏表面上的相应于第二手势的单个手指接触的第二运动的部件,所述第二手势不同于第一手势;用于响应第二手势在用户界面内执行第二响应行为的部件,其中第二响应行为不同于第一响应行为;用于在检测到第二运动之后,检测触敏表面上的单个手指接触的第三运动的部件,其中第三运动相应于第一手势的第二部分;和用于根据第一手势的第二部分在用户界面内执行第三响应行为的部件,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种用于在具有显示器和触敏表面的多功能设备内使用的信息处理装置,包括:用于在显示器上显示用户界面的部件,并且在检测触敏表面上的单个手指接触的同时:用于检测相应于触敏表面上的第一手势的第一部分的单个手指接触的第一运动的部件;用于根据第一手势的第一部分在用户界面内执行第一响应行为的部件;用于在检测到第一运动之后,检测触敏表面上的相应于第二手势的单个手指接触的第二运动的部件,所述第二手势不同于第一手势;用于响应第二手势在用户界面内执行第二响应行为的部件,其中第二响应行为不同于第一响应行为;用于在检测到第二运动之后,检测触敏表面上的单个手指接触的第三运动的部件,其中第三运动相应于第一手势的第二部分;和用于根据第一手势的第二部分在用户界面内执行第三响应行为的部件,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种用于修改用户界面行为的方法,所述方法包括:在显示器上显示用户界面;在检测触敏表面上的单个手指接触的同时:检测相应于触敏表面上的第一手势的第一部分的单个手指接触的第一运动;根据第一手势的第一部分在用户界面内执行第一响应行为;在检测到第一运动之后,检测触敏表面上的相应于第二手势的单个手指接触的第二运动,所述第二手势不同于第一手势;响应第二手势在用户界面内执行第二响应行为,其中第二响应行为不同于第一响应行为;在检测到第二运动之后,检测触敏表面上的单个手指接触的第三运动,其中第三运动相应于第一手势的第二部分;和根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种用于修改用户界面行为的装置,所述装置包括:用于在显示器上显示用户界面的部件;在检测触敏表面上的单个手指接触的同时:用于检测相应于触敏表面上的第一手势的第一部分的单个手指接触的第一运动的部件;用于根据第一手势的第一部分在用户界面内执行第一响应行为的部件;用于在检测到第一运动之后,检测触敏表面上的相应于第二手势的单个手指接触的第二运动的部件,所述第二手势不同于第一手势;用于响应第二手势在用户界面内执行第二响应行为的部件,其中第二响应行为不同于第一响应行为;用于在检测到第二运动之后,检测触敏表面上的单个手指接触的第三运动的部件,其中第三运动相应于第一手势的第二部分;和用于根据第一手势的第二部分在用户界面内执行第三响应行为的部件,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种多功能设备,包括:显示单元,用于显示用户界面;和具有触敏表面的触摸感测单元,在检测触敏表面上的单个手指接触的同时,检测相应于触敏表面上的第一手势的第一部分的单个手指接触的第一运动;在检测到第一运动之后,检测触敏表面上的相应于第二手势的单个手指接触的第二运动,所述第二手势不同于第一手势;在检测到第二运动之后,检测触敏表面上的单个手指接触的第三运动,其中第三运动相应于第一手势的第二部分;第一响应单元,根据第一手势的第一部分在用户界面内执行第一响应行为;第二响应单元,响应第二手势在用户界面内执行第二响应行为,其中第二响应行为不同于第一响应行为;和第三响应单元,根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种在具有显示器和触敏表面的多功能设备处执行的方法。该方法包括:在显示器上显示用户界面;在检测触敏表面上的三指接触的同时,其中三指接触大体对齐排列在一个轴上:检测相应于触敏表面上的第一手势的第一部分的三指接触的第一运动;根据第一手势的第一部分在用户界面内执行第一响应行为;在检测到第一运动之后,检测第二手势,第二手势是三指接触中的一个接触离开该轴的运动;响应第二手势在用户界面内执行第二行为,其中第二响应行为不同于第一响应行为;在检测到第二手势之后,检测触敏表面上的三指接触的第三运动,其中第三运动相应于第一手势的第二部分;和根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种多功能设备包括显示器、触敏表面、一个或多个处理器、存储器和一个或多个程序。所述一个或多个程序被存储在存储器内并且配置为由一个或多个处理器执行。该一个或多个程序包括用于下列的指令:在显示器上显示用户界面;在检测触敏表面上的三指接触的同时,其中三指接触大体对齐排列在一个轴上:检测相应于触敏表面上的第一手势的第一部分的三指接触的第一运动;根据第一手势的第一部分在用户界面内执行第一响应行为;在检测到第一运动之后,检测第二手势,第二手势是三指接触中的一个接触离开该轴的运动;响应第二手势在用户界面内执行第二行为,其中第二行为不同于第一响应行为;在检测到第二手势之后,检测触敏表面上的三指接触的第三运动,其中第三运动相应于第一手势的第二部分;和根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种计算机可读存储介质具有存储在其内的指令,当被具有显示器和触敏表面的多功能设备执行时,所述指令使得该设备:在显示器上显示用户界面;在检测触敏表面上的三指接触的同时,其中三指接触大体对齐排列在一个轴上:检测相应于触敏表面上的第一手势的第一部分的三指接触的第一运动;根据第一手势的第一部分在用户界面内执行第一响应行为;在检测到第一运动之后,检测第二手势,第二手势是三指接触中的一个接触离开该轴的运动;响应第二手势在用户界面内执行第二行为,其中第二响应行为不同于第一响应行为;在检测到第二手势之后,检测触敏表面上的三指接触的第三运动,其中第三运动相应于第一手势的第二部分;和根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种多功能设备上的图形用户界面,所述多功能设备具有显示器、触敏表面、存储器和一个或多个处理器以便执行存储在存储器内的一个或多个程序的,所述图形用户界面包括该显示器上的用户界面,其中:在检测触敏表面上的三指接触的同时,其中三指接触大体对齐排列在一个轴上:相应于第一手势的第一部分的三指接触的第一运动在触敏表面上被检测;根据第一手势的第一部分第一响应行为在用户界面内被执行;在检测到第一运动之后,第二手势在触敏表面上被检测,第二手势是三指接触中的一个接触离开该轴的运动;响应第二手势第二响应行为在用户界面内被执行,其中第二响应行为不同于第一响应行为;在检测到第二手势之后,三指接触的第三运动在触敏表面上被检测,其中第三运动相应于第一手势的第二部分;和根据第一手势的第二部分第三响应行为在用户界面内被执行,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种多功能设备包括:显示器;触敏表面;用于在显示器上显示用户界面的部件,并且在检测触敏表面上的三指接触的同时,其中三指接触大体对齐排列在一个轴上:用于检测相应于触敏表面上的第一手势的第一部分的三指接触的第一运动的部件;用于根据第一手势的第一部分在用户界面内执行第一响应行为的部件;在检测到第一运动之后,用于检测第二手势的部件,第二手势是三指接触中的一个接触离开该轴的运动;用于响应第二手势在用户界面内执行第二行为的部件,其中第二响应行为不同于第一响应行为;在检测到第二手势之后,用于检测触敏表面上的三指接触的第三运动的部件,其中第三运动相应于第一手势的第二部分;和用于根据第一手势的第二部分在用户界面内执行第三响应行为的部件,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种用于在具有显示器和触敏表面的多功能设备内使用的信息处理装置,包括:用于在显示器上显示用户界面的部件,并且在检测触敏表面上的三指接触的同时,其中三指接触大体对齐排列在一个轴上:用于检测相应于触敏表面上的第一手势的第一部分的三指接触的第一运动的部件;用于根据第一手势的第一部分在用户界面内执行第一响应行为的部件;在检测到第一运动之后,用于检测第二手势的部件,第二手势是三指接触中的一个接触离开该轴的运动;用于响应第二手势在用户界面内执行第二响应行为的部件,其中第二响应行为不同于第一响应行为;在检测到第二手势之后,用于检测触敏表面上的三指接触的第三运动的部件,其中第三运动相应于第一手势的第二部分;和用于根据第一手势的第二部分在用户界面内执行第三响应行为的部件,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种在具有显示器和触敏表面的多功能设备处执行的方法。该方法包括:在显示器上显示用户界面;检测触敏表面上的单个手指手势的第一部分,其中该单个手指手势具有第一面积的手指接触;根据第一手势的第一部分在用户界面内执行第一响应行为;在检测到单个手指手势的第一部分之后,检测触敏表面上单个手指接触的面积增加;响应检测到单个手指接触的面积增加,在用户界面内执行不同于第一响应行为的第二响应行为;在检测到单个手指接触的面积增加之后,检测触敏表面上的单个手指手势的第二部分;和根据单个手指手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种多功能设备包括显示器、触敏表面、一个或多个处理器、存储器和一个或多个程序。所述一个或多个程序被存储在存储器内并且配置为由一个或多个处理器执行。该一个或多个程序包括用于下列的指令:在显示器上显示用户界面;检测触敏表面上的单个手指手势的第一部分,其中该单个手指手势具有第一面积的手指接触;根据第一手势的第一部分在用户界面内执行第一响应行为;在检测到单个手指手势的第一部分之后,检测触敏表面上单个手指接触的面积增加;响应检测到单个手指接触的面积增加,在用户界面内执行不同于第一响应行为的第二响应行为;在检测到单个手指接触的面积增加之后,检测触敏表面上的单个手指手势的第二部分;和根据单个手指手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种计算机可读存储介质具有存储在其内的指令,当被具有显示器和触敏表面的多功能设备执行时,所述指令使得该设备:在显示器上显示用户界面;检测触敏表面上的单个手指手势的第一部分,其中该单个手指手势具有第一面积的手指接触;根据第一手势的第一部分在用户界面内执行第一响应行为;在检测到单个手指手势的第一部分之后,检测触敏表面上单个手指接触的面积增加;响应检测到单个手指接触的面积增加,在用户界面内执行不同于第一响应行为的第二响应行为;在检测到单个手指接触的面积增加之后,检测触敏表面上的单个手指手势的第二部分;和根据单个手指手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种多功能设备上的图形用户界面,所述多功能设备具有显示器、触敏表面、存储器和一个或多个处理器以便执行存储在存储器内的一个或多个程序,所述图形用户界面包括该显示器上的用户界面,其中:单个手指手势的第一部分在触敏表面上被检测,其中该单个手指手势具有第一面积的手指接触;根据第一手势的第一部分第一响应行为在用户界面内被执行;在检测到单个手指手势的第一部分之后,单个手指接触的面积增加在触敏表面上被检测;响应检测到单个手指接触的面积增加,在用户界面内不同于第一响应行为的第二响应行为被执行;在检测到单个手指接触的面积增加之后,单个手指手势的第二部分在触敏表面上被检测;和根据单个手指手势的第二部分第三响应行为在用户界面内被执行,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种多功能设备包括:显示器;触敏表面;用于在显示器上显示用户界面的部件;用于检测触敏表面上的单个手指手势的第一部分的部件,其中该单个手指手势具有第一面积的手指接触;用于根据第一手势的第一部分在用户界面内执行第一响应行为的部件;在检测到单个手指手势的第一部分之后,用于检测触敏表面上单个手指接触的面积增加的部件;响应检测到单个手指接触的面积增加,用于在用户界面内执行不同于第一响应行为的第二响应行为的部件;在检测到单个手指接触的面积增加之后,用于检测触敏表面上的单个手指手势的第二部分的部件;和用于根据单个手指手势的第二部分在用户界面内执行第三响应行为的部件,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种用于在具有显示器和触敏表面的多功能设备内使用的信息处理装置包括:用于在显示器上显示用户界面的部件;用于检测触敏表面上的单个手指手势的第一部分的部件,其中该单个手指手势具有第一面积的手指接触;用于根据第一手势的第一部分在用户界面内执行第一响应行为的部件;在检测到单个手指手势的第一部分之后,用于检测触敏表面上单个手指接触的面积增加的部件;响应检测到单个手指接触的面积增加,用于在用户界面内执行不同于第一响应行为的第二响应行为的部件;在检测到单个手指接触的面积增加之后,用于检测触敏表面上的单个手指手势的第二部分的部件;和用于根据单个手指手势的第二部分在用户界面内执行第三响应行为的部件,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种在具有显示器和触敏表面的多功能设备处执行的方法。该方法包括:在显示器上显示用户界面,和在同时检测触敏表面上的第一接触点和第二接触点的同时,其中第一和第二接触点定义了圆周长的相对侧上的两个点:检测以触敏表面上的第一和第二接触点中的至少一个形成的第一手势的第一部分;根据第一手势在用户界面内执行第一响应行为;在检测到第一手势的第一部分之后,检测以触敏表面上的第一和第二接触点中的至少一个形成的第二手势,其中第二手势偏离圆的周长;响应第二手势在用户界面内执行第二响应行为,其中第二响应行为不同于第一响应行为;在检测到第二手势之后,检测触敏表面上以第一和第二接触点形成的第一手势的第二部分;和根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种多功能设备包括显示器、触敏表面、一个或多个处理器、存储器和一个或多个程序。所述一个或多个程序被存储在存储器内并且配置为由一个或多个处理器执行。该一个或多个程序包括用于下列的指令:在显示器上显示用户界面,和在同时检测触敏表面上的第一接触点和第二接触点的同时,其中第一和第二接触点定义了圆周长的相对侧上的两个点:检测以触敏表面上的第一和第二接触点中的至少一个形成的第一手势的第一部分;根据第一手势在用户界面内执行第一响应行为;在检测到第一手势的第一部分之后,检测以触敏表面上的第一和第二接触点中的至少一个形成的第二手势,其中第二手势偏离圆的周长;响应第二手势在用户界面内执行第二响应行为,其中第二响应行为不同于第一响应行为;在检测到第二手势之后,检测触敏表面上以第一和第二接触点形成的第一手势的第二部分;和根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种计算机可读存储介质具有存储在其内的指令,当被具有显示器和触敏表面的多功能设备执行时,所述指令使得该设备:在显示器上显示用户界面,和在同时检测触敏表面上的第一接触点和第二接触点的同时,其中第一和第二接触点定义了圆周长的相对侧上的两个点:检测以触敏表面上的第一和第二接触点中的至少一个形成的第一手势的第一部分;根据第一手势在用户界面内执行第一响应行为;在检测到第一手势的第一部分之后,检测以触敏表面上的第一和第二接触点中的至少一个形成的第二手势,其中第二手势偏离圆的周长;响应第二手势在用户界面内执行第二响应行为,其中第二响应行为不同于第一响应行为;在检测到第二手势之后,检测触敏表面上以第一和第二接触点形成的第一手势的第二部分;和根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种多功能设备上的图形用户界面,所述多功能设备具有显示器、触敏表面、存储器和一个或多个处理器以便执行存储在存储器内的一个或多个程序,所述图形用户界面包括该显示器上的用户界面,其中:在同时检测触敏表面上的第一接触点和第二接触点的同时,其中第一和第二接触点定义了圆周长的相对侧上的两个点:以第一和第二接触点中的至少一个形成的第一手势的第一部分在触敏表面上被检测;根据第一手势第一响应行为在用户界面内被执行;在检测到第一手势的第一部分之后,以第一和第二接触点中的至少一个形成的第二手势在触敏表面上被检测,其中第二手势偏离圆的周长;响应第二手势第二响应行为在用户界面内被执行,其中第二响应行为不同于第一响应行为;在检测到第二手势之后,以第一和第二接触点形成的第一手势的第二部分在触敏表面上被检测;和根据第一手势的第二部分第三响应行为在用户界面内被执行,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种多功能设备包括:显示器;触敏表面;和用于在显示器上显示用户界面的部件,并且在同时检测触敏表面上的第一接触点和第二接触点的同时,其中第一和第二接触点定义了圆周长的相对侧上的两个点,该多功能设备还包括用于检测以触敏表面上的第一和第二接触点中的至少一个形成的第一手势的第一部分的部件;用于根据第一手势在用户界面内执行第一响应行为的部件;在检测到第一手势的第一部分之后,用于检测以触敏表面上的第一和第二接触点中的至少一个形成的第二手势的部件,其中第二手势偏离圆的周长;用于响应第二手势在用户界面内执行第二响应行为的部件,其中第二响应行为不同于第一响应行为;在检测到第二手势之后,用于检测触敏表面上以第一和第二接触点形成的第一手势的第二部分的部件;和用于根据第一手势的第二部分在用户界面内执行第三响应行为的部件,其中第三响应行为不同于第一响应行为。
根据某些实施例,一种用于在具有显示器和触敏表面的多功能设备内使用的信息处理装置,包括:用于在显示器上显示用户界面的部件,并且在同时检测触敏表面上的第一接触点和第二接触点的同时,其中第一和第二接触点定义了圆周长的相对侧上的两个点,该信息处理装置还包括:用于检测以触敏表面上的第一和第二接触点中的至少一个形成的第一手势的第一部分的部件;用于根据第一手势在用户界面内执行第一响应行为的部件;在检测到第一手势的第一部分之后,用于检测以触敏表面上的第一和第二接触点中的至少一个形成的第二手势的部件,其中第二手势偏离圆的周长;用于响应第二手势在用户界面内执行第二响应行为的部件,其中第二响应行为不同于第一响应行为;在检测到第二手势之后,用于检测触敏表面上以第一和第二接触点形成的第一手势的第二部分的部件;和用于根据第一手势的第二部分在用户界面内执行第三响应行为的部件,其中第三响应行为不同于第一响应行为。
因此,给具有显示器和触敏表面的多功能设备提供了用于修改或改变用户界面行为的更快、更有效的方法和接口,从而提高了有效性、效率和用户对这些设备的满意度。这些方法和接口可以补充或替代用于修改或改变用户界面行为的常规方法。
附图说明
为了更好地理解本发明的上述实施例以及附加实施例,应当结合附图参考下面的具体实施方式,其中类似的附图标记在所有图中指示相应部件。
图1A和1B是示出了根据某些实施例的具有触敏显示器的便携式多功能设备的方框图;
图2示出了根据某些实施例的具有触摸屏的便携式多功能设备;
图3是根据某些实施例的具有显示器和触敏表面的示例多功能设备的方框图;
图4A和4B示出了根据某些实施例,便携式多功能设备上的应用菜单的示例用户界面;
图4C示出了根据某些实施例,具有与显示器相分离的触敏表面的多功能设备的示例用户界面;
图5A-5S示出了根据某些实施例的采用中间拖动手势的示例用户界面;
图6A-6C是示出了根据某些实施例,使用中间拖动手势的方法的流程图;
图7是示出了根据某些实施例,使用中间拖动手势的方法的流程图;
图8A-8B是示出了根据某些实施例,使用中间拖动手势的方法的流程图;
图9包括对根据某些实施例的单个手指中间拖动手势的示例图示;
图10包括对根据某些实施例的双指微手势的示例图示;
图11包括对根据某些实施例的三指微手势的示例图示;和
图12示出了根据本发明原理配置的多功能设备1200。
具体实施方式
现在详细参考实施例,在附图中示出了实施例的例子。在下面的详细描述中,提出了若干特定细节,以便提供对本发明的透彻理解。然而,本领域技术人员应当明了,可以实现本发明而不使用这些特定细节。在其它情况下,公知的方法、程序、组件、电路和网络未被详细描述,以便不会不必要地使得这些实施例的有关方面含混不清。
还应当理解,虽然可以在此处使用术语第一、第二等描述各个元件,但是这些元件应该不受这些术语的限制。这些术语仅被用于彼此区分元件。例如,第一接触可被称为第二接触,并且类似地,第二接触可被称为第一接触,而不会脱离本发明的范围。第一接触和第二接触是两个接触,但是它们不是相同的接触。
此处在本发明的描述中使用的术语是用于描述特定实施例的目的并且不旨在作为对本发明的限制。如在本发明的描述和所附权利要求书中使用的,除非上下文清楚地支持例外情况,单数形式“一个”(“a”、“an”和“the”)旨在也包括复数形式。还应理解,此处使用的术语“和/或”指并且包括一个或多个相关联地列出的项目的任意和所有可能组合。还应理解,当在本说明书中使用术语“包括”(“include”、“including”、“comprise”和/或“comprising”)时,它们指叙述的特征、整体、步骤、操作、元件和/或组件的存在,但是不排除一个或多个其它特征、整体、步骤、操作、元件、组件和/或它们的组的存在或添加。
如此处使用的,根据上下文,术语“如果”可被构想为意味着“当...时”或“在...之后”或“响应于确定...”或“响应于检测到...”。类似地,根据上下文,短语“如果确定出...”或“如果检测到[被说明的条件或事件]”可被构想为意味着“在确定之后”或“作为对确定的响应”或“在检测到[被说明的条件或事件]”或“作为检测到[被说明的条件或事件]的响应”。
描述了计算设备、用于这些设备的用户界面和用于使用这些设备的相关处理的实施例。在某些实施例中,该计算设备是便携式通信设备,诸如还包含诸如PDA和/或音乐播放器功能的其它功能的移动电话。便携式多功能设备的示例实施例包括但不限于,加利福尼亚州库佩蒂诺市的苹果公司的和iPod设备。还可以使用其它便携式设备,诸如具有触敏表面(例如,触摸屏显示器和/或触控板)膝上计算机或平板计算机。还应理解,在某些实施例中,该设备不是便携式通信设备,而是具有触敏表面(例如,触摸屏显示器和/或触控板)的台式计算机。
在下面的讨论中,描述包括显示器和触敏表面的计算设备。然而,应当理解,计算设备可以包括一个或多个其它物理用户接口设备,诸如物理键盘、鼠标和/或操纵杆。
该设备支持各种应用,诸如下列中的一个或多个应用:绘画应用、呈现应用、字处理应用、网站创建应用、盘创作应用、电子表格应用、游戏应用、电话应用、视频会议应用、电子邮件应用、即时消息发送应用、健身助手(workoutsupport)应用、照片管理应用、数字照相机应用、数字摄像机应用、网络浏览应用、数字音乐播放器应用和/或数字视频播放器应用。
可以在该设备上执行的各种应用可以使用至少一种通用物理用户接口设备,诸如触敏表面。可以从一种应用到下一种应用和/或在相应应用中调整和/或改变触敏表面的一种或多种功能以及在所述设备上显示的相应信息。以这种方式,该设备的一种通用物理体系结构(诸如,触敏表面)可以支持具有直观并且一目了然的用户界面的各种应用。
用户界面可以包括一个或多个软键盘实施例。软键盘实施例可以包括键盘的显示图标上的符号的标准(QWERTY)和/或非标准配置,诸如在于2006年7月24日提交的美国专利申请11/459,606,″KeyboardsForPortableElectronicDevices和于2006年7月24日提交的11/459,615,″TouchScreenKeyboardsForPortableElectronicDevices″中所述的键盘,通过引用将它们的内容完整结合在此。键盘实施例可以包括相对于已有物理键盘(诸如打字机的键盘)中的按键的数目减少数目的图标(或软按键)。这可以使得用户更容易选择键盘内的一个或多个图标,并且因此选择一个或多个相应符号。键盘实施例可以是自适应的。例如,可以根据用户动作修改显示的图标,诸如选择一个或多个图标和/或一个或多个相应符号。设备上的一个或多个应用可以利用通用和/或不同的键盘实施例。因此,可以为至少某些应用裁剪所使用的键盘实施例。在某些实施例中,可以为相应用户裁剪一个或多个键盘实施例。例如,可以基于相应用户的字使用历史(词典学、俚语、个体使用),为相应用户裁剪一个或多个键盘实施例。当使用软键盘实施例时,可以调整某些键盘实施例,以便在选择一个或多个图标并且因此选择一个或多个符号时减少用户错误的概率。
现在将注意力指向具有触敏显示器的便携式设备的实施例。图1A和1B是示出了根据某些实施例,具有触敏显示器112的便携式多功能设备100的方框图。触敏显示器112有时出于方便被称为“触摸屏”,并且还可被称为或叫做触敏显示系统。设备100可以包括存储器102(其可以包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外设接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其它输入或控制设备116和外部端口124。设备100可以包括一个或多个光学传感器164。这些组件可以在一个或多个通信总线或信号线103上通信。
应当理解,设备100仅是便携式多功能设备100的一个例子,并且设备100可以具有多于或少于所示组件的组件,可以组合两个或更多个组件,或可以具有不同组件配置或布置。图1A和1B中所示的各种组件可以硬件、软件或硬件和软件两者的组合实现,包括一个或多个信号处理和/或专用集成电路。
存储器102可以包括高速随机存取存储器,并且还可以包括非易失存储器,诸如一个或多个磁盘存储设备、闪存设备或其它非易失固态存储器设备。可由存储器控制器122控制设备100的组件,诸如CPU120和外设接口118对存储器102的访问。
外设接口118将设备的输入和输出外设耦接到CPU120和存储器102。一个或多个CPU120运行或执行各种软件程序和/或存储在存储器102内的指令集合,以便执行设备100的各种功能并且处理数据。
在某些实施例中,外设接口118、CPU120和存储器控制器122可在单个芯片诸如芯片104上实现。在某些其它实施例中,它们可在不同芯片上实现。
RF(射频)电路108接收和发送还被称为电磁信号的RF信号。RF电路108将电信号转变为电磁信号/将电磁信号转变为电信号,并且通过电磁信号与通信网络和其它通信设备通信。RF电路108可以包括用于执行这些功能的公知电路,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC芯片组、用户身份模块(SIM)卡、存储器等。RF电路108可以通过无线通信与网络,诸如也被称为万维网(WWW)的Internet、内联网和/或无线网络,诸如蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN)以及其它设备通信。无线通信可以使用多种通信标准、协议和技术中的任意一种,包括但不限于全球移动通信系统(GSM)、增强式数据GSM环境(EDGE)、高速下行链路分组访问(HSDPA)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如,IEEE802.11a、IEEE802.11b、IEEE802.11g和/或IEEE802.11n)、语音电话(VoIP)、Wi-MAX、用于电子邮件的协议(例如,Internet消息访问协议(IMAP)和/或邮局协议(POP))、即时消息发送(例如,可扩展消息处理现场协议(XMPP,extensiblemessagingandpresenceprotocol)、用于即时消息发送和呈现支持扩展的会话启动协议(SIMPLE,SessionInitiationProtocolforInstanctMessagingandPresenceLeveragingExtensions)、即时消息发送和呈现服务(IMPS))和/或短消息服务(SMS),或任意其它适合的通信协议,包括到本文档提交日尚未开发的通信协议。
音频电路110、扬声器111和麦克风113提供用户和设备100之间的音频接口。音频电路110从外设接口118接收音频数据,将音频数据转换为电信号,并且将电信号传输到扬声器111。扬声器111将电信号转换为人可以听到的声波。音频电路110还接收麦克风113从声波转换的电信号。音频电路110将电信号转换为音频数据,并且将音频数据传输到外设接口118以便处理。可以通过外设接口118从存储器102和/或RF电路108接收音频数据,和/或向存储器102和/或RF电路108传输音频数据。在某些实施例中,音频电路110还包括耳塞插孔(例如,图2的212)。耳塞插孔提供音频电路110和可移动音频输入/输出外设,诸如只输出耳机或具有输出(例如,用于一只或两只耳朵的耳机)和输入(例如,麦克风)的耳塞之间的接口。
I/O子系统106将设备100上的输入/输出外设,诸如触摸屏112和其它输入/控制设备116耦接到外设接口118。I/O子系统106可以包括显示控制器156和用于其它输入或控制设备的一个或多个输入控制器160。一个或多个输入控制器160从/向其它输入或控制设备116接收/发送电信号。其它输入/控制设备116可以包括物理按钮(例如,按压(push)按钮、摇杆(rocker)按钮等)、刻度盘、滑块开关、操纵杆、点击轮等。在某些替换实施例中,一个或多个输入控制器160可被耦接到下列中的任意一个(或不连接到它们中的任意一个):键盘、红外端口、USB端口、诸如鼠标的指针设备。一个或多个按钮(例如,图2的208)可以包括用于扬声器111和/或麦克风113的音量控制的上/下按钮。一个或多个按钮可以包括按压按钮(例如,图2的206)。对按压按钮的快速按压可以解除触摸屏112的锁定,或如于2005年12月23日提交的美国专利申请11/322,549,“UnlockingaDevicebyPerformingGesturesonanUnlockImage”所述,开始在触摸屏上使用手势解锁设备的处理,通过引用将其完整结合在此。对按压按钮(例如,206)的较长按压可以接通或关闭设备100的电源。用户能够定制一个或多个按钮的功能。触摸屏112被用于实现虚拟或软按钮以及一个或多个软键盘。
触敏触摸屏112提供设备和用户之间的输入接口和输出接口。显示控制器156从/向触摸屏112接收和/或发送电信号。触摸屏112向用户显示视觉输出。视觉输出可以包括图形、文本、图标、视频和其任意组合(总地被称为“图形”)。在某些实施例中,某些或全部视觉输出可以相应于用户界面对象。
触摸屏112具有基于触觉和/或可触知的接触,接收来自用户的输入的触敏表面、传感器或传感器集合。触摸屏112和显示控制器156(连同存储器102内的任意相关模块和/或指令集合)检测触摸屏112上的接触(以及接触的任意运动或中断),并且将检测到的接触转换为与在触摸屏上显示的用户界面对象(例如,一个或多个软按键、图标、网页或图像)的交互。在示例实施例中,触摸屏112和用户之间的接触点相应于用户的手指。
触摸屏112可以使用LCD(液晶显示器)技术或LPD(发光聚合物显示器)技术,虽然在其它实施例中可以使用其它显示技术。触摸屏112和显示控制器156可以使用现在已知或以后开发的多种触摸感测技术检测接触以及接触的任意运动或中断,包括但不限于电容、电阻、红外线和表面声波技术,以及其它接近传感器阵列或其它元件,以便确定与触摸屏112的一个或多个接触点。在示例实施例中,使用投射互电容感测技术,诸如利福尼亚州库佩蒂诺市的苹果公司的和iPod中的技术。
触摸屏112的某些实施例中的触敏显示器可以类似于在下面的美国专利中描述的多点触敏触控板:6,323,846(Westermanetal.),6,570,557(Westermanetal.)和/或6,677,932(Westerman)和/或美国专利公开2002/0015024A1,通过引用将它们中的每一个完整结合在此。然而,触摸屏112显示便携式设备100的视觉输出,而触敏触控板不提供视觉输出。
触摸屏112的某些实施例中的触敏显示器可以是在下面的申请中描述的触敏显示器:(1)于2006年5月2日提交的美国专利申请No.11/381,313,″MultipointTouchSurfaceController″;(2)于2004年5月6日提交的美国专利申请No.10/840,862,″MultipointTouchscreen″;(3)于2004年7月30日提交的美国专利申请No.10/903,964,″GesturesForTouchSensitiveInputDevices″;(4)于2005年1月31日提交的美国专利申请No.11/048,264,″GesturesForTouchSensitiveInputDevices″;(5)于2005年1月18日提交的美国专利申请No.11/038,590,″Mode-BasedGraphicalUserInterfacesForTouchSensitiveInputDevices″;(6)于2005年9月16日提交的美国专利申请No.11/228,758,″VirtualInputDevicePlacementOnATouchScreenUserInterface″;(7)于2005年9月16日提交的美国专利申请No.11/228,700,″OperationOfAComputerWithATouchScreenInterface″;(8)于2005年9月16日提交的美国专利申请No.11/228,737,″ActivatingVirtualKeysOfATouch-ScreenVirtualKeyboard″;和(9)于2006年3月3日提交的美国专利申请No.11/367,749,″Multi-FunctionalHand-HeldDevice″。通过引用将所有这些申请完整结合在此。
触摸屏112可以具有超过100dpi的分辨率。在示例实施例中,该触摸屏具有近似160dpi的分辨率。用户可以使用任意适合的物体或附属物诸如输入笔、手指等等接触触摸屏112。在某些实施例中,用户界面被设计为主要以基于手指的接触和手势工作,由于手指在触摸屏上的较大接触区域,其远不如基于输入笔的输入准确。在某些实施例中,设备将粗略的基于手指的输入变换为精确的指针/光标位置或命令,以便执行用户所希望的动作。
在某些实施例中,除了触摸屏之外,设备100可以包括用于激活或去活特定功能的触控板(未示出)。在某些实施例中,触控板是该设备的一个触敏区域,与触摸屏不同,其不显示视觉输出。触控板可以是与触摸屏112相分离的触敏表面,或是对由触摸屏形成的触敏表面的扩展。
在某些实施例中,设备100可以包括物理或虚拟点击轮作为输入控制设备116。通过旋转点击轮或通过移动与点击轮的接触点(例如,在以相对于点击轮的中心点的角位移测量接触点的移动量的情况下),用户可以在触摸屏112内显示的一个或多个图形对象(例如,图标)之间导航并且与之交互。点击轮还可用于选择一个或多个显示的图标。例如,用户可以按压点击轮的至少一个部分或相关按钮。输入控制器160以及存储器102内的一个或多个模块和/或指令集合可以处理用户通过点击轮提供的用户命令和导航命令。对于虚拟点击轮,点击轮和点击轮控制器可以分别是触摸屏112和显示控制器156的一部分。对于虚拟点击轮,点击轮可以是响应用户与该设备的交互,在触摸屏显示器上出现或消失的不透明的或半透明的对象。在某些实施例中,虚拟点击轮被显示在便携式多功能设备的触摸屏上并且可由用户与触摸屏的接触操作。
设备100还可以包括用于给各种组件供电的电源系统162。电源系统162可以包括电源管理系统、一个或多个电源(例如,电池、交流电(AC))、再充电系统、电源故障检测电路、电源转换器或逆变器、电源状态指示器(例如,发光二极管(LED))和与便携式设备中的电能的产生、管理和分配相关的任意其它组件。
设备100还可以包括一个或多个光学传感器164。图1A和1B示出了耦接到I/O子系统106内的光学传感器控制器158的光学传感器。光学传感器164可以包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164接收通过一个或多个透镜投射的来自环境的光,并且将该光转换为表示图像的数据。结合成像模块143(也被称为照相机模块),光学传感器164可以捕捉静态图像或视频。在某些实施例中,光学传感器位于设备100的背面,与设备前面上的触摸屏显示器112相对,从而触摸屏显示器112可被用作静态和/或视频图像获取的取景器。在某些实施例中,光学传感器位于设备前面,从而可以在用户在触摸屏显示器上观看其它视频会议参与者的同时,获取用户的图像以便进行视频会议。在某些实施例中,可由用户改变(例如,通过旋转设备壳体内的镜头和传感器)光学传感器164的位置,从而单个光学传感器164可与触摸屏显示器一起被用于视频会议和静态和/或视频图像获取两者。
设备100还可以包括一个或多个接近传感器166。图1A和1B示出了耦接到外设接口118的接近传感器166。可替换地,接近传感器166可被耦接到I/O子系统106内的输入控制器160。接近传感器166可以如美国专利申请No.11/241,839,“ProximityDetectorInHandheldDevice”;11/240,788,“ProximityDetectorInHandheldDevice”;11/620,702,“UsingAmbientLightSensorToAugmentProximitySensorOutput”;11/586,862,“AutomatedResponseToAndSensingOfUserActivityInPortableDevices”和11/638,251,“MethodsAndSystemsForAutomaticConfigurationOfPeripherals”中描述的那样执行操作,通过引用将它们完整结合在此。在某些实施例中,当多功能设备被放置在用户耳朵附近时(例如,当用户进行电话呼叫时),接近传感器关闭并且禁用触摸屏112。
设备100还可以包括一个或多个加速计168。图1A和1B示出了耦接到外设接口118的加速计168。可替换地,加速计168可被耦接到I/O子系统106内的输入控制器160。加速计168可以如美国专利公开No.20050190059,″Acceleration-basedTheftDetectionSystemforPortableElectronicDevices″和美国专利公开No.20060017692,″MethodsAndApparatusesForOperatingAPortableDeviceBasedOnAnAccelerometer″中所述那样执行操作,通过引用将这两者完整结合在此。在某些实施例中,可以基于对从一个或多个加速计接收的数据的分析,以纵向视图或横向视图的方式在触摸屏显示器上显示信息。
在某些实施例中,存储在存储器102内的软件组件可以包括操作系统126、通信模块(或指令集合)128、接触/运动模块(或指令集合)130、图形模块(或指令集合)132、文本输入模块(或指令集合)134、全球定位系统(GPS)模块(或指令集合)135和应用(或指令集合)136。
操作系统126(例如,Darwin、RTXC、LINUX、UNIX、OSX、WINDOWS或嵌入式操作系统,诸如VxWorks)包括用于控制和管理一般系统任务(例如存储器管理、存储设备控制、电源管理等)的各种软件组件和/或驱动程序,并且便于实现各种硬件和软件组件之间的通信。
通信模块128便于在一个或多个外部端口124上与其它设备的通信,并且还包括用于处理由RF电路108和/或外部端口124接收的数据的各种软件组件。外部端口124(例如,通用串行总线(USB)、FIREWIRE等)可适用于直接连接其它设备或通过网络(例如,Internet、无线局域网等)间接连接其它设备。在某些实施例中,外部端口可以是与iPod(苹果计算机公司的注册商标)设备上使用的30针连接器相同或类似和/或兼容的多针(例如,30针)连接器。
接触/运动模块130可以检测与触摸屏112(连同显示控制器156)和其它触敏设备(例如,触控板或物理点击轮)的接触。接触/运动模块130包括用于执行与检测接触有关的各种操作的各种软件组件,诸如确定是否发生了接触(例如,检测手指放下事件)、确定是否存在接触运动并且跟踪触敏表面上的运动(例如,检测一个或多个手指拖动事件)、以及确定接触是否停止(例如,检测手指抬起事件或接触的中断)。接触/运动模块130从触敏表面接收接触数据。确定由一系列接触数据表示的接触点的运动可以包括确定接触点的速率(大小)、速度(大小和方向)和/或加速度(大小和/或方向的改变)。这些操作可被应用于单个接触(例如,一个手指的接触)或多个同时接触(例如,“多点触摸”/多手指接触)。在某些实施例中,接触/运动模块130和显示控制器156检测触控板上的接触。在某些实施例中,接触/运动模块130和控制器160检测点击轮上的接触。
接触/运动模块130可以检测用户的手势输入。触敏表面上的不同手势具有不同的接触模式。因此,可以通过检测特定接触模式检测手势。例如,检测手指敲击手势包括检测手指放下事件,随后在与手指放下事件相同的位置(或大体相同的位置)(例如,在一个图标的位置处)检测手指抬起事件。作为另一个例子,检测触敏表面上的手指扫动手势包括检测手指放下事件,随后检测一个或多个手指拖动事件,并且随后检测手指抬起事件。
图形模块132包括用于在触摸屏112或其它显示器上呈现和显示图形的各种已知软件组件,包括用于改变显示的图形的强度的组件。如此处使用的,术语“图形”包括可被显示给用户的任意对象,包括但不限于文本、网页、图标(诸如包括软按键的用户界面对象)、数字图像、视频、动画等。
在某些实施例中,图形模块132存储表示将被使用的图形的数据。可以给每个图形分配一个相应代码。图形模块132从应用等处接收指出将被显示的图形的一个或多个代码以及如果需要,接收坐标数据和其它图形属性数据,并且然后产生输出到显示控制器156的屏幕图像数据。
文本输入模块134,它可以是图形模块132的组件,提供用于在各种应用(例如,联系人137、电子邮件140、IM141、浏览器147和需要文本输入的任意其它应用)中输入文本的软键盘。
GPS模块135确定设备的位置,并且提供这种信息以便在各种应用中使用(例如,提供给电话138以便用于基于位置的拨号、提供给照相机143作为图片/视频元数据,并且提供给提供基于位置的服务的应用,诸如天气插件(widget,也可称为“专用接口工具集”)、本地黄页插件和地图/导航插件)。
应用136可以包括下面的模块(或指令集合)或它们的子集或超集:
·联系人模块137(有时称为地址簿或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息发送(IM)模块141;
·健身助手(workoutsupport)模块142;
·用于静态和/或视频图像的照相机模块143;
·图像管理模块144;
·视频播放器模块145;
·音乐播放器模块146;
·浏览器模块147;
·日历模块148;
·插件模块149,其可以包括天气插件149-1、股票插件149-2、计算器插件149-3、闹钟插件149-4、字典插件149-5和由用户获得的其它插件,以及用户创建的插件149-6;
·用于制作用户创建的插件149-6的插件创建器模块150;
·搜索模块151;
·合并视频播放器模块145和音乐播放器模块146的视频和音乐播放器模块152;
·记事本模块153;
·地图模块154;和/或
·在线视频模块155。
可被存储在存储器102内的其它应用136的例子包括其它字处理应用、其它图像编辑应用、绘画应用、呈现应用、能够使用JAVA的应用、加密、数字版权管理、语音识别和语音复制。
结合触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,联系人模块137可用于管理地址簿或联系人列表,包括:向地址簿添加一个或多个姓名;从地址簿删除一个或多个姓名;将一个或多个电话号码、一个或多个电子邮件地址、一个或多个物理地址或其它信息与姓名相关联;将图像与姓名相关联;对姓名进行分类和排序;提供电话号码或电子邮件地址,以便发起和/或便于以电话138、视频会议139、电子邮件140或IM141通信等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134,电话模块138可用于输入相应于电话号码的一系列字符、访问地址簿137中的一个或多个电话号码、修改输入的电话号码、拨打相应的电话号码、进行通话和当通话完成时断开连接或挂断。如上所述,无线通信可以使用多种通信标准、协议和技术中的任意一种。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人模块137和电话模块138,视频会议模块139可用于发起、进行和终止用户和一个或多个其它参与者之间的视频会议。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,电子邮件客户端模块140可用于创建、发送、接收和管理电子邮件。结合图像管理模块144,电子邮件模块140使得非常容易创建和发送具有以照相机模块143拍摄的静态或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,即时消息发送模块141可用于输入相应于即时消息的一系列字符、修改以前输入的字符、传输相应的即时消息(例如,针对基于电话的即时消息使用短消息服务(SMS)或多媒体消息服务(MMS)协议,或针对基于Internet的即时消息使用XMPP、SIMPLE或IMPS)、接收即时消息以及观看接收的即时消息。在某些实施例中,传输和/或接收的即时消息可以包括图形、照片、音频文件、视频文件和/或MMS和/或增强消息发送服务(EMS)中支持的其它附件。如此处使用的,“即时消息”指基于电话的消息(例如,使用SMS或MMS发送的消息)和基于Internet的消息(例如,使用XMPP、SIMPLE或IMPS发送的消息)两者。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154和音乐播放器模块146,健身助手模块142可用于创建健身计划(例如,以时间、距离和/或卡路里燃烧目标);与健身传感器通信(运动器械);接收健身传感器数据;校准用于监视健身的传感器;选择和播放用于健身的音乐;和显示、存储和传输健身数据。
结合触摸屏112、显示控制器156、一个或多个光学传感器164、光学传感器控制器158、接触模块130、图形模块132和图像管理模块144,照相机模块143可用于拍摄静态图像或视频(包括视频流)并且将它们存储在存储器102内、修改静态图像或视频的特性或从存储器102中删除静态图像或视频。
结合触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134和照相机模块143,图像管理模块144可用于排列、修改(例如,编辑)或以其他方式操作、标注、删除、(例如,在数字幻灯片或影集内)呈现和存储静态和/或视频图像。
结合触摸屏112、显示控制器156、接触模块130、图形模块132、音频电路110和扬声器111,视频播放器模块145可用于显示、呈现或以其他方式回放视频(例如,在触摸屏或通过外部端口124在外部连接的显示器上)。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108和浏览器模块147,音乐播放器模块146允许用户下载和回放记录的音乐和以一种或多种文件格式存储的其它声音文件,诸如MP3或AAC文件。在某些实施例中,设备100可以包括MP3播放器诸如iPod(苹果公司的注册商标)的功能。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134,浏览器模块147可用于浏览Internet,包括搜索、链接、接收和显示网页或其若干部分,以及链接到网页的附件和其它文件。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、电子邮件模块140和浏览器模块147,日历模块148可用于创建、显示、修改和存储日历和与日历相关联的数据(例如,日历条目、日程安排列表等)。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,插件模块149是可被用户下载和使用(例如,天气插件149-1、股票插件149-2、计算器插件149-3、闹钟插件149-4和字典插件149-5)或由用户创建的(例如,用户创建的插件149-6)的微型应用。在某些实施例中,插件包括HTML(超文本标记语言)文件、CSS(层叠式样式表)文件和JavaScript文件。在某些实施例中,插件包括XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!插件)。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,用户可以使用插件创建模块150创建插件(例如,将网页的特定于用户的部分插入一个插件)。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,搜索模块151可用于搜索与一个或多个搜索准则(例如,一个或多个用户指定的搜索项)匹配的文本、音乐、声音、图像、视频和/或存储器102内的其它文件。
结合触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,记事本模块153可用于创建和管理记事本、日程列表等。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147,地图模块154可用于接收、显示、修改和存储地图和与地图相关联的数据(例如,驾驶方向;关于特定位置处或附近的商店和其它感兴趣的地点的数据;和其它基于位置的数据)。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155允许用户访问、浏览、接收(例如,通过流传输和/或下载)、回放(例如,在触摸屏上或通过外部端口124在外部连接的显示器上)、发送具有到特定在线视频的链接的电子邮件、以及以其他方式管理一种或多种文件格式诸如H.264的在线视频。在某些实施例中,即时消息发送模块141,而不是电子邮件客户端模块140,被用于发送到特定在线视频的链接。对在线视频应用的附加描述可见于于2007年6月20日提交的美国临时专利申请No.60/936,562,“PortableMultifunctionDevice,Method,andGraphicalUserInterfaceforPlayingOnlineVideos”和于2007年12月31日提交的美国专利申请No.11/968,067,“PortableMultifunctionDevice,Method,andGraphicalUserInterfaceforPlayingOnlineVideos”,通过引用将其内容完整结合在此。
每个上面标识出的模块和应用相应于用于执行上述的一个或多个功能和本申请中描述的方法(例如,此处描述的以计算机实现的方法和其它信息处理方法)的指令集合。这些模块(即,指令集合)不必被实现为单独的软件程序、过程或模块,并且因此可以在各种实施例中组合或以其他方式重新布置这些模块的各种子集。例如,视频播放器模块145可与音乐播放器模块146一起组合到单个模块内(例如,图1B的视频和音乐播放器模块152)。在某些实施例中,存储器102可以存储上面标识出的模块和数据结构的子集。另外,存储器102可以存储上面未描述的附加模块和数据结构。
在某些实施例中,设备100是这样的设备,其中该设备上的预定功能集合的操作可排它地通过触摸屏112和/或触控板被执行。通过使用触摸屏和/或触控板作为设备100的操作的主要输入/控制设备,可以减少设备100上的物理输入/控制设备(诸如,按压按钮、刻度盘等)的数目。
可以排它地通过触摸屏和/或触控板执行的预定功能集合包括在用户界面之间导航。在某些实施例中,当被用户触摸时,触控板将设备100从可被显示在设备100上的任意用户界面导航到主菜单、主页(home)或根菜单。在这种实施例中,触控板可被称为“菜单按钮”。在某些其它实施例中,菜单按钮可以是物理按压按钮或其它物理输入/控制设备,而不是触控板。
图2示出了根据某些实施例的具有触摸屏112的便携式多功能设备100。触摸屏可以在用户界面(UI)200内显示一个或多个图形。在这个实施例中,以及在下面描述的其它实施例中,用户可以通过例如以一个或多个手指202(在图中未按比例示出)或一个或多个输入笔203(在图中未按比例示出)接触或触摸图形,选择一个或多个图形。在某些实施例中,当用户中断与一个或多个图形的接触时发生对一个或多个图形的选择。在某些实施例中,接触可以包括手势,诸如与设备100接触的手指的一个或多个敲击、一个或多个扫动(从左到右、从右到左、向上和/或向下)和/或滚动(从右到左、从左到右、向上和/或向下)。在某些实施例中,与图形的无意接触不能选择该图形。例如,当相应于选择的手势是敲击时,在应用图标上的扫过的扫动手势不能选择相应应用。
设备100还可以包括一个或多个物理按钮,诸如“home”或菜单按钮204。如前所述,菜单按钮204可用于导航到可在设备100上执行的一组应用中的任意应用136。可替换地,在某些实施例中,菜单按钮被实现为触摸屏112内的GUI内的软按键。
在一个实施例中,设备100包括触摸屏112、菜单按钮204、用于接通/关闭设备的电源并且锁定设备的按压按钮206、一个或多个音量调节按钮208、用户身份模块(SIM)卡插槽210、耳机插孔212、对接坞/充电外部端口124。按压按钮206可用于通过按下按压按钮206并且将该按钮保持在被按压状态一个预定的时间间隔接通/关闭设备的电源;通过按下该按钮并且在经过该预定时间间隔之前释放该按钮锁定该设备;和/或解锁该设备或启动解锁处理。在替换实施例中,设备100还可以通过麦克风113接受用于某些功能的激活或去活的口头输入。
图3是根据某些实施例,具有显示器和触敏表面的示例多功能设备的方框图。设备300不必是便携的。在某些实施例中,设备300是膝上计算机、台式计算机、平板计算机、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统或控制设备(例如,家庭或工业控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其它通信接口360、存储器370和用于互连这些组件的一个或多个通信总线320。通信总线320可以包括互连并且控制系统组件之间的通信的电路(有时称为芯片组)。设备300包括包含显示器340的输入/输出(I/O)接口330,显示器340通常是触摸屏显示器。I/O接口330还可以包括键盘和/或鼠标(或其它指针设备)350和触控板355。存储器370包括高速随机访问存储器,诸如DRAM、SRAM、DDRRAM或其它随机访问固态存储器设备;并且可以包括非易失存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪存设备或其它非易失固态存储设备。存储器370可以可选择地包括相对于一个或多个CPU310远程定位的一个或多个存储设备。在某些实施例中,存储器370存储类似于存储在便携式多功能设备100的存储器102(图1)内的程序、模块和数据结构的程序、模块和数据结构或其子集。另外,存储器370可以存储便携式多功能设备100的存储器102内不存在的附加程序、模块和数据结构。例如,设备300的存储器370可以存储绘画模块380、呈现模块382、字处理模块384、网站创建模块386、盘创作模块388和/或电子表格模块390,而便携式多功能设备100的存储器102(图1)可以不存储这些模块。
图3中的每个上述标识出的元件可被存储在一个或多个前面提到的存储器设备内。每个上面标识出的模块相应于用于执行上述功能的指令集合。上述标识出的模块或程序(即,指令集合)不必被实现为单独的软件程序、过程或模块,并且因此这些模块的各种子集可被组合或重新安排在各种实施例中。在某些实施例中,存储器370可以存储上面标识出的模块和数据结构的子集。另外,存储器370可以存储以上未描述的附加模块和数据结构。
现在将注意力指向可在便携式多功能设备100上实现的用户界面(“UI”)的实施例。
图4A和4B示出了根据某些实施例,便携式多功能设备100上的应用菜单的示例用户界面。可以在设备300上实现类似的用户界面。在某些实施例中,用户界面400A包括下列元素或其子集或超集:
·用于一个或多个无线通信的一个或多个信号强度指示器402,诸如蜂窝和Wi-Fi信号;
·时间404;
·蓝牙指示器405;
·电池状态指示器406;
·具有频繁使用的应用的图标的托盘408,所述应用诸如:
○电话138,其可以包括未接呼叫或语音邮件消息的数目的指示器414;
○电子邮件客户端140,其可以包括未读电子邮件的数目的指示器410;
○浏览器147;和
○音乐播放器146;和
·用于其它应用的图标,诸如:
○IM141;
○图像管理144;
○照相机143;
○视频播放器145;
○天气149-1;
○股票149-2;
○健身助手142;
○日历148;
○计算器149-3;
○闹钟149-4;
○字典149-5;和
○用户创建的插件149-6。
在某些实施例中,用户界面400B包括下列元素或其子集或超集:
·如上所述的402、404、405、406、141、148、144、143、149-3、149-2、149-1、149-4、410、414、138、140和147;
·地图154;
·记事本153;
·设置412,如下所述,其提供对设备100和其各种应用136的设置的访问;
·视频和音乐播放器模块152,也被称为iPod(苹果公司的注册商标)模块152;和
·在线视频模块155,也被称为YouTube(Google公司的注册商标)模块155。
图4C示出了具有与显示器450(例如,触摸屏显示器112)相分离的触敏表面451(例如,图3的写字板或触控板355)的设备(例如,图3的设备300)上的示例用户界面。虽然将参考触摸屏显示器112上的输入给出下面的许多例子(其中触敏表面和显示器被组合在一起),但是在某些实施例中,设备检测如图4C所示的与显示器相分离的触敏表面上的输入。在某些实施例中,触敏表面(例如,图4C中的451)具有相应于显示器(例如,450)上的主轴(例如,图4C中的453)的主轴(例如,图4C中的452)。根据这些实施例,设备检测与触敏表面451在相应于显示器上的相应位置的位置处的接触(例如,图4C中的460和462)(例如,在图4C中的460相应于468,以及462相应于470)。以这种方式,当触敏表面与显示器相分离时,设备使用设备在触敏表面(例如,图4C中的451)上检测到的用户输入(例如,接触460和462)操纵多功能设备的显示器(例如,图4C中的450)上的用户界面。应当理解,类似的方法可被用于此处描述的其它用户界面。
另外,虽然主要参考手指输入给出下面的例子(例如,手指接触、手指敲击手势、手指扫动手势),应当理解,在某些实施例中,一个或多个手指输入可被来自另一个输入设备的输入取代(例如,基于鼠标的输入或输入笔输入)。例如,可以用鼠标点击(例如,取代接触)以及随后的光标沿着扫动路径的运动(例如,取代接触的运动)取代扫动手势。作为另一个例子,可以用光标位于敲击手势的位置上时的鼠标点击取代敲击手势(例如,取代对接触的检测并且随后停止检测接触)。类似地,当同时检测多个用户输入时,应当理解,可以同时使用多个计算机鼠标,或可以同时使用鼠标和手指接触。
现在将注意力指向可在具有显示器和触敏表面的多功能设备,诸如设备300或便携式多功能设备100上实现的用户界面(“UI”)和相关处理的实施例。
图5A-5S示出了根据某些实施例,使用手势修改动作的示例用户界面。这些图中示出的用户界面被用于说明下面描述的处理,包括图6A-8B中所示的处理。
中间拖动手势、手势内的微手势和在整体手势内连续执行的其它手势修改动作,即在手势过程中,不失去与触敏输入表面的接触,提供了出于改变目的,诸如修改用户界面行为、改变可选显示项目等与用户界面交互的直观方法。在本公开中,对术语“中间拖动手势(mid-draggesture)”和“微手势(microgesture)”的使用指在整体手势内连续被执行的手势修改动作的形式,并且可被互换地使用。在本公开的某些情况下,术语“手势”还可被用于指中间拖动手势或微手势。
使用中间拖动手势减少了用户的认知负担,从而创建了更有效的人机接口。对于以电池操作的计算设备,使用户能够使用中间拖动手势更快和更高效的使用用户界面,从而节省了电能并且增加了电池充电之间的时间。
各种中间拖动手势、手势内的微手势和在整体手势内连续执行的其它手势修改动作可被用于任意适合的目的,包括但不限于,开关对齐导向线(guide)、快速进入(snapto)不同比例的显示模式、改变文档中的锚点、使用微手势作为对键盘上的功能键的替代、对齐网格(snap-to-grid)显示模式、给显示对象增加箭头或其它特征、快速进入各种旋转角度、在电子画布上拖动手指的同时给曲线增加控制点、响应检测到一个或多个微手势在当前接触点插入一个或多个显示对象、将设备转变到一系列两个或更多个操作模式中的下一个操作模式(例如,在文本到语音和显示示出模式、设置振铃音调、设置移动电话的自动应答、改变图形模式等之间转变)、控制游戏(例如,在以双指旋转手势驾驶的同时以微手势换挡、在武器列表中转变)、在转换图像的同时的缩放控制(例如,在各种医疗成像形式之间转换图像模式,例如MRI、荧光、CT扫描、PET扫描等,而不中断缩放级别)。
虽然图5A-5S中所示的例子示出了对打开或关闭对齐导向线的中间拖动手势和微手势的使用,此处描述的方法和技术可被应用于上面列出的各种例子,或用于任意适合的目的。
UI500A(图5A)示出了在多功能设备100上显示的示例用户界面UI500A。在这个例子中,该用户界面包括具有用户界面元素的电子文档,所述用户界面元素是显示的可移动对象,即圆501、矩形502和菱形503。在矩形502的一个拐角附近,用户在触摸屏112上进行了单个手指接触505,并且该设备已经检测到该接触。
UI500A还示出设备100检测到单个手指接触505在触摸屏112上的第一运动507。
UI500B(图5B)示出在检测到UI500A内的第一运动507之后,设备执行第一响应行为。在该情况下,第一响应行为是连同显示的对象圆501、矩形502和菱形503一起显示对齐导向线(例如,关于圆501的附属手柄501-a和501-b;关于矩形502的附属手柄502-a和502-b和扩展对齐导向线502-c和502-d;和关于菱形503的附属手柄503-a和503-b和扩展对齐导向线503-c)。
UI500B还示出在检测到第一运动507之后,设备100检测单个手指接触505的第二运动509。单个手指接触505的第二运动509不同于第一运动507。第二运动509是摆动手势,而第一运动507是旨在在电子文档内移动对象矩形502的拖动手势。
UI500C(图5C)示出在检测到单个手指接触505的第二运动509之后,设备响应第二手势在用户界面内执行第二响应行为。具体地,在这个例子中,不再显示对齐导向线。然而,在UI500B中,作为对单个手指接触505的第一运动507的第一响应行为显示对齐导向线。
这个例子示出第二运动509-摆动手势-是中间拖动手势,其使得用户“摆脱(shakeoff)”连同显示对象一起显示的对齐导向线,并且因此,修改第一响应行为。
UI500C还示出设备100检测到单个手指接触505的第三运动511,其中第三运动511相应于第一手势的第二部分。在这个例子中,第三运动511相应于第一手势的继续,其中用户将矩形502从电子文档内一个位置移动到另一个位置。
UI500C还示出根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。具体地,在这个例子中,第一响应行为是在移动对象时连同显示对象一起显示对齐导向线,然后在检测到“摆脱”对齐导向线的第二手势之后,不同于第一响应行为的第三响应行为是在移动对象时显示不带对齐导向线的显示对象。
UI500D-UI500E(图5D-E)示出矩形502已根据单个手指接触505的第三运动511被移动到新位置,并且在UI500E内,单个手指接触505已被从触摸屏112去除。
UI500F(图5F)示出了UI500A-UI500E中所示的中间手势修改的示例变型。在UI500F,在触摸屏112上检测到三指接触515-1、515-2和515-3。三指接触大体对齐排列在轴517上(出于清楚的目的,在图5F-5H中以可视线被示出)。在这个例子中,虽然示出了作为第一响应行为的对齐导向线的显示(例如,关于圆501的附属手柄501-a和501-b;关于矩形502的附属手柄502-a和扩展对齐导向线502-c和502-d;和关于菱形503的附属手柄503-a和503-b以及扩展对齐导向线503-f),但是出于简短起见忽略了对三指接触的第一移动的特定检测。
在UI500G(图5G)中,设备检测第二手势519,其中手指接触515-2已被从轴517移开,而其它两个手指接触515-1和515-3大体保持为对齐排列在轴517上。
在UI500H(图5H)中,在设备检测到手指接触515-2已被从轴517移开的第二手势519之后,在用户界面内执行第二行为,即,停止连同显示对象一起显示对齐导向线。
UI500H还示出设备检测三指接触的第三运动521,在这个例子中,其相应于在电子文档内移动矩形502的第一手势的第二部分(如上所述,未示出第一手势的第一部分)。在这个例子中,第一响应行为是在移动对象时连同显示对象一起显示对齐导向线(UI500F),然后响应检测到一个手指接触被从轴移开的第二手势(运动519),不再显示对齐导向线。
UI500I(图5I)示出响应第二手势519,矩形502已被移动到电子文档内的新位置。虽然出于简短的目的未示出手指,在根据运动521移动矩形502时,未显示对齐导向线。因此,设备响应三指接触的第三运动521,执行与第一响应行为(即,在移动对象时显示对齐导向线)不同的第三响应行为(即,在移动对象时不显示对齐导向线)。
UI500I还示出在矩形502移动到电子文档内的新位置之后,三指接触515-1、515-2和515-3已被从触摸屏112去除。
UI500I还示出在圆501上检测到单个手指手势523的第一部分。作为响应,根据手势523在用户界面内执行第一响应行为(即,连同显示的可移动对象圆501、矩形502和菱形503一起显示对齐导向线,包括关于圆501的附属手柄501-a和501-b以及扩展对齐导向线501-c和501-d)。
UI500J(图5J)示出在检测到单个手指手势的第一部分之后,设备检测到单个手指接触在触摸屏112上的面积525-1的增加。在这个例子中,单个手指接触的面积的增加是由于检测到相应于单个手指接触的手指的手指滚动所产生的单个手指接触的面积的扩大。换言之,用户在触摸屏112上向下滚动其手指,从而相应于单个手指接触的手指的一个指关节部分处于触摸屏112上。
UI500K(图5K)示出触摸屏112上的单个手指接触的面积525-2的进一步增加。在这个例子中,单个手指接触的面积的增加是由于检测到相应于单个手指接触的手指的手指滚动所产生的单个手指接触的面积的进一步扩大。换言之,用户更多地向下滚动其手指,从而相应于单个手指接触的手指的两个指关节部分处于触摸屏112上。
UI500L(图5L)示出触摸屏112上的单个手指接触的面积525-3的进一步增加。在这个例子中,单个手指接触的面积的增加是由于检测到相应于单个手指接触的手指的手指滚动所产生的单个手指接触的面积的进一步扩大。换言之,用户更多地向下滚动其手指,从而相应于单个手指接触的手指的三个指关节部分处于触摸屏112上。
UI500L还示出,响应检测到触摸屏112上的单个手指接触的面积525-1、525-2和525-3的增加,在用户界面内执行不同于第一响应行为的第二响应行为:即,不再显示对齐导向线。
UI500M-UI500O(图5M-5O)示出设备检测到触摸屏上的手指接触的面积减小到大体类似于第一面积523-1的面积523-2。在UI500M中,由于525-3(图5L)被从触摸屏112上去除,手指接触的面积减小了。在UI500N中,由于525-2(图5M)被从触摸屏112上去除,手指接触的面积再次减小。最后,在UI500O中,由于525-1已被减小到手指接触523-2,手指接触面积523-2是大体类似于第一面积523-1(图5I)的面积。
UI500O还示出相应于触摸屏112上的单个手指手势523-2的第二部分的手指手势527,手指手势527被以不同于第一行为的第三响应行为执行。如上所述,第一响应行为是显示带有对齐导向线的可移动对象。但是响应检测到单个手指接触的面积的增加,执行第二行为,即终止对齐导向线的显示。在这个例子中,手势527,即单个手指手势的第二部分,是将圆501移动到电子文档内的另一个位置的拖动手势。手势527被以不同于第一行为的第三响应行为执行。具体地,此处第三响应行为是显示不带对齐导向线的可移动对象。
虽然图5I-5O中的用户界面示出了响应检测到单个手指接触的三个面积增加,即525-1、525-2和525-3,执行第二响应行为的示例用户界面,某些实施例可以响应检测到单个手指接触的两个面积增加,例如525-1和525-2,执行第二响应行为。另外,替换实施例可以响应仅检测到单个手指接触的一个面积增加,例如525-1,执行第二响应行为。
UI500P(图5P)示出了圆501根据手势527被移动到电子文档内的另一个位置,然后,设备检测到单个手指接触523的抬起。
UI500P还示出同时检测触摸屏112上的第一接触点530和第二接触点532的另一手势类型,其中第一和第二接触点定义了圆534周长的相对侧上的两个点(出于说明目的,在图5P-5Q中示出)。
UI500P还示出设备检测到具有两个接触点的第一手势的第一部分。具体地,在这个例子中,第一接触点530和第二接触点532分别通过运动530-1和532-1在屏幕上旋转。因此,在用户界面内执行第一响应行为,在这个例子中,其是连同显示的可移动对象一起显示对齐导向线,例如,关于菱形503的附属手柄503-a和扩展对齐导向线503-d和503-e。
UI500Q(图5Q)示出,在检测到第一手势的第一部分之后,设备检测以触敏表面上的第一和第二接触点中的一个形成的第二手势532-2,其中第二手势偏离圆534的周长。在这个特定例子中,仅以第二接触点532形成第二手势532-2。
UI500R(图5R)示出,在检测到第二手势532-2之后,在用户界面内执行不同于第一响应行为的第二响应行为。在这个例子中,如上所述,第一响应行为是连同显示的可移动对象一起显示对齐导向线。第二响应行为是停止连同显示的可移动对象一起显示对齐导向线。UI500R示出了停止连同显示的可移动对象一起显示对齐导向线。
UI500R还示出在检测到第二手势532-2之后,在触敏表面上检测到以第一和第二接触点形成的第一手势的第二部分,即第一接触点的运动530-2和第二接触点的运动532-3。
UI500S(图5S)示出根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。具体地,第一响应行为包括在旋转对象的同时,连同显示的可移动对象一起显示对齐导向线。此处的第三响应行为是在旋转对象的同时,显示不带对齐导向线的显示的可移动对象,并且因此是对第一响应行为的修改。
最后,UI500S示出,响应第一手势的第二部分,菱形503已被旋转到显示在用户界面内的电子文档内的新位置。
图6A-6B是示出了根据某些实施例,使用中间拖动手势的方法600的流程图。在具有显示器和触敏表面的多功能设备(例如,图3的设备300或图1的便携式多功能设备100)处执行方法600。在某些实施例中,显示器是触摸屏显示器,并且触敏表面在显示器上。在某些实施例中,显示器与触敏表面相分离。方法600中的某些操作可被组合在一起,和/或某些操作的顺序可被改变。
如下所述,方法600提供了一种出于改变目的使用中间拖动手势的直观方法,诸如修改用户界面行为、改变可选择地显示的项目等。该方法减小了修改用户界面行为时的用户认知负担,从而创建了更高效的人机界面。对于以电池操作的计算设备,使用户能够使用中间拖动手势更快和更高效的使用用户界面,从而节省了电能,并且增加了电池充电之间的时间。
设备在显示器上显示(602)用户界面(例如,图5A的UI500A)。
在某些实施例中,该用户界面包括电子文档(604)(例如,图5A,用户界面UI500A包括具有用户界面元素的电子文档,所述用户界面元素是显示的可移动对象,即圆501、矩形502和菱形503)。
在某些实施例中,该电子文档包括至少一个显示对象,并且该设备检测到触敏表面上的单个手指接触相应于显示对象在显示器上的位置;和设备根据触敏表面上的单个手指接触的第一运动在显示器上移动该显示对象(606)(例如,图5A,用户界面UI500A包括具有用户界面元素的电子文档,所述用户界面元素是显示的可移动对象,即圆501、矩形502和菱形503;图5C单个手指接触505的第三运动511;和图5D示出了矩形502根据单个手指接触505的第三运动511已被移动到新位置)。
在检测触敏表面上的单个手指接触的同时(608),设备可以执行如下所述的若干步骤。
设备检测(610)相应于触敏表面上的第一手势的第一部分的单个手指接触的第一运动(例如,图5A示出设备100检测触摸屏112上的单个手指接触505的第一运动507)。
设备根据第一手势的第一部分在用户界面内执行(612)第一响应行为(例如,图5B,示出了在检测到UI500A中的第一运动507之后,设备执行连同显示对象圆501、矩形502和菱形503一起显示对齐导向线的第一响应行为)。
在某些实施例中,第一响应行为包括连同显示对象一起显示一个或多个对齐导向线(614)(例如,图5B,示出在检测到UI500A中的第一运动507之后,设备执行连同显示对象圆501、矩形502和菱形503一起,显示对齐导向线的第一响应行为)。
在某些实施例中,一个或多个对齐导向线从显示对象向外延伸(616)(例如,图5B,关于矩形502的扩展对齐导向线502-c和502-d;关于菱形503的扩展对齐导向线503-c)。如UI500B所示,在某些实施例中,对齐导向线可以包括从显示对象向外延伸的线性投影。在某些实施例中,一个或多个对齐导向线可以包括显示对象上的附属手柄。在某些实施例中,一个或多个对齐导向线可以包括显示对象上的快速进入手柄。
在某些实施例中,第一响应行为包括在检测到显示对象与第二显示对象的接近程度小于预定距离阈值之后,显示对象的快速进入运动(618)。
在检测到第一运动之后,设备检测(622)触敏表面上的相应于与第一手势不同的第二手势的单个手指接触的第二运动(例如,在图5B中,设备100检测不同于图5A中的第一运动507的单个手指接触505的第二运动509)。
在某些实施例中,触敏表面上单个手指接触的第二运动是摆动手势(624)(例如,图5B第二运动509是摆动手势)。在某些实施例中,摆动手势是使得用户“摆脱”连同显示对象一起显示的对齐导向线的中间拖动手势。中间拖动手势包括在移动或拖动显示器上的对象的单个手指手势的中间期间发生的微手势,诸如摆动手势。另外,在下面讨论的图9中示出了示例的单个手指中间拖动手势。
在某些实施例中,触敏表面上的单个手指接触的第二运动将多功能设备转变到一系列两个或更多个操作模式中的下一个操作模式(626)。
在某些实施例中,该设备在检测到触敏表面上的单个手指接触的第二运动之后,提供操作模式改变指示(628)(例如,触敏表面上的单个手指接触的第二运动之后的视觉的、声音的或触觉反馈)。
设备响应第二手势在用户界面内执行(630)第二响应行为,其中第二响应行为不同于第一响应行为(例如,在图5C中,在检测到单个手指接触505的第二运动509之后,设备在用户界面内执行第二响应行为,即不再显示对齐导向线)。
在某些实施例中,第二响应行为包括终止一个或多个对齐导向线的显示(632)(例如,在图5C中,在检测到单个手指接触505的第二运动509之后,设备在用户界面内执行第二响应行为,即不再显示对齐导向线)。
在检测到第二运动之后,设备检测(634)触敏表面上的单个手指接触的第三运动,其中第三运动相应于第一手势的第二部分(例如,图500C示出设备100检测单个手指接触505的第三运动511,其中第三运动511相应于第一手势的第二部分)。
在某些实施例中,第三运动相应于第一手势的继续(635)(例如,500C示出设备100检测到相应于第一手势的继续的单个手指接触505的第三运动511)。
设备根据第一手势的第二部分在用户界面内执行(636)第三响应行为,其中第三响应行为不同于第一响应行为(例如,图5C,其中不同于第一响应行为的第三响应行为是在移动对象时示出不带对齐导向线的显示对象)。
在某些实施例中,响应第二手势发生的响应行为改变发生在第一手势完成之前。例如,第一手势可以包括第一部分和第二部分,它们被以与该第一部分和第二部分相连的第二手势中断。在该情况下,设备通过在第一手势的第二部分之前调整或修改用户界面内的响应行为,来响应第二手势。
在某些实施例中,第三响应行为是对第一响应行为的改变(例如,修改)(638)(例如,在图5A-5C的例子中,第一响应行为是当移动对象时,连同显示对象一起显示对齐导向线,并且第三响应行为是通过在移动对象时显示不带对齐导向线的显示对象,来修改第一响应行为)。
在某些实施例中,在第一手势的第二部分的终止之后,设备回复(640)为响应检测到大体类似于第一手势的新手势,以第一响应行为响应。换言之,响应行为模式改变在第一手势的第二部分期间持续。例如,使用对齐导向线的例子,这些实施例可以:
·通过连同对象一起显示对齐导向线,响应第一对象拖动手势的第一部分。
·通过停止连同对象一起显示对齐导向线,响应中间拖动摆动手势。
·通过在第一对象拖动手势的范围期间显示不带对齐导向线的对象,响应第一对象拖动手势的第二部分。
·通过连同对象一起显示对齐导向线,响应第二个对象拖动手势的第一部分。
图6C是示出了根据某些实施例,使用中间拖动手势的方法650的流程图。在具有显示器和触敏表面的多功能设备(例如,图3的设备300,或图1的便携式多功能设备100)处执行方法650。在某些实施例中,显示器是触摸屏显示器,并且触敏表面在显示器上。在某些实施例中,显示器与触敏表面相分离。方法650中的某些操作可被组合在一起,和/或某些操作的顺序可被改变。
如下所述,方法650提供了一种出于改变目的使用中间拖动手势的直观方法,诸如修改用户界面行为、改变可选择地显示的项目等。该方法减小了用户认知负担,从而创建了更高效的人机界面。对于以电池操作的计算设备,使用户能够使用中间拖动手势更快和更高效的使用用户界面,从而节省了电能,并且增加了电池充电之间的时间。
设备在显示器上显示(652)用户界面(例如,图5F的用户界面UI500F)。
在检测触敏表面上的三指接触的同时,其中所述三指接触大体对齐排列在一个轴上(654),该设备可以执行下面描述的若干步骤(例如,图5F,检测触摸屏112上的并且大体对齐排列在轴517上的手指接触515-1、515-2和515-3)。
设备检测(656)相应于触敏表面上的第一手势的第一部分的三指接触的第一运动。
设备根据第一手势的第一部分在用户界面内执行(658)第一响应行为(例如,图5F示出作为第一响应行为的对齐导向线的显示,即,关于圆501的附属手柄501-a和501-b;关于矩形502的附属手柄502-a和扩展对齐导向线502-c和502-d;以及关于菱形503的附属手柄503-a和503-b以及扩展对齐导向线503-f)。
在检测到第一运动之后,设备检测(660)第二手势,第二手势是三指接触中的一个接触离开该轴的运动(即,当三指接触中的一个接触移开该轴时,其它两个接触保持为大体对齐排列在该轴上)(例如,图5G,设备检测到第二手势519,其中手指接触515-2已经离开轴517,而其它两个手指接触515-1和515-3保持为大体对齐排列在轴517上)。
设备响应第二手势在用户界面内执行(662)第二响应行为,其中第二响应行为不同于第一响应行为(例如,图5H,其中用户界面停止连同显示对象一起显示对齐导向线)。
在检测到第二手势之后,设备检测(664)触敏表面上的三指接触的第三运动,其中第三运动相应于第一手势的第二部分或其继续(例如,图5H,其中设备检测相应于第一手势的第二部分的三指接触的第三运动521)。
设备根据第一手势的第二部分在用户界面内执行(666)第三响应行为,其中第三响应行为不同于第一响应行为(例如,在从图5H到图5I的转变中,在根据运动521移动矩形502时,不显示对齐导向线)。
虽然出于简短的目的未被包括,但在不专有地依赖于单个手指接触的方面来说,相对于方法600所讨论的许多相同方法变型也可被应用于方法650。
图7是示出了根据某些实施例,使用中间拖动手势的方法700的流程图。在具有显示器和触敏表面的多功能设备(例如,图3的设备300,或图1的便携式多功能设备100)处执行方法700。在某些实施例中,显示器是触摸屏显示器,并且触敏表面在显示器上。在某些实施例中,显示器与触敏表面相分离。方法700中的某些操作可被组合在一起,和/或某些操作的顺序可被改变。
如下所述,方法700提供了一种出于改变目的使用中间拖动手势的直观方法,诸如修改用户界面行为、改变可选择地显示的项目等。该方法减小了用户认知负担,从而创建了更高效的人机界面。对于以电池操作的计算设备,使用户能够使用中间拖动手势更快和更高效的使用用户界面,从而节省了电能,并且增加了电池充电之间的时间。
设备在显示器上显示(702)用户界面(例如,图5I包括触摸屏112上的UI500I的显示)。
设备检测(704)触敏表面上的单个手指手势的第一部分,其中该单个手指手势具有第一面积的手指接触(例如,图5I,在圆501上检测到单个手指手势523,并且单个手指手势523具有第一面积523-1)。
设备根据第一手势的第一部分在用户界面内执行(706)第一响应行为(例如,图5I,根据手势523在用户界面内执行第一响应行为,即,连同显示的可移动对象圆501、矩形502和菱形503一起显示对齐导向线,包括关于圆501的附属手柄501-a和501-b以及扩展对齐导向线501-c和501-d)。
在检测到单个手指手势的第一部分之后,设备检测(708)触敏表面上单个手指接触的面积的增加(例如,图5J,检测触摸屏112上的单个手指接触523的面积525-1的增加)。
在某些实施例中,检测触敏表面上的单个手指接触的面积的增加包括检测由于相应于单个手指接触的手指的手指滚动的单个手指接触的面积的扩大(710)(例如,图5J,其中检测到单个手指接触523的面积525-1的增加是由于相应于单个手指接触的手指的手指滚动)。
在某些实施例中,手指滚动包括包含相应于单个手指接触的手指的两个或更多个指节部分(712)(例如,图5J面积525-1的增加是单个指节部分,图5K面积525-2的增加是第二指节部分,并且在图5L中,面积525-3的增加是第三个指节部分)。
响应检测到单个手指接触的面积增加,设备在用户界面内执行(714)不同于第一响应行为的第二响应行为(图5L示出在用户界面内执行不同于第一响应行为的第二响应行为:即不再显示对齐导向线)。
在检测到单个手指接触的面积的增加之后,并且在检测到触敏表面上的单个手指手势的第二部分之前,设备检测触敏表面上的手指接触面积减小到大体类似于第一面积的面积(716)(例如,从图5N的手指接触525-1转变到图5O的手指接触523-2,其面积大体类似于523-1)。
在检测到单个手指接触的面积增加之后,设备检测(718)触敏表面上的单个手指手势的第二部分(例如,相应于触摸屏112上的单个手指手势523-2的第二部分的图5O的手指手势527)。
设备根据单个手指手势的第二部分在用户界面内执行(720)第三响应行为,其中第三响应行为不同于第一响应行为(例如,以不同于第一行为的第三响应行为执行手指手势527,即,第三响应行为是显示不带对齐导向线的可移动对象)。
图8A-8B是示出了根据某些实施例,使用中间拖动手势的方法800的流程图。在具有显示器和触敏表面的多功能设备(例如,图3的设备300,或图1的便携式多功能设备100)处执行方法800。在某些实施例中,显示器是触摸屏显示器,并且触敏表面在显示器上。在某些实施例中,显示器与触敏表面相分离。方法800中的某些操作可被组合在一起,和/或某些操作的顺序可被改变。
如下所述,方法800提供了一种出于改变目的使用中间拖动手势的直观方法,诸如修改用户界面行为、改变可选择地显示的项目等。该方法减小了用户认知负担,从而创建了更高效的人机界面。对于以电池操作的计算设备,使用户能够使用中间拖动手势更快和更高效的使用用户界面,从而节省了电能,并且增加了电池充电之间的时间。
设备在显示器上显示(802)用户界面(例如,图5P的UI500P)。
在同时检测到触敏表面上的第一接触点和第二接触点的同时,其中第一和第二接触点定义了圆周长的相对侧上的两个点(804),设备可以执行下面描述的步骤(例如,图5P示出设备同时检测到触摸屏112上的第一接触点530和第二接触点532,其中第一和第二接触点定义圆534周长相对侧上的两个点)。
设备检测(806)以触敏表面上的第一和第二接触点中的至少一个形成的第一手势的第一部分(例如,图5P示出第一手势的第一部分,其中第一接触点530和第二接触点532分别通过运动530-1和532-1在屏幕上旋转)。
设备根据第一手势在用户界面内执行(808)第一响应行为(例如,图5P在用户界面内执行第一响应行为,即连同菱形503一起显示对齐导向线,即附属手柄503-a和扩展对齐导向线503-d和503-e)。
在检测到第一手势的第一部分之后,检测以触敏表面上的第一和第二接触点中的至少一个形成的第二手势,其中第二手势偏离、脱离、穿过或越过圆的周长(810)(例如,图5Q,以第二接触点532形成的、偏移圆534的周长的第二手势532-2)。
在某些实施例中,仅以第一接触点形成第二手势(812)。在某些实施例中,第二手势选自由径向记号(tick)和切线记号组成的组(814)。在某些实施例中,仅以第二接触点形成第二手势(816)。在某些实施例中,第二手势选自从径向记号和切线记号组成的组(818)。在某些实施例中,第二手势由第一和第二接触点形成(820)。在某些实施例中,第二手势选自从双指径向记号和双指切线记号组成的组(822)。
在某些实施例中,第一和第二接触点定义一个轴,并且以触敏表面上的第一和第二接触点中的至少一个形成的第二手势包括第一和第二接触点中的一个或多个垂直于该轴的运动(824)。在某些实施例中,第一和第二接触点定义一个轴,并且以触敏表面上的第一和第二接触点中的至少一个形成的第二手势包括第一和第二接触点中的一个或多个平行于该轴的运动(826)。
设备响应第二手势在用户界面内执行(828)第二响应行为,其中第二响应行为不同于第一响应行为(例如,图5R,在UI500R中示出停止连同显示的可移动对象一起显示对齐导向线作为第二响应行为)。
在检测到第二手势之后,设备检测(830)触敏表面上以第一和第二接触点形成的第一手势的第二部分(例如,图5R,第一接触点的运动530-2和第二接触点的运动532-3)。
设备根据第一手势的第二部分在用户界面内执行(832)第三响应行为,其中第三响应行为不同于第一响应行为(例如,在图5P中,第一响应行为包括在旋转对象的同时,连同显示的可移动对象一起显示对齐导向线;在图5R中,第三响应行为是在旋转对象的同时,显示不带对齐导向线的显示的可移动对象,并且因此与第一响应行为不同)。
第三响应行为是对第一响应行为的修改(834)(例如,在图5P中,第一响应行为包括在旋转对象的同时,连同显示的可移动对象一起显示对齐导向线;在图5R中,第三响应行为是在旋转对象的同时,显示不带对齐导向线的显示的可移动对象,并且因此是对第一响应行为的修改)。
图9是根据某些实施例的单个手指中间拖动手势的一组示例图示。
·图9a示出了“摆动形”中间拖动手势,其包括任意方向上的具有突然改变的多个短的运动;
·图9b示出了半圆形或“勺形”中间拖动手势;
·图9c示出了顺时针和逆时针环形中间拖动手势两者;
·图9d示出了“回撤形”中间拖动手势;
·图9e示出了“无限大形”中间拖动手势;
·图9f示出了“箭头形”中间拖动手势;
·图9g示出了“星形”中间拖动手势;
·图9h示出了“十字形”中间拖动手势;和
·图9i示出了“欧姆形”中间拖动手势。
前述单个手指手势中的任意一个可被用于此处讨论的方法和设备,并且可以设想其它方便的单个手指手势,并且它们落在本公开的范围内。
图10是根据某些实施例的双指微手势的一组示例图示。
·图10a示出了具有第一手指接触微手势的“径向记号”;
·图10b示出了具有第二手指接触微手势的“径向记号”;
·图10c示出了具有两种手指接触微手势的“径向记号”;
·图10d示出了具有第一手指接触微手势的“切向记号”;
·图10e示出了具有第二手指接触微手势的“切向记号”;和
·图10f示出了具有两种手指接触微手势的“切向记号”。
前述双指手势中的任意一个可被用于此处讨论的方法和设备,并且可以设想其它方便的双指手势,并且它们落在本公开的范围内。
图11示出了根据某些实施例的三指微手势的一组示例图示。
·图11a示出了具有第一手指接触微手势的“轴向记号”;
·图11b示出了具有第二手指接触微手势的“轴向记号”;
·图11c示出了具有第三手指接触微手势的“轴向记号”;
·图11d示出了具有第一手指接触微手势的“离轴记号”;
·图11e示出了具有第二手指接触微手势的“离轴记号”;
·图11f示出了具有第三手指接触微手势的“离轴记号”;
·图11g示出了具有第一手指接触的圆形微手势;
·图11h示出了具有第二手指接触的圆形微手势;
·图11i示出了具有第三手指接触的圆形微手势;
前述三指手势中的任意一个可被用于此处讨论的方法和设备,并且可以设想其它方便的三指手势,并且它们落在本公开的范围内。
可以通过在诸如通用处理器或专用芯片的信息处理装置内运行一个或多个功能模块,实现上面描述的信息处理方法的步骤。这些模块、这些模块的组合和/或它们与通用硬件的组合(例如,如上面参考图1A、1B和3所述)全部包括在本发明的保护范围内。
举例来说,根据某些实施例,图12示出了根据本发明原理配置的多功能设备1200。该多功能设备例如是图3的设备300或图1的便携式多功能设备100。虽然图12中未明确示出,多功能设备可包括通用处理器、专用芯片、微处理器或其它计算装置,以及存储实现本发明的原理的计算机可执行指令的存储器。
如图12中所示,多功能设备1200包括用于显示用户界面的显示单元1202;具有触敏表面的触摸感测单元1204;和多个响应单元1206-1210。根据本发明,多功能设备1200的触摸感测单元1204在检测触敏表面上的单个手指接触的同时,检测相应于触敏表面上的第一手势的第一部分的单个手指接触的第一运动。第一响应单元1206根据第一手势的第一部分在用户界面内执行第一响应行为。在检测到第一运动之后,所述触摸感测单元1204还检测触敏表面上的相应于第二手势的单个手指接触的第二运动,所述第二手势不同于第一手势。第二响应单元1208,响应第二手势在用户界面内执行第二响应行为,其中第二响应行为不同于第一响应行为。在检测到第二运动之后,所述触摸感测单元1204还检测触敏表面上的单个手指接触的第三运动,其中第三运动相应于第一手势的第二部分。以及第三响应单元,根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为。
根据本发明的多功能设备减小了修改用户界面行为时的用户认知负担,从而创建了更高效的人机界面。对于以电池操作的计算设备,使用户能够使用中间拖动手势更快和更高效的使用用户界面,从而节省了电能,并且增加了电池充电之间的时间。
已经出于解释的目的参考特定实施例描述了前面的描述。然而上述说明性讨论不旨在是无遗漏的或将本发明局限于公开的精确形式。根据上述教导可以有许多修改和变型。选择并且描述这些实施例,以便最好地解释本发明的原理和其特定应用,从而使得本领域技术人员能够最好地利用本发明和具有适合于构想的特定使用的各种修改的各种实施例。

Claims (21)

1.一种用于修改用户界面行为的方法,所述方法包括:
在显示器上显示用户界面;
在检测触敏表面上的单个手指接触的同时:
检测与触敏表面上的第一手势的第一部分相对应的单个手指接触的第一运动;
根据第一手势的第一部分在用户界面内执行第一响应行为;
在检测到第一运动之后,检测触敏表面上的与第二手势相对应的单个手指接触的第二运动,所述第二手势不同于第一手势;
响应第二手势在用户界面内执行第二响应行为,其中第二响应行为不同于第一响应行为;
在检测到第二运动之后,检测触敏表面上的单个手指接触的第三运动,其中第三运动与第一手势的第二部分相对应;和
根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为,
其中,所述第一运动、所述第二运动和所述第三运动在整体手势内连续执行以修改用户界面行为。
2.如权利要求1所述的方法,其中第三响应行为是对第一响应行为的变更。
3.如权利要求1所述的方法,其中第三运动与第一手势的延续相对应。
4.如权利要求1所述的方法,其中所述用户界面包括电子文档。
5.如权利要求4所述的方法,其中所述电子文档至少包括显示对象,并且所述方法还包括:
检测触敏表面上的单个手指接触与所述显示对象在显示器上的位置相对应;和
根据触敏表面上的单个手指接触的第一运动,在显示器上移动所述显示对象。
6.如权利要求5所述的方法,其中第一响应行为包括连同所述显示对象一起显示一条或多条对齐导向线。
7.如权利要求6所述的方法,其中第一响应行为包括在确定所述显示对象与第二显示对象的靠近程度小于预定距离阈值时所述显示对象的快速进入运动。
8.如权利要求1所述的方法,其中触敏表面上的单个手指接触的第二运动将多功能设备转变到两个或更多个操作模式系列中的下一个操作模式。
9.如权利要求8所述的方法,还包括:在检测到触敏表面上的单个手指接触的第二运动之后,提供操作模式改变指示。
10.如权利要求1所述的方法,还包括:
在第一手势的第二部分终止后,响应检测到类似于第一手势的新手势,回复到以第一响应行为进行响应。
11.一种用于修改用户界面行为的装置,所述装置包括:
用于在显示器上显示用户界面的部件;
在检测触敏表面上的单个手指接触的同时:
用于检测与触敏表面上的第一手势的第一部分相对应的单个手指接触的第一运动的部件;
用于根据第一手势的第一部分在用户界面内执行第一响应行为的部件;
用于在检测到第一运动之后,检测触敏表面上的与第二手势相对应的单个手指接触的第二运动的部件,所述第二手势不同于第一手势;
用于响应第二手势在用户界面内执行第二响应行为的部件,其中第二响应行为不同于第一响应行为;
用于在检测到第二运动之后,检测触敏表面上的单个手指接触的第三运动的部件,其中第三运动与第一手势的第二部分相对应;和
用于根据第一手势的第二部分在用户界面内执行第三响应行为的部件,其中第三响应行为不同于第一响应行为,
其中,所述第一运动、所述第二运动和所述第三运动在整体手势内连续执行以修改用户界面行为。
12.如权利要求11所述的装置,其中第三响应行为是对第一响应行为的变更。
13.如权利要求11所述的装置,其中第三运动与第一手势的延续相对应。
14.如权利要求11所述的装置,其中所述用户界面包括电子文档。
15.如权利要求14所述的装置,其中所述电子文档至少包括显示对象,并且所述装置还包括:
用于检测触敏表面上的单个手指接触与所述显示对象在显示器上的位置相对应的部件;和
用于根据触敏表面上的单个手指接触的第一运动,在显示器上移动所述显示对象的部件。
16.如权利要求15所述的装置,其中第一响应行为包括连同所述显示对象一起显示一条或多条对齐导向线。
17.如权利要求15所述的装置,其中第一响应行为包括在确定所述显示对象与第二显示对象的靠近程度小于预定距离阈值时所述显示对象的快速进入运动。
18.如权利要求11所述的装置,其中触敏表面上的单个手指接触的第二运动将多功能设备转变到两个或更多个操作模式系列中的下一个操作模式。
19.如权利要求18所述的装置,还包括用于在检测到触敏表面上的单个手指接触的第二运动之后,提供操作模式改变指示的部件。
20.如权利要求11所述的装置,还包括:
用于在第一手势的第二部分终止后,响应检测到类似于第一手势的新手势,回复到以第一响应行为进行响应的部件。
21.一种多功能设备,包括:
显示单元,用于显示用户界面;和
具有触敏表面的触摸感测单元,其中,在检测触敏表面上的单个手指接触的同时,用于检测与触敏表面上的第一手势的第一部分相对应的单个手指接触的第一运动;在检测到第一运动之后,检测触敏表面上的与第二手势相对应的单个手指接触的第二运动,所述第二手势不同于第一手势;在检测到第二运动之后,检测触敏表面上的单个手指接触的第三运动,其中第三运动与第一手势的第二部分相对应;
第一响应单元,根据第一手势的第一部分在用户界面内执行第一响应行为;
第二响应单元,响应第二手势在用户界面内执行第二响应行为,其中第二响应行为不同于第一响应行为;和
第三响应单元,根据第一手势的第二部分在用户界面内执行第三响应行为,其中第三响应行为不同于第一响应行为,
其中,所述第一运动、所述第二运动和所述第三运动在整体手势内连续执行以修改用户界面行为。
CN201010292409.7A 2009-09-25 2010-09-25 用于修改用户界面行为的方法、装置及多功能设备 Expired - Fee Related CN102169382B (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US12/567,689 2009-09-25
US12/567,689 US20110074695A1 (en) 2009-09-25 2009-09-25 Device, Method, and Graphical User Interface Using Mid-Drag Gestures
US12/567,695 US20110074696A1 (en) 2009-09-25 2009-09-25 Device, Method, and Graphical User Interface Using Mid-Drag Gestures
US12/567,677 US20110074830A1 (en) 2009-09-25 2009-09-25 Device, Method, and Graphical User Interface Using Mid-Drag Gestures
US12/567,695 2009-09-25
US12/567,677 2009-09-25

Publications (2)

Publication Number Publication Date
CN102169382A CN102169382A (zh) 2011-08-31
CN102169382B true CN102169382B (zh) 2016-01-13

Family

ID=43048875

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201010292409.7A Expired - Fee Related CN102169382B (zh) 2009-09-25 2010-09-25 用于修改用户界面行为的方法、装置及多功能设备

Country Status (4)

Country Link
EP (1) EP2306284B1 (zh)
CN (1) CN102169382B (zh)
HK (1) HK1156125A1 (zh)
WO (1) WO2011037733A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB201106380D0 (en) * 2011-04-15 2011-06-01 Nokia Corp An apparatus, method, computer program and user interface
CN113051911B (zh) * 2021-03-23 2023-10-10 北京百度网讯科技有限公司 提取敏感词的方法、装置、设备、介质及程序产品

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101526881A (zh) * 2008-03-04 2009-09-09 苹果公司 使用手势选择文本

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
US5757368A (en) * 1995-03-27 1998-05-26 Cirque Corporation System and method for extending the drag function of a computer pointing device
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
EP1717677B1 (en) 1998-01-26 2015-06-17 Apple Inc. Method and apparatus for integrating manual input
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
JP2007128497A (ja) * 2005-10-05 2007-05-24 Sony Corp 表示装置および表示方法
KR100791287B1 (ko) * 2005-10-26 2008-01-04 삼성전자주식회사 그래픽 객체의 3차원 동작을 제어하는 장치 및 방법
US8169421B2 (en) * 2006-06-19 2012-05-01 Cypress Semiconductor Corporation Apparatus and method for detecting a touch-sensor pad gesture
US8564544B2 (en) * 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7956847B2 (en) * 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US8970503B2 (en) * 2007-01-05 2015-03-03 Apple Inc. Gestures for devices having one or more touch sensitive surfaces
KR101391602B1 (ko) * 2007-05-29 2014-05-07 삼성전자주식회사 터치 스크린 기반의 사용자 인터페이스 인터렉션 방법 및 멀티 미디어 단말 기기
US8681104B2 (en) * 2007-06-13 2014-03-25 Apple Inc. Pinch-throw and translation gestures

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101526881A (zh) * 2008-03-04 2009-09-09 苹果公司 使用手势选择文本

Also Published As

Publication number Publication date
WO2011037733A1 (en) 2011-03-31
CN102169382A (zh) 2011-08-31
EP2306284B1 (en) 2015-08-26
EP2306284A1 (en) 2011-04-06
HK1156125A1 (zh) 2012-06-01

Similar Documents

Publication Publication Date Title
US11947782B2 (en) Device, method, and graphical user interface for manipulating workspace views
CN102033698B (zh) 滚动多节文档的方法和装置及多功能设备
CN102063253B (zh) 用于管理并行打开的软件应用的方法和相关设备
CN103052935B (zh) 用于对对象的前后位置进行重新排序的装置、方法和图形用户接口
US9569102B2 (en) Device, method, and graphical user interface with interactive popup views
CN102763074B (zh) 自动键盘布局确定
CN102725724B (zh) 缩放用户界面内容的设备、方法和图形用户界面
US8661362B2 (en) Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US8799826B2 (en) Device, method, and graphical user interface for moving a calendar entry in a calendar application
CN102414755B (zh) 用于编辑电子消息中的音频或视频附件的设备、方法和图形用户界面
CN102016777B (zh) 在便携式多功能设备上进行编辑的方法和装置
US20130002592A1 (en) Smart Keyboard Management for a Multifunction Device with a Touch Screen Display
US20110145768A1 (en) Device, Method, and Grahpical User Interface for Managing User Interface Content and User Interface Elements
CN105144071A (zh) 用于管理同时打开的软件应用程序的设备、方法、和图形用户界面
CN105393201A (zh) 用于管理同时打开的软件应用的设备、方法和图形用户界面
CN102169382B (zh) 用于修改用户界面行为的方法、装置及多功能设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160113

Termination date: 20170925