CN103052935A - 用于对对象的前后位置进行重新排序的装置、方法和图形用户接口 - Google Patents

用于对对象的前后位置进行重新排序的装置、方法和图形用户接口 Download PDF

Info

Publication number
CN103052935A
CN103052935A CN2011800374748A CN201180037474A CN103052935A CN 103052935 A CN103052935 A CN 103052935A CN 2011800374748 A CN2011800374748 A CN 2011800374748A CN 201180037474 A CN201180037474 A CN 201180037474A CN 103052935 A CN103052935 A CN 103052935A
Authority
CN
China
Prior art keywords
touch
order
contact
corresponding object
sensitive surface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800374748A
Other languages
English (en)
Other versions
CN103052935B (zh
Inventor
查尔斯·J·米格斯
杰伊·克里斯托弗·卡佩拉
克里斯托弗·道格拉斯·维尔德来耶
威廉·约翰·蒂博柏
伊丽莎白·格洛丽亚·瓜里诺·里德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Publication of CN103052935A publication Critical patent/CN103052935A/zh
Application granted granted Critical
Publication of CN103052935B publication Critical patent/CN103052935B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

在具有显示器和触敏表面的多功能装置处,在所述显示器上显示多个对象。所述多个对象具有第一层次序。在所述触敏表面上的对应于所述多个对象中的相应对象的位置的位置处检测第一接触。在检测到所述第一接触时,在所述触敏表面上检测包含第二接触的手势。响应于检测到所述手势,根据所述手势对所述多个对象进行重新排序以产生不同于所述第一层次序的第二层次序。在一些实施例中,所述相应对象在所述第一次序内的位置不同于所述相应对象在所述第二次序内的位置。

Description

用于对对象的前后位置进行重新排序的装置、方法和图形用户接口
技术领域
本发明大体上涉及具有触敏表面的电子装置,包含(但不限于)具有用于对显示器上的对象的前后位置进行重新排序的触敏表面的电子装置。
背景技术
近年来,将触敏表面用作用于计算机和其它电子计算装置的输入装置已显著增加。示范性触敏表面包含触摸板和触摸屏显示器。此些表面广泛用于操纵显示器上的用户接口对象。
示范性操纵包含调整一个或一个以上用户接口对象的层次序(即,用户接口对象的z次序或前后次序)。示范性用户接口对象包含数字图像、视频、文本、图标和其它图形。用户可能需要在操作系统图形用户接口(例如,来自加利福尼亚州库比迪诺的苹果公司的用于Mac OS X的用户接口,或来自加利福尼亚州库比迪诺的苹果公司的用于iOS的用户接口)、文件管理程序(例如,来自加利福尼亚州库比迪诺的苹果公司的Finder)、图像管理应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的Aperture或iPhoto)、数字内容(例如,视频和音乐)管理应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的iTunes)、绘图应用程序、呈现应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的Keynote)、字处理应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的Pages)、网站创建应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的iWeb)、磁盘创作应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的iDVD),或电子表格应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的Numbers)中对用户接口对象执行此些操纵。
但是,用于对用户接口对象的前后位置进行重新排序的现有方法是烦琐且低效的。举例来说,使用一系列基于鼠标的输入来选择一个或一个以上用户接口对象且对选定的用户接口对象进行重新排序是乏味的,且对用户产生显著的认知负担。另外,现有方法花费不必要长的时间,进而浪费能量。在靠电池操作的装置中,此后一考虑因素特别重要。
发明内容
因此,需要具有用于对用户接口对象的前后位置进行重新排序的更快速、更高效的方法和接口的计算装置。此些方法和接口可补充或取代用于对对象进行重新排序的常规方法。此些方法和接口减少对用户的认知负担,且产生更高效的人机接口。对于靠电池操作的计算装置,此些方法和接口节省电力且增加电池充电之间的时间。
通过所揭示的装置来减少或消除与具有触敏表面的计算装置的用户接口相关联的以上缺陷和其它问题。在一些实施例中,所述装置是桌上型计算机。在一些实施例中,所述装置是便携式的(例如,笔记本计算机、平板计算机或手持式装置)。在一些实施例中,所述装置具有触摸板。在一些实施例中,所述装置具有触敏显示器(还称为“触摸屏”或“触摸屏显示器”)。在一些实施例中,所述装置具有图形用户接口(GUI)、一个或一个以上处理器、存储器和存储于存储器中的用于执行多个功能的一个或一个以上模块、程序或指令集。在一些实施例中,用户主要经由触敏表面上的手指接触和手势来与GUI交互。在一些实施例中,所述功能可包含图像编辑、绘图、呈现、字处理、网站创建、光盘创作、电子表格制成、玩游戏、打电话、视频会议、发电子邮件、即时消息接发、锻炼支持、数字拍照、数字视频、网络浏览、数字音乐播放,和/或数字视频播放。用于执行这些功能的可执行指令可包含于计算机可读存储媒体或经配置以用于供一个或一个以上处理器执行的其它计算机程序产品中。
根据一些实施例,一种多功能装置包含显示器、触敏表面、一个或一个以上处理器、存储器,以及一个或一个以上程序。所述一个或一个以上程序存储于所述存储器中,且经配置以由所述一个或一个以上处理器执行。所述一个或一个以上程序包含用于以下操作的指令:在显示器上显示多个对象。所述多个对象具有第一层次序。“层次序”还被称为对象的“z次序”或“前后次序”。所述一个或一个以上程序进一步包含用于以下操作的指令:在触敏表面上的对应于显示器上的相应对象的位置的位置处检测第一接触;以及,在检测到所述第一接触时,检测包含触敏表面上的第二接触的手势。所述一个或一个以上程序还包含用于以下操作的指令:响应于检测到所述手势,根据所述手势对所述多个对象进行重新排序以产生不同于所述第一层次序的第二层次序。
根据一些实施例,在具有显示器和触敏表面的多功能装置处执行一种方法。所述方法包含:在显示器上显示多个对象。所述多个对象具有第一层次序。所述方法进一步包含:在触敏表面上的对应于显示器上的相应对象的位置的位置处检测第一接触;以及,在检测到所述第一接触时,检测包含触敏表面上的第二接触的手势。所述方法还包含:响应于检测到所述手势,根据所述手势对所述多个对象进行重新排序以产生不同于所述第一层次序的第二层次序。
根据一些实施例,一种计算机可读存储媒体具有存储于其中的指令,所述指令在由具有显示器和触敏表面的多功能装置执行时致使所述装置:在显示器上显示多个对象。所述多个对象具有第一层次序。所述指令进一步致使所述装置:在触敏表面上的对应于显示器上的相应对象的位置的位置处检测第一接触;以及,在检测到所述第一接触时,检测包含触敏表面上的第二接触的手势。所述指令还致使所述装置:响应于检测到所述手势,根据所述手势对所述多个对象进行重新排序以产生不同于所述第一层次序的第二层次序。
根据一些实施例,具有显示器、触敏表面、存储器和用以执行存储于所述存储器中的一个或一个以上程序的一个或一个以上处理器的多功能装置上的图形用户接口包含多个对象。所述多个对象具有第一层次序。在触敏表面上的对应于显示器上的相应对象的位置的位置处检测第一接触。在检测到所述第一接触时,在触敏表面上检测包含第二接触的手势。响应于检测到所述手势,根据所述手势对所述多个对象进行重新排序以产生不同于所述第一层次序的第二层次序。
根据一些实施例,一种多功能装置包含:显示器;触敏表面;用于在显示器上显示多个对象的构件。所述多个对象具有第一层次序。所述多功能装置进一步包含:用于在触敏表面上的对应于显示器上的相应对象的位置的位置处检测第一接触的构件;以及,用于在检测到所述第一接触时检测包含触敏表面上的第二接触的手势的构件。所述多功能装置还包含:用于响应于检测到所述手势而根据所述手势对所述多个对象进行重新排序以产生不同于所述第一层次序的第二层次序的构件。
根据一些实施例,一种用于在具有显示器和触敏表面的多功能装置中使用的信息处理设备,其包含:用于在显示器上显示多个对象的构件。所述多个对象具有第一层次序。所述信息处理设备进一步包含:用于在触敏表面上的对应于显示器上的相应对象的位置的位置处检测第一接触的构件;以及,用于在检测到所述第一接触时检测包含触敏表面上的第二接触的手势的构件。所述信息处理设备还包含:用于响应于检测到所述手势而根据所述手势对所述多个对象进行重新排序以产生不同于所述第一层次序的第二层次序的构件。
根据一些实施例,一种电子装置包含:显示单元,其经配置以显示多个对象,其中所述多个对象具有第一层次序;触敏表面单元,其经配置以接收接触和手势;以及处理单元,其耦合到所述显示单元和所述触敏表面单元。所述处理单元经配置以:在触敏表面单元上的对应于显示单元上的相应对象的位置的位置处检测第一接触;在检测到所述第一接触时,在触敏表面单元上检测包含第二接触的手势;以及,响应于检测到所述手势,根据所述手势对所述多个对象进行重新排序以产生不同于所述第一层次序的第二层次序。
因此,向具有显示器和触敏表面的多功能装置提供了用于用于使用两个或两个以上同时用户输入对用户接口对象进行重新排序的更快速、更高效的方法和接口,进而增加了效能、效率和用户对此些装置的满意度。此些方法和接口可补充或取代用于对对象进行重新排序的常规方法。
附图说明
为了更好地理解本发明的前述实施例以及其额外实施例,应结合下图参考以下具体实施方式,在图中,相同的参考数字指代所有图中的对应部分。
图1A和1B是说明根据一些实施例的具有触敏显示器的便携式多功能装置的框图。
图1C是说明根据一些实施例的用于事件处置的示范性组件的框图。
图2说明根据一些实施例的具有触摸屏的便携式多功能装置。
图3是根据一些实施例的具有显示器和触敏表面的示范性多功能装置的框图。
图4A和4B说明根据一些实施例的便携式多功能装置上的应用程序的菜单的示范性用户接口。
图4C说明根据一些实施例的具有与显示器分开的触敏表面的多功能装置的示范性用户接口。
图5A到5J说明用于根据一些实施例对用户接口对象的前后位置进行重新排序的示范性用户接口。
图6A到6D是说明根据一些实施例对用户接口对象的前后位置进行重新排序的方法的流程图。
图7是根据一些实施例的电子装置的功能框图。
具体实施方式
许多电子装置显示具有层次序(即,用户接口对象的z次序或前后次序)的用户接口对象。用户通常通过将此些对象重新定位在显示器上来与此些对象进行交互,且重叠的对象根据其前后次序而显示于显示器上(即,位于一对象“前面”的另一对象在两个对象重叠处显示)。除了在显示器上重新定位对象之外,用户常常想要改变显示器上的对象的前后次序。用户可能想要一次改变个别对象或多个对象的前后次序,且可执行许多此类对象重新排序操作。因此,为了减少对用户的认知负担且产生更快速、更高效的人机接口,具有使得用户能够快速地且高效地对显示器上的对象的前后位置进行重新排序的用户接口是有利的。在下文所描述的实施例中的一些实施例中,此类对用户接口的改进的重新排序是通过以下操作来实现:在触敏表面上的对应于显示器上的相应对象的位置处检测第一接触;以及,在检测到所述第一接触时,检测用对应于以前后次序对相应对象重新排序的请求的第二接触作出的手势。在对应于对象的位置处检测到第一接触允许用户直接指定将在前后次序内进行重新排序的对象中的至少一者。用户随后能够使用简单的手指手势对对象进行重新排序,而不需要使用烦琐的方法,例如观看、导航以及激活弹出菜单或下拉菜单中的命令。
下文中,图1A到1C、2、3和7提供了对示范性装置的描述。图4A到4C、5A到5J说明示范性用户接口。图6A到6D是说明以前后次序对对象进行重新排序的方法的流程图。图5A到5J中的用户接口用于说明图6A到6D中的过程。
现在将详细参考实施例,在附图中说明所述实施例的实例。在以下描述中,陈述众多具体细节以便提供对本发明的透彻理解。然而,所属领域的技术人员将明白,可在没有这些具体细节的情况下实践本发明。在其它例子中,未详细描述众所周知的方法、程序、组件、电路和网络,以便不没有必要地混淆实施例的各方面。
还将理解,尽管术语“第一”、“第二”等可在本文中用于描述各种元件,但这些元件不应受这些术语限制。这些术语仅用于区分一个元件与另一元件。举例来说,在不脱离本发明的范围的情况下,可将第一接触称为第二接触,且类似地,可将第二接触称为第一接触。第一接触和第二接触是两个接触,但其不是相同的接触。
本文中用于本发明的描述中的术语是出于仅描述特定实施例的目的且无意限制本发明。如本发明和所附权利要求书的描述中所使用,单数形式“一”和“所述”意在也包含复数形式,除非上下文另有清楚指示。还将理解,如本文中所使用的术语“和/或”涉及且涵盖相关联的所列项目中的一者或一者以上的任何和所有可能的组合。将进一步理解,术语“包含”和/或“包括”当用于本说明书中时指定所述特征、整体、步骤、操作、元件和/或组件的存在,而不排除一个或一个以上其它特征、整体、步骤、操作、元件、组件和/或其群组的存在或添加。
如本文中所使用,视上下文而定,术语“如果”可解释为是指“当......时”或“在......后即刻”或“响应于确定”或“响应于检测到”。类似地,视上下文而定,短语“如果确定”或“如果检测到【规定条件或事件】”可解释为是指“在确定后即刻”或“响应于确定”或“在检测到【规定条件或事件】后即刻”或“响应于检测到【规定条件或事件】”。
如本文中所使用,术语显示器的“分辨率”是指沿着显示器的每一轴线或每一维度上的像素数目(也称为“像素数”或“像素分辨率”)。举例来说,显示器可具有320x480个像素的分辨率。此外,如本文中所使用,术语多功能装置的“分辨率”是指多功能装置中的显示器的分辨率。术语“分辨率”不暗示对每一像素的大小或像素间隔的任何限制。举例来说,与具有1024x768像素分辨率的第一显示器相比,具有320x480像素分辨率的第二显示器具有较低的分辨率。然而,应注意,显示器的物理尺寸不仅取决于像素分辨率,还取决于许多其它因素,包含像素大小和像素间隔。因此,第一显示器可具有与第二显示器相比相同、更小或更大的物理尺寸。
如本文中所使用,术语显示器的“视频分辨率”指代沿着显示器的每一轴线或每一维度上的像素的密度。常以每英寸的点(DPI)为单位来测量视频分辨率,其对可沿着显示器的相应维度在一英寸的跨度内排成一行放置的像素的数目进行计数。
描述了计算装置、用于此些装置的用户接口和用于使用此些装置的相关联的过程的实施例。在一些实施例中,计算装置是便携式通信装置,例如移动电话,其还含有其它功能,例如PDA和/或音乐播放器功能。便携式多功能装置的示范性实施例包含(不限于)来自加利福尼亚州库比迪诺的苹果公司的
Figure BDA00002794680700061
Figure BDA00002794680700062
装置。还可使用其它便携式装置,例如具有触敏表面(例如,触摸屏显示器和/或触摸板)的膝上型或平板计算机。还应理解,在一些实施例中,所述装置不是便携式通信装置,而是具有触敏表面(例如,触摸屏显示器和/或触摸板)的桌上型计算机。
在以下论述中,描述包含显示器和触敏表面的计算装置。然而,应理解,所述计算装置可包含一个或一个以上其它物理用户接口装置,例如物理键盘、鼠标和/或操纵杆。
所述装置支持多种应用程序,例如以下各者中的一者或一者以上:绘图应用程序、呈现应用程序、字处理应用程序、网站创建应用程序、光盘创作应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息接发应用程序、锻炼支持应用程序、照片管理应用程序、数码相机应用程序、数字视频相机应用程序、网络浏览应用程序、数字音乐播放器应用程序,和/或数字视频播放器应用程序。
可在所述装置上执行的各种应用程序可使用至少一个共同物理用户接口装置,例如触敏表面。触敏表面的一个或一个以上功能以及所述装置上所显示的对应信息可在不同应用程序中和/或在相应应用程序内受到调整和/或变化。以此方式,所述装置的共同物理体系结构(例如,触敏表面)可用对用户来说直观且透明的用户接口来支持多种应用程序。
所述用户接口可包含一个或一个以上软键盘实施例。软键盘实施例可包含在键盘的所显示图标上的标准(QWERTY)和/或非标准的符号配置,例如2006年7月24日申请的美国专利申请案11/459,606“用于便携式电子装置的键盘(Keyboards For PortableElectronic Devices)”以及2006年7月24日申请的美国专利申请案11/459,615“用于便携式电子装置的触摸屏键盘(Touch Screen Keyboards For Portable Electronic Devices)”,其全部内容在此以引用的方式并入。键盘实施例可包含相对于现有物理键盘(例如,打字机的键盘)中的键数目而数目减少的图标(或软键)。此可使得用户更容易地选择键盘中的一个或一个以上图标,且因此,选择一个或一个以上对应符号。所述键盘实施例可为自适应的。举例来说,可根据用户动作(例如,选择一个或一个以上图标和/或一个或一个以上对应符号)来修改所显示的图标。所述装置上的一个或一个以上应用程序可利用共同和/或不同的键盘实施例。因此,可根据所述应用程序中的至少一些应用程序来裁定所使用的键盘实施例。在一些实施例中,可根据相应用户来裁定一个或一个以上键盘实施例。举例来说,可基于相应用户的字使用历史(词典编纂、俚语、个性使用)来根据相应用户裁定一个或一个以上键盘实施例。在使用软键盘实施例时,,可调整键盘实施例中的一些以降低当选择一个或一个以上图标时(以及因此,在选择一个或一个以上符号时)用户发生错误的概率。
现在将注意力转向具有触敏显示器的便携式装置的实施例。图1A和1B是说明根据一些实施例的具有触敏显示器112的便携式多功能装置100的框图。出于便利起见,触敏显示器112有时被称为“触摸屏”,且还可被称作或称为触敏显示器系统。装置100可包含存储器102(其可包含一个或一个以上计算机可读存储媒体)、存储器控制器122、一个或一个以上处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其它输入或控制装置116和外部端口124。装置100可包含一个或一个以上光学传感器164。这些组件可经由一个或一个以上通信总线或信号线103进行通信。
应了解,装置100仅为便携式多功能装置的一个实例,且装置100可具有比所展示的组件多或少的组件,可组合两个或两个以上组件,或可具有组件的不同配置或布置。图1A和1B中所示的各种组件可以硬件、软件或硬件和软件两者的组合来实施,包含一个或一个以上信号处理和/或专用集成电路。
存储器102可包含高速随机存取存储器且还可包含非易失性存储器,例如一个或一个以上磁盘存储装置、快闪存储器装置,或其它非易失性固态存储器装置。可通过存储器控制器122来控制装置100的其它组件(例如,CPU120和外围设备接口118)对存储器102的存取。
外围设备接口118可用于将装置的输入和输出外围设备耦合到CPU120和存储器102。一个或一个以上处理器120运行或执行存储于存储器102中的各种软件程序和/或指令集以执行装置100的各种功能并处理数据。
在一些实施例中,外围设备接口118、CPU120和存储器控制器122可实施于例如芯片104等单一芯片上。在一些其它实施例中,其可实施于分开的芯片上。
RF(射频)电路108接收并发送RF信号(也称为电磁信号)。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号,且经由电磁信号与通信网络和其它通信装置通信。RF电路108可包含用于执行这些功能的众所周知的电路,包含(但不限于)天线系统、RF收发器、一个或一个以上放大器、调谐器、一个或一个以上振荡器、数字信号处理器、CODEC芯片组、订户身份模块(SIM)卡、存储器等。RF电路108可通过无线通信与网络(例如因特网(还称作万维网(WWW))、内联网和/或例如蜂窝式电话网络、无线局域网(LAN)和/或城域网(MAN)等无线网络)以及其它装置通信。无线通信可使用多种通信标准、协议和技术中的任一者,包含(但不限于)全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路包接入(HSDPA)、高速上行链路包接入(HSUPA)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如,IEEE802.11a、IEEE802.11b、IEEE802.11g和/或IEEE802.11n)、因特网语音协议(VoIP)、Wi-MAX、电子邮件协议(例如,因特网消息接入协议(IMAP)和/或邮局协议(POP))、即时消息接发(例如,可扩展消息接发和状态协议(XMPP)、即时消息接发和状态利用扩展的会话起始协议(SIMPLE)、即时消息接发和状态服务(IMPS)),和/或短消息服务(SMS),或任何其它合适的通信协议,包含到本文献的申请日为止尚未开发出的通信协议。
音频电路110、扬声器111和麦克风113提供用户与装置100之间的音频接口。音频电路110从外围设备接口118接收音频数据,将所述音频数据转换为电信号,且将所述电信号传输到扬声器111。扬声器111将电信号转换为人可听的声波。音频电路110还接收由麦克风113从声波转换的电信号。音频电路110将电信号转换为音频数据且将音频数据传输到外围设备接口118以进行处理。可从存储器102检索音频数据且/或通过外围设备接口118将音频数据传输到存储器102和/或RF电路108。在一些实施例中,音频电路110还包含耳机插孔(例如,212,图2)。耳机插孔提供音频电路110与可移除音频输入/输出外围设备(例如,只有输出的头戴式耳机或具有输出(例如,用于一个或两个耳朵的头戴式耳机)和输入(例如,麦克风)两者的耳机)之间的接口。
I/O子系统106将装置100上的输入/输出外围设备(例如,触摸屏112和其它输入控制装置116)耦合到外围设备接口118。I/O子系统106可包含显示器控制器156和用于其它输入或控制装置的一个或一个以上输入控制器160。一个或一个以上输入控制器160从其它输入或控制装置116接收电信号/将电信号发送到其它输入或控制装置116。所述其它输入控制装置116可包含物理按钮(例如,按钮、摇杆按钮等)、拨号盘、滑块开关、操纵杆、点击转盘等。在一些替代实施例中,输入控制器160可耦合到以下各者中的任一者或不耦合到以下各者:键盘、红外端口、USB端口和例如鼠标等指针装置。所述一个或一个以上按钮(例如,208,图2)可包含用于扬声器111和/或麦克风113的音量控制的升高/降低按钮。所述一个或一个以上按钮可包含按钮(例如,206,图2)。对按钮的快速按压可解开对触摸屏112的锁定或开始在触摸屏上使用手势来将装置解锁的过程,如2005年12月23日申请的美国专利申请案11/322,549“通过在解锁图像上执行手势来将装置解锁(Unlocking a Device by Performing Gestures on an Unlock Image)”中所描述,所述申请案在此以全文引用的方式并入。对按钮(例如,206)的更长时间的按压可使装置100通电或断电。用户可能够自定义所述按钮中的一者或一者以上的功能性。触摸屏112用于实施虚拟或软按钮和一个或一个以上软键盘。
触敏显示器112提供装置与用户之间的输入接口和输出接口。显示器控制器156从触摸屏112接收电信号和/或将电信号发送到触摸屏112。触摸屏112将视觉输出显示给用户。视觉输出可包含图形、文本、图标、视频及其任何组合(统称为“图形”)。在一些实施例中,所述视觉输出中的一些或全部可对应于用户接口对象。
触摸屏112具有触敏表面、基于触觉和/或触觉接触而从用户接受输入的传感器或传感器组。触摸屏112和显示器控制器156(以及存储器102中的任何相关联的模块和/或指令集)检测触摸屏112上的接触(和接触的任何移动或中断),且将所检测的接触转换为与显示于触摸屏112上的用户接口对象(例如,一个或一个以上软键、图标、网页或图像)的交互。在一示范性实施例中,触摸屏112与用户之间的接触点对应于用户的手指。
触摸屏112可使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术,或LED(发光二极管)技术,但在其它实施例中可使用其它显示器技术。触摸屏112和显示器控制器156可使用现在已知或稍后开发的多个触摸感测技术中的任一者来检测接触和其任何移动或中断,所述技术包含(但不限于)电容性、电阻性、红外和表面声波技术,以及用于确定与触摸屏112的一个或一个以上接触点的其它接近度传感器阵列或其它元件。在一示范性实施例中,使用投影互电容感测技术,例如来自加利福尼亚州库比迪诺(Cupertino,California)的苹果公司的
Figure BDA00002794680700101
Figure BDA00002794680700102
中出现的技术。
触摸屏112的一些实施例中的触敏显示器可类似于以下美国专利中所描述的多点触敏触摸板:6,323,846(维斯特曼等人)、6,570,557(维斯特曼等人)和/或6,677,932(维斯特曼)和/或美国专利公开案2002/0015024A1,其中的每一者在此以全文引用的方式并入。然而,触摸屏112显示来自便携式装置100的视觉输出,而触敏触摸板不提供视觉输出。
触摸屏112的一些实施例中的触敏显示器可如以下申请案中所描述:(1)2006年5月2日申请的第11/381,313号美国专利申请案“多点触摸表面控制器(Multipoint TouchSurface Controller)”;(2)2004年5月6日申请的第10/840,862号美国专利申请案“多点触摸屏(Multipoint Touchscreen)”;(3)2004年7月30日申请的第10/903,964号美国专利申请案“用于触敏输入装置的手势(Gestures For Touch Sensitive Input Devices)”;(4)2005年1月31日申请的第11/048,264号美国专利申请案“用于触敏输入装置的手势(GesturesFor Touch Sensitive Input Devices)”;(5)2005年1月18日申请的第11/038,590号美国专利申请案“用于触敏输入装置的基于模式的图形用户接口(Mode-Based Graphical UserInterfaces For Touch Sensitive Input Devices)”;(6)2005年9月16日申请的第11/228,758号美国专利申请案“触摸屏用户接口上的虚拟输入装置放置(Virtual Input DevicePlacement On A Touch Screen User Interface)”;(7)2005年9月16日申请的第11/228,700号美国专利申请案“具有触摸屏接口的计算机的操作(Operation Of A Computer With ATouch Screen Interface)”;(8)2005年9月16日申请的第11/228,737号美国专利申请案“激活触摸屏虚拟键盘的虚拟键(Activating Virtual Keys Of A Touch-Screen VirtualKeyboard)”;以及(9)2006年3月3日申请的第11/367,749号美国专利申请案“多功能手持式装置(Multi-Functional Hand-Held Device)”。这些申请案全部以全文引用的方式并入本文中。
触摸屏112可具有超过100dpi的视频分辨率。在一些实施例中,所述触摸屏具有约160dpi的视频分辨率。用户可使用任何合适的物体或附属物(例如,尖笔、手指等)来接触触摸屏112。在一些实施例中,用户接口经设计以主要用基于手指的接触和手势来工作,归因于手指在触摸屏上的较大接触区域,其可没有基于尖笔的输入精确。在一些实施例中,所述装置将粗糙的基于手指的输入转译为精确的指针/光标位置或命令以用于执行用户所需的动作。
在一些实施例中,除了触摸屏之外,装置100可包含用于激活或去活特定功能的触摸板(未图示)。在一些实施例中,触摸板是装置的触敏区域;不同于触摸屏,触摸板不显示视觉输出。触摸板可为与触摸屏112分开的触敏表面或由触摸屏形成的触敏表面的延伸部分。
在一些实施例中,装置100可包含物理或虚拟转盘(例如,点击转盘)以作为输入控制装置116。用户可通过旋转所述点击转盘或通过移动与点击转盘的接触点(例如,其中接触点的移动量是由其相对于点击转盘的中心点的角位移来测量)而在触摸屏112中所显示的一个或一个以上图形对象(例如,图标)中导航和与所述图形对象交互。所述点击转盘还可用于选择所显示图标中的一者或一者以上。举例来说,所述用户可压下所述点击转盘的至少一部分或相关联的按钮。由用户经由点击转盘提供的用户命令和导航命令可由输入控制器160以及存储器102中的模块和/或指令集中的一者或一者以上处理。对于虚拟点击转盘,所述点击转盘和点击转盘控制器可分别为触摸屏112和显示器控制器156的部分。对于虚拟点击转盘,所述点击转盘可为不透明或半透明对象,其响应于用户与所述装置的交互而在触摸屏显示器上出现和消失。在一些实施例中,虚拟点击转盘显示于便携式多功能装置的触摸屏上且通过用户与触摸屏的接触来操作。
装置100还包含用于向各种组件供电的电力系统162。电力系统162可包含电力管理系统、一个或一个以上电源(例如,电池、交变电流(AC))、再充电系统、电力故障检测电路、电力转换器或反相器、电力状态指示器(例如,发光二极管(LED))和与便携式装置中的电力的产生、管理和分布相关联的任何其它组件。
装置100还可包含一个或一个以上光学传感器164。图1A和1B展示耦合到I/O子系统106中的光学传感器控制器158的光学传感器。光学传感器164可包含电荷耦合装置(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收光,经由一个或一个以上透镜投射,且将所述光转换为表示图像的数据。结合成像模块143(也称为相机模块),光学传感器164可俘获静态图像或视频。在一些实施例中,光学传感器位于装置100的背部上,与装置的前部上的触摸屏显示器112相反,使得可将触摸屏显示器用作静态和/或视频图像获取的取景器。在一些实施例中,光学传感器位于装置的前部上,使得在用户在触摸屏显示器上查看其它视频会议参与者时可获得用户的用于视频会议的图像。在一些实施例中,光学传感器164的位置可由用户改变(例如,通过旋转装置外壳中的透镜和传感器),以使得可使用单一光学传感器164以及触摸屏显示器来用于视频会议与静态和/或视频图像获取两者。
装置100还可包含一个或一个以上接近度传感器166。图1A和1B展示耦合到外围设备接口118的接近度传感器166。或者,接近度传感器166可耦合到I/O子系统106中的输入控制器160。接近度传感器166可如以下美国专利申请案中所描述而执行:11/241,839,“手持式装置中的接近度检测器(Proximity Detector In Handheld Device)”;11/240,788,“手持式装置中的接近度检测器(Proximity Detector In Handheld Device)”;11/620,702,“使用环境光传感器来扩增接近度传感器输出(Using Ambient Light Sensor ToAugment Proximity Sensor Output)”;11/586,862,“对便携式装置中的用户活动的自动化响应和感测(Automated Response To And Sensing Of User Activity In Portable Devices)”;以及11/638,251,“用于外围设备的自动配置的方法和系统(Methods And Systems ForAutomatic Configuration Of Peripherals)”,其全文在此以引用的方式并入。在一些实施例中,接近度传感器在多功能装置被放置在用户耳朵附近时(例如,当用户正进行电话呼叫时)关闭并停用触摸屏112。
装置100还可包含一个或一个以上加速计168。图1A和1B展示耦合到外围设备接口118的加速计168。或者,加速计168可耦合到I/O子系统106中的输入控制器160。加速计168可如以下美国专利公开案中所描述而执行:第20050190059号美国专利公开案,“用于便携式电子装置的基于加速度的盗窃检测系统(Acceleration-based TheftDetection System for Portable Electronic Devices)”;以及第20060017692号美国专利公开案,“用于基于加速计来操作便携式装置的方法和设备(Methods And Apparatuses ForOperating A Portable Device Based On An Accelerometer)”,所述两个公开案以全文引用的方式并入本文中。在一些实施例中,基于对从一个或一个以上加速计接收的数据的分析而以纵向视图或横向视图在触摸屏显示器上显示信息。装置100任选地包含(除了加速计168之外)磁力计(未图示)和GPS(或格洛纳斯(GLONASS)或其它全球导航系统)接收器(未图示),以用于获得关于装置100的位置和定向(例如,纵向或横向)的信息。
在一些实施例中,存储于存储器102中的软件组件包含操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135,和应用程序(或指令集)136。此外,在一些实施例中,存储器102存储装置/全局内部状态157,如图1A、1B和3中所示。装置/全局内部状态157包含以下各者中的一者或一者以上:活动应用程序状态,其指示哪些应用程序(如果有)当前是活动的;显示状态,其指示哪些应用程序、视图或其它信息占据触摸屏显示器112的各个区;传感器状态,其包含从装置的各种传感器和输入控制装置116获得的信息;以及位置信息,其涉及装置的位置和/或姿势。
操作系统126(例如,Darwin、RTXC、LINUX、UNIX、OS X、WINDOWS或例如VxWorks等嵌入式操作系统)包含用于控制和管理一般系统任务(例如,存储器管理、存储装置控制、电力管理等)的各种软件组件和/或驱动器,且促进各种硬件与软件组件之间的通信。
通信模块128促进经由一个或一个以上外部端口124与其它装置的通信,且还包含用于处置由RF电路108和/或外部端口124接收的数据的各种软件组件。外部端口124(例如,通用串行总线(USB)、FIREWIRE等)适于直接耦合到其它装置或间接经由网络(例如,因特网、无线LAN等)耦合到其它装置。在一些实施例中,外部端口是多引脚(例如,30个引脚)的连接器,其与iPod(苹果公司的商标)装置上所使用的30个引脚连接器相同或类似和/或兼容。
接触/运动模块130可检测与触摸屏112(结合显示器控制器156)和其它触敏装置(例如,触摸板或物理点击转盘)的接触。接触/运动模块130包含用于执行与接触的检测相关的各种操作的各种软件组件,所述操作例如为确定是否已发生接触(例如,检测手指向下事件)、确定是否存在接触的移动且跟踪跨越触敏表面的移动(例如,检测一个或一个以上手指拖动事件),以及确定接触是否已停止(例如,检测手指向上事件或接触的中断)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动(其由一系列接触数据表示)可包含确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向上的改变)。可将这些操作应用于单一接触(例如,一根手指接触)或多个同时接触(例如,“多点触摸”/多根手指接触)。在一些实施例中,接触/运动模块130和显示器控制器156检测触摸板上的接触。在一些实施例中,接触/运动模块130和控制器160检测点击转盘上的接触。
接触/运动模块130可检测用户的手势输入。触敏表面上的不同手势具有不同接触模式。因此,可通过检测特定接触模式来检测手势。举例来说,检测手指点按手势包含检测手指向下事件,接着检测在与手指向下事件(例如,在图标的位置处)相同的位置(或大体上相同的位置)处的手指向上(提离)事件。作为另一实例,检测触敏表面上的手指轻扫手势包含检测手指向下事件,接着检测一个或一个以上手指拖动事件,且随后检测手指向上(提离)事件。
图形模块132包含用于在触摸屏112或其它显示器上再现和显示图形的各种已知软件组件,包含用于改变所显示的图形的亮度的组件。如本文中所使用,术语“图形”包含可向用户显示的任何对象,包含(不限于)文本、网页、图标(例如,包含软键的用户接口对象)、数字图像、视频、动画等。
在一些实施例中,图形模块132存储表示将使用的图形的数据。可向每一图形指派一对应的代码。图形模块132从应用程序等接收指定将显示的图形的一个或一个以上代码以及(在需要时)坐标数据和其它图形特性数据,且随后产生屏幕图像数据以输出到显示器控制器156。
可作为图形模块132的组件的文本输入模块134提供软键盘,以用于在各种应用程序(例如,联系人137、电子邮件140、IM141、浏览器147和需要文本输入的任何其它应用程序)中键入文本。
GPS模块135确定装置的位置且提供此信息以供在各种应用程序中使用(例如,提供给电话138以供在基于位置的拨号中使用,提供给相机143以作为图片/视频元数据,且提供给提供基于位置的服务的应用程序(例如,天气小窗口部件、本地黄页小窗口部件和地图/导航小窗口部件))。
应用程序136可包含以下模块(或指令集),或其子集或超集:
·联系人模块137(有时称为地址簿或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息接发(IM)模块141;
·锻炼支持模块142;
·用于静态和/或视频图像的相机模块143;
·图像管理模块144;
·视频播放器模块145;
·音乐播放器模块146;
·浏览器模块147;
·日历模块148;
·小窗口部件模块149,其可包含以下各者中的一者或一者以上:天气小窗口部件149-1、股票小窗口部件149-2、计算器小窗口部件149-3、闹钟小窗口部件149-4、字典小窗口部件149-5及用户所获得的其它小窗口部件,以及用户创建的小窗口部件149-6;
·用于形成用户创建的小窗口部件149-6的小窗口部件创建器模块150;
·搜索模块151;
·视频和音乐播放器模块152,其合并视频播放器模块145和音乐播放器模块146;
·便笺模块153;
·地图模块154;和/或
·在线视频模块155。
可存储于存储器102中的其它应用程序136的实例包含其它字处理应用程序、其它图像编辑应用程序、绘图应用程序、呈现应用程序、具备JAVA功能的应用程序、加密、数字版权管理、语音辨识和语音复制。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,可将联系人模块137用于管理地址簿或联系人列表(例如,存储于存储器102或存储器370中的联系人模块137的应用程序内部状态192中),包含:将姓名添加到地址簿;从地址簿删除姓名;使电话号码、电子邮件地址、物理地址或其它信息与姓名相关联;使图像与姓名相关联;将姓名分类和排序;提供电话号码或电子邮件地址以起始和/或促进通过电话138、视频会议139、电子邮件140或IM141进行的通信;等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,可将电话模块138用于键入对应于电话号码的字符序列、存取地址簿137中的一个或一个以上电话号码,修改已键入的电话号码、拨打相应的电话号码、进行通话以及在通话完成时断开或挂断。如上所述,无线通信可使用多个通信标准、协议和技术中的任一者。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示器控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138,视频会议模块139包含用以进行以下操作的可执行指令:根据用户指令而起始、进行和终止用户与一个或一个以上其它参与者之间的视频会议。
结合RF电路108、触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,电子邮件客户端模块140包含用以进行以下操作的可执行指令:响应于用户指令而创建、发送、接收和管理电子邮件。结合图像管理模块144,电子邮件客户端模块140使得非常易于创建和发送具有通过相机模块143拍摄的静态或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,即时消息接发模块141包含用以进行以下操作的可执行指令:键入对应于即时消息的字符序列、修改先前键入的字符、传输相应的即时消息(例如,使用短消息服务(SMS)或多媒体消息服务(MMS)协议来用于基于电话的即时消息,或使用XMPP、SIMPLE或IMPS来用于基于因特网的即时消息)、接收即时消息以及查看所接收的即时消息。在一些实施例中,所传输和/或所接收的即时消息可包含MMS和/或增强型消息接发服务(EMS)中所支持的图形、照片、音频文件、视频文件和/或其它附件。如本文中所使用,“即时消息接发”涉及基于电话的消息(例如,使用SMS或MMS发送的消息)和基于因特网的消息(例如,使用XMPP、SIMPLE或IMPS发送的消息)两者。
结合RF电路108、触摸屏112、显示器控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154和音乐播放器模块146,锻炼支持模块142包含用以进行以下操作的可执行指令:创建锻炼(例如,用时间、距离和/或卡路里燃烧目标);与锻炼传感器(运动装置)通信;接收锻炼传感器数据;校准所使用的传感器以监视锻炼;选择并播放用于锻炼的音乐;以及显示、存储和传输锻炼数据。
结合触摸屏112、显示器控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132和图像管理模块144,相机模块143包含用以进行以下操作的可执行指令:俘获静态图像或视频(包含视频流)且将其存储到存储器102中、修改静态图像或视频的特性,或从存储器102删除静态图像或视频。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132、文本输入模块134和相机模块143,图像管理模块144包含用以进行以下操作的可执行指令:布置、修改(例如,编辑)或另外操纵、标记、删除、呈现(例如,以数字幻灯片或相册)以及存储静态和/或视频图像。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132、音频电路110和扬声器111,视频播放器模块145包含用以进行以下操作的可执行指令:显示、呈现或另外回放视频(例如,在触摸屏112上或在外部的经由外部端口124连接的显示器上)。
结合触摸屏112、显示器系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108和浏览器模块147,音乐播放器模块146包含允许用户进行以下操作的可执行指令:下载和回放所记录的音乐和以一种或一种以上文件格式存储的其它声音文件(例如,MP3或AAC文件)。在一些实施例中,装置100可包含MP3播放器的功能性,例如iPod(苹果公司的商标)。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132和文本输入模块134,浏览器模块147包含用以进行以下操作的可执行指令:根据用户指令而浏览因特网,包含搜索、链接到、接收和显示网页或其部分,以及链接到网页的附件和其它文件。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134,电子邮件客户端模块140和浏览器模块147,日历模块148包含用以进行以下操作的可执行指令:根据用户指令而创建、显示、修改和存储日历和与日历相关联的数据(例如,日历条目、待办事项列表等)。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,小窗口部件模块149是可由用户下载和使用的小型应用程序(例如,天气小窗口部件149-1、股票小窗口部件149-2、计算器小窗口部件149-3、闹钟小窗口部件149-4和字典小窗口部件149-5)或由用户创建的小型应用程序(例如,用户创建的小窗口部件149-6)。在一些实施例中,小窗口部件包含HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施例中,小窗口部件包含XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!小窗口部件)。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,小窗口部件创建器模块150可由用户使用以创建小窗口部件(例如,将网页的用户指定的部分转变为小窗口部件)。
结合触摸屏112、显示器系统控制器156、接触模块130、图形模块132和文本输入模块134,搜索模块151包含用以进行以下操作的可执行指令:根据用户指令而在存储器102中搜索与一个或一个以上搜索准则(例如,一个或一个以上用户指定的搜索项)匹配的文本、音乐、声音、图像、视频和/或其它文件。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,便笺模块153包含用以进行以下操作的可执行指令:根据用户指令而创建和管理便笺、待办事项列表等。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147,地图模块154可用于根据用户指令而接收、显示、修改和存储地图以及与地图相关联的数据(例如,行驶方向;关于特定位置处或附近的商店和其它关注点的数据;以及其它基于位置的数据)。
结合触摸屏112、显示器系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包含允许用户进行以下操作的指令:存取、浏览、接收(例如,通过串流传输和/或下载)、回放(例如,在触摸屏上或在外部的经由外部端口124连接的显示器上)、发送具有到特定在线视频的链接的电子邮件,以及另外管理呈一种或一种以上文件格式(例如H.264)的在线视频。在一些实施例中,将即时消息接发模块141(而不是电子邮件客户端模块140)用于发送到特定在线视频的链接。在线视频应用的额外描述可在以下文献中找到:2007年6月20日申请的第60/936,562号美国临时专利申请案“用于播放在线视频的便携式多功能装置、方法和图形用户接口(Portable MultifunctionDevice,Method,and Graphical User Interface for Playing Online Videos)”,和2007年12月31日申请的第11/968,067号美国专利申请案“用于播放在线视频的便携式多功能装置、方法和图形用户接口(Portable Multifunction Device,Method,and Graphical UserInterface for Playing Online Videos)”,所述申请案的内容在此以全文引用的方式并入。
上文所识别的模块和应用程序中的每一者对应于用于执行上文所描述的一个或一个以上功能以及本申请案中所描述的方法(例如,计算机实施的方法和本文中所描述的其它信息处理方法)的可执行指令集。这些模块(即,指令集)无需实施为分离的软件程序、过程或模块,且因此,在各种实施例中,这些模块的各种子集可经组合或另外重新布置。举例来说,视频播放器模块145可与音乐播放器模块146组合为单一模块(例如,视频和音乐播放器模块152,图1B)。在一些实施例中,存储器102可存储上文所识别的模块和数据结构的子集。此外,存储器102可存储未在上文描述的额外模块和数据结构。
在一些实施例中,装置100为其中专门经由触摸屏和/或触摸板执行所述装置上的预定义的功能集合的操作的装置。通过将触摸屏和/或触摸板用作主要输入控制装置来用于装置100的操作,可减少装置100上的物理输入控制装置(例如,按钮、拨号盘等)的数目。
可专门经由触摸屏和/或触摸板执行的预定义的功能集合包含在用户接口之间的导航。在一些实施例中,触摸板在由用户触摸时会将装置100从在装置100上所显示的任何用户接口导航到主菜单或根菜单。在此些实施例中,可将触摸板称作“菜单按钮”。在一些其它实施例中,菜单按钮可为物理按钮或其它物理输入控制装置,而非触摸板。
图1C是说明根据一些实施例的用于事件处置的示范性组件的框图。在一些实施例中,存储器102(图1A和1B中)或370(图3)包含事件分类器170(例如,在操作系统126中)和相应的应用程序136-1(例如,前述应用程序137到151、155、380到390中的任一者)。
事件分类器170接收事件信息且确定将所述事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包含事件监视器171和事件分派器模块174。在一些实施例中,应用程序136-1包含应用程序内部状态192,当所述应用程序是活动的或正执行时,应用程序内部状态192指示在触敏显示器112上所显示的当前应用程序视图。在一些实施例中,装置/全局内部状态157可由事件分类器170用来确定哪一(些)应用程序当前是活动的,且应用程序内部状态192由事件分类器170用来确定将事件信息递送到的应用程序视图191。
在一些实施例中,应用程序内部状态192包含额外信息,例如以下各者中的一者或一者以上:在应用程序136-1重新开始执行时将使用的重新开始信息、指示正由应用程序136-1显示的信息或所述信息准备好由应用程序136-1显示的用户接口状态信息、使得用户能够回到应用程序136-1的先前状态或视图的状态队列,以及对由用户进行的先前动作的重做/撤消队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包含关于子事件(例如,触敏显示器112上的作为多点触摸手势的部分的用户触摸)的信息。外围设备接口118传输其从I/O子系统106或传感器(例如,接近度传感器166、加速计168和/或麦克风113(经由音频电路110))接收的信息。外围设备接口118从I/O子系统106接收的信息包含来自触敏显示器112或触敏表面的信息。
在一些实施例中,事件监视器171以预定间隔将请求发送到外围设备接口118。作为响应,外围设备接口118传输事件信息。在其它实施例中,外围设备接口118仅在存在重大事件(例如,接收到高于预定噪声阈值的输入和/或在多于预定持续时间的时间内接收到输入)时才传输事件信息。
在一些实施例中,事件分类器170还包含命中视图确定模块172和/或活动事件辨识器确定模块173。
命中视图确定模块172在触敏显示器112显示一个以上视图时提供用于确定子事件已在一个或一个以上视图内的何处发生的软件过程。视图由用户可在显示器上看到的控件和其它元件组成。
与应用程序相关联的用户接口的另一方面是视图集合,在本文中有时称为应用程序视图或用户接口窗口,在其中显示信息且发生基于触摸的手势。在其中检测到触摸的(相应应用程序)的应用程序视图可对应于应用程序的编程或视图体系内的编程层级。举例来说,在其中检测到触摸的最低层级视图可称为命中视图,且可至少部分基于开始基于触摸的手势的初始触摸的命中视图来确定被辨识为合适输入的事件集合。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有按体系组织的多个视图时,命中视图确定模块172将命中视图识别为体系中的应处置子事件的最低视图。在大多数情形中,命中视图是其中发生起始子事件的最低层级视图(即,形成事件或潜在事件的子事件的序列中的第一子事件)。一旦由命中视图确定模块识别出命中视图,命中视图通常接收与其被识别为命中视图所关于的相同触摸或输入源相关的所有子事件。
活动事件辨识器确定模块173确定视图体系内的哪一或哪些视图应接收子事件的特定序列。在一些实施例中,活动事件辨识器确定模块173确定仅命中视图应接收子事件的特定序列。在其它实施例中,活动事件辨识器确定模块173确定包含子事件的物理位置的所有视图是有效涉及的视图,且因此确定所有有效涉及的视图应接收子事件的特定序列。在其它实施例中,即使触摸子事件被完全限于与一个特定视图相关联的区域,体系中更高的视图将仍保持为有效涉及的视图。
事件分派器模块174将事件信息分派给事件辨识器(例如,事件辨识器180)。在包含活动事件辨识器确定模块173的实施例中,事件分派器模块174将事件信息递送到由活动事件辨识器确定模块173确定的事件辨识器。在一些实施例中,事件分派器模块174将事件信息存储于事件队列中,由相应的事件接收器模块182来检索所述事件信息。
在一些实施例中,操作系统126包含事件分类器170。或者,应用程序136-1包含事件分类器170。在又其它实施例中,事件分类器170是独立模块,或存储于存储器102中的另一模块的一部分,例如接触/运动模块130。
在一些实施例中,应用程序136-1包含多个事件处置器190和一个或一个以上应用程序视图191,事件处置器中的每一者包含用于处置在应用程序的用户接口的相应视图内发生的触摸事件的指令。应用程序136-1的每一应用程序视图191包含一个或一个以上事件辨识器180。通常,相应的应用程序视图191包含多个事件辨识器180。在其它实施例中,事件辨识器180中的一者或一者以上是单独模块(例如,用户接口套件(未图示))或应用程序136-1从其继承方法和其它特性的更高层级对象的部分。在一些实施例中,相应的事件处置器190包含以下各者中的一者或一者以上:数据更新器176、对象更新器177、GUI更新器178,和/或从事件分类器170接收的事件数据179。事件处置器190可利用或调用数据更新器176、对象更新器177或GUI更新器178以更新应用程序内部状态192。或者,应用程序视图191中的一者或一者以上包含一个或一个以上相应的事件处置器190。而且,在一些实施例中,数据更新器176、对象更新器177和GUI更新器178中的一者或一者以上包含于相应的应用程序视图191中。
相应的事件辨识器180从事件分类器170接收事件信息(例如,事件数据179),且根据所述事件信息识别事件。事件辨识器180包含事件接收器182和事件比较器184。在一些实施例中,事件辨识器180还包含以下各者的至少一子集:元数据183和事件递送指令188(其可包含子事件递送指令)。
事件接收器182从事件分类器170接收事件信息。事件信息包含关于例如触摸或触摸移动的子事件的信息。取决于子事件,所述事件信息还包含额外信息,例如子事件的位置。当子事件涉及触摸的运动时,事件信息还可包含子事件的速率和方向。在一些实施例中,事件包含装置从一个定向旋转到另一定向(例如,从纵向定向到横向定向,或反之亦然),且事件信息包含关于装置的当前定向(也称为装置姿势)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,且基于所述比较而确定事件或子事件,或者确定或更新事件或子事件的状态。在一些实施例中,事件比较器184包含事件定义186。事件定义186含有事件的定义(例如,子事件的预定义的序列),例如事件1(187-1)、事件2(187-2),和其它。在一些实施例中,事件187中的子事件包含(例如)触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个实例中,事件1(187-1)的定义为所显示对象上的双击。所述双击(例如)包括在预定阶段内在所显示对象上的第一触摸(触摸开始)、在预定阶段内的第一提离(触摸结束)、在预定阶段内在所显示对象上的第二触摸(触摸开始),以及在预定阶段内的第二提离(触摸结束)。在另一实例中,事件2(187-2)的定义为所显示对象上的拖动。所述拖动(例如)包括在预定阶段内在所显示对象上的触摸(或接触)、触摸的跨越触敏显示器112的移动,以及触摸的提离(触摸结束)。在一些实施例中,事件还包含用于一个或一个以上相关联的事件处置器190的信息。
在一些实施例中,事件定义187包含用于相应的用户接口对象的事件的定义。在一些实施例中,事件比较器184执行命中测试以确定哪一用户接口对象与子事件相关联。举例来说,在其中三个用户接口对象显示于触敏显示器112上的应用程序视图中,当在触敏显示器112上检测到触摸时,事件比较器184执行命中测试以确定三个用户接口对象中的哪一者与触摸(子事件)相关联。如果每一所显示的对象都与相应的事件处置器190相关联,则事件比较器使用命中测试的结果来确定应激活哪一事件处置器190。举例来说,事件比较器184选择与触发命中测试的子事件和对象相关联的事件处置器。
在一些实施例中,相应的事件187的定义还包含被延迟的动作,其延迟事件信息的递送,直到已确定子事件的序列是对应于还是不对应于事件辨识器的事件类型之后为止。
当相应的事件辨识器180确定子事件系列不与事件定义186中的事件中的任一者匹配时,相应的事件辨识器180进入事件不可能、事件失败,或事件结束状态,其后,其忽视所述基于触摸的手势的后续子事件。在此情况下,对于所述命中视图来说仍保持活动的其它事件辨识器(如果有的话)继续跟踪并处理正在进行中的基于触摸的手势的子事件。
在一些实施例中,相应的事件辨识器180包含元数据183,元数据183具有可配置特性、旗标和/或列表,所述可配置特性、旗标和/或列表指示事件递送系统应如何执行向有效涉及的事件辨识器的子事件递送。在一些实施例中,元数据183包含指示事件辨识器可如何彼此交互的可配置特性、旗标和/或列表。在一些实施例中,元数据183包含指示是否将子事件递送到视图或编程体系中的不同层级的可配置特性、旗标和/或列表。
在一些实施例中,当辨识出事件的一个或一个以上特定子事件时,相应的事件辨识器180激活与事件相关联的事件处置器190。在一些实施例中,相应的事件辨识器180将与所述事件相关联的事件信息递送到事件处置器190。激活事件处置器190不同于将子事件发送(和延期发送)到相应的命中视图。在一些实施例中,事件辨识器180引发与所辨识的事件相关联的旗标,且与所述旗标相关联的事件处置器190捕获所述旗标且执行预定义的过程。
在一些实施例中,事件递送指令188包含子事件递送指令,所述子事件递送指令递送关于子事件的事件信息而不激活事件处置器。而是,所述子事件递送指令将事件信息递送到与子事件系列相关联的事件处置器或递送到有效涉及的视图。与子事件系列或与有效涉及的视图相关联的事件处置器接收事件信息且执行预定过程。
在一些实施例中,数据更新器176创建且更新用于应用程序136-1中的数据。举例来说,数据更新器176更新用于联系人模块137中的电话号码,或存储用于视频播放器模块145中的视频文件。在一些实施例中,对象更新器177创建且更新用于应用程序136-1中的对象。举例来说,对象更新器177创建新的用户接口对象或更新用户接口对象的位置。GUI更新器178更新GUI。举例来说,GUI更新器178准备好显示信息且将其发送到图形模块132以供在触敏显示器上显示。
在一些实施例中,事件处置器190包含数据更新器176、对象更新器177和GUI更新器178,或具有对数据更新器176、对象更新器177和GUI更新器178的存取权。在一些实施例中,数据更新器176、对象更新器177和GUI更新器178包含于相应的应用程序136-1或应用程序视图191的单一模块中。在其它实施例中,其包含于两个或两个以上软件模块中。
应理解,关于对触敏显示器上的用户触摸的事件处置的前文论述还适用于用以通过输入装置操作多功能装置100的其它形式的用户输入,所述输入并非全部都在触摸屏上起始,例如,在有或没有单一或多个键盘按压或保持的情况下的协调的鼠标移动和鼠标按钮按压、触摸板上的用户移动点按、拖动、滚动等、手写笔输入、装置的移动、口头指令、检测到的眼睛移动、生物识别输入,和/或其任何组合,其可用作对应于定义将要辨识的事件的子事件的输入。
图2说明根据一些实施例的具有触摸屏112的便携式多功能装置100。触摸屏可显示用户接口(UI)200内的一个或一个以上图形。在此实施例以及下文所描述的其它实施例中,用户可通过(例如)用一根或一根以上手指202(在图中未按比例绘制)或一个或一个以上尖笔203(在图中未按比例绘制)来接触或触摸图形而选择图形中的一者或一者以上。在一些实施例中,当用户中断与一个或一个以上图形的接触时,发生对一个或一个以上图形的选择。在一些实施例中,所述接触可包含手势(例如,一个或一个以上点按、一个或一个以上轻扫(从左到右、从右到左、向上和/或向下))和/或已接触装置100的手指的滚转(从右到左、从左到右、向上和/或向下)。在一些实施例中,与图形的无意接触可不选择所述图形。举例来说,当对应于选择的手势是点按时,扫掠过应用程序图标的轻扫手势可不选择对应的应用程序。
装置100还可包含一个或一个以上物理按钮,例如“主页”或菜单按钮204。如先前所描述,菜单按钮204可用于导航到可在装置100上执行的应用程序集合中的任何应用程序136。或者,在一些实施例中,将菜单按钮实施为在触摸屏112上显示的GUI中的软键。
在一个实施例中,装置100包含触摸屏112、菜单按钮204、用于将装置通电/断电和锁定装置的按钮206、音量调节按钮208、订户身份模块(SIM)卡槽210、耳机插孔212和对接/充电外部端口124。按钮206可用于:通过压下按钮并使所述按钮保持于压下状态并持续预定义的时间间隔而对装置通电/断电;通过压下按钮并在预定义的时间间隔逝去之前释放所述按钮而锁定装置;和/或将所述装置解锁或起始解锁过程。在替代性实施例中,装置100还可经由麦克风113接受口头输入以用于激活或去活一些功能。
图3是根据一些实施例的具有显示器和触敏表面的示范性多功能装置的框图。装置300无需是便携式的。在一些实施例中,装置300是膝上型计算机、桌上型计算机、平板计算机、多媒体播放器装置、导航装置、教育装置(例如,儿童的学习玩具)、游戏系统或控制装置(例如,家用或工业用控制器)。装置300通常包含一个或一个以上处理单元(CPU)310、一个或一个以上网络或其它通信接口360、存储器370,和用于将这些组件互连的一个或一个以上通信总线320。通信总线320可包含将系统组件互连并控制系统组件之间的通信的电路(有时称为芯片组)。装置300包含输入/输出(I/O)接口330,I/O接口330包括显示器340,显示器340通常为触摸屏显示器。I/O接口330还可包含键盘和/或鼠标(或其它指针装置)350和触摸板355。存储器370包含高速随机存取存储器,例如DRAM、SRAM、DDR RAM或其它随机存取固态存储器装置;且可包含非易失性存储器,例如一个或一个以上磁盘存储装置、光盘存储装置、快闪存储器装置,或其它非易失性固态存储装置。存储器370可任选地包含与CPU310相距遥远的一个或一个以上存储装置。在一些实施例中,存储器370存储类似于便携式多功能装置100(图1)的存储器102中的程序、模块和数据结构的程序、模块和数据结构,或其子集。此外,存储器370可存储便携式多功能装置100的存储器102中不存在的额外程序、模块和数据结构。举例来说,装置300的存储器370可存储绘图模块380、呈现模块382、字处理模块384、网站创建模块386、光盘创作模块388和/或电子表格模块390,而便携式多功能装置100(图1)的存储器102可不存储这些模块。
图3中的以上识别的元件中的每一者可存储于先前提及的存储器装置中的一者或一者以上中。以上所识别的模块中的每一者对应于用于执行以上所描述的功能的指令集。以上所识别的模块或程序(即,指令集)无需实施为分离的软件程序、过程或模块,且因此,在各种实施例中,这些模块的各种子集可经组合或另外重新布置。在一些实施例中,存储器370可存储上文所识别的模块和数据结构的子集。此外,存储器370可存储未在上文描述的额外模块和数据结构。
现在转向可实施于便携式多功能装置100上的用户接口(“UI”)的实施例。
图4A和4B说明根据一些实施例的便携式多功能装置100上的应用程序的菜单的示范性用户接口。类似用户接口可实施于装置300上。在一些实施例中,用户接口400A包含以下元件,或其子集或超集:
·用于例如蜂窝式和Wi-Fi信号等无线通信的信号强度指示器402;
·时间404;
·蓝牙指示器405;
·电池状态指示器406;
·具有频繁使用的应用程序的图标的任务栏408,例如:
○电话138,其可包含未接电话或语音邮件消息的数目的指示器414;
○电子邮件客户端140,其可包含未读电子邮件的数目的指示器410;
○浏览器147;以及
○音乐播放器146;以及
·用于其它应用程序的图标,例如:
○IM141;
○图像管理144;
○相机143;
○视频播放器145;
○天气149-1;
○股票149-2;
○锻炼支持142;
○日历148;
○计算器149-3;
○闹钟149-4;
○字典149-5;以及
○用户创建的小窗口部件149-6。
在一些实施例中,用户接口400B包含以下元件,或其子集或超集:
·402、404、405、406、141、148、144、143、149-3、149-2、149-1、149-4、410、414、138、140和147,如上文所描述;
·地图154;
·便笺153;
·设定412,其提供对装置100及其各种应用程序136的设定的存取,如下文进一步所描述;
·视频和音乐播放器模块152,也称作iPod(苹果公司的商标)模块152;以及
·在线视频模块155,也称作YouTube(谷歌公司的商标)模块155。
图4C说明具有与显示器450(例如,触摸屏显示器112)分开的触敏表面451(例如,平板或触摸板355,图3)的装置(例如,装置300,图3)上的示范性用户接口。虽然将参考触摸屏显示器112(其中触敏表面和显示器经组合)上的输入来给出以下许多实例,但在一些实施例中,所述装置检测与显示器分开的触敏表面上的输入,如图4C中所示。在一些实施例中,触敏表面(例如,图4C中的451)具有对应于显示器(例如,450)上的主轴线(例如,图4C中的453)的主轴线(例如,图4C中的452)。根据这些实施例,所述装置在对应于显示器上的相应位置的位置(例如,在图4C中,460对应于468且462对应于470)处检测与触敏表面451的接触(例如,图4C中的460和462)。以此方式,当触敏表面与显示器分开时,触敏表面(例如,图4C中的451)上的由装置检测到的用户输入(例如,接触460和462及其移动)由所述装置用以操纵多功能装置的显示器(例如,图4C中的450)上的用户接口。应理解,类似方法可用于本文中所描述的其它用户接口。
另外,虽然主要参考手指输入(例如,手指接触、手指点按手势、手指轻扫手势)来给出以下实例,但将理解,在一些实施例中,手指输入中的一者或一者以上可被来自另一输入装置的输入(例如,基于鼠标的输入或尖笔输入)取代。举例来说,轻扫手势可被鼠标点击(例如,替代接触)接着是光标沿着轻扫路径的移动(例如,替代接触的移动)来取代。作为另一实例,点按手势可被在光标位于点按手势的位置上时的鼠标点击取代(例如,替代检测接触接着停止检测接触)。类似地,当同时检测到多个用户输入时,应理解,可同时使用多个计算机鼠标,或可同时使用鼠标和手指接触。
现在将注意力转向可实施于具有显示器和触敏表面的多功能装置(例如,装置300或便携式多功能装置100)上的用户接口(“UI”)和相关联的过程的实施例。
图5A到5J说明用于根据一些实施例对用户接口对象的前后位置进行重新排序的示范性用户接口。这些图中的用户接口用于说明下文所描述的过程,包含图6A到6D中的过程。
图5A到5B说明用于响应于检测到输入而显示对象次序指示符的示范性用户接口。在图5A中,在显示器(例如,触摸屏112)上显示多个对象5002。所述对象具有第一层次序(例如,所述对象以以下次序从前到后布置:对象5002-1、对象5002-2、对象5002-3、对象5002-4、对象5002-5和对象5002-6)。所述装置在触敏表面(例如,触摸屏112)上的对应于显示器上的对象中的一者5002-3的位置的位置处检测第一接触5004,且显示对象次序指示符5005,如图5B中所说明。在一些实施例中,仅在检测到第一接触5004时在触敏表面上检测到第二接触(例如,接触5006,图5B)之后才显示对象次序指示符。
图5B到5D说明用于对相应对象进行重新排序的示范性用户接口。在图5B中,在对应于相应对象5002-3的位置处检测到第一接触5004之后,装置在触敏表面(例如,触摸屏112)上检测第二接触5006以及包含第二接触向上的移动(例如,从图5B中的相应位置5006-a到图5C中的第一经更新位置5006-b到图5D中的第二经更新位置5006-c)的手势。在一些实施例中,响应于检测到第二接触,装置将触敏表面(例如,触摸屏112)的区5008映射到第一层次序中的位置(例如,将区5008-1映射到第一位置,将区5008-2映射到第二位置,将区5008-3映射到第三位置,将区5008-4映射到第四位置,将区5008-5映射到第五位置,且将区5008-6映射到第六位置)。当接触移动到新区中时,相应对象5002-3移动到层次序中的对应于新区的位置。因此,在图5C中,当第二接触5006-b位于对应于第二位置的区5008-2中时,装置将相应对象5002-3移动到第二位置且相应地更新对象次序指示符5005-3(例如,将对象次序指示符从“3”改变为“2”)。类似地,在图5D中,当第二接触5006-c位于对应于第一位置的区5008-1中时,装置将相应对象5002-3移动到第一位置且相应地更新对象次序指示符5005-3(例如,将对象次序指示符从“2”改变为“1”)。
图5E到5F说明用于响应于检测到输入而显示对象次序指示符的示范性用户接口。在图5E中,在显示器(例如,触摸屏112)上显示多个对象5002,所述对象具有第一层次序(例如,所述对象以以下次序从前到后布置:对象5002-3、对象5002-1、对象5002-2、对象5002-4、对象5002-5、对象5002-6)。所述装置在触敏表面(例如,触摸屏112)上的对应于显示器(例如,触摸屏112)上的对象中的一者5002-5的位置的位置处检测第一接触5010,且显示对象次序指示符5005,如图5F中所说明。在一些实施例中,仅在检测到第一接触5010时在触敏表面上检测到第二接触5012之后才显示对象次序指示符。
图5F到5H说明用于对多个对象进行重新排序的示范性用户接口。在图5F中,在多个对象(例如,对象5002-2、对象5002-5和对象5002-6)被同时选择时在对应于相应对象5002-5的位置处检测到第一接触5010之后,装置在触敏表面上检测第二接触5012以及包含第二接触向上的移动(例如,从图5F中的相应位置5012-a到图5G中的经更新位置5012-b到图5H中的第二经更新位置5012-c)的手势。在一些实施例中,响应于检测到第二接触,装置将触敏表面(例如,触摸屏112)的区5008映射到第一层次序中的位置(例如,将区5008-1映射到第一位置,将区5008-2映射到第二位置,将区5008-3映射到第三位置,将区5008-4映射到第四位置,将区5008-5映射到第五位置,且将区5008-6映射到第六位置)。当接触移动到新区中时,相应对象5002-5移动到层次序中的对应于新区的位置,且其它选定对象(例如,对象5002-2和对象5002-6)根据第二接触5012的移动而在层次序内移动。
因此,在图5G中,当第二接触5012-b位于对应于第四位置的区5008-4中时,装置将相应对象5002-5移动到第四位置且相应地更新对象次序指示符5005-5(例如,将对象次序指示符从“5”改变为“4”)。所述装置还根据所述手势对其它选定对象(例如,对象5002-2和对象5002-6)进行重新排序(例如,对象5002-2移动到第二位置,且对象5002-6移动到第五位置),且相应地更新用于其它选定对象的对象次序指示符(例如,5005-2和5005-6)。类似地,在图5H中,当第二接触5012-c位于对应于第三位置的区5008-3中时,装置将相应对象5002-5移动到第三位置且相应地更新对象次序指示符5005-5(例如,将对象次序指示符从“4”改变为“3”)。所述装置还根据所述手势对其它选定对象(例如,对象5002-2和对象5002-6)进行重新排序(例如,对象5002-2移动到第一位置,且对象5002-6移动到第四位置),且相应地更新用于其它选定对象的对象次序指示符(例如,5005-2和5005-6)。
图5F以及5I到5J说明用于对多个对象进行重新排序的示范性用户接口。在图5F中,在多个对象(例如,对象5002-2、对象5002-5和对象5002-6)被同时选择时在对应于相应对象5002-5的位置处检测到第一接触5010之后,装置在触敏表面(例如,触摸屏112)上检测第二接触5012以及包含第二接触向上的移动(例如,从图5F中的相应位置5012-a到图5I中的位置5012-d到图5J中的经更新位置5012-e)的手势。在一些实施例中,响应于检测到第二接触,装置将触敏表面(例如,触摸屏112)的区5008映射到第一层次序中的位置(例如,将区5008-1映射到第一位置,将区5008-2映射到第二位置,将区5008-3映射到第三位置,将区5008-4映射到第四位置,将区5008-5映射到第五位置,且将区5008-6映射到第六位置)。甚至在第二接触5012移动到新区中之前,选定对象移动到连续位置(例如,对象5002-2移动到第四位置,使得选定对象5002-2、5002-5和5002-6分别在第四位置、第五位置和第六位置上,如图5I中所说明)。当接触5012移动到新区中时,相应对象5002-3移动到层次序中的对应于新区的位置,且其它选定对象(例如,对象5002-2和对象5002-6)根据第二接触5012的移动而在层次序内移动。
因此,在图5J中,当第二接触5012-e位于对应于第三位置的区5008-3中时,装置将相应对象5002-5移动到第三位置且相应地更新对象次序指示符5005-5(例如,将对象次序指示符从“5”改变为“3”)。所述装置还根据所述手势对其它选定对象(例如,对象5002-2和对象5002-6)进行重新排序(例如,对象5002-2移动到第二位置,且对象5002-6移动到第四位置),且相应地更新用于其它选定对象的对象次序指示符(例如,5005-2和5005-6)。
图6A到6D是说明根据一些实施例对用户接口对象的前后位置进行重新排序的方法600的流程图。在具有显示器和触敏表面的多功能装置(例如,装置300,图3,或便携式多功能装置100,图1)处执行方法600。在一些实施例中,所述显示器是触摸屏显示器,且触敏表面位于显示器上。在一些实施例中,显示器是与触敏表面分开的。方法600中的一些操作可经组合且/或一些操作的次序可改变。
如下文所描述,方法600提供用以对用户接口对象的前后位置进行重新排序的直观方式。所述方法减少在改变对象的z次序时对用户的认知负担,进而产生更高效的人机接口。对于靠电池操作的计算装置,使得用户能够更快且更高效地对用户接口中的对象的前后位置进行重新排序节省了电力且增加了电池充电之间的时间。
装置在显示器上显示(602)多个对象(例如,图5A中的5002)。所述多个对象具有第一层次序(例如,在图5A到5B中,对象5002-1在前面,对象5002-2在从前面数第二个,5002-3在从前面数第三个,对象5002-4在从前面数第四个,对象5002-5在从前面数第五个,且对象5002-6在后面。)。如说明书和权利要求书中所使用,“层次序”是用户接口中(例如,在电子文档中)的对象的前后次序。因此,在层次序中较高的对象(例如,“在顶部”或“在前面”的对象)在两个对象重叠处的任何点处显示,进而部分遮掩在层次序中较低的对象(例如,在其它对象的“下方”或“后方”或“后面”的对象)。举例来说,在图5A中,圆形对象5002-1在星形对象5002-2前面,且因此星星的与圆重叠的点不可见,因为其在圆形对象5002-1“后方”。作为另一实例,在图5A中,星形对象5002-2在三角形对象5002-3前面,且因此展示星星的与三角形重叠的点,因为三角形在星形对象5002-2“后方”。如上文所述,“层次序”还被称为对象的“z次序”或“前后次序”。
在一些实施例中,所述对象是电子文档创作应用程序(例如,呈现应用程序、电子表格应用程序、字处理应用程序、图形图像操纵应用程序、桌面排版应用程序等)中的帆布上的对象。另外,虽然本文中所描述的实例主要是参考简单形状和文本对象来描述,以便不会不必要地混淆所揭示的实施例的相关方面,但应理解,对象5002可为在多功能装置的显示器上显示的具有层次序的视觉上的任何对象(例如,图标、图像、视频、表格等)。
在一些实施例中,装置检测(604)满足对象次序指示符显示准则的输入。在一些实施例中,满足对象次序指示符显示准则的输入是在触敏表面(例如,触摸屏112)上的对应于显示器(例如,触摸屏112)上的对象(例如,图5A中的5002-3)的位置的位置处的点按并保持手势(例如,图5A中的5004)。在一些实施例中,所述点按并保持手势必须维持预定义的时间阈值(例如,0.2秒、0.5秒、1秒、2秒或任何合理的时间周期)以便满足对象次序指示符显示准则。在一些实施例中,满足对象次序指示符显示准则的输入是在触敏表面(例如,触摸屏112)上的对应于显示器(例如,触摸屏112)上的对象(例如,图5A中的5002-3)的位置的位置处的第一接触(例如,图5A中的5004)以及不在触敏表面(例如,触摸屏112)上的对应于显示器(例如,触摸屏112)上的任何对象(例如,图5B中的5002)的位置处(例如,远离所述位置)的与第一接触同时的第二接触(例如,图5B中的5006-a)。在一些实施例中,第一接触和/或第二接触必须维持预定义的时间阈值(例如,0.2秒、0.5秒、1秒、2秒、5秒或任何合理的时间周期)以便满足对象次序指示符显示准则。另外,应理解,根据一些实施例,第一接触和/或第二接触必须在触敏表面上的大体上静止的位置中保持大于或等于预定义的时间阈值的时间(例如,第一接触在至少0.2秒、0.5秒、1秒、2秒、5秒等内不在触敏表面上移动多于预定义的距离),以便满足对象次序指示符显示准则。
在一些实施例中,装置显示(606)用于多个对象的至少一子集中的每一相应对象5002的相应对象次序指示符5005。用于相应对象的相应对象次序指示符提供对相应对象在第一层次序内的位置的视觉指示。举例来说,用于圆形对象5002-1的对象次序指示符5005-1指示圆形对象5002-1在层次序的前面,而用于星形对象5002-2的对象次序指示符5005-2指示星形对象5002-2在从层次序的前面数第二个,等等。应理解,在一些实施例中,显示用于所有对象的对象次序指示符。在一些其它实施例中,仅显示用于对象子集的对象次序指示符(例如,仅显示用于选定对象的对象次序指示符)。在一些实施例中,响应于检测到满足对象次序指示符显示准则的输入(例如,在触敏表面上的对应于相应对象的位置处检测到第一接触5004且在触敏表面上检测到持续预定时间周期以上的第二接触5006)而显示(608)对象次序指示符。
装置在触敏表面上的对应于显示器上的相应对象的位置的位置处检测(610)第一接触。举例来说,在图5A到5D中,装置在触敏表面(例如,触摸屏112)上的对应于显示器(例如,触摸屏112)上的三角形对象5002-3的位置的位置处检测第一接触5004。作为另一实例,在图5E到5J中,装置在触敏表面(例如,触摸屏112)上的对应于显示器(例如,触摸屏112)上的矩形对象5002-5的位置的位置处检测接触5010。在一些实施例中,装置选择(612)包含所述相应对象的多个对象。举例来说,在图5F到5J中,三个对象(例如,5002-2、5002-5和5002-6)被同时选择。虽然第一接触通常是在显示器上的多个对象中的相应对象的位置处检测到,但应理解,在一些实施例中,第一接触是在触敏表面上的对应于显示器上的预定义的对象重新排序区(例如,与特定对象或一组特定对象相关联的对象重新排序区)的位置处检测到。另外,应理解,在其它实施例中,独立于手势而检测相应对象(例如,相应对象是先前选定的对象),且根据与对象重新排序相关联的手势来对相应对象进行重新排序。举例来说,在选择相应对象时,装置在触敏表面上检测在预定义的方向上(例如,向上或向下)的n根手指(例如,两根手指)轻扫手势,且响应于检测到所述n根手指轻扫手势,相应对象根据所述n根手指轻扫手势而在对象层次序(例如,“z次序”)内移动。
在检测到所述第一接触时,装置在触敏表面上检测(614)包含第二接触的手势。举例来说,在图5B中,装置检测第二接触5006以及所述接触从触敏表面上的相应位置5006-a到触敏表面上的经更新位置5006-b的后续移动,如图5C中所说明。作为另一实例,在图5F中,装置检测第二接触5012以及所述接触从触敏表面上的相应位置5012-a到触敏表面上的经更新位置5012-b的后续移动,如图5G中所说明。
在一些实施例中,所述手势满足(616)预定的对象重新排序准则。所述预定的对象重新排序准则包含,第二接触在触敏表面上的对应于显示器的除了多个对象中的任何对象之外(例如,远离多个对象中的任何对象或不包含所述多个对象中的任一者)的一部分的位置处维持预定阈值量的时间以上;且在所述第二接触维持预定阈值量的时间以上之后,在触敏表面上检测到高于阈值量的移动的第二接触的移动。举例来说,在图5B中,装置确定第二接触5006已在触敏表面上维持了预定时间阈值(例如,0.2秒、0.5秒、1秒、2秒、5秒或任何合理的时间周期)以上,且随后检测到第二接触5006已移动了阈值距离(例如,10像素、25像素、50像素、100像素,或在给定触敏表面的大小的情况下的任何合理距离)以上。作为另一实例,在图5F中,装置确定第二接触5012已在触敏表面上维持了预定时间阈值(例如,0.2秒、0.5秒、1秒、2秒、5秒或任何合理的时间周期)以上,且随后检测到第二接触5010已移动了阈值距离(例如,10像素、25像素、50像素、100像素,或在给定显示器的大小和分辨率的情况下的任何合理距离)以上。另外,应理解,根据一些实施例,第一接触和/或第二接触必须在触敏表面上的大体上静止的位置中保持大于或等于预定义的时间阈值的时间(例如,第一接触在至少0.2秒、0.5秒、1秒、2秒、5秒等内不在触敏表面上移动多于预定义的距离),以便满足对象次序指示符显示准则。
响应于检测到手势(例如,满足预定的对象重新排序准则的手势),装置根据所述手势对多个对象进行重新排序(618),以便产生不同于第一层次序的第二层次序。举例来说,在图5B中,在检测到手势(例如,包含接触5006从相应位置5006-a到经更新位置5006-b的移动)之前,所述对象具有第一层次序,其中所述对象如下从前到后布置:对象5002-1、对象5002-2、对象5002-3、对象5002-4、对象5002-5和对象5002-6;而在检测到所述手势之后,所述对象具有第二层次序,其中所述对象如下从前到后布置:对象5002-1、对象5002-3、对象5002-2、对象5002-4、对象5002-5和对象5002-6(例如,对象5002-3已在层次序中“向上”或“向前”移动了一个位置),如图5C中所说明。继续此实例,在图5C中,装置检测到所述手势的接续部分(例如,包含接触5006从相应位置5006-b到经更新位置5006-c的移动),其将对象进一步如下从前到后重新排序:对象5002-3、对象5002-1、对象5002-2、对象5002-4、对象5002-5和对象5002-6(例如,对象5002-3已在层次序中又多“向上”或“向前”移动了一个位置),如图5D中所说明。
在一些实施例中,相应对象在第一层次序内的位置不同于(620)相应对象在第二层次序内的位置。举例来说,在图5B中,三角形对象5002-3在从前面数第三个位置中,而在图5C中,三角形对象5002-3在从前面数第二个位置中,且在图5D中,三角形对象5002-3在前面的位置中。
在一些实施例中,当检测到手势时,包含相应对象(例如,图5F中的5002-5)的多个对象(例如,图5F到5J中的5002-2、5002-5和5002-6)是选定对象,且选定对象中的每一者在第一层次序内的位置不同于(622)选定对象中的每一者在第二层次序内的位置。举例来说,在图5F中,在检测到手势(例如,包含接触5012从相应位置5012-a到经更新位置5102-b的移动)之前,所述对象具有第一层次序,其中所述对象如下从前到后布置:对象5002-3、对象5002-1、对象5002-2、对象5002-4、对象5002-5和对象5002-6;而在检测到所述手势之后,所述对象具有第二层次序,其中所述对象如下从前到后布置:对象5002-3、对象5002-2、对象5002-1、对象5002-5、对象5002-6和对象5002-4。换句话说,在此实例中,选定对象5002-2、5002-5和5002-6中的每一者已在层次序中“向前”或“向上”移动了一个位置,如图5G中所说明。继续此实例,在图5G中,装置检测到所述手势的接续部分(例如,包含接触5012从相应位置5012-b到经更新位置5102-c的移动),其将对象进一步如下从前到后重新排序:对象5002-2、对象5002-3、对象5002-5、对象5002-6、对象5002-1和对象5002-4。换句话说,在此接续实例中,选定对象5002-2、5002-5和5002-6中的每一者已又多在层次序中“向前”或“向上”移动了一个位置,如图5H中所说明。
在一些实施例中,在第一层次序中,选定对象中的每一者具有(624)相对于其它选定对象的相对位置;且在第二层次序中,选定对象中的每一者具有相对于其它选定对象的相同相对位置。举例来说,在图5F中,在检测到手势(例如,包含接触5006从相应位置5006-a到经更新位置5006-b的移动)之前,对象5002-2在对象5002-5前面两个位置,且对象5002-5在对象5002-6前面一个位置,且在图5G中,在重新排序之后,对象5002-2仍在对象5002-5前面两个位置,且对象5002-5仍在对象5002-6前面一个位置。
在一些实施例中,在第一层次序中,多个对象中的未被选择的一对象具有(626)在选定对象中的两者之间的位置;且在第二层次序中,所述两个选定对象被连续排序(即,所述未被选择的对象不再在层次序中在所述选定对象之间)。换句话说,在一些实施例中,响应于在多个对象被选择的同时检测到重新排序手势,所述多个选定对象移动到连续位置,且作为一群组移动。举例来说,在图5F中,在检测到所述手势(例如,包含图5J中的接触5012从相应位置5012-a到经更新位置5102-e的移动)之前,所述对象具有第一层次序,其中所述对象如下从前到后布置:对象5002-3、对象5002-1、对象5002-2、对象5002-4、对象5002-5和对象5002-6。在此实例中,在检测到重新排序手势的开始之后,所述对象移动到连续位置,使得所述对象具有经更新的层次序,其中所述对象如下从前到后布置:对象5002-3、对象5002-1、对象5002-4、对象5002-2、对象5002-5和对象5002-6(例如,参看图5I,其中所有选定对象已在层次序内移动以使得它们在连续层上)。继续此实例,在检测到所述手势的接续部分(例如,图5J中的第二接触5012从相应位置5012-d到经更新位置5012-e的移动)之后,所述对象具有第二层次序,其中所述对象如下从前到后布置:对象5002-3、对象5002-2、对象5002-5、对象5002-6、对象5002-1和对象5002-4。换句话说,在此实例中,选定对象已移动到层次序中的连续位置(例如,从前面数第二、第三和第四位置),且相应对象已向前移动了两个位置(例如,从从前面数第五位置到从前面数第三位置),如图5J中所说明。
当针对对象的至少一子集中的每一相应对象显示提供对相应对象(例如,图5B到5D中的5002-3)在第一层次序内的位置的视觉指示的对象次序指示符(例如,图5B到5D中的5005-3)时,响应于检测到所述手势,装置更新(628)用于相应对象的相应对象次序指示符,使得所述相应对象次序指示符提供对相应对象在第二层次序内的位置的视觉指示。举例来说,在图5B中,用于相应对象5002-3的对象次序指示符5005-3包含“3”,其指示相应对象5002-3在第一层次序中在从前面数第三位置处,而在图5C中,在所述对象已被重新排序到第二层次序时,用于相应对象5002-3的对象次序指示符5005-3包含“2”,其指示相应对象5002-3在第二层次序中在从前面数第二位置处。
在一些实施例中,针对对象中的已由于手势而改变了其在层次序内的位置的每一对象(例如,曾被选择的全部对象,或其位置由于其它对象的移动而改变的任何对象)而更新对象次序指示符。举例来说,在图5F中,用于对象5002-1的对象次序指示符5005-1包含“2”,从而指示相应对象5002-1在第一层次序中在从前面数第二位置处;用于对象5002-2的对象次序指示符5005-2包含“3”,从而指示相应对象5002-2在第一层次序中在从前面数第三位置处;用于对象5002-3的对象次序指示符5005-3包含“1”,从而指示相应对象5002-3在第一层次序中在前面;用于对象5002-4的对象次序指示符5005-4包含“4”,从而指示相应对象5002-4在第一层次序中在从前面数第四位置处;用于对象5002-5的对象次序指示符5005-5包含“5”,从而指示相应对象5002-5在第一层次序中在从前面数第五位置处;且用于对象5002-6的对象次序指示符5005-6包含“6”,从而指示相应对象5002-6在第一层次序中在从前面数第六位置处(即,后面位置)。继续此实例,在图5C中,在对象已被重新排序到第二层次序之后,用于对象5002-1的对象次序指示符5005-1已从“2”更新为“3”,从而指示相应对象5002-1现在在第二层次序中在从前面数第三位置处;用于对象5002-2的对象次序指示符5005-2已从“3”更新为“2”,从而指示相应对象5002-2现在在第二层次序中在从前面数第二位置处;用于对象5002-4的对象次序指示符5005-4已从“4”更新为“6”,从而指示相应对象5002-4现在在第二层次序中在从前面数第六位置处(即,后面位置);用于对象5002-5的对象次序指示符5005-5已从“5”更新为“4”,从而指示相应对象5002-5现在在第二层次序中在从前面数第四位置处;且用于对象5002-6的对象次序指示符5005-6已从“6”更新为“5”,从而指示相应对象5002-6现在在第二层次序中在从前面数第五位置处。
在一些实施例中,所述手势包含触敏表面上的第二接触的移动;且根据第二接触的对应于显示器的预定轴的移动的分量来确定(630)第二层次序。在一些实施例中,所述预定轴是显示器上的垂直轴(例如,垂直于图4C中所说明的主轴458的轴)。举例来说,在图5B到5C中,第二接触5006向上移动(例如,从图5B中的相应位置5006-a到图5C中的经更新位置5006-b)。然而,应理解,根据这些实施例,如果接触是在对角线上移动,则仅所述接触的垂直移动的分量可用于确定第二接触的移动的量值。在一些实施例中,基于加速度数据将预定轴确定为作为基于装置相对于地面的当前定向的用户的当前向上/向下轴的装置的轴(例如,在装置的顶部边缘与装置的底部边缘之间的轴,其中底部边缘比顶部边缘更靠近地面)。
在一些实施例中,当第二接触的对应于显示器的预定轴的移动的分量在(632)第一方向上(例如,向上)时,相应对象在第二层次序中的位置高于所述相应对象在第一层次序中的位置;且当第二接触的对应于显示器的预定轴的移动的分量在与第一方向相反(或大体上相反)的第二方向上(例如,向下)时,相应对象在第二层次序中的位置低于所述相应对象在第一层次序中的位置。换句话说,在这些实施例中,当第二接触在显示器上向上移动时,选定对象在层次序中向前移动(例如,朝向层次序的顶部),而当第二接触在显示器上向下移动时,第二对象在层次序中向后移动(例如,朝向层次序的底部)。另外,应理解,预定轴可为显示器上的任何预定轴(例如,从顶部到底部的垂直轴、从左到右的水平轴,或从左上角到右下角的对角轴等)。
在这些实施例中的一些实施例中,当第二接触的移动的分量在第一方向上(例如,向上)具有(634)相应量值时,相应对象在第二层次序内的位置是比相应对象在第一层次序内的位置高的相应数目的位置;且当第二接触的移动的垂直分量在第二方向上(例如,向下)具有相同的相应量值时,相应对象在第二层次序内的位置是比相应对象在第一层次序内的位置低的相同相应数目的位置。换句话说,在这些实施例中,第二接触在触敏表面上的移动与对象在层次序内的移动之间的相关性经确定以使得在任一方向上沿着触敏表面上的预定轴的相同量的移动均导致在显示器上将对象移动相同数目的位置。举例来说,如果第二接触在触敏表面上在向上方向上具有2厘米的垂直移动的分量,则选定对象将在显示器上的层次序中向前移动两个位置(例如,从位置“3”到位置“1”),相反,如果第二接触在触敏表面上在向下方向上具有2厘米的垂直分量,则选定对象将在显示器上的层次序中向后移动两个位置(例如,从位置“3”到位置“5”)。
在一些实施例中,相应对象在第二层次序中的位置是根据以下内容来确定(636):第二接触的对应于显示器的预定轴的移动的分量的量值;第二接触在触敏表面上的初始位置与触敏表面的边缘之间的距离;以及包含于多个对象中的对象的数量。举例来说,在图5B到5C中,显示器的预定轴平行于显示器的垂直边缘。在此实例中,沿着预定轴分布等于多个对象中的对象的数量的数目的区5008(例如,存在六个区5008,每一区对应于六个对象5002中的一者),使得接触的初始位置5006-a对应于对应于相应对象5002-3在第一层次序中的当前位置的区5008-3。这些区的大小是根据接触的初始位置5006-a与触摸屏112的顶部边缘之间的距离来确定,使得对于与第一层次序中的高于相应对象5002-3的当前层的所有层相关联的区(例如,5008-1和5008-2)来说,在触摸屏112的顶部边缘与和所述接触相关联的区5008-3之间存在空间,且使得对于与第一层次序中的低于相应对象5002-3的当前层的所有层相关联的区(例如,5008-4、5008-5和5008-6)来说,在触摸屏112的底部边缘与和所述接触相关联的区5008-3之间存在空间。继续此实例,当第二接触5006从所述接触在触敏表面上的图5B中的初始位置5006-a移动到图5C中的经更新位置5006-b时,相应对象5002-3在层次序中向前移动一个位置。相比而言,在图5D中,当第二接触移动到经更新位置5006-c时,相应对象5002-3在层次序中向前移动两个位置(例如,因为接触的初始位置5006-a与图5D中的接触的经更新位置5006-c之间的垂直距离大致为接触的初始位置5006-a与图5C中的接触的经更新位置5006-b之间的垂直距离的两倍)。
在一些实施例中,触敏表面(例如,触摸屏112)的第一边缘(例如,顶部)与触敏表面(例如,触摸屏112)的第二边缘(例如,底部)之间的空间中的区(例如,图5B到5D以及5F到5J中的5008)被映射(638)到第一层次序中的多个位置。举例来说,在图5B到5D中,第一区5008-1被映射到第一层次序中的第一位置(例如,位置“1”);第二区5008-2被映射到第一层次序中的第二位置(例如,位置“2”);第三区5008-3被映射到第一层次序中的第三位置(例如,位置“3”);第一区5008-4被映射到第一层次序中的第四位置(例如,位置“4”);第一区5008-5被映射到第一层次序中的第五位置(例如,位置“5”);且第一区5008-6被映射到第一层次序中的第六位置(例如,位置“6”)。作为另一实例,在图5F到5J中,第一区5008-1被映射到第一层次序中的第一位置(例如,位置“1”);第二区5008-2被映射到第一层次序中的第二位置(例如,位置“2”);第三区5008-3被映射到第一层次序中的第三位置(例如,位置“3”);第一区5008-4被映射到第一层次序中的第四位置(例如,位置“4”);第一区5008-5被映射到第一层次序中的第五位置(例如,位置“5”);且第一区5008-6被映射到第一层次序中的第六位置(例如,位置“6”)。
在这些实施例中,所述区被映射到多个位置,以使得:根据第一层次序在触敏表面(例如,触摸屏112)的第一边缘(例如,顶部)与第二边缘(例如,底部)之间沿着触敏表面(例如,触摸屏112)的预定义的轴布置所述区。举例来说,在图5B到5D以及5F到5J中,区5008根据其被映射到的位置次序而垂直分布于触摸屏112的顶部与触摸屏112的底部之间(例如,被映射到前面位置的区5008-1最靠近触摸屏112的顶部,且被映射到后面位置的区5008-6最靠近触摸屏112的底部)。
在这些实施例中,所述区还被映射到多个位置,以使得:对应于第二接触的初始位置的初始区被映射到相应对象的当前位置。举例来说,在图5B中,当在触摸屏112上检测到第二接触5006时,相应对象5002-3当前与从前面数第三位置相关联,且因此被映射到图5B到5D中的从前面数第三位置的区5008-3的位置经定义以便包含第二接触的初始位置5006-a。作为另一实例,在图5F中,当在触摸屏112上检测到第二接触5012时,相应对象5002-5当前与从前面数第五位置相关联,且因此被映射到图5F到5J中的从前面数第五位置的区5008-5的位置经定义以便包含第二接触的初始位置5012-a。
在这些实施例中,所述区被映射到多个位置,以使得:在相应对象的当前位置前面的位置中的每一者被映射到初始区与第一边缘(例如,高于初始区)之间的区;且在相应对象的当前位置后方的位置中的每一者被映射到初始区与第二边缘(例如,低于初始区)之间的区。举例来说,在图5B到5D中,高于初始区5008-3的区(例如,5008-1和5008-2)被映射到相应对象5002-3的位置(例如,从前面数第三位置)前面的位置(例如,分别为前面位置和从前面数第二位置),而低于初始区5008-3的区(例如,5008-4、5008-5和5008-6)被映射到相应对象5002-3的位置(例如,从前面数第三位置)后方的位置(例如,分别为从前面数第四位置、从前面数第五位置以及从前面数第六位置)。作为另一实例,在图5F到5J中,高于初始区5008-5的区(例如,5008-1、5008-2、5008-3和5008-4)被映射到相应对象5002-5的位置(例如,从前面数第五位置)前面的位置(例如,分别为前面位置、从前面数第二位置、从前面数第三位置以及从前面数第四位置),而低于初始区5008-5的区(例如,5008-6)被映射到相应对象5002-5的位置(例如,从前面数第五位置)后方的位置(例如,从前面数第六位置)。
在这些实施例中,所述区被映射到多个位置,以使得所述区中的每一者的大小和位置是根据预定义的准则来确定。举例来说,在图5B到5D以及图5F到5J中,所述区具有一致大小且沿着触摸屏112的垂直轴均匀间隔。然而,应理解,在一些实施例中,所述区不具有一致大小且/或不沿着触摸屏112的垂直轴均匀间隔。举例来说,在一些实施例中,所述区可根据沿着触敏表面的垂直轴的对数标度来设定大小和间隔(例如,当存在大量对象,且因此在触敏表面(例如,触摸屏112)上存在大量区时)。另外,虽然图5B到5D以及图5F到5J中所说明的区5008被展示为邻接区,但应理解,所述区实际上可分离且可减小大小,使得其充当触敏表面上的对应于第一层次序中的位置的离散位置。
应理解,当根据上文所描述的方法来确定区5008时,当对象的数目、接触与触敏表面的边缘之间的距离和/或相应对象在第一层次序内的位置在两个对象重新排序操作之间不同时,那么区5008将通常针对所述两个不同的对象重新排序操作而不同地布置(例如,沿着预定义的轴具有不同的大小和不同的位置)。举例来说,虽然针对图5B到5D中所说明的对象重新排序操作的区5008以及针对图5F到5G中所说明的对象重新排序操作的区5008是使用相同准则来确定,但图5B到5D中的区是与图5F到5G中的区5008不同地布置,因为在图5B中,由用户选择的相应对象5002-3是从第一层次序的前面数第三个,而在图5F中,由用户选择的相应对象是从第一层次序的前面数第五个。因此,在此实例中,在图5B中,仅两个区(例如,用于前面层的区5008-1以及用于从前面数第二层的区5008-2)需要沿着预定义的轴在与接触相关联的区5008-3与触摸屏的顶部之间定位,且因此图5B中的区可大于图5F中的区。相比而言,在图5F中,四个区(例如,用于前面层的区5008-1、用于从前面数第二层的区5008-2、用于从前面数第三层的区5008-3和用于从前面数第四层的区5008-4)需要沿着预定义的轴在与接触相关联的区5008-5与触摸屏的顶部之间定位,且因此图5F中的区可小于图5B中的区,使得所有四个区(例如,5008-1、5008-2、5008-3和5008-4)将沿着预定义的轴配合在空间中。
在这些实施例中的一些实施例中(例如,其中如上文所描述定义区的实施例),手势包含(640)触敏表面上的第二接触的移动;且相应对象在第二层次序内的位置是(642)被映射到对应于触敏表面上的第二接触的经更新位置的区的位置。举例来说,在图5B到5D中,第二接触5006从图5B中的对应于被映射到从前面数第三位置(例如,相应对象5002-3的当前位置)的区5008-3的初始位置5006-a移动到图5D中的对应于被映射到第一层次序中的前面位置的区5008-1的经更新位置5006-c,且因此,相应对象5002-3在第二层次序内的位置是前面位置(例如,相应对象5002-3从从前面数第三位置移动到前面位置),如图5D中所说明。
根据一些实施例,图7展示根据上文所描述的本发明的原理而配置的电子装置700的功能框图。装置的功能块可由硬件、软件或硬件与软件的组合来实施以实行本发明的原理。所属领域的技术人员应理解,图7中所描述的功能块可经组合或分离为若干子块以实施如上文所描述的本发明的原理。因此,本文中的描述可支持对本文中所描述的功能块的任何可能组合或分离或进一步定义。
如图7中所示,电子装置700包含:显示单元702,其经配置以显示多个对象,其中所述多个对象具有第一层次序;触敏表面单元704,其经配置以接收接触和手势;以及处理单元706,其耦合到显示单元702和触敏表面单元704。在一些实施例中,处理单元706包含检测单元708、重新排序单元710、显示启用单元712和更新单元714。
处理单元706经配置以:在触敏表面单元704上的对应于显示单元702上的相应对象的位置的位置处检测第一接触(例如,用检测单元708);在检测到所述第一接触时,在触敏表面单元704上检测包含第二接触的手势(例如,用检测单元708);以及,响应于检测到所述手势,根据所述手势对所述多个对象进行重新排序以产生不同于所述第一层次序的第二层次序(例如,用重新排序单元710)。
在一些实施例中,相应对象在第一层次序内的位置不同于相应对象在第二层次序内的位置。
在一些实施例中,所述手势满足预定的对象重新排序准则,所述预定的对象重新排序准则包含:第二接触在触敏表面单元704上的对应于显示单元702的除了多个对象中的任何对象之外的一部分的位置处维持预定阈值量的时间以上;且在所述第二接触维持预定阈值量的时间以上之后,在触敏表面单元704上检测到高于阈值量的移动的第二接触的移动。
在一些实施例中,处理单元706经配置以启用用于多个对象的至少一子集中的每一相应对象的相应对象次序指示符的显示,其中所述相应对象次序指示符提供对相应对象在第一层次序内的位置的视觉指示(例如,用显示启用单元712)。
在一些实施例中,响应于检测到满足对象次序指示符显示准则的输入而显示对象次序指示符。
在一些实施例中,处理单元706经配置以响应于检测到所述手势而更新用于相应对象的相应对象次序指示符,使得所述相应对象次序指示符提供对相应对象在第二层次序内的位置的视觉指示(例如,用更新单元714)。
在一些实施例中,当检测到手势时,包含相应对象的多个对象是选定对象,且选定对象中的每一者在第一层次序内的位置不同于选定对象中的每一者在第二层次序内的位置。
在一些实施例中,在第一层次序中,选定对象中的每一者具有相对于其它选定对象的相对位置,且在第二层次序中,选定对象中的每一者具有相对于其它选定对象的相同相对位置。
在一些实施例中,在第一层次序中,多个对象中的未被选择的一对象具有在选定对象中的两者之间的位置,且在第二层次序中,所述两个选定对象被连续排序。
在一些实施例中,所述手势包含触敏表面单元704上的第二接触的移动,且根据第二接触的对应于显示单元702的预定轴的移动的分量来确定第二层次序。
在一些实施例中,当第二接触的对应于显示单元702的预定轴的移动的分量在第一方向上时,相应对象在第二层次序中的位置高于所述相应对象在第一层次序中的位置,且当第二接触的对应于显示单元702的预定轴的移动的分量在与第一方向相反的第二方向上时,相应对象在第二层次序中的位置低于所述相应对象在第一层次序中的位置。
在一些实施例中,当第二接触的移动的分量在第一方向上具有相应量值时,相应对象在第二层次序内的位置是比相应对象在第一层次序内的位置高的相应数目的位置,且当第二接触的移动的垂直分量在第二方向上具有相同的相应量值时,相应对象在第二层次序内的位置是比相应对象在第一层次序内的位置低的相同相应数目的位置。
在一些实施例中,相应对象在第二层次序中的位置是根据以下内容来确定:第二接触的对应于显示单元702的预定轴的移动的分量的量值、第二接触在触敏表面单元704上的初始位置与触敏表面单元704的边缘之间的距离,以及包含于多个对象中的对象的数量。
在一些实施例中,触敏表面单元704的第一边缘与触敏表面单元704的第二边缘之间的空间中的区被映射到第一层次序中的多个位置,使得:所述区是根据第一层次序在触敏表面单元704的第一边缘与触敏表面单元704的第二边缘之间沿着触敏表面单元704的预定义的轴来布置;对应于第二接触的初始位置的初始区被映射到相应对象的当前位置;高于相应对象的当前位置的位置中的每一者被映射到初始区与第一边缘之间的区;低于相应对象的当前位置的位置中的每一者被映射到初始区与第二边缘之间的区;以及所述区中的每一者的大小和位置是根据预定义的准则来确定。所述手势包含触敏表面单元704上的第二接触的移动。相应对象在第二层次序内的位置是被映射到对应于触敏表面单元704上的第二接触的经更新位置的区的位置。
可通过在例如通用处理器或专用芯片等信息处理设备中运行一个或一个以上功能模块而实施上文所描述的信息处理方法中的操作。这些模块、这些模块的组合,和/或其与一般硬件(例如,如上文关于图1A、1B、3和7所描述)的组合全部包含于本发明的保护范围内。
上文参考图6A到6D所描述的操作可由图1A到1C中所描绘的组件实施。举例来说,显示操作602、检测操作610和检测操作614可由事件分类器170、事件辨识器180和事件处置器190实施。事件分类器170中的事件监视器171检测触敏显示器112上的接触,且事件分派器模块174将事件信息递送到应用程序136-1。应用程序136-1的相应事件辨识器180将事件信息与相应的事件定义186进行比较,且确定触敏表面上的第一位置处的第一接触是否对应于预定义的事件或子事件,例如对用户接口上的对象的选择。当检测到相应的预定义的事件或子事件时,事件辨识器180激活与事件或子事件的检测相关联的事件处置器190。事件处置器190可利用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施例中,事件处置器190存取相应的GUI更新器178以更新应用程序所显示的内容。类似地,所属领域的技术人员将清楚,可如何基于图1A到1C中所描绘的组件来实施其它过程。
出于阐释的目的,已参考特定实施例描述了前述描述。然而,以上说明性论述无意为详尽的或将本发明限于所揭示的精确形式。鉴于以上教示,许多修改和变化都是可能的。选择和描述所述实施例以便最佳地解释本发明的原理及其实际应用,借此使所属领域的技术人员能够最佳地利用本发明以及具有适用于所预期的特定用途的各种修改的各种实施例。

Claims (37)

1.一种方法,其包括:
在具有触敏表面和显示器的多功能装置处:
在所述显示器上显示多个对象,其中所述多个对象具有第一层次序;
在所述触敏表面上的对应于所述显示器上的相应对象的位置的位置处检测第一接触;
在检测到所述第一接触时,在所述触敏表面上检测包含第二接触的手势;以及,
响应于检测到所述手势,根据所述手势对所述多个对象进行重新排序以产生不同于所述第一层次序的第二层次序。
2.根据权利要求1所述的方法,其中所述相应对象在所述第一层次序内的位置不同于所述相应对象在所述第二层次序内的位置。
3.根据权利要求1到2中任一权利要求所述的方法,其中所述手势满足预定的对象重新排序准则,所述预定的对象重新排序准则包含:
所述第二接触在所述触敏表面上的对应于所述显示器的除了所述多个对象中的任何对象之外的一部分的位置处维持预定阈值量的时间以上;以及,
在所述第二接触维持所述预定阈值量的时间以上之后,在所述触敏表面上检测到所述第二接触高于阈值量的移动的移动。
4.根据权利要求1到3中任一权利要求所述的方法,其包含显示用于所述多个对象的至少一子集中的每一相应对象的相应对象次序指示符,其中用于相应对象的所述相应对象次序指示符提供对所述相应对象在所述第一层次序内的位置的视觉指示。
5.根据权利要求4所述的方法,其中响应于检测到满足对象次序指示符显示准则的输入而显示所述对象次序指示符。
6.根据权利要求4到5中任一权利要求所述的方法,其包含,响应于检测到所述手势,更新用于所述相应对象的所述相应对象次序指示符,使得所述相应对象次序指示符提供对所述相应对象在所述第二层次序内的位置的视觉指示。
7.根据权利要求1到6中任一权利要求所述的方法,其中当检测到所述手势时,包含所述相应对象的多个对象是选定对象,且所述选定对象中的每一者在所述第一层次序内的位置不同于所述选定对象中的每一者在所述第二层次序内的位置。
8.根据权利要求7所述的方法,其中:
在所述第一层次序中,所述选定对象中的每一者具有相对于其它选定对象的相对位置;且
在所述第二层次序中,所述选定对象中的每一者具有相对于所述其它选定对象的所述相同相对位置。
9.根据权利要求7到8中任一权利要求所述的方法,其中:
在所述第一层次序中,所述多个对象中的未被选择的一对象具有在所述选定对象中的两者之间的位置;且
在所述第二层次序中,将所述两个选定对象连续排序。
10.根据权利要求1到9中任一权利要求所述的方法,其中:
所述手势包含所述触敏表面上的所述第二接触的移动;且
根据所述第二接触的对应于所述显示器的预定轴的所述移动的分量来确定所述第二层次序。
11.根据权利要求10所述的方法,其中:
当所述第二接触的对应于所述显示器的所述预定轴的移动的所述分量在第一方向上时,所述相应对象在所述第二层次序中的位置高于所述相应对象在所述第一层次序中的位置;且,
当所述第二接触的对应于所述显示器的所述预定轴的移动的所述分量在与所述第一方向相反的第二方向上时,所述相应对象在所述第二层次序中的位置低于所述相应对象在所述第一层次序中的所述位置。
12.根据权利要求11所述的方法,其中:
当所述第二接触的移动的所述分量在所述第一方向上具有相应量值时,所述相应对象在所述第二层次序内的所述位置是比所述相应对象在所述第一层次序内的所述位置高的相应数目的位置;且,
当所述第二接触的移动的垂直分量在所述第二方向上具有所述相同相应量值时,所述相应对象在所述第二层次序内的所述位置是比所述相应对象在所述第一层次序内的所述位置低的所述相同相应数目的位置。
13.根据权利要求10到12中任一权利要求所述的方法,其中所述相应对象在所述第二层次序中的所述位置是根据以下内容来确定:
所述第二接触的对应于所述显示器的所述预定轴的移动的所述分量的量值;
所述第二接触在所述触敏表面上的初始位置与所述触敏表面的边缘之间的距离;以及
包含于所述多个对象中的对象的数量。
14.根据权利要求1到13中任一权利要求所述的方法,其中:
将所述触敏表面的第一边缘与所述触敏表面的第二边缘之间的空间中的区映射到所述第一层次序中的多个位置,使得:
根据所述第一层次序在所述触敏表面的所述第一边缘与所述触敏表面的所述第二边缘之间沿着所述触敏表面的预定义的轴来布置所述区;
将对应于所述第二接触的所述初始位置的初始区映射到所述相应对象的当前位置;
将高于所述相应对象的所述当前位置的位置中的每一者映射到所述初始区与所述第一边缘之间的区;
将低于所述相应对象的所述当前位置的位置中的每一者映射到所述初始区与所述第二边缘之间的区;以及
根据预定义的准则来确定所述区中的每一者的大小和位置;
所述手势包含所述触敏表面上的所述第二接触的移动;且
所述相应对象在所述第二层次序内的所述位置是被映射到对应于所述触敏表面上的所述第二接触的经更新位置的区的位置。
15.一种多功能装置,其包括:
显示器;
触敏表面;
一个或一个以上处理器;
存储器;以及
一个或一个以上程序,其中所述一个或一个以上程序存储于所述存储器中且经配置以由所述一个或一个以上处理器执行,所述一个或一个以上程序包含用于以下操作的指令:
在所述显示器上显示多个对象,其中所述多个对象具有第一层次序;
在所述触敏表面上的对应于所述显示器上的相应对象的位置的位置处检测第一接触;
在检测到所述第一接触时,在所述触敏表面上检测包含第二接触的手势;以及,
响应于检测到所述手势,根据所述手势对所述多个对象进行重新排序以产生不同于所述第一层次序的第二层次序。
16.根据权利要求15所述的装置,其中所述相应对象在所述第一层次序内的位置不同于所述相应对象在所述第二层次序内的位置。
17.根据权利要求15到16中任一权利要求所述的装置,其包含用于以下操作的指令:显示用于所述多个对象的至少一子集中的每一相应对象的相应对象次序指示符,其中用于相应对象的所述相应对象次序指示符提供对所述相应对象在所述第一层次序内的位置的视觉指示。
18.一种存储一个或一个以上程序的计算机可读存储媒体,所述一个或一个以上程序包括指令,所述指令在由具有显示器和触敏表面的多功能装置执行时致使所述装置:
在所述显示器上显示多个对象,其中所述多个对象具有第一层次序;
在所述触敏表面上的对应于所述显示器上的相应对象的位置的位置处检测第一接触;
在检测到所述第一接触时,在所述触敏表面上检测包含第二接触的手势;以及,
响应于检测到所述手势,根据所述手势对所述多个对象进行重新排序以便产生不同于所述第一层次序的第二层次序。
19.根据权利要求18所述的计算机可读存储媒体,其中所述相应对象在所述第一层次序内的位置不同于所述相应对象在所述第二层次序内的位置。
20.一种图形用户接口,其在多功能装置上,所述多功能装置具有显示器、触敏表面、存储器和用以执行存储于所述存储器中的一个或一个以上程序的一个或一个以上处理器,所述图形用户接口包括:
多个对象;
其中:
所述多个对象具有第一层次序;
在所述触敏表面上的对应于所述显示器上的相应对象的位置的位置处检测第一接触;
在检测到所述第一接触时,在所述触敏表面上检测包含第二接触的手势;以及,
响应于检测到所述手势,根据所述手势对所述多个对象进行重新排序以产生不同于所述第一层次序的第二层次序。
21.一种电子装置,其包括:
显示单元,其经配置以显示多个对象,其中所述多个对象具有第一层次序;
触敏表面单元,其经配置以接收接触和手势;以及
处理单元,其耦合到所述显示单元和所述触敏表面单元,所述处理单元经配置以:
在所述触敏表面单元上的对应于所述显示单元上的相应对象的位置的位置处检测第一接触;
在检测到所述第一接触时,在所述触敏表面单元上检测包含第二接触的手势;以及,
响应于检测到所述手势,根据所述手势对所述多个对象进行重新排序以产生不同于所述第一层次序的第二层次序。
22.根据权利要求21所述的装置,其中所述相应对象在所述第一层次序内的位置不同于所述相应对象在所述第二层次序内的位置。
23.根据权利要求21到22中任一权利要求所述的装置,其中所述手势满足预定的对象重新排序准则,所述预定的对象重新排序准则包含:
所述第二接触在所述触敏表面单元上的对应于所述显示单元的除了所述多个对象中的任何对象之外的一部分的位置处维持预定阈值量的时间以上;以及,
在所述第二接触维持所述预定阈值量的时间以上之后,在所述触敏表面单元上检测到所述第二接触高于阈值量的移动的移动。
24.根据权利要求21到23中任一权利要求所述的装置,其中所述处理单元经配置以启用对用于所述多个对象的至少一子集中的每一相应对象的相应对象次序指示符的显示,其中用于相应对象的所述相应对象次序指示符提供对所述相应对象在所述第一层次序内的位置的视觉指示。
25.根据权利要求24所述的装置,其中所述对象次序指示符响应于检测到满足对象次序指示符显示准则的输入而显示。
26.根据权利要求24到25中任一权利要求所述的装置,其中所述处理单元经配置以响应于检测到所述手势,更新用于所述相应对象的所述相应对象次序指示符,使得所述相应对象次序指示符提供对所述相应对象在所述第二层次序内的位置的视觉指示。
27.根据权利要求21到26中任一权利要求所述的装置,其中当检测到所述手势时,包含所述相应对象的多个对象是选定对象,且所述选定对象中的每一者在所述第一层次序内的位置不同于所述选定对象中的每一者在所述第二层次序内的位置。
28.根据权利要求27所述的装置,其中:
在所述第一层次序中,所述选定对象中的每一者具有相对于其它选定对象的相对位置;且
在所述第二层次序中,所述选定对象中的每一者具有相对于所述其它选定对象的所述相同相对位置。
29.根据权利要求27到28中任一权利要求所述的装置,其中:
在所述第一层次序中,所述多个对象中的未被选择的一对象具有在所述选定对象中的两者之间的位置;且
在所述第二层次序中,所述两个选定对象被连续排序。
30.根据权利要求21到29中任一权利要求所述的装置,其中:
所述手势包含所述触敏表面单元上的所述第二接触的移动;且
所述第二层次序是根据所述第二接触的对应于所述显示单元的预定轴的所述移动的分量来确定。
31.根据权利要求30所述的装置,其中:
当所述第二接触的对应于所述显示单元的所述预定轴的移动的所述分量在第一方向上时,所述相应对象在所述第二层次序中的位置高于所述相应对象在所述第一层次序中的位置;且,
当所述第二接触的对应于所述显示单元的所述预定轴的移动的所述分量在与所述第一方向相反的第二方向上时,所述相应对象在所述第二层次序中的位置低于所述相应对象在所述第一层次序中的所述位置。
32.根据权利要求31所述的装置,其中:
当所述第二接触的移动的所述分量在所述第一方向上具有相应量值时,所述相应对象在所述第二层次序内的所述位置是比所述相应对象在所述第一层次序内的所述位置高的相应数目的位置;且,
当所述第二接触的移动的垂直分量在所述第二方向上具有所述相同相应量值时,所述相应对象在所述第二层次序内的所述位置是比所述相应对象在所述第一层次序内的所述位置低的所述相同相应数目的位置。
33.根据权利要求30到32中任一权利要求所述的装置,其中所述相应对象在所述第二层次序中的所述位置是根据以下内容来确定:
所述第二接触的对应于所述显示单元的所述预定轴的移动的所述分量的量值;
所述第二接触在所述触敏表面单元上的初始位置与所述触敏表面单元的边缘之间的距离;以及
包含于所述多个对象中的对象的数量。
34.根据权利要求21到33中任一权利要求所述的装置,其中:
所述触敏表面单元的第一边缘与所述触敏表面单元的第二边缘之间的空间中的区被映射到所述第一层次序中的多个位置,使得:
所述区是根据所述第一层次序在所述触敏表面单元的所述第一边缘与所述触敏表面单元的所述第二边缘之间沿着所述触敏表面单元的预定义的轴来布置;
对应于所述第二接触的所述初始位置的初始区被映射到所述相应对象的当前位置;
高于所述相应对象的所述当前位置的位置中的每一者被映射到所述初始区与所述第一边缘之间的区;
低于所述相应对象的所述当前位置的位置中的每一者被映射到所述初始区与所述第二边缘之间的区;以及
所述区中的每一者的大小和位置是根据预定义的准则来确定;
所述手势包含所述触敏表面单元上的所述第二接触的移动;且
所述相应对象在所述第二层次序内的所述位置是被映射到对应于所述触敏表面单元上的所述第二接触的经更新位置的区的位置。
35.一种多功能装置,其包括:
显示器;
触敏表面;
一个或一个以上处理器;
存储器;以及
一个或一个以上程序,其中所述一个或一个以上程序存储于所述存储器中且经配置以由所述一个或一个以上处理器执行,所述一个或一个以上程序包含用于执行根据权利要求1到14所述的方法中的任一者的指令。
36.一种存储一个或一个以上程序的计算机可读存储媒体,所述一个或一个以上程序包括指令,所述指令在由具有显示器和触敏表面的多功能装置执行时致使所述装置执行根据权利要求1到14所述的方法中的任一者。
37.一种图形用户接口,其在多功能装置上,所述多功能装置具有显示器、触敏表面、存储器和用以执行存储于所述存储器中的一个或一个以上程序的一个或一个以上处理器,所述图形用户接口包括根据权利要求1到14所述的方法中的任一者而显示的用户接口。
CN201180037474.8A 2010-07-30 2011-07-27 用于对对象的前后位置进行重新排序的装置、方法和图形用户接口 Active CN103052935B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/848,067 2010-07-30
US12/848,067 US8972879B2 (en) 2010-07-30 2010-07-30 Device, method, and graphical user interface for reordering the front-to-back positions of objects
PCT/US2011/045552 WO2012015933A1 (en) 2010-07-30 2011-07-27 Device, method, and graphical user interface for reordering the front-to-back positions of objects

Publications (2)

Publication Number Publication Date
CN103052935A true CN103052935A (zh) 2013-04-17
CN103052935B CN103052935B (zh) 2016-04-06

Family

ID=44629867

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180037474.8A Active CN103052935B (zh) 2010-07-30 2011-07-27 用于对对象的前后位置进行重新排序的装置、方法和图形用户接口

Country Status (7)

Country Link
US (1) US8972879B2 (zh)
EP (1) EP2598978A1 (zh)
JP (1) JP5925775B2 (zh)
KR (1) KR101451042B1 (zh)
CN (1) CN103052935B (zh)
AU (1) AU2011282703B2 (zh)
WO (1) WO2012015933A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105794202A (zh) * 2013-09-12 2016-07-20 文塔纳3D有限责任公司 用于视频和全息投影的深度键合成
CN106155371A (zh) * 2015-03-25 2016-11-23 联想(北京)有限公司 信息处理方法、装置及电子设备

Families Citing this family (73)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3855297A3 (en) * 2009-09-22 2021-10-27 Apple Inc. Device method and graphical user interface for manipulating user interface objects
US8799826B2 (en) * 2009-09-25 2014-08-05 Apple Inc. Device, method, and graphical user interface for moving a calendar entry in a calendar application
US8780069B2 (en) 2009-09-25 2014-07-15 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8832585B2 (en) 2009-09-25 2014-09-09 Apple Inc. Device, method, and graphical user interface for manipulating workspace views
US8766928B2 (en) * 2009-09-25 2014-07-01 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8786639B2 (en) * 2010-01-06 2014-07-22 Apple Inc. Device, method, and graphical user interface for manipulating a collection of objects
JP2011145386A (ja) * 2010-01-13 2011-07-28 Fuji Xerox Co Ltd 表示制御装置、表示装置及びプログラム
US8539385B2 (en) * 2010-01-26 2013-09-17 Apple Inc. Device, method, and graphical user interface for precise positioning of objects
US8539386B2 (en) * 2010-01-26 2013-09-17 Apple Inc. Device, method, and graphical user interface for selecting and moving objects
US8612884B2 (en) * 2010-01-26 2013-12-17 Apple Inc. Device, method, and graphical user interface for resizing objects
US9098182B2 (en) 2010-07-30 2015-08-04 Apple Inc. Device, method, and graphical user interface for copying user interface objects between content regions
US8972879B2 (en) * 2010-07-30 2015-03-03 Apple Inc. Device, method, and graphical user interface for reordering the front-to-back positions of objects
US9081494B2 (en) 2010-07-30 2015-07-14 Apple Inc. Device, method, and graphical user interface for copying formatting attributes
US8773468B1 (en) * 2010-08-27 2014-07-08 Disney Enterprises, Inc. System and method for intuitive manipulation of the layering order of graphics objects
US20120092381A1 (en) * 2010-10-19 2012-04-19 Microsoft Corporation Snapping User Interface Elements Based On Touch Input
US8994718B2 (en) 2010-12-21 2015-03-31 Microsoft Technology Licensing, Llc Skeletal control of three-dimensional virtual world
US9223471B2 (en) * 2010-12-28 2015-12-29 Microsoft Technology Licensing, Llc Touch screen control
KR20120074490A (ko) * 2010-12-28 2012-07-06 삼성전자주식회사 휴대 단말기의 메뉴 표시 방법 및 장치
US20130293585A1 (en) * 2011-01-18 2013-11-07 Kyocera Corporation Mobile terminal and control method for mobile terminal
US9142193B2 (en) 2011-03-17 2015-09-22 Intellitact Llc Linear progression based window management
JP2013025567A (ja) * 2011-07-21 2013-02-04 Sony Corp 情報処理装置、情報処理方法、及びプログラム
KR101830966B1 (ko) * 2011-09-21 2018-02-22 엘지전자 주식회사 전자 기기 및 전자 기기의 컨텐츠 생성 방법
US9594504B2 (en) * 2011-11-08 2017-03-14 Microsoft Technology Licensing, Llc User interface indirect interaction
US9405463B2 (en) * 2011-11-25 2016-08-02 Samsung Electronics Co., Ltd. Device and method for gesturally changing object attributes
US9645699B2 (en) 2012-02-10 2017-05-09 Apple Inc. Device, method, and graphical user interface for adjusting partially off-screen windows
JP5663519B2 (ja) * 2012-04-10 2015-02-04 京セラドキュメントソリューションズ株式会社 表示入力装置および画像形成装置
JP5645869B2 (ja) * 2012-04-13 2014-12-24 京セラドキュメントソリューションズ株式会社 表示入力装置および画像形成装置
US9015582B2 (en) * 2012-05-01 2015-04-21 Kabushiki Kaisha Toshiba User interface for reordering thumbnails
US10191624B2 (en) * 2012-05-21 2019-01-29 Oath Inc. System and method for authoring interactive media assets
US20140009461A1 (en) * 2012-07-06 2014-01-09 Motorola Mobility Llc Method and Device for Movement of Objects in a Stereoscopic Display
US20140026105A1 (en) * 2012-07-18 2014-01-23 Research In Motion Limited Method and Apparatus Pertaining to a Gesture-Controlled Snooze Instruction
US9250783B2 (en) 2012-08-21 2016-02-02 Apple Inc. Toggle gesture during drag gesture
JP6036123B2 (ja) * 2012-10-01 2016-11-30 富士ゼロックス株式会社 情報表示装置及びプログラム
KR101418922B1 (ko) 2012-11-30 2014-07-11 주식회사 인프라웨어 복수 객체 제어 방법 및 장치
KR102146244B1 (ko) * 2013-02-22 2020-08-21 삼성전자주식회사 휴대 단말에 대한 동작 관련 입력에 따라 복수개의 객체들의 표시를 제어하는 방법 및 이를 위한 휴대 단말
US9436357B2 (en) * 2013-03-08 2016-09-06 Nook Digital, Llc System and method for creating and viewing comic book electronic publications
US11096668B2 (en) 2013-03-13 2021-08-24 Samsung Electronics Co., Ltd. Method and ultrasound apparatus for displaying an object
WO2014142468A1 (en) 2013-03-13 2014-09-18 Samsung Electronics Co., Ltd. Method of providing copy image and ultrasound apparatus therefor
US9292264B2 (en) 2013-03-15 2016-03-22 Paschar Llc Mobile device user interface advertising software development kit
US9892097B2 (en) * 2013-04-01 2018-02-13 Adobe Systems Incorporated Enabling absolute positioning with publishable HTML code
JP2014225245A (ja) 2013-04-25 2014-12-04 パナソニックIpマネジメント株式会社 交通情報呈示システム、交通情報呈示方法および電子デバイス
KR20140138424A (ko) 2013-05-23 2014-12-04 삼성전자주식회사 제스쳐를 이용한 사용자 인터페이스 방법 및 장치
US10210541B2 (en) * 2013-07-02 2019-02-19 Facebook, Inc. Crediting impressions to advertisements in scrollable advertisement units
JP6257255B2 (ja) * 2013-10-08 2018-01-10 キヤノン株式会社 表示制御装置及び表示制御装置の制御方法
US9501205B2 (en) * 2013-12-16 2016-11-22 Sap Se Nature inspired interaction paradigm
US9519398B2 (en) 2013-12-16 2016-12-13 Sap Se Search in a nature inspired user interface
US9971491B2 (en) 2014-01-09 2018-05-15 Microsoft Technology Licensing, Llc Gesture library for natural user input
KR20150116944A (ko) * 2014-04-08 2015-10-19 삼성디스플레이 주식회사 도어 겸용 표시 장치
KR102302233B1 (ko) 2014-05-26 2021-09-14 삼성전자주식회사 사용자 인터페이스 제공 장치 및 방법
US9529696B2 (en) 2014-05-30 2016-12-27 Apple Inc. Screen bounds for view debugging
JP5711409B1 (ja) * 2014-06-26 2015-04-30 ガンホー・オンライン・エンターテイメント株式会社 端末装置
US20160041723A1 (en) * 2014-08-08 2016-02-11 Facebook, Inc. Systems and methods for manipulating ordered content items
CN106662966B (zh) * 2014-09-02 2020-08-18 苹果公司 多维对象重排
CN104615348B (zh) * 2015-01-12 2020-07-24 联想(北京)有限公司 信息处理方法及电子设备
US20160357377A1 (en) * 2015-06-07 2016-12-08 Apple Inc. Device, Method, and Graphical User Interface for Collaborative Editing in Documents
US10509790B2 (en) * 2015-06-07 2019-12-17 Apple Inc. Electronic message searching
US9652125B2 (en) 2015-06-18 2017-05-16 Apple Inc. Device, method, and graphical user interface for navigating media content
US9990113B2 (en) 2015-09-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for moving a current focus using a touch-sensitive remote control
US9928029B2 (en) 2015-09-08 2018-03-27 Apple Inc. Device, method, and graphical user interface for providing audiovisual feedback
KR102512755B1 (ko) * 2015-12-11 2023-03-23 삼성전자주식회사 전자 장치 및 전자 장치의 디스플레이 방법
US10379726B2 (en) 2016-11-16 2019-08-13 Xerox Corporation Re-ordering pages within an image preview
US9917957B1 (en) 2016-11-17 2018-03-13 Xerox Corporation Cropping image within image preview
JP6795996B2 (ja) * 2017-02-08 2020-12-02 日本放送協会 手話cg編集装置及びプログラム
IL312294A (en) * 2018-02-04 2024-06-01 Wix Com Ltd A system and method for handling overlapping components in a visual editing system
US11922006B2 (en) 2018-06-03 2024-03-05 Apple Inc. Media control for screensavers on an electronic device
CN110928612B (zh) * 2018-09-20 2022-08-19 网易(杭州)网络有限公司 虚拟资源的显示控制方法及装置、电子设备
US11048391B2 (en) * 2019-01-03 2021-06-29 International Business Machines Corporation Method, system and computer program for copy and paste operations
DK180359B1 (en) 2019-04-15 2021-02-03 Apple Inc Accelerated scrolling and selection
WO2020243068A1 (en) * 2019-05-24 2020-12-03 Figma, Inc. Design tool with multi-edit function
KR102417764B1 (ko) * 2020-04-13 2022-07-06 주식회사 한글과컴퓨터 전자 문서에 삽입된 개체들 중 타겟하는 개체의 손쉬운 선택을 가능하게 하는 전자 장치 및 그 동작 방법
US11182136B1 (en) * 2020-08-20 2021-11-23 Ebay Inc. Control bar for element activation
US11989398B2 (en) * 2021-10-22 2024-05-21 Ebay Inc. Digital content view control system
US11886685B1 (en) 2022-10-20 2024-01-30 Stardock Corporation Desktop container peek interface

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030234768A1 (en) * 2002-05-16 2003-12-25 Junichi Rekimoto Input method and input device
US20040150668A1 (en) * 2003-01-31 2004-08-05 Xerox Corporation Secondary touch contextual sub-menu navigation for touch screen interface
US20070192749A1 (en) * 2003-02-03 2007-08-16 Microsoft Corporation Accessing remote screen content
US20080109751A1 (en) * 2003-12-31 2008-05-08 Alias Systems Corp. Layer editor system for a pen-based computer
US20100107101A1 (en) * 2008-10-24 2010-04-29 Microsoft Corporation In-document floating object re-ordering

Family Cites Families (277)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4885786A (en) 1984-10-24 1989-12-05 International Business Machines Corporation Method for enlarging an image stored in run representation form
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
US5394521A (en) 1991-12-09 1995-02-28 Xerox Corporation User interface with multiple workspaces for sharing display system objects
US5283561A (en) 1989-02-24 1994-02-01 International Business Machines Corporation Color television window for a video display unit
US5327161A (en) 1989-08-09 1994-07-05 Microtouch Systems, Inc. System and method for emulating a mouse input device with a touchpad input device
US5490241A (en) 1989-10-06 1996-02-06 Xerox Corporation Interactive computer graphics system for making precise drawings
US5371845A (en) 1990-04-27 1994-12-06 Ashlar, Inc. Technique for providing improved user feedback in an interactive drawing system
US5359703A (en) 1990-08-02 1994-10-25 Xerox Corporation Moving an object in a three-dimensional workspace
US5483261A (en) 1992-02-14 1996-01-09 Itu Research, Inc. Graphical input controller and method with rear screen image detection
US5463725A (en) 1992-12-31 1995-10-31 International Business Machines Corp. Data processing system graphical user interface which emulates printed material
DE69430967T2 (de) 1993-04-30 2002-11-07 Xerox Corp Interaktives Kopiersystem
DE69432199T2 (de) 1993-05-24 2004-01-08 Sun Microsystems, Inc., Mountain View Graphische Benutzerschnittstelle mit Verfahren zur Schnittstellebildung mit fernsteuernden Einrichtungen
US5581670A (en) 1993-07-21 1996-12-03 Xerox Corporation User interface having movable sheet with click-through tools
US5880743A (en) 1995-01-24 1999-03-09 Xerox Corporation Apparatus and method for implementing visual animation illustrating results of interactive editing operations
US5729673A (en) 1995-04-07 1998-03-17 Avid Technology, Inc. Direct manipulation of two-dimensional moving picture streams in three-dimensional space
US5675753A (en) 1995-04-24 1997-10-07 U.S. West Technologies, Inc. Method and system for presenting an electronic user-interface specification
US5808601A (en) 1995-09-12 1998-09-15 International Business Machines Corporation Interactive object selection pointer method and apparatus
US6750877B2 (en) 1995-12-13 2004-06-15 Immersion Corporation Controlling haptic feedback for enhancing navigation in a graphical environment
US5825352A (en) 1996-01-04 1998-10-20 Logitech, Inc. Multiple fingers contact sensing method for emulating mouse buttons and mouse operations on a touch sensor pad
US6374255B1 (en) 1996-05-21 2002-04-16 Immersion Corporation Haptic authoring
US6208329B1 (en) 1996-08-13 2001-03-27 Lsi Logic Corporation Supplemental mouse button emulation system, method and apparatus for a coordinate based data input device
US5872559A (en) 1996-10-04 1999-02-16 International Business Machines Corporation Breakaway and re-grow touchscreen pointing device
US6253218B1 (en) * 1996-12-26 2001-06-26 Atsushi Aoki Three dimensional data display method utilizing view point tracing and reduced document images
US6175364B1 (en) 1997-04-01 2001-01-16 Sun Microsystems, Inc. Framework and method for interfacing a GUI, container with a GUI component
US6073036A (en) 1997-04-28 2000-06-06 Nokia Mobile Phones Limited Mobile station with touch input having automatic symbol magnification function
US5910800A (en) 1997-06-11 1999-06-08 Microsoft Corporation Usage tips for on-screen touch-sensitive controls
US6025844A (en) 1997-06-12 2000-02-15 Netscape Communications Corporation Method and system for creating dynamic link views
JPH11143724A (ja) 1997-11-13 1999-05-28 Sharp Corp 情報処理装置および情報処理プログラムを記録したコンピュータ読み取り可能な記録媒体
US6075531A (en) * 1997-12-15 2000-06-13 International Business Machines Corporation Computer system and method of manipulating multiple graphical user interface components on a computer display with a proximity pointer
US7800592B2 (en) 2005-03-04 2010-09-21 Apple Inc. Hand held electronic device with multiple touch sensing devices
US7840912B2 (en) 2006-01-30 2010-11-23 Apple Inc. Multi-touch gesture dictionary
US7844914B2 (en) 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7614008B2 (en) 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US20060033724A1 (en) 2004-07-30 2006-02-16 Apple Computer, Inc. Virtual input device placement on a touch screen user interface
US7760187B2 (en) 2004-07-30 2010-07-20 Apple Inc. Visual expander
KR100595926B1 (ko) 1998-01-26 2006-07-05 웨인 웨스터만 수동 입력 통합 방법 및 장치
US6215490B1 (en) * 1998-02-02 2001-04-10 International Business Machines Corporation Task window navigation method and system
US6065021A (en) 1998-04-07 2000-05-16 Adobe Systems Incorporated Apparatus and method for alignment of graphical elements in electronic document
US6278443B1 (en) 1998-04-30 2001-08-21 International Business Machines Corporation Touch screen with random finger placement and rolling on screen to control the movement of information on-screen
US6433800B1 (en) 1998-08-31 2002-08-13 Sun Microsystems, Inc. Graphical action invocation method, and associated method, for a computer system
US6392673B1 (en) 1998-09-04 2002-05-21 Microsoft Corporation Method for resizing user interface elements for an operating system
US6346935B1 (en) * 1998-09-14 2002-02-12 Matsushita Electric Industrial Co., Ltd. Touch-sensitive tablet
US6232957B1 (en) 1998-09-14 2001-05-15 Microsoft Corporation Technique for implementing an on-demand tool glass for use in a desktop user interface
US20020018051A1 (en) 1998-09-15 2002-02-14 Mona Singh Apparatus and method for moving objects on a touchscreen display
US6565608B1 (en) 1998-12-16 2003-05-20 Microsoft Corporation Method and system for customizing alert messages
US7469381B2 (en) 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
US6480813B1 (en) 1999-02-24 2002-11-12 Autodesk, Inc. Method and apparatus for defining a precision drawing in a drawing program
US6646655B1 (en) 1999-03-09 2003-11-11 Webex Communications, Inc. Extracting a time-sequence of slides from video
US7093192B2 (en) 1999-07-30 2006-08-15 Microsoft Corporation Establishing and displaying dynamic grids
DE19939568C1 (de) 1999-08-20 2001-02-08 Pilz Gmbh & Co Verfahren zur Einstellung einer Datenübertragungsrate in einem Feldbussystem
JP3998376B2 (ja) 1999-09-10 2007-10-24 富士通株式会社 入力処理方法及びそれを実施する入力処理装置
JP2003521061A (ja) 2000-01-25 2003-07-08 オートデスク,インコーポレイテッド インターネット上で建築図面へのアクセスを提供し、処理する方法および装置
JP3867226B2 (ja) 2000-02-15 2007-01-10 株式会社 ニューコム 複数の指示部位で操作可能なタッチパネルシステム
WO2001082262A1 (en) 2000-04-25 2001-11-01 Geneed, Inc. Computer-based educational system
US6686935B1 (en) 2000-05-24 2004-02-03 International Business Machines Corporation Method and apparatus for object kerning
US7025279B2 (en) 2000-06-30 2006-04-11 Silverbrook Research Pty Ltd Method for generating tags
US6807361B1 (en) 2000-07-18 2004-10-19 Fuji Xerox Co., Ltd. Interactive custom video creation system
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US6897853B2 (en) * 2000-11-10 2005-05-24 Microsoft Corp. Highlevel active pen matrix
JP4196536B2 (ja) 2000-11-21 2008-12-17 コニカミノルタビジネステクノロジーズ株式会社 ファイル管理装置、ファイル管理方法およびファイル管理プログラムを記録したコンピュータ読取可能な記録媒体
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US7030861B1 (en) 2001-02-10 2006-04-18 Wayne Carl Westerman System and method for packing multi-touch gestures onto a hand
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US20020161772A1 (en) 2001-02-20 2002-10-31 Bergelson Alan P. Automated procedure for database creation for a form-based data collection system
US7134093B2 (en) 2001-04-18 2006-11-07 International Business Machines Corporation Graphical user interface for direct control of display of data
US7190379B2 (en) 2001-06-29 2007-03-13 Contex A/S Method for resizing and moving an object on a computer screen
US6690365B2 (en) * 2001-08-29 2004-02-10 Microsoft Corporation Automatic scrolling
US8004496B2 (en) 2002-01-08 2011-08-23 Koninklijke Philips Electronics N.V. User interface for electronic devices for controlling the displaying of long sorted lists
US20030142137A1 (en) 2002-01-28 2003-07-31 International Business Machines Corporation Selectively adjusting the order of windows in response to a scroll wheel rotation
JP3800524B2 (ja) 2002-03-15 2006-07-26 インターナショナル・ビジネス・マシーンズ・コーポレーション 表示制御方法、これを用いたプログラム及び情報処理装置
US7107285B2 (en) 2002-03-16 2006-09-12 Questerra Corporation Method, system, and program for an improved enterprise spatial system
US6903751B2 (en) 2002-03-22 2005-06-07 Xerox Corporation System and method for editing electronic images
US6928619B2 (en) * 2002-05-10 2005-08-09 Microsoft Corporation Method and apparatus for managing input focus and z-order
US7456823B2 (en) * 2002-06-14 2008-11-25 Sony Corporation User interface apparatus and portable information apparatus
US7656393B2 (en) 2005-03-04 2010-02-02 Apple Inc. Electronic device having display and surrounding touch sensitive bezel for user interface and control
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
US7302648B1 (en) 2002-07-10 2007-11-27 Apple Inc. Method and apparatus for resizing buffered windows
US7110005B2 (en) 2002-09-06 2006-09-19 Autodesk, Inc. Object manipulators and functionality
US20040066407A1 (en) 2002-10-08 2004-04-08 Microsoft Corporation Intelligent windows movement and resizing
TWI245992B (en) 2002-10-30 2005-12-21 Fuji Photo Film Co Ltd Method, apparatus, and computer recordable data media for image processing
US7185291B2 (en) 2003-03-04 2007-02-27 Institute For Information Industry Computer with a touch screen
US7158158B1 (en) 2003-03-12 2007-01-02 Apple Computer, Inc. Method and apparatus for nonlinear anamorphic scaling of video images
US7545392B2 (en) 2003-05-30 2009-06-09 Apple Inc. Dynamic guides
US7287241B2 (en) 2003-06-17 2007-10-23 Microsoft Corporation Snaplines for control object positioning
US7246311B2 (en) 2003-07-17 2007-07-17 Microsoft Corporation System and methods for facilitating adaptive grid-based document layout
US20050052427A1 (en) 2003-09-10 2005-03-10 Wu Michael Chi Hung Hand gesture interaction with touch surface
US7661959B2 (en) 2003-09-19 2010-02-16 Minutes Matter Solutions, Inc. Interior design system and method
US7471423B2 (en) 2003-09-26 2008-12-30 Seiko Epson Corporation Image processing system and image processing method
US20050068290A1 (en) 2003-09-28 2005-03-31 Denny Jaeger Method for creating and using user-friendly grids
US8739060B2 (en) 2003-09-29 2014-05-27 Eqapez Foundation, L.L.C. Method and system for displaying multiple aspect ratios of a viewport
US7532753B2 (en) 2003-09-29 2009-05-12 Lipsky Scott E Method and system for specifying color of a fill area
US20050088418A1 (en) 2003-10-28 2005-04-28 Nguyen Mitchell V. Pen-based computer interface system
US7398478B2 (en) 2003-11-14 2008-07-08 Microsoft Corporation Controlled non-proportional scaling display
US20050108620A1 (en) 2003-11-19 2005-05-19 Microsoft Corporation Method and system for selecting and manipulating multiple objects
JP4239090B2 (ja) 2004-01-08 2009-03-18 富士フイルム株式会社 ファイル管理プログラム
US7620915B2 (en) 2004-02-13 2009-11-17 Ludwig Lester F Electronic document editing employing multiple cursors
JP4325449B2 (ja) 2004-03-19 2009-09-02 ソニー株式会社 表示制御装置,表示制御方法,記録媒体
US7469833B1 (en) 2004-04-08 2008-12-30 Adobe Systems Incorporated Creating and using documents with machine-readable codes
US20050231512A1 (en) 2004-04-16 2005-10-20 Niles Gregory E Animation of an object using behaviors
US8448083B1 (en) 2004-04-16 2013-05-21 Apple Inc. Gesture control of multimedia editing applications
JP2008511876A (ja) * 2004-04-23 2008-04-17 サーク・コーポレーション タッチパッド上のスクロールおよびエッジモーションの改良された方法
US7801419B2 (en) 2004-05-10 2010-09-21 Sony Computer Entertainment Inc. Multimedia reproduction device and menu screen display method
US8281241B2 (en) 2004-06-28 2012-10-02 Nokia Corporation Electronic device and method for providing extended user interface
WO2006003591A2 (en) 2004-06-29 2006-01-12 Koninklijke Philips Electronics, N.V. Discontinuous zoom
US7743348B2 (en) 2004-06-30 2010-06-22 Microsoft Corporation Using physical objects to adjust attributes of an interactive display application
JP4763695B2 (ja) 2004-07-30 2011-08-31 アップル インコーポレイテッド タッチ・センシティブ入力デバイスのためのモード・ベースのグラフィカル・ユーザ・インタフェース
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
JP4332477B2 (ja) 2004-08-06 2009-09-16 キヤノン株式会社 レイアウト調整方法及び装置並びにプログラム
US7728821B2 (en) 2004-08-06 2010-06-01 Touchtable, Inc. Touch detecting interactive display
JP4332480B2 (ja) 2004-08-31 2009-09-16 キヤノン株式会社 レイアウト調整方法及び装置並びにプログラム
US7761814B2 (en) 2004-09-13 2010-07-20 Microsoft Corporation Flick gesture
US7904810B2 (en) 2004-09-21 2011-03-08 Microsoft Corporation System and method for editing a hand-drawn list in ink input
US7728823B2 (en) 2004-09-24 2010-06-01 Apple Inc. System and method for processing raw data of track pad device
US20070198942A1 (en) 2004-09-29 2007-08-23 Morris Robert P Method and system for providing an adaptive magnifying cursor
US7454717B2 (en) * 2004-10-20 2008-11-18 Microsoft Corporation Delimiters for selection-action pen gesture phrases
US7925996B2 (en) 2004-11-18 2011-04-12 Microsoft Corporation Method and system for providing multiple input connecting user interface
US20060136833A1 (en) 2004-12-15 2006-06-22 International Business Machines Corporation Apparatus and method for chaining objects in a pointer drag path
US20060129945A1 (en) 2004-12-15 2006-06-15 International Business Machines Corporation Apparatus and method for pointer drag path operations
US20060136246A1 (en) 2004-12-22 2006-06-22 Tu Edgar A Hierarchical program guide
JP4238222B2 (ja) 2005-01-04 2009-03-18 インターナショナル・ビジネス・マシーンズ・コーポレーション オブジェクト編集システム、オブジェクト編集方法及びオブジェクト編集プログラム
JP5198874B2 (ja) 2005-01-30 2013-05-15 スウィフトポイント リミテッド コンピュータマウス周辺機器
US7839385B2 (en) 2005-02-14 2010-11-23 Hillcrest Laboratories, Inc. Methods and systems for enhancing television applications using 3D pointing
US8819569B2 (en) 2005-02-18 2014-08-26 Zumobi, Inc Single-handed approach for navigation of application tiles using panning and zooming
US7489324B2 (en) 2005-03-07 2009-02-10 Vistaprint Technologies Limited Automated image processing
US7477233B2 (en) 2005-03-16 2009-01-13 Microsoft Corporation Method and system for providing modifier key behavior through pen gestures
US7624354B2 (en) 2005-04-29 2009-11-24 Microsoft Corporation Efficient workspace management using content groups
US20060279532A1 (en) 2005-06-14 2006-12-14 Olszewski Piotr S Data input device controlled by motions of hands and fingers
KR20060133389A (ko) * 2005-06-20 2006-12-26 엘지전자 주식회사 이동 단말기의 데이터 처리 장치 및 그 방법
US7665028B2 (en) 2005-07-13 2010-02-16 Microsoft Corporation Rich drag drop user interface
US20090013350A1 (en) 2005-08-11 2009-01-08 Vvond, Llc Display of movie titles in a library
US20070245257A1 (en) 2005-08-24 2007-10-18 Kwan-Ho Chan Graphical Interface for Direct Manipulation of Software Objects
JP2007058785A (ja) 2005-08-26 2007-03-08 Canon Inc 情報処理装置及び前記装置におけるドラグオブジェクトの操作方法
US7581189B2 (en) 2005-09-09 2009-08-25 Microsoft Corporation Dynamically generating a database report during a report building process
US20080098331A1 (en) 2005-09-16 2008-04-24 Gregory Novick Portable Multifunction Device with Soft Keyboards
US7694231B2 (en) 2006-01-05 2010-04-06 Apple Inc. Keyboards for portable electronic devices
US20070152980A1 (en) 2006-01-05 2007-07-05 Kenneth Kocienda Touch Screen Keyboards for Portable Electronic Devices
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
US20070079236A1 (en) 2005-10-04 2007-04-05 Microsoft Corporation Multi-form design with harmonic composition for dynamically aggregated documents
US7523405B2 (en) * 2005-11-16 2009-04-21 Microsoft Corporation Displaying 2D graphic content using depth wells
US7663620B2 (en) * 2005-12-05 2010-02-16 Microsoft Corporation Accessing 2D graphic content using axonometric layer views
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
AU2006332488A1 (en) 2005-12-30 2007-07-12 Apple Inc. Portable electronic device with multi-touch input
US7934169B2 (en) 2006-01-25 2011-04-26 Nokia Corporation Graphical user interface, electronic device, method and computer program that uses sliders for user input
US8510669B2 (en) 2006-02-06 2013-08-13 Yahoo! Inc. Method and system for presenting photos on a website
US7750911B2 (en) 2006-02-21 2010-07-06 Chrysler Group Llc Pen-based 3D drawing system with 3D mirror symmetric curve drawing
US8930834B2 (en) 2006-03-20 2015-01-06 Microsoft Corporation Variable orientation user interface
KR100672605B1 (ko) 2006-03-30 2007-01-24 엘지전자 주식회사 아이템 선택 방법 및 이를 위한 단말기
US9395905B2 (en) 2006-04-05 2016-07-19 Synaptics Incorporated Graphical scroll wheel
US8077153B2 (en) 2006-04-19 2011-12-13 Microsoft Corporation Precise selection techniques for multi-touch screens
JP4796435B2 (ja) 2006-04-28 2011-10-19 富士フイルム株式会社 画像ビューア
US8279180B2 (en) 2006-05-02 2012-10-02 Apple Inc. Multipoint touch surface controller
US10503342B2 (en) 2006-08-04 2019-12-10 Apple Inc. User interface spaces
US7813774B2 (en) 2006-08-18 2010-10-12 Microsoft Corporation Contact, motion and position sensing circuitry providing data entry associated with keypad and touchpad
US7864163B2 (en) 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US7934156B2 (en) 2006-09-06 2011-04-26 Apple Inc. Deletion gestures on a portable multifunction device
US7581186B2 (en) 2006-09-11 2009-08-25 Apple Inc. Media manager with integrated browsers
WO2008047552A1 (en) 2006-09-28 2008-04-24 Kyocera Corporation Portable terminal and method for controlling the same
JP5362573B2 (ja) 2006-10-10 2013-12-11 セダラ ソフトウェア コーポレイション 医療画像において領域を区分化するシステムおよび方法
US7856605B2 (en) 2006-10-26 2010-12-21 Apple Inc. Method, system, and graphical user interface for positioning an insertion marker in a touch screen display
US8570278B2 (en) 2006-10-26 2013-10-29 Apple Inc. Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
US20080100642A1 (en) 2006-10-31 2008-05-01 International Business Machines Corporation User definable aspect ratios for image regions
US8006002B2 (en) 2006-12-12 2011-08-23 Apple Inc. Methods and systems for automatic configuration of peripherals
US8584038B2 (en) 2006-12-18 2013-11-12 Microsoft Corporation Techniques for use with a calendar and messaging component
US8250490B2 (en) 2006-12-18 2012-08-21 Canon Kabushiki Kaisha Display image control apparatus
TWI399670B (zh) 2006-12-21 2013-06-21 Elan Microelectronics Corp 操作控制方法及系統及其機器可讀取媒體
US7956847B2 (en) * 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US7957762B2 (en) 2007-01-07 2011-06-07 Apple Inc. Using ambient light sensor to augment proximity sensor output
US10437459B2 (en) 2007-01-07 2019-10-08 Apple Inc. Multitouch data fusion
WO2008095137A2 (en) 2007-01-31 2008-08-07 Perceptive Pixel, Inc. Methods of interfacing with multi-point input devices and multi-point input systems employing interfacing techniques
JP4939959B2 (ja) 2007-02-02 2012-05-30 ペンタックスリコーイメージング株式会社 携帯機器
JP5305605B2 (ja) 2007-03-16 2013-10-02 株式会社ソニー・コンピュータエンタテインメント データ処理装置、データ処理方法、及びデータ処理プログラム
US8139919B2 (en) 2007-03-29 2012-03-20 Microsoft Corporation Light table editor for video snippets
US8065603B2 (en) 2007-04-30 2011-11-22 Google Inc. Hiding portions of display content
WO2008138030A1 (en) 2007-05-11 2008-11-20 Rpo Pty Limited User-defined enablement protocol
WO2008138046A1 (en) 2007-05-11 2008-11-20 Rpo Pty Limited Double touch inputs
US7936341B2 (en) 2007-05-30 2011-05-03 Microsoft Corporation Recognizing selection regions from multiple simultaneous inputs
US8095884B2 (en) 2007-06-01 2012-01-10 Microsoft Corporation Automatic alignment with subcomponents on a visual layout
JP2008305087A (ja) 2007-06-06 2008-12-18 Toshiba Matsushita Display Technology Co Ltd 表示装置
US8681104B2 (en) 2007-06-13 2014-03-25 Apple Inc. Pinch-throw and translation gestures
US9933937B2 (en) 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
US8302033B2 (en) 2007-06-22 2012-10-30 Apple Inc. Touch screen device, method, and graphical user interface for providing maps, directions, and location-based information
US8947364B2 (en) 2007-08-20 2015-02-03 Synaptics Incorporated Proximity sensor device and method with activation confirmation
JP4904223B2 (ja) 2007-08-23 2012-03-28 キヤノン株式会社 画像処理装置及び画像処理方法
US9619143B2 (en) 2008-01-06 2017-04-11 Apple Inc. Device, method, and graphical user interface for viewing application launch icons
JP5184018B2 (ja) 2007-09-14 2013-04-17 京セラ株式会社 電子機器
US8600816B2 (en) 2007-09-19 2013-12-03 T1visions, Inc. Multimedia, multiuser system and associated methods
US8130211B2 (en) 2007-09-24 2012-03-06 Microsoft Corporation One-touch rotation of virtual objects in virtual workspace
US8171431B2 (en) 2007-10-05 2012-05-01 Microsoft Corporation Handle flags
US7958460B2 (en) 2007-10-30 2011-06-07 International Business Machines Corporation Method for predictive drag and drop operation to improve accessibility
EP2060970A1 (en) 2007-11-12 2009-05-20 Research In Motion Limited User interface for touchscreen device
US20090122018A1 (en) 2007-11-12 2009-05-14 Leonid Vymenets User Interface for Touchscreen Device
US9513765B2 (en) 2007-12-07 2016-12-06 Sony Corporation Three-dimensional sliding object arrangement method and system
US8365235B2 (en) 2007-12-18 2013-01-29 Netflix, Inc. Trick play of streaming media
JP4605478B2 (ja) 2007-12-19 2011-01-05 ソニー株式会社 情報処理装置、表示制御方法及び表示制御プログラム
KR20090070491A (ko) 2007-12-27 2009-07-01 엔에이치엔(주) 터치스크린을 이용한 화면 제어 장치 및 방법
US20090172606A1 (en) 2007-12-31 2009-07-02 Motorola, Inc. Method and apparatus for two-handed computer user interface with gesture recognition
US20090174679A1 (en) * 2008-01-04 2009-07-09 Wayne Carl Westerman Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface
TWI460621B (zh) 2008-01-21 2014-11-11 Elan Microelectronics Corp 可供進行多物件操作之觸控板及應用其中之方法
WO2009093241A2 (en) 2008-01-23 2009-07-30 N-Trig Ltd. Graphical object manipulation with a touch sensitive screen
US8490025B2 (en) 2008-02-01 2013-07-16 Gabriel Jakobson Displaying content associated with electronic mapping systems
US8201109B2 (en) 2008-03-04 2012-06-12 Apple Inc. Methods and graphical user interfaces for editing on a portable multifunction device
WO2009109014A1 (en) 2008-03-05 2009-09-11 Rpo Pty Limited Methods for operation of a touch input device
KR101012300B1 (ko) 2008-03-07 2011-02-08 삼성전자주식회사 터치스크린을 구비한 휴대 단말기의 사용자 인터페이스장치 및 그 방법
US9503562B2 (en) 2008-03-19 2016-11-22 Universal Electronics Inc. System and method for appliance control via a personal communication or entertainment device
US20090237363A1 (en) * 2008-03-20 2009-09-24 Microsoft Corporation Plural temporally overlapping drag and drop operations
US20110012848A1 (en) 2008-04-03 2011-01-20 Dong Li Methods and apparatus for operating a multi-object touch handheld device with touch sensitive display
US9372591B2 (en) 2008-04-10 2016-06-21 Perceptive Pixel, Inc. Methods of interfacing with multi-input devices and multi-input display systems employing interfacing techniques
US20090256809A1 (en) * 2008-04-14 2009-10-15 Sony Ericsson Mobile Communications Ab Three-dimensional touch interface
US20090282332A1 (en) 2008-05-12 2009-11-12 Nokia Corporation Apparatus, method and computer program product for selecting multiple items using multi-touch
JP5164675B2 (ja) 2008-06-04 2013-03-21 キヤノン株式会社 ユーザインターフェースの制御方法及び情報処理装置及びプログラム
US8477139B2 (en) * 2008-06-09 2013-07-02 Apple Inc. Touch screen device, method, and graphical user interface for manipulating three-dimensional virtual objects
US9589381B2 (en) 2008-06-12 2017-03-07 Microsoft Technology Licensing, Llc Copying of animation effects from a source object to at least one target object
US20090327975A1 (en) 2008-06-27 2009-12-31 Stedman Roy W Multi-Touch Sorting Gesture
JP5500855B2 (ja) 2008-07-11 2014-05-21 キヤノン株式会社 情報処理装置及びその制御方法
US20100031202A1 (en) 2008-08-04 2010-02-04 Microsoft Corporation User-defined gesture set for surface computing
US20100058238A1 (en) 2008-09-04 2010-03-04 Avigdor Ben Moshe Data navigation system
US20100053111A1 (en) * 2008-09-04 2010-03-04 Sony Ericsson Mobile Communications Ab Multi-touch control for touch sensitive display
JP2010092455A (ja) * 2008-09-10 2010-04-22 Ricoh Co Ltd ファイル管理システム及びプログラム
US8176438B2 (en) 2008-09-26 2012-05-08 Microsoft Corporation Multi-modal interaction for a screen magnifier
US20100088624A1 (en) 2008-10-03 2010-04-08 The Provost, Fellows And Scholars Of The College Of The Holy And Undivided Trinity Of Queen Elizabe Animation tool
KR101586627B1 (ko) 2008-10-06 2016-01-19 삼성전자주식회사 멀티 터치를 이용한 리스트 관리 방법 및 장치
KR20100041006A (ko) * 2008-10-13 2010-04-22 엘지전자 주식회사 3차원 멀티 터치를 이용한 사용자 인터페이스 제어방법
KR101503835B1 (ko) 2008-10-13 2015-03-18 삼성전자주식회사 멀티터치를 이용한 오브젝트 관리 방법 및 장치
US8610673B2 (en) 2008-12-03 2013-12-17 Microsoft Corporation Manipulation of list on a multi-touch display
US20100185949A1 (en) 2008-12-09 2010-07-22 Denny Jaeger Method for using gesture objects for computer control
WO2010071630A1 (en) 2008-12-15 2010-06-24 Hewlett-Packard Development Company, L.P. Gesture based edit mode
US8838461B2 (en) 2008-12-19 2014-09-16 Qualcomm Incorporated Access and management of cross-platform calendars
US8451236B2 (en) 2008-12-22 2013-05-28 Hewlett-Packard Development Company L.P. Touch-sensitive display screen with absolute and relative input modes
US7870496B1 (en) 2009-01-29 2011-01-11 Jahanzeb Ahmed Sherwani System using touchscreen user interface of a mobile device to remotely control a host computer
US20100218100A1 (en) 2009-02-25 2010-08-26 HNTB Holdings, Ltd. Presentation system
US20100214571A1 (en) 2009-02-26 2010-08-26 Konica Minolta Systems Laboratory, Inc. Drag-and-drop printing method with enhanced functions
US8589374B2 (en) 2009-03-16 2013-11-19 Apple Inc. Multifunction device with integrated search and application selection
US8839155B2 (en) 2009-03-16 2014-09-16 Apple Inc. Accelerated scrolling for a multifunction device
US8633904B2 (en) * 2009-04-24 2014-01-21 Cypress Semiconductor Corporation Touch identification for multi-touch technology
KR101553629B1 (ko) * 2009-05-06 2015-09-17 삼성전자주식회사 인터페이스 제공 방법
US8669945B2 (en) * 2009-05-07 2014-03-11 Microsoft Corporation Changing of list views on mobile device
KR20100124438A (ko) 2009-05-19 2010-11-29 삼성전자주식회사 휴대 단말기의 페이지 제공 방법 및 이를 지원하는 휴대 단말기
JP5326802B2 (ja) 2009-05-19 2013-10-30 ソニー株式会社 情報処理装置、画像拡大縮小方法及びそのプログラム
US20100302176A1 (en) 2009-05-29 2010-12-02 Nokia Corporation Zoom-in functionality
KR20100130671A (ko) 2009-06-04 2010-12-14 삼성전자주식회사 터치 인터페이스에서 선택 영역의 제공 장치 및 그 방법
US8681106B2 (en) 2009-06-07 2014-03-25 Apple Inc. Devices, methods, and graphical user interfaces for accessibility using a touch-sensitive surface
US8171401B2 (en) 2009-06-19 2012-05-01 Microsoft Corporation Resizing an editable area in a web page
US8543946B2 (en) 2009-06-29 2013-09-24 Sharp Laboratories Of America, Inc. Gesture-based interface system and method
US8407613B2 (en) 2009-07-13 2013-03-26 Apple Inc. Directory management on a portable multifunction device
US8497884B2 (en) 2009-07-20 2013-07-30 Motorola Mobility Llc Electronic device and method for manipulating graphic user interface elements
US8656314B2 (en) 2009-07-30 2014-02-18 Lenovo (Singapore) Pte. Ltd. Finger touch gesture for joining and unjoining discrete touch objects
US8762886B2 (en) * 2009-07-30 2014-06-24 Lenovo (Singapore) Pte. Ltd. Emulating fundamental forces of physics on a virtual, touchable object
US8312387B2 (en) 2009-08-10 2012-11-13 Microsoft Corporation Target element zoom
KR101608532B1 (ko) 2009-08-11 2016-04-01 엘지전자 주식회사 이동 통신 단말기에서의 데이터 표시방법 및 이를 적용한 이동 통신 단말기
EP3855297A3 (en) 2009-09-22 2021-10-27 Apple Inc. Device method and graphical user interface for manipulating user interface objects
US8766928B2 (en) 2009-09-25 2014-07-01 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8677283B2 (en) 2009-10-21 2014-03-18 Microsoft Corporation Displaying lists as reacting against barriers
JP5658451B2 (ja) 2009-11-30 2015-01-28 ソニー株式会社 情報処理装置、情報処理方法及びそのプログラム
US8381125B2 (en) 2009-12-16 2013-02-19 Apple Inc. Device and method for resizing user interface content while maintaining an aspect ratio via snapping a perimeter to a gridline
WO2011076977A1 (en) 2009-12-23 2011-06-30 Nokia Corporation Method and apparatus for display device
US20110163944A1 (en) 2010-01-05 2011-07-07 Apple Inc. Intuitive, gesture-based communications with physics metaphors
US8786559B2 (en) 2010-01-06 2014-07-22 Apple Inc. Device, method, and graphical user interface for manipulating tables using multi-contact gestures
US9052894B2 (en) 2010-01-15 2015-06-09 Apple Inc. API to replace a keyboard with custom controls
US10007393B2 (en) * 2010-01-19 2018-06-26 Apple Inc. 3D view of file structure
US8209630B2 (en) 2010-01-26 2012-06-26 Apple Inc. Device, method, and graphical user interface for resizing user interface content
US8683363B2 (en) 2010-01-26 2014-03-25 Apple Inc. Device, method, and graphical user interface for managing user interface content and user interface elements
US20110231796A1 (en) 2010-02-16 2011-09-22 Jose Manuel Vigil Methods for navigating a touch screen device in conjunction with gestures
US20110209058A1 (en) * 2010-02-25 2011-08-25 Microsoft Corporation Multi-screen hold and tap gesture
US8751970B2 (en) 2010-02-25 2014-06-10 Microsoft Corporation Multi-screen synchronous slide gesture
US9454304B2 (en) 2010-02-25 2016-09-27 Microsoft Technology Licensing, Llc Multi-screen dual tap gesture
US9058186B2 (en) 2010-04-07 2015-06-16 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US8707195B2 (en) 2010-06-07 2014-04-22 Apple Inc. Devices, methods, and graphical user interfaces for accessibility via a touch-sensitive surface
US9483175B2 (en) * 2010-07-26 2016-11-01 Apple Inc. Device, method, and graphical user interface for navigating through a hierarchy
US8972879B2 (en) * 2010-07-30 2015-03-03 Apple Inc. Device, method, and graphical user interface for reordering the front-to-back positions of objects
US8291349B1 (en) 2011-01-19 2012-10-16 Google Inc. Gesture-based metadata display
US8176435B1 (en) 2011-09-08 2012-05-08 Google Inc. Pinch to adjust

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030234768A1 (en) * 2002-05-16 2003-12-25 Junichi Rekimoto Input method and input device
US20040150668A1 (en) * 2003-01-31 2004-08-05 Xerox Corporation Secondary touch contextual sub-menu navigation for touch screen interface
US20070192749A1 (en) * 2003-02-03 2007-08-16 Microsoft Corporation Accessing remote screen content
US20080109751A1 (en) * 2003-12-31 2008-05-08 Alias Systems Corp. Layer editor system for a pen-based computer
US20100107101A1 (en) * 2008-10-24 2010-04-29 Microsoft Corporation In-document floating object re-ordering

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105794202A (zh) * 2013-09-12 2016-07-20 文塔纳3D有限责任公司 用于视频和全息投影的深度键合成
CN105794202B (zh) * 2013-09-12 2019-08-20 文塔纳3D有限责任公司 用于视频和全息投影的深度键合成
CN106155371A (zh) * 2015-03-25 2016-11-23 联想(北京)有限公司 信息处理方法、装置及电子设备
CN106155371B (zh) * 2015-03-25 2019-10-29 联想(北京)有限公司 信息处理方法、装置及电子设备

Also Published As

Publication number Publication date
US8972879B2 (en) 2015-03-03
KR101451042B1 (ko) 2014-10-15
AU2011282703B2 (en) 2015-05-21
KR20130043191A (ko) 2013-04-29
JP2013541061A (ja) 2013-11-07
EP2598978A1 (en) 2013-06-05
US20120030569A1 (en) 2012-02-02
AU2011282703A1 (en) 2013-01-31
WO2012015933A1 (en) 2012-02-02
CN103052935B (zh) 2016-04-06
JP5925775B2 (ja) 2016-05-25

Similar Documents

Publication Publication Date Title
CN103052935B (zh) 用于对对象的前后位置进行重新排序的装置、方法和图形用户接口
CN102763079B (zh) 用自定义控件取代键盘的应用程序编程接口(api)
CN102754071B (zh) 具有包含具有另一设备的显示分辨率的模式的多个应用程序显示模式的设备和方法
CN102763074B (zh) 自动键盘布局确定
CN102063253B (zh) 用于管理并行打开的软件应用的方法和相关设备
CN102763065B (zh) 用于导航经过多个查看区域的装置、方法和图形用户接口
CN102955653B (zh) 用于导览和预览内容项目的装置、方法和图形用户接口
CN102763058B (zh) 用于存取可选键的装置、方法和图形用户接口
CN102754062B (zh) 具有内容显示模式和显示旋转启发的装置、方法和图形用户接口
US9569102B2 (en) Device, method, and graphical user interface with interactive popup views
CN102033710B (zh) 用于管理文件夹的方法和相关设备
CN102763066B (zh) 用于导航经过一范围的值的装置、方法和图形用户接口
CN102754061A (zh) 用于改变电子文档中的页的装置、方法和图形用户接口
CN102763077A (zh) 自动显示及隐藏屏幕上键盘
CN102763128A (zh) 用于附件查看和编辑的装置、方法和图形用户接口
CN102822788A (zh) 用于对象的精确定位的装置、方法和图形用户接口
CN103069378A (zh) 用于用户接口屏幕导航的装置、方法和图形用户接口
CN103186343A (zh) 用于调整内容查看和文本输入接口的大小的装置、方法和图形用户接口
CN103218148A (zh) 用于配置与用户接口的受约束的交互的装置、方法和图形用户接口
CN103164152A (zh) 用于编辑视频的装置、方法和图形用户接口
CN103186318A (zh) 用于使用单点触摸输入提供多点触摸输入和基于硬件的特征的装置、方法和图形用户接口
CN102156614A (zh) 使用多接触姿态来操作表格的设备、方法和图形用户界面
CN103186317A (zh) 用于基于装置定向来操纵三维地图视图的装置、方法和图形用户接口
CN103218154A (zh) 用于基于手势输入在三维地图中选择视图的装置、方法和图形用户接口

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant