CN102822788A - 用于对象的精确定位的装置、方法和图形用户接口 - Google Patents
用于对象的精确定位的装置、方法和图形用户接口 Download PDFInfo
- Publication number
- CN102822788A CN102822788A CN2011800161027A CN201180016102A CN102822788A CN 102822788 A CN102822788 A CN 102822788A CN 2011800161027 A CN2011800161027 A CN 2011800161027A CN 201180016102 A CN201180016102 A CN 201180016102A CN 102822788 A CN102822788 A CN 102822788A
- Authority
- CN
- China
- Prior art keywords
- user
- interface object
- touch
- contact
- sensitive display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0486—Drag-and-drop
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0412—Digitisers structurally integrated in a display
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
Abstract
一种方法包含,在具有触敏显示器的计算装置处:在所述触敏显示器上显示用户接口对象;检测所述用户接口对象上的接触;在持续检测到所述用户接口对象上的所述接触时:检测所述触敏显示器上的第一方向上的不同于所述接触的M根手指手势,其中M是整数;以及,响应于检测到所述M根手指手势,在根据所述第一方向的方向上将所述用户接口对象平移预定义的数目个像素。
Description
技术领域
所揭示的实施例大体上涉及具有触敏表面的电子装置,包含(但不限于)具有经配置以精确地移动并放置用户接口对象的触敏表面的电子装置。
背景技术
近年来,将触敏表面用作用于计算机和其它电子计算装置的输入装置已显著增加。示范性触敏表面包含触摸板和触摸屏显示器。此些表面广泛用于操纵显示器上的用户接口对象。
示范性操纵包含调整一个或一个以上用户接口对象的位置和/或大小。示范性用户接口对象包含数字图像、视频、文本、图标和其它图形。用户可能需要在以下应用程序中对用户接口对象执行此些操纵:图像管理应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的Aperture或iPhoto)、绘图应用程序、呈现应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的Keynote)、字处理应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的Pages)、网站创建应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的iWeb)、光盘创作应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的iDVD),或电子表格应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的Numbers)。
但是,用于执行这些操纵的现有方法是繁琐且低效的。举例来说,现有的基于键盘的方法需要记住特定的键序列以将用户接口对象移动精细的量(例如,以一个像素的增量计),其为乏味的且对用户产生显著认知负担。另外,现有的基于键盘的方法花费过分长的时间,进而浪费能量。在靠电池操作的装置中,此后一考虑因素特别重要。
发明内容
因此,需要具有用于精确地定位用户接口对象的更快速、更有效的方法和接口的计算装置,其不需要使用键盘。此些方法和接口可补充或取代用于定位用户接口对象的常规方法。此些方法和接口减少用户的认知负担,且产生更有效率的人机接口。对于靠电池操作的计算装置,此些方法和接口节省电力且增加电池充电之间的时间。
通过所揭示的装置来减少或消除与具有触敏表面的计算装置的用户接口相关联的以上缺陷和其它问题。在一些实施例中,所述装置是桌上型计算机。在一些实施例中,所述装置是便携式的(例如,笔记本计算机、平板计算机或手持式装置)。在一些实施例中,所述装置具有触摸板。在一些实施例中,所述装置具有触敏显示器(也称为“触摸屏”或“触摸屏显示器”)。在一些实施例中,所述装置具有图形用户接口(GUI)、一个或一个以上处理器、存储器和存储于存储器中的用于执行多个功能的一个或一个以上模块、程序或指令集。在一些实施例中,用户主要经由触敏表面上的手指接触和手势来与GUI交互。在一些实施例中,所述功能可包含图像编辑、绘图、呈现、字处理、网站创建、光盘创作、电子表格制成、玩游戏、打电话、视频会议、发电子邮件、即时消息接发、锻炼支持、数字拍照、数字视频、网络浏览、数字音乐播放,和/或数字视频播放。用于执行这些功能的可执行指令可包含于计算机可读存储媒体或经配置以用于供一个或一个以上处理器执行的其它计算机程序产品中。
根据一些实施例,在具有触敏显示器的计算装置处执行一种方法。所述方法包含:在触敏显示器上显示用户接口对象;检测用户接口对象上的接触;在持续检测到用户接口对象上的所述接触时:检测触敏显示器上的第一方向上的不同于所述接触的M根手指手势,其中M是整数;以及,响应于检测到M根手指手势,在根据所述第一方向的方向上将所述用户接口对象平移预定义的数目个像素。
根据一些实施例,在具有触敏显示器的计算装置处执行一种方法。所述方法包含:在触敏显示器上显示用户接口对象;检测用户接口对象上的接触;在持续检测到用户接口对象上的所述接触时:检测触敏显示器上的第一方向上的具有第一速率的不同于所述接触的手势;以及,响应于检测到所述手势:当所述第一速率低于预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移第一预定义的数目个像素;以及,当所述第一速率高于所述预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移不同于所述第一预定义的数目个像素的第二预定义的数目个像素。
根据一些实施例,一种计算装置包含触敏显示器、一个或一个以上处理器、存储器,和一个或一个以上程序;所述一个或一个以上程序存储于所述存储器中且经配置以由所述一个或一个以上处理器执行,且所述一个或一个以上程序包含用于执行上文所描述的方法中的任一者的操作的指令。根据一些实施例,一种具有触敏显示器、存储器和用以执行存储于所述存储器中的一个或一个以上程序的一个或一个以上处理器的计算装置上的图形用户接口包含在上文所描述的方法中的任一者中显示的元素中的一者或一者以上,所述一个或一个以上元素响应于输入而得以更新,如以上方法中的任一者中所描述。根据一些实施例,一种计算机可读存储媒体具有存储于其中的指令,所述指令在由具有触敏显示器的计算装置执行时致使所述装置执行以上所描述的方法中的任一者的操作。根据一些实施例,一种计算装置包含:触敏显示器;以及用于执行以上所描述的方法中的任一者的操作的构件。根据一些实施例,一种用于在具有触敏显示器的计算装置中使用的信息处理设备包含用于执行以上所描述的方法中的任一者的操作的构件。
根据一些实施例,一种计算装置包含:触敏显示器单元,其经配置以显示用户接口对象并接收用户接触;以及处理单元,其耦合到所述触敏显示器单元。所述处理单元经配置以:使得能够在所述触敏显示器单元上显示用户接口对象;检测所述用户接口对象上的接触;在持续检测到所述用户接口对象上的所述接触时:检测触敏显示器单元上的第一方向上的不同于所述接触的M根手指手势,其中M是整数;以及,响应于检测到所述M根手指手势,在根据所述第一方向的方向上将所述用户接口对象平移预定义的数目个像素。
根据一些实施例,一种计算装置包含:触敏显示器单元,其经配置以显示用户接口对象并接收用户接触;以及处理单元,其耦合到所述显示器单元和所述触敏显示器单元。所述处理单元经配置以:使得能够在所述触敏显示器单元上显示用户接口对象;检测所述用户接口对象上的接触;在持续检测到所述用户接口对象上的所述接触时:检测触敏显示器单元上的第一方向上的具有第一速率的不同于所述接触的手势;以及,响应于检测到所述手势:当所述第一速率低于预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移第一预定义的数目个像素;以及,当所述第一速率高于所述预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移不同于所述第一预定义的数目个像素的第二预定义的数目个像素。
因此,向具有触敏显示器的计算装置提供了用于精确地定位对象的更快速、更有效率的方法和接口,进而增加了有效性、效率和用户对此些装置的满意度。此些方法和接口可补充或取代用于定位对象的常规方法。
附图说明
为了更好地理解本发明的前述实施例以及其额外实施例,应结合下图参考以下具体实施方式,在图中,相同的参考数字指代所有图中的对应部分。
图1A和1B是说明根据一些实施例的具有触敏显示器的便携式多功能装置的框图。
图1C是说明根据一些实施例的用于事件处置的示范性组件的框图。
图2说明根据一些实施例的具有触摸屏的便携式多功能装置。
图3是根据一些实施例的具有显示器和触敏表面的示范性多功能装置的框图。
图4A和4B说明根据一些实施例的便携式多功能装置上的应用程序的菜单的示范性用户接口。
图4C说明根据一些实施例的具有与显示器分开的触敏表面的多功能装置的示范性用户接口。
图5A到5J说明根据一些实施例的用于精确地定位对象的示范性用户接口。
图6A到6B是说明根据一些实施例的精确地定位对象的方法的流程图。
图7A到7B是说明根据一些实施例的精确地定位对象的方法的流程图。
图8是根据一些实施例的计算装置的功能框图。
图9是根据一些实施例的计算装置的功能框图。
具体实施方式
现在将详细参考实施例,在附图中说明所述实施例的实例。在以下详细描述中,陈述众多具体细节以便提供对本发明的透彻理解。然而,所属领域的技术人员将明白,可在没有这些具体细节的情况下实践本发明。在其它例子中,未详细描述众所周知的方法、程序、组件、电路和网络,以便不会没有必要地混淆实施例的各方面。
还将理解,虽然术语“第一”、“第二”等可在本文中用于描述各种元件,但这些元件不受这些术语限制。这些术语仅用于将一个元件与另一元件进行区分。举例来说,在不脱离本发明的范围的情况下,可将第一接触称为第二接触,且类似地,可将第二接触称为第一接触。第一接触和第二接触都是接触,但不是相同的接触。
本文中用于本发明的描述中的术语仅是出于描述特定实施例的目的且无意限制本发明。如本发明和所附权利要求书的描述中所使用,单数形式“一”和“所述”意在也包含复数形式,除非上下文另有清楚指示。还将理解,如本文中所使用的术语“和/或”指代且涵盖相关联的所列项目中的一者或一者以上的任何和所有可能的组合。将进一步理解,术语“包含”和/或“包括”当用于本说明书中时指定所述特征、整体、步骤、操作、元件和/或组件的存在,而不排除一个或一个以上其它特征、整体、步骤、操作、元件、组件和/或其群组的存在或添加。
如本文中所使用,视上下文而定,术语“如果”可解释为是指“当……时”或“在……后即刻”或“响应于确定”或“响应于检测到”。类似地,视上下文而定,短语“如果确定”或“如果检测到【规定条件或事件】”可解释为是指“在确定后即刻”或“响应于确定”或“在检测到【规定条件或事件】后即刻”或“响应于检测到【规定条件或事件】”。
如本文中所使用,术语显示器的“分辨率”是指沿着显示器的每一轴线或每一维度上的像素数目(也称为“像素数”或“像素分辨率”)。举例来说,显示器可具有320x480个像素的分辨率。此外,如本文中所使用,术语多功能装置的“分辨率”是指多功能装置中的显示器的分辨率。术语“分辨率”不暗示对每一像素的大小或像素间隔的任何限制。举例来说,与具有1024x768像素分辨率的第一显示器相比,具有320x480像素分辨率的第二显示器具有较低的分辨率。然而,应注意,显示器的物理尺寸不仅取决于像素分辨率,还取决于许多其它因素,包含像素大小和像素间隔。因此,第一显示器可具有与第二显示器相比相同、更小或更大的物理尺寸。
如本文中所使用,术语显示器的“视频分辨率”指代沿着显示器的每一轴线或每一维度上的像素的密度。常以每英寸的点(DPI)为单位来测量视频分辨率,其对可沿着显示器的相应维度在一英寸的跨度内排成一行放置的像素的数目进行计数。
描述了计算装置、用于此些装置的用户接口和用于使用此些装置的相关联的过程的实施例。在一些实施例中,计算装置是便携式通信装置,例如移动电话,其还含有其它功能,例如PDA和/或音乐播放器功能。便携式多功能装置的示范性实施例包含(不限于)来自加利福尼亚州库比迪诺的苹果公司的iPhone和iPod Touch装置。还可使用其它便携式装置,例如具有触敏表面(例如,触摸屏显示器和/或触摸板)的膝上型或平板计算机。还应理解,在一些实施例中,所述装置不是便携式通信装置,而是具有触敏表面(例如,触摸屏显示器和/或触摸板)的桌上型计算机。
在以下论述中,描述包含显示器和触敏表面的计算装置。然而,应理解,所述计算装置可包含一个或一个以上其它物理用户接口装置,例如物理键盘、鼠标和/或操纵杆。
所述装置支持多种应用程序,例如以下各者中的一者或一者以上:绘图应用程序、呈现应用程序、字处理应用程序、网站创建应用程序、光盘创作应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息接发应用程序、锻炼支持应用程序、照片管理应用程序、数码相机应用程序、数字视频相机应用程序、网络浏览应用程序、数字音乐播放器应用程序,和/或数字视频播放器应用程序。
可在所述装置上执行的各种应用程序可使用至少一个共同物理用户接口装置,例如触敏表面。触敏表面的一个或一个以上功能以及所述装置上所显示的对应信息可在不同应用程序中和/或在相应应用程序内受到调整和/或变化。以此方式,所述装置的共同物理体系结构(例如,触敏表面)可用对用户来说直观且透明的用户接口来支持多种应用程序。
所述用户接口可包含一个或一个以上软键盘实施例。软键盘实施例可包含在键盘的所显示图标上的标准(QWERTY)和/或非标准的符号配置,例如2006年7月24日申请的美国专利申请案11/459,606“用于便携式电子装置的键盘(Keyboards For PortableElectronic Devices)”以及2006年7月24日申请的美国专利申请案11/459,615“用于便携式电子装置的触摸屏键盘(Touch Screen Keyboards For Portable Electronic Devices)”,其全部内容在此以引用的方式并入。键盘实施例可包含相对于现有物理键盘(例如,打字机的键盘)中的键数目而数目减少的图标(或软键)。此可使得用户更容易地选择键盘中的一个或一个以上图标,且因此,选择一个或一个以上对应符号。所述键盘实施例可为自适应的。举例来说,可根据用户动作(例如,选择一个或一个以上图标和/或一个或一个以上对应符号)来修改所显示的图标。所述装置上的一个或一个以上应用程序可利用共同和/或不同的键盘实施例。因此,可根据所述应用程序中的至少一些应用程序来裁定所使用的键盘实施例。在一些实施例中,可根据相应用户来裁定一个或一个以上键盘实施例。举例来说,可基于相应用户的字使用历史(词典编纂、俚语、个性使用)来根据相应用户裁定一个或一个以上键盘实施例。在使用软键盘实施例时,可调整键盘实施例中的一些以降低当选择一个或一个以上图标时(以及因此,在选择一个或一个以上符号时)用户发生错误的概率。
现在将注意力转向具有触敏显示器的便携式装置的实施例。图1A和1B是说明根据一些实施例的具有触敏显示器112的便携式多功能装置100的框图。出于便利起见,触敏显示器112有时被称为“触摸屏”,且还可被称作或称为触敏显示器系统。装置100可包含存储器102(其可包含一个或一个以上计算机可读存储媒体)、存储器控制器122、一个或一个以上处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其它输入或控制装置116和外部端口124。装置100可包含一个或一个以上光学传感器164。这些组件可经由一个或一个以上通信总线或信号线103进行通信。
应了解,装置100仅为便携式多功能装置的一个实例,且装置100可具有比所展示的组件多或少的组件,可组合两个或两个以上组件,或可具有组件的不同配置或布置。图1A和1B中所示的各种组件可以硬件、软件或硬件和软件两者的组合来实施,包含一个或一个以上信号处理和/或专用集成电路。
存储器102可包含高速随机存取存储器且还可包含非易失性存储器,例如一个或一个以上磁盘存储装置、快闪存储器装置,或其它非易失性固态存储器装置。可通过存储器控制器122来控制装置100的其它组件(例如,CPU 120和外围设备接口118)对存储器102的存取。
外围设备接口118可用于将装置的输入和输出外围设备耦合到CPU 120和存储器102。一个或一个以上处理器120运行或执行存储于存储器102中的各种软件程序和/或指令集以执行装置100的各种功能并处理数据。
在一些实施例中,外围设备接口118、CPU 120和存储器控制器122可实施于例如芯片104等单一芯片上。在一些其它实施例中,其可实施于分开的芯片上。
RF(射频)电路108接收并发送RF信号(也称为电磁信号)。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号,且经由电磁信号与通信网络和其它通信装置通信。RF电路108可包含用于执行这些功能的众所周知的电路,包含(但不限于)天线系统、RF收发器、一个或一个以上放大器、调谐器、一个或一个以上振荡器、数字信号处理器、CODEC芯片组、订户身份模块(SIM)卡、存储器等。RF电路108可通过无线通信与网络(例如因特网(还称作万维网(WWW))、内联网和/或例如蜂窝式电话网络、无线局域网(LAN)和/或城域网(MAN)等无线网络)以及其它装置通信。无线通信可使用多种通信标准、协议和技术中的任一者,包含(但不限于)全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路包接入(HSDPA)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如,IEEE 802.11a、IEEE 802.11b、IEEE 802.11g和/或IEEE 802.11n)、因特网语音协议(VoIP)、Wi-MAX、电子邮件协议(例如,因特网消息接入协议(IMAP)和/或邮局协议(POP))、即时消息接发(例如,可扩展消息接发和状态协议(XMPP)、即时消息接发和状态利用扩展的会话起始协议(SIMPLE)、即时消息接发和状态服务(IMPS)),和/或短消息服务(SMS),或任何其它合适的通信协议,包含到本文献的申请日为止尚未开发出的通信协议。
音频电路110、扬声器111和麦克风113提供用户与装置100之间的音频接口。音频电路110从外围设备接口118接收音频数据,将所述音频数据转换为电信号,且将所述电信号传输到扬声器111。扬声器111将电信号转换为人可听的声波。音频电路110还接收由麦克风113从声波转换的电信号。音频电路110将电信号转换为音频数据且将音频数据传输到外围设备接口118以进行处理。可从存储器102检索音频数据且/或通过外围设备接口118将音频数据传输到存储器102和/或RF电路108。在一些实施例中,音频电路110还包含耳机插孔(例如,212,图2)。耳机插孔提供音频电路110与可移除音频输入/输出外围设备(例如,只有输出的头戴式耳机或具有输出(例如,用于一个或两个耳朵的头戴式耳机)和输入(例如,麦克风)两者的耳机)之间的接口。
I/O子系统106将装置100上的输入/输出外围设备(例如,触摸屏112和其它输入控制装置116)耦合到外围设备接口118。I/O子系统106可包含显示器控制器156和用于其它输入或控制装置的一个或一个以上输入控制器160。一个或一个以上输入控制器160从其它输入或控制装置116接收电信号/将电信号发送到其它输入或控制装置116。所述其它输入控制装置116可包含物理按钮(例如,按钮、摇杆按钮等)、拨号盘、滑块开关、操纵杆、点击转盘等。在一些替代实施例中,输入控制器160可耦合到以下各者中的任一者或不耦合到以下各者:键盘、红外端口、USB端口和例如鼠标等指针装置。所述一个或一个以上按钮(例如,208,图2)可包含用于扬声器111和/或麦克风113的音量控制的升高/降低按钮。所述一个或一个以上按钮可包含按钮(例如,206,图2)。对按钮的快速按压可解开对触摸屏112的锁定或开始在触摸屏上使用手势来将装置解锁的过程,如2005年12月23日申请的美国专利申请案11/322,549“通过在解锁图像上执行手势来将装置解锁(Unlocking a Device by Performing Gestures on an Unlock Image)”中所描述,所述申请案在此以全文引用的方式并入。对按钮(例如,206)的更长时间的按压可使装置100通电或断电。用户可能够自定义所述按钮中的一者或一者以上的功能性。触摸屏112用于实施虚拟或软按钮和一个或一个以上软键盘。
触敏显示器112提供装置与用户之间的输入接口和输出接口。显示器控制器156从触摸屏112接收电信号和/或将电信号发送到触摸屏112。触摸屏112将视觉输出显示给用户。视觉输出可包含图形、文本、图标、视频及其任何组合(统称为“图形”)。在一些实施例中,所述视觉输出中的一些或全部可对应于用户接口对象。
触摸屏112具有触敏表面、基于触觉和/或触觉接触而从用户接受输入的传感器或传感器组。触摸屏112和显示器控制器156(以及存储器102中的任何相关联的模块和/或指令集)检测触摸屏112上的接触(和接触的任何移动或中断),且将所检测的接触转换为与显示于触摸屏112上的用户接口对象(例如,一个或一个以上软键、图标、网页或图像)的交互。在一示范性实施例中,触摸屏112与用户之间的接触点对应于用户的手指。
触摸屏112可使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术,或LED(发光二极管)技术,但在其它实施例中可使用其它显示器技术。触摸屏112和显示器控制器156可使用现在已知或稍后开发的多个触摸感测技术中的任一者来检测接触和其任何移动或中断,所述技术包含(但不限于)电容性、电阻性、红外和表面声波技术,以及用于确定与触摸屏112的一个或一个以上接触点的其它接近度传感器阵列或其它元件。在一示范性实施例中,使用投影互电容感测技术,例如来自加利福尼亚州库比迪诺(Cupertino,California)的苹果公司的iPhone和iPod Touch中出现的技术。
触摸屏112的一些实施例中的触敏显示器可类似于以下美国专利中所描述的多点触敏触摸板:6,323,846(维斯特曼等人)、6,570,557(维斯特曼等人)和/或6,677,932(维斯特曼)和/或美国专利公开案2002/0015024A1,其中的每一者在此以全文引用的方式并入。然而,触摸屏112显示来自便携式装置100的视觉输出,而触敏触摸板不提供视觉输出。
触摸屏112的一些实施例中的触敏显示器可如以下申请案中所描述:(1)2006年5月2日申请的第11/381,313号美国专利申请案“多点触摸表面控制器(Multipoint TouchSurface Controller)”;(2)2004年5月6日申请的第10/840,862号美国专利申请案“多点触摸屏(Multipoint Touchscreen)”;(3)2004年7月30日申请的第10/903,964号美国专利申请案“用于触敏输入装置的手势(Gestures For Touch Sensitive Input Devices)”;(4)2005年1月31日申请的第11/048,264号美国专利申请案“用于触敏输入装置的手势(GesturesFor Touch Sensitive Input Devices)”;(5)2005年1月18日申请的第11/038,590号美国专利申请案“用于触敏输入装置的基于模式的图形用户接口(Mode-Based Graphical UserInterfaces For Touch Sensitive Input Devices)”;(6)2005年9月16日申请的第11/228,758号美国专利申请案“触摸屏用户接口上的虚拟输入装置放置(Virtual Input DevicePlacement On A Touch Screen User Interface)”;(7)2005年9月16日申请的第11/228,700号美国专利申请案“具有触摸屏接口的计算机的操作(Operation Of A Computer With ATouch Screen Interface)”;(8)2005年9月16日申请的第11/228,737号美国专利申请案“激活触摸屏虚拟键盘的虚拟键(Activating Virtual Keys Of A Touch-Screen VirtualKeyboard)”;以及(9)2006年3月3日申请的第11/367,749号美国专利申请案“多功能手持式装置(Multi-Functional Hand-Held Device)”。这些申请案全部以全文引用的方式并入本文中。
触摸屏112可具有超过100dpi的视频分辨率。在一些实施例中,所述触摸屏具有约160dpi的视频分辨率。用户可使用任何合适的物体或附属物(例如,尖笔、手指等)来接触触摸屏112。在一些实施例中,用户接口经设计以主要用基于手指的接触和手势来工作,归因于手指在触摸屏上的较大接触区域,其可没有基于尖笔的输入精确。在一些实施例中,所述装置将粗糙的基于手指的输入转译为精确的指针/光标位置或命令以用于执行用户所需的动作。
在一些实施例中,除了触摸屏之外,装置100可包含用于激活或去活特定功能的触摸板(未图示)。在一些实施例中,触摸板是装置的触敏区域;不同于触摸屏,触摸板不显示视觉输出。触摸板可为与触摸屏112分开的触敏表面或由触摸屏形成的触敏表面的延伸部分。
在一些实施例中,装置100可包含物理或虚拟转盘(例如,点击转盘)以作为输入控制装置116。用户可通过旋转所述点击转盘或通过移动与点击转盘的接触点(例如,其中接触点的移动量是由其相对于点击转盘的中心点的角位移来测量)而在触摸屏112中所显示的一个或一个以上图形对象(例如,图标)中导航和与所述图形对象交互。所述点击转盘还可用于选择所显示图标中的一者或一者以上。举例来说,所述用户可压下所述点击转盘的至少一部分或相关联的按钮。由用户经由点击转盘提供的用户命令和导航命令可由输入控制器160以及存储器102中的模块和/或指令集中的一者或一者以上处理。对于虚拟点击转盘,所述点击转盘和点击转盘控制器可分别为触摸屏112和显示器控制器156的部分。对于虚拟点击转盘,所述点击转盘可为不透明或半透明对象,其响应于用户与所述装置的交互而在触摸屏显示器上出现和消失。在一些实施例中,虚拟点击转盘显示于便携式多功能装置的触摸屏上且通过用户与触摸屏的接触来操作。
装置100还包含用于向各种组件供电的电力系统162。电力系统162可包含电力管理系统、一个或一个以上电源(例如,电池、交变电流(AC))、再充电系统、电力故障检测电路、电力转换器或反相器、电力状态指示器(例如,发光二极管(LED))和与便携式装置中的电力的产生、管理和分布相关联的任何其它组件。
装置100还可包含一个或一个以上光学传感器164。图1A和1B展示耦合到I/O子系统106中的光学传感器控制器158的光学传感器。光学传感器164可包含电荷耦合装置(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收光,经由一个或一个以上透镜投射,且将所述光转换为表示图像的数据。结合成像模块143(也称为相机模块),光学传感器164可俘获静态图像或视频。在一些实施例中,光学传感器位于装置100的背部上,与装置的前部上的触摸屏显示器112相反,使得可将触摸屏显示器用作静态和/或视频图像获取的取景器。在一些实施例中,光学传感器位于装置的前部上,使得在用户在触摸屏显示器上查看其它视频会议参与者时可获得用户的用于视频会议的图像。在一些实施例中,光学传感器164的位置可由用户改变(例如,通过旋转装置外壳中的透镜和传感器),以使得可使用单一光学传感器164以及触摸屏显示器来用于视频会议与静态和/或视频图像获取两者。
装置100还可包含一个或一个以上接近度传感器166。图1A和1B展示耦合到外围设备接口118的接近度传感器166。或者,接近度传感器166可耦合到I/O子系统106中的输入控制器160。接近度传感器166可如以下美国专利申请案中所描述而运行:11/241,839,“手持式装置中的接近度检测器(Proximity Detector In Handheld Device)”;11/240,788,“手持式装置中的接近度检测器(Proximity Detector In Handheld Device)”;11/620,702,“使用环境光传感器来扩增接近度传感器输出(Using Ambient Light Sensor ToAugment Proximity Sensor Output)”;11/586,862,“对便携式装置中的用户活动的自动化响应和感测(Automated Response To And Sensing Of User Activity In Portable Devices)”;以及11/638,251,“用于外围设备的自动配置的方法和系统(Methods And Systems ForAutomatic Configuration Of Peripherals)”,其全文在此以引用的方式并入。在一些实施例中,接近度传感器在多功能装置被放置在用户耳朵附近时(例如,当用户正进行电话呼叫时)关闭并停用触摸屏112。
装置100还可包含一个或一个以上加速计168。图1A和1B展示耦合到外围设备接口118的加速计168。或者,加速计168可耦合到I/O子系统106中的输入控制器160。加速计168可如以下美国专利公开案中所描述而运行:第20050190059号美国专利公开案,“用于便携式电子装置的基于加速度的盗窃检测系统(Acceleration-based TheftDetection System for Portable Electronic Devices)”;以及第20060017692号美国专利公开案,“用于基于加速计来操作便携式装置的方法和设备(Methods And Apparatuses ForOperating A Portable Device Based On An Accelerometer)”,所述两个公开案以全文引用的方式并入本文中。在一些实施例中,基于对从一个或一个以上加速计接收的数据的分析而以纵向视图或横向视图在触摸屏显示器上显示信息。装置100任选地包含(除了加速计168之外)磁力计(未图示)和GPS(或格洛纳斯(GLONASS)或其它全球导航系统)接收器(未图示),以用于获得关于装置100的位置和定向(例如,纵向或横向)的信息。
在一些实施例中,存储于存储器102中的软件组件包含操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135,和应用程序(或指令集)136。此外,在一些实施例中,存储器102存储装置/全局内部状态157,如图1A、1B和3中所示。装置/全局内部状态157包含以下各者中的一者或一者以上:活动应用程序状态,其指示哪些应用程序(如果有)当前是活动的;显示状态,其指示哪些应用程序、视图或其它信息占据触摸屏显示器112的各个区;传感器状态,其包含从装置的各种传感器和输入控制装置116获得的信息;以及位置信息,其涉及装置的位置和/或姿势。
操作系统126(例如,Darwin、RTXC、LINUX、UNIX、OS X、WINDOWS或例如VxWorks等嵌入式操作系统)包含用于控制和管理一般系统任务(例如,存储器管理、存储装置控制、电力管理等)的各种软件组件和/或驱动器,且促进各种硬件与软件组件之间的通信。
通信模块128促进经由一个或一个以上外部端口124与其它装置的通信,且还包含用于处置由RF电路108和/或外部端口124接收的数据的各种软件组件。外部端口124(例如,通用串行总线(USB)、FIREWIRE等)适于直接耦合到其它装置或经由网络(例如,因特网、无线LAN等)间接耦合到其它装置。在一些实施例中,外部端口是多引脚(例如,30个引脚)的连接器,其与iPod(苹果公司的商标)装置上所使用的30引脚连接器相同或类似和/或兼容。
接触/运动模块130可检测与触摸屏112(结合显示器控制器156)和其它触敏装置(例如,触摸板或物理点击转盘)的接触。接触/运动模块130包含用于执行与接触的检测相关的各种操作的各种软件组件,所述操作例如为确定是否已发生接触(例如,检测手指向下事件)、确定是否存在接触的移动且跟踪跨越触敏表面的移动(例如,检测一个或一个以上手指拖动事件),以及确定接触是否已停止(例如,检测手指向上事件或接触的中断)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动(其由一系列接触数据表示)可包含确定接触点的速率(量值)、速度(量值和方向),和/或加速度(量值和/或方向上的改变)。可将这些操作应用于单一接触(例如,一根手指接触)或多个同时接触(例如,“多点触摸”/多根手指接触)。在一些实施例中,接触/运动模块130和显示器控制器156检测触摸板上的接触。在一些实施例中,接触/运动模块130和控制器160检测点击转盘上的接触。
接触/运动模块130可检测用户的手势输入。触敏表面上的不同手势具有不同接触模式。因此,可通过检测特定接触模式来检测手势。举例来说,检测手指点按手势包含检测手指向下事件,接着检测在与手指向下事件(例如,在图标的位置处)相同的位置(或大体上相同的位置)处的手指向上(提离)事件。作为另一实例,检测触敏表面上的手指轻扫手势包含检测手指向下事件,接着检测一个或一个以上手指拖动事件,且随后检测手指向上(提离)事件。
图形模块132包含用于在触摸屏112或其它显示器上再现和显示图形的各种已知软件组件,包含用于改变所显示的图形的亮度的组件。如本文中所使用,术语“图形”包含可向用户显示的任何对象,包含(不限于)文本、网页、图标(例如,包含软键的用户接口对象)、数字图像、视频、动画等。
在一些实施例中,图形模块132存储表示将使用的图形的数据。可向每一图形指派一对应的代码。图形模块132从应用程序等接收指定将显示的图形的一个或一个以上代码以及(在需要时)坐标数据和其它图形特性数据,且随后产生屏幕图像数据以输出到显示器控制器156。
可作为图形模块132的组件的文本输入模块134提供软键盘,以用于在各种应用程序(例如,联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其它应用程序)中键入文本。
GPS模块135确定装置的位置且提供此信息以供在各种应用程序中使用(例如,提供给电话138以供在基于位置的拨号中使用,提供给相机143以作为图片/视频元数据,且提供给提供基于位置的服务的应用程序(例如,天气小窗口部件、本地黄页小窗口部件和地图/导航小窗口部件))。
应用程序136可包含以下模块(或指令集),或其子集或超集:
·联系人模块137(有时称为地址簿或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息接发(IM)模块141;
·锻炼支持模块142;
·用于静态和/或视频图像的相机模块143;
·图像管理模块144;
·视频播放器模块145;
·音乐播放器模块146;
·浏览器模块147;
·日历模块148;
·小窗口部件模块149,其可包含以下各者中的一者或一者以上:天气小窗口部件149-1、股票小窗口部件149-2、计算器小窗口部件149-3、闹钟小窗口部件149-4、字典小窗口部件149-5及用户所获得的其它小窗口部件,以及用户创建的小窗口部件149-6;
·用于形成用户创建的小窗口部件149-6的小窗口部件创建器模块150;
·搜索模块151;
·视频和音乐播放器模块152,其合并视频播放器模块145和音乐播放器模块146;
·便笺模块153;
·地图模块154;和/或
·在线视频模块155。
可存储于存储器102中的其它应用程序136的实例包含其它字处理应用程序、其它图像编辑应用程序、绘图应用程序、呈现应用程序、具备JAVA功能的应用程序、加密、数字版权管理、语音辨识和语音复制。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,可将联系人模块137用于管理地址簿或联系人列表(例如,存储于存储器102或存储器370中的联系人模块137的应用程序内部状态192中),包含:将姓名添加到地址簿;从地址簿删除姓名;使电话号码、电子邮件地址、物理地址或其它信息与姓名相关联;使图像与姓名相关联;将姓名分类和排序;提供电话号码或电子邮件地址以起始和/或促进通过电话138、视频会议139、电子邮件140或IM 141进行的通信;等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,可将电话模块138用于键入对应于电话号码的字符序列、存取地址簿137中的一个或一个以上电话号码,修改已键入的电话号码、拨打相应的电话号码、进行通话以及在通话完成时断开或挂断。如上所述,无线通信可使用多个通信标准、协议和技术中的任一者。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示器控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138,视频会议模块139包含用以进行以下操作的可执行指令:根据用户指令而起始、进行和终止用户与一个或一个以上其它参与者之间的视频会议。
结合RF电路108、触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,电子邮件客户端模块140包含用以进行以下操作的可执行指令:响应于用户指令而创建、发送、接收和管理电子邮件。结合图像管理模块144,电子邮件客户端模块140使得非常易于创建和发送具有通过相机模块143拍摄的静态或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,即时消息接发模块141包含用以进行以下操作的可执行指令:键入对应于即时消息的字符序列、修改先前键入的字符、传输相应的即时消息(例如,使用短消息服务(SMS)或多媒体消息服务(MMS)协议来用于基于电话的即时消息,或使用XMPP、SIMPLE或IMPS来用于基于因特网的即时消息)、接收即时消息以及查看所接收的即时消息。在一些实施例中,所传输和/或所接收的即时消息可包含MMS和/或增强型消息接发服务(EMS)中所支持的图形、照片、音频文件、视频文件和/或其它附件。如本文中所使用,“即时消息接发”涉及基于电话的消息(例如,使用SMS或MMS发送的消息)和基于因特网的消息(例如,使用XMPP、SIMPLE或IMPS发送的消息)两者。
结合RF电路108、触摸屏112、显示器控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154和音乐播放器模块146,锻炼支持模块142包含用以进行以下操作的可执行指令:创建锻炼(例如,用时间、距离和/或卡路里燃烧目标);与锻炼传感器(运动装置)通信;接收锻炼传感器数据;校准所使用的传感器以监视锻炼;选择并播放用于锻炼的音乐;以及显示、存储和传输锻炼数据。
结合触摸屏112、显示器控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132和图像管理模块144,相机模块143包含用以进行以下操作的可执行指令:俘获静态图像或视频(包含视频流)且将其存储到存储器102中、修改静态图像或视频的特性,或从存储器102删除静态图像或视频。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132、文本输入模块134和相机模块143,图像管理模块144包含用以进行以下操作的可执行指令:布置、修改(例如,编辑)或另外操纵、标记、删除、呈现(例如,以数字幻灯片或相册)以及存储静态和/或视频图像。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132、音频电路110和扬声器111,视频播放器模块145包含用以进行以下操作的可执行指令:显示、呈现或另外回放视频(例如,在触摸屏112上或在外部的经由外部端口124连接的显示器上)。
结合触摸屏112、显示器系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108和浏览器模块147,音乐播放器模块146包含允许用户进行以下操作的可执行指令:下载和回放所记录的音乐和以一种或一种以上文件格式存储的其它声音文件(例如,MP3或AAC文件)。在一些实施例中,装置100可包含MP3播放器的功能性,例如iPod(苹果公司的商标)。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132和文本输入模块134,浏览器模块147包含用以进行以下操作的可执行指令:根据用户指令而浏览因特网,包含搜索、链接到、接收和显示网页或其部分,以及链接到网页的附件和其它文件。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134,电子邮件客户端模块140和浏览器模块147,日历模块148包含用以进行以下操作的可执行指令:根据用户指令而创建、显示、修改和存储日历和与日历相关联的数据(例如,日历条目、待办事项列表等)。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,小窗口部件模块149是可由用户下载和使用的小型应用程序(例如,天气小窗口部件149-1、股票小窗口部件149-2、计算器小窗口部件149-3、闹钟小窗口部件149-4和字典小窗口部件149-5)或由用户创建的小型应用程序(例如,用户创建的小窗口部件149-6)。在一些实施例中,小窗口部件包含HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施例中,小窗口部件包含XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!小窗口部件)。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,小窗口部件创建器模块150可由用户使用以创建小窗口部件(例如,将网页的用户指定的部分转变为小窗口部件)。
结合触摸屏112、显示器系统控制器156、接触模块130、图形模块132和文本输入模块134,搜索模块151包含用以进行以下操作的可执行指令:根据用户指令而在存储器102中搜索与一个或一个以上搜索准则(例如,一个或一个以上用户指定的搜索项)匹配的文本、音乐、声音、图像、视频和/或其它文件。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,便笺模块153包含用以进行以下操作的可执行指令:根据用户指令而创建和管理便笺、待办事项列表等。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147,地图模块154可用于根据用户指令而接收、显示、修改和存储地图以及与地图相关联的数据(例如,行驶方向;关于特定位置处或附近的商店和其它关注点的数据;以及其它基于位置的数据)。
结合触摸屏112、显示器系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包含允许用户进行以下操作的指令:存取、浏览、接收(例如,通过串流传输和/或下载)、回放(例如,在触摸屏上或在外部的经由外部端口124连接的显示器上)、发送具有到特定在线视频的链接的电子邮件,以及另外管理呈一种或一种以上文件格式(例如H.264)的在线视频。在一些实施例中,将即时消息接发模块141(而不是电子邮件客户端模块140)用于发送到特定在线视频的链接。在线视频应用的额外描述可在以下文献中找到:2007年6月20日申请的第60/936,562号美国临时专利申请案“用于播放在线视频的便携式多功能装置、方法和图形用户接口(Portable MultifunctionDevice,Method,and Graphical User Interface for Playing Online Videos)”,和2007年12月31日申请的第11/968,067号美国专利申请案“用于播放在线视频的便携式多功能装置、方法和图形用户接口(Portable Multifunction Device,Method,and Graphical UserInterface for Playing Online Videos)”,所述申请案的内容在此以全文引用的方式并入。
上文所识别的模块和应用程序中的每一者对应于用于执行上文所描述的一个或一个以上功能以及本申请案中所描述的方法(例如,计算机实施的方法和本文中所描述的其它信息处理方法)的可执行指令集。这些模块(即,指令集)无需实施为分离的软件程序、过程或模块,且因此,在各种实施例中,这些模块的各种子集可经组合或另外重新布置。举例来说,视频播放器模块145可与音乐播放器模块146组合为单一模块(例如,视频和音乐播放器模块152,图1B)。在一些实施例中,存储器102可存储上文所识别的模块和数据结构的子集。此外,存储器102可存储未在上文描述的额外模块和数据结构。
在一些实施例中,装置100为其中专门经由触摸屏和/或触摸板执行所述装置上的预定义的功能集合的操作的装置。通过将触摸屏和/或触摸板用作主要输入控制装置来用于装置100的操作,可减少装置100上的物理输入控制装置(例如,按钮、拨号盘等)的数目。
可专门经由触摸屏和/或触摸板执行的预定义的功能集合包含在用户接口之间的导航。在一些实施例中,触摸板在由用户触摸时会将装置100从在装置100上所显示的任何用户接口导航到主菜单或根菜单。在此些实施例中,可将触摸板称作“菜单按钮”。在一些其它实施例中,菜单按钮可为物理按钮或其它物理输入控制装置,而非触摸板。
图1C是说明根据一些实施例的用于事件处置的示范性组件的框图。在一些实施例中,存储器102(图1A和1B中)或370(图3)包含事件分类器170(例如,在操作系统126中)和相应的应用程序136-1(例如,前述应用程序137到151、155、380到390中的任一者)。
事件分类器170接收事件信息且确定将所述事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包含事件监视器171和事件分派器模块174。在一些实施例中,应用程序136-1包含应用程序内部状态192,当所述应用程序是活动的或正执行时,应用程序内部状态192指示在触敏显示器112上所显示的当前应用程序视图。在一些实施例中,装置/全局内部状态157可由事件分类器170用来确定哪一(些)应用程序当前是活动的,且应用程序内部状态192由事件分类器170用来确定将事件信息递送到的应用程序视图191。
在一些实施例中,应用程序内部状态192包含额外信息,例如以下各者中的一者或一者以上:在应用程序136-1重新开始执行时将使用的重新开始信息、指示正由应用程序136-1显示的信息或所述信息准备好由应用程序136-1显示的用户接口状态信息、使得用户能够回到应用程序136-1的先前状态或视图的状态队列,以及对由用户进行的先前动作的重做/撤消队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包含关于子事件(例如,触敏显示器112上的作为多点触摸手势的部分的用户触摸)的信息。外围设备接口118传输其从I/O子系统106或传感器(例如,接近度传感器166、加速计168和/或麦克风113(经由音频电路110))接收的信息。外围设备接口118从I/O子系统106接收的信息包含来自触敏显示器112或触敏表面的信息。
在一些实施例中,事件监视器171以预定间隔将请求发送到外围设备接口118。作为响应,外围设备接口118传输事件信息。在其它实施例中,外围设备接口118仅在存在重大事件(例如,接收到高于预定噪声阈值的输入和/或在多于预定持续时间的时间内接收到输入)时才传输事件信息。
在一些实施例中,事件分类器170还包含命中视图确定模块172和/或活动事件辨识器确定模块173。
命中视图确定模块172在触敏显示器112显示一个以上视图时提供用于确定子事件已在一个或一个以上视图内的何处发生的软件过程。视图由用户可在显示器上看到的控件和其它元件组成。
与应用程序相关联的用户接口的另一方面是视图集合,在本文中有时称为应用程序视图或用户接口窗口,在其中显示信息且发生基于触摸的手势。在其中检测到触摸的(相应应用程序)的应用程序视图可对应于应用程序的编程或视图体系内的编程层级。举例来说,在其中检测到触摸的最低层级视图可称为命中视图,且可至少部分基于开始基于触摸的手势的初始触摸的命中视图来确定被辨识为合适输入的事件集合。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有按体系组织的多个视图时,命中视图确定模块172将命中视图识别为体系中的应处置子事件的最低视图。在大多数情形中,命中视图是其中发生起始子事件的最低层级视图(即,形成事件或潜在事件的子事件的序列中的第一子事件)。一旦由命中视图确定模块识别出命中视图,命中视图通常接收与其被识别为命中视图所关于的相同触摸或输入源相关的所有子事件。
活动事件辨识器确定模块173确定视图体系内的哪一或哪些视图应接收子事件的特定序列。在一些实施例中,活动事件辨识器确定模块173确定仅命中视图应接收子事件的特定序列。在其它实施例中,活动事件辨识器确定模块173确定包含子事件的物理位置的所有视图是有效涉及的视图,且因此确定所有有效涉及的视图应接收子事件的特定序列。在其它实施例中,即使触摸子事件被完全限于与一个特定视图相关联的区域,体系中更高的视图将仍保持为有效涉及的视图。
事件分派器模块174将事件信息分派给事件辨识器(例如,事件辨识器180)。在包含活动事件辨识器确定模块173的实施例中,事件分派器模块174将事件信息递送到由活动事件辨识器确定模块173确定的事件辨识器。在一些实施例中,事件分派器模块174将事件信息存储于事件队列中,由相应的事件接收器模块182来检索所述事件信息。
在一些实施例中,操作系统126包含事件分类器170。或者,应用程序136-1包含事件分类器170。在又其它实施例中,事件分类器170是独立模块,或存储于存储器102中的另一模块的一部分,例如接触/运动模块130。
在一些实施例中,应用程序136-1包含多个事件处置器190和一个或一个以上应用程序视图191,事件处置器中的每一者包含用于处置在应用程序的用户接口的相应视图内发生的触摸事件的指令。应用程序136-1的每一应用程序视图191包含一个或一个以上事件辨识器180。通常,相应的应用程序视图191包含多个事件辨识器180。在其它实施例中,事件辨识器180中的一者或一者以上是单独模块(例如,用户接口套件(未图示))或应用程序136-1从其继承方法和其它特性的更高层级对象的部分。在一些实施例中,相应的事件处置器190包含以下各者中的一者或一者以上:数据更新器176、对象更新器177、GUI更新器178,和/或从事件分类器170接收的事件数据179。事件处置器190可利用或调用数据更新器176、对象更新器177或GUI更新器178以更新应用程序内部状态192。或者,应用程序视图191中的一者或一者以上包含一个或一个以上相应的事件处置器190。而且,在一些实施例中,数据更新器176、对象更新器177和GUI更新器178中的一者或一者以上包含于相应的应用程序视图191中。
相应的事件辨识器180从事件分类器170接收事件信息(例如,事件数据179),且根据所述事件信息识别事件。事件辨识器180包含事件接收器182和事件比较器184。在一些实施例中,事件辨识器180还包含以下各者的至少一子集:元数据183和事件递送指令188(其可包含子事件递送指令)。
事件接收器182从事件分类器170接收事件信息。事件信息包含关于例如触摸或触摸移动的子事件的信息。取决于子事件,所述事件信息还包含额外信息,例如子事件的位置。当子事件涉及触摸的运动时,事件信息还可包含子事件的速率和方向。在一些实施例中,事件包含装置从一个定向旋转到另一定向(例如,从纵向定向到横向定向,或反之亦然),且事件信息包含关于装置的当前定向(也称为装置姿势)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,且基于所述比较而确定事件或子事件,或者确定或更新事件或子事件的状态。在一些实施例中,事件比较器184包含事件定义186。事件定义186含有事件的定义(例如,子事件的预定义的序列),例如事件1(187-1)、事件2(187-2),和其它。在一些实施例中,事件187中的子事件包含(例如)触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个实例中,事件1(187-1)的定义为所显示对象上的双击。所述双击(例如)包括在预定阶段内在所显示对象上的第一触摸(触摸开始)、在预定阶段内的第一提离(触摸结束)、在预定阶段内在所显示对象上的第二触摸(触摸开始),以及在预定阶段内的第二提离(触摸结束)。在另一实例中,事件2(187-2)的定义为所显示对象上的拖动。所述拖动(例如)包括在预定阶段内在所显示对象上的触摸(或接触)、触摸的跨越触敏显示器112的移动,以及触摸的提离(触摸结束)。在一些实施例中,事件还包含用于一个或一个以上相关联的事件处置器190的信息。
在一些实施例中,事件定义187包含用于相应的用户接口对象的事件的定义。在一些实施例中,事件比较器184执行命中测试以确定哪一用户接口对象与子事件相关联。举例来说,在其中三个用户接口对象显示于触敏显示器112上的应用程序视图中,当在触敏显示器112上检测到触摸时,事件比较器184执行命中测试以确定三个用户接口对象中的哪一者与触摸(子事件)相关联。如果每一所显示的对象都与相应的事件处置器190相关联,则事件比较器使用命中测试的结果来确定应激活哪一事件处置器190。举例来说,事件比较器184选择与触发命中测试的子事件和对象相关联的事件处置器。
在一些实施例中,相应的事件187的定义还包含被延迟的动作,其延迟事件信息的递送,直到已确定子事件的序列是对应于还是不对应于事件辨识器的事件类型之后为止。
当相应的事件辨识器180确定子事件系列不与事件定义186中的事件中的任一者匹配时,相应的事件辨识器180进入事件不可能、事件失败,或事件结束状态,其后,其忽视所述基于触摸的手势的后续子事件。在此情况下,对于所述命中视图来说仍保持活动的其它事件辨识器(如果有的话)继续跟踪并处理正在进行中的基于触摸的手势的子事件。
在一些实施例中,相应的事件辨识器180包含元数据183,元数据183具有可配置特性、旗标和/或列表,所述可配置特性、旗标和/或列表指示事件递送系统应如何执行向有效涉及的事件辨识器的子事件递送。在一些实施例中,元数据183包含指示事件辨识器可如何彼此交互的可配置特性、旗标和/或列表。在一些实施例中,元数据183包含指示是否将子事件递送到视图或编程体系中的不同层级的可配置特性、旗标和/或列表。
在一些实施例中,当辨识出事件的一个或一个以上特定子事件时,相应的事件辨识器180激活与事件相关联的事件处置器190。在一些实施例中,相应的事件辨识器180将与所述事件相关联的事件信息递送到事件处置器190。激活事件处置器190不同于将子事件发送(和延期发送)到相应的命中视图。在一些实施例中,事件辨识器180引发与所辨识的事件相关联的旗标,且与所述旗标相关联的事件处置器190捕获所述旗标且执行预定义的过程。
在一些实施例中,事件递送指令188包含子事件递送指令,所述子事件递送指令递送关于子事件的事件信息而不激活事件处置器。而是,所述子事件递送指令将事件信息递送到与子事件系列相关联的事件处置器或递送到有效涉及的视图。与子事件系列或与有效涉及的视图相关联的事件处置器接收事件信息且执行预定过程。
在一些实施例中,数据更新器176创建且更新用于应用程序136-1中的数据。举例来说,数据更新器176更新用于联系人模块137中的电话号码,或存储用于视频播放器模块145中的视频文件。在一些实施例中,对象更新器177创建且更新用于应用程序136-1中的对象。举例来说,对象更新器177创建新的用户接口对象或更新用户接口对象的位置。GUI更新器178更新GUI。举例来说,GUI更新器178准备好显示信息且将其发送到图形模块132以供在触敏显示器上显示。
在一些实施例中,事件处置器190包含数据更新器176、对象更新器177和GUI更新器178,或具有对数据更新器176、对象更新器177和GUI更新器178的存取权。在一些实施例中,数据更新器176、对象更新器177和GUI更新器178包含于相应的应用程序136-1或应用程序视图191的单一模块中。在其它实施例中,其包含于两个或两个以上软件模块中。
应理解,关于对触敏显示器上的用户触摸的事件处置的前文论述还适用于用以通过输入装置操作多功能装置100的其它形式的用户输入,所述输入并非全部都在触摸屏上起始,例如,在有或没有单一或多个键盘按压或保持的情况下的协调的鼠标移动和鼠标按钮按压、触摸板上的用户移动点按、拖动、滚动等、手写笔输入、装置的移动、口头指令、检测到的眼睛移动、生物识别输入,和/或其任何组合,其可用作对应于定义将要辨识的事件的子事件的输入。
图2说明根据一些实施例的具有触摸屏112的便携式多功能装置100。触摸屏可显示用户接口(UI)200内的一个或一个以上图形。在此实施例以及下文所描述的其它实施例中,用户可通过(例如)用一根或一根以上手指202(在图中未按比例绘制)或一个或一个以上尖笔203(在图中未按比例绘制)来接触或触摸图形而选择图形中的一者或一者以上。在一些实施例中,当用户中断与一个或一个以上图形的接触时,发生对一个或一个以上图形的选择。在一些实施例中,所述接触可包含手势(例如,一个或一个以上点按、一个或一个以上轻扫(从左到右、从右到左、向上和/或向下))和/或已接触装置100的手指的滚转(从右到左、从左到右、向上和/或向下)。在一些实施例中,与图形的无意接触可不选择所述图形。举例来说,当对应于选择的手势是点按时,扫掠过应用程序图标的轻扫手势可不选择对应的应用程序。
装置100还可包含一个或一个以上物理按钮,例如“主页”或菜单按钮204。如先前所描述,菜单按钮204可用于导航到可在装置100上执行的应用程序集合中的任何应用程序136。或者,在一些实施例中,将菜单按钮实施为在触摸屏112上显示的GUI中的软键。
在一个实施例中,装置100包含触摸屏112、菜单按钮204、用于将装置通电/断电和锁定装置的按钮206、音量调节按钮208、订户身份模块(SIM)卡槽210、耳机插孔212和对接/充电外部端口124。按钮206可用于:通过压下按钮并使所述按钮保持于压下状态并持续预定义的时间间隔而对装置通电/断电;通过压下按钮并在预定义的时间间隔逝去之前释放所述按钮而锁定装置;和/或将所述装置解锁或起始解锁过程。在替代性实施例中,装置100还可经由麦克风113接受口头输入以用于激活或去活一些功能。
图3是根据一些实施例的具有显示器和触敏表面的示范性多功能装置的框图。装置300无需是便携式的。在一些实施例中,装置300是膝上型计算机、桌上型计算机、平板计算机、多媒体播放器装置、导航装置、教育装置(例如,儿童的学习玩具)、游戏系统或控制装置(例如,家用或工业用控制器)。装置300通常包含一个或一个以上处理单元(CPU)310、一个或一个以上网络或其它通信接口360、存储器370,和用于将这些组件互连的一个或一个以上通信总线320。通信总线320可包含将系统组件互连并控制系统组件之间的通信的电路(有时称为芯片组)。装置300包含输入/输出(I/O)接口330,I/O接口330包括显示器340,显示器340通常为触摸屏显示器。I/O接口330还可包含键盘和/或鼠标(或其它指针装置)350和触摸板355。存储器370包含高速随机存取存储器,例如DRAM、SRAM、DDR RAM或其它随机存取固态存储器装置;且可包含非易失性存储器,例如一个或一个以上磁盘存储装置、光盘存储装置、快闪存储器装置,或其它非易失性固态存储装置。存储器370可任选地包含与CPU 310相距遥远的一个或一个以上存储装置。在一些实施例中,存储器370存储类似于便携式多功能装置100(图1)的存储器102中的程序、模块和数据结构的程序、模块和数据结构,或其子集。此外,存储器370可存储便携式多功能装置100的存储器102中不存在的额外程序、模块和数据结构。举例来说,装置300的存储器370可存储绘图模块380、呈现模块382、字处理模块384、网站创建模块386、光盘创作模块388和/或电子表格模块390,而便携式多功能装置100(图1)的存储器102可不存储这些模块。
图3中的以上识别的元件中的每一者可存储于先前提及的存储器装置中的一者或一者以上中。以上所识别的模块中的每一者对应于用于执行以上所描述的功能的指令集。以上所识别的模块或程序(即,指令集)无需实施为分离的软件程序、过程或模块,且因此,在各种实施例中,这些模块的各种子集可经组合或另外重新布置。在一些实施例中,存储器370可存储上文所识别的模块和数据结构的子集。此外,存储器370可存储未在上文描述的额外模块和数据结构。
现在转向可实施于便携式多功能装置100上的用户接口(“UI”)的实施例。
图4A和4B说明根据一些实施例的便携式多功能装置100上的应用程序的菜单的示范性用户接口。类似用户接口可实施于装置300上。在一些实施例中,用户接400A包含以下元件,或其子集或超集:
·用于例如蜂窝式和Wi-Fi信号等无线通信的信号强度指示器402;
·时间404;
·蓝牙指示器405;
·电池状态指示器406;
·具有频繁使用的应用程序的图标的任务栏408,例如:
ο电话138,其可包含未接电话或语音邮件消息的数目的指示器414;
ο电子邮件客户端140,其可包含未读电子邮件的数目的指示器410;
ο浏览器147;以及
ο音乐播放器146;以及
·用于其它应用程序的图标,例如:
οIM 141;
ο图像管理144;
ο相机143;
ο视频播放器145;
ο天气149-1;
ο股票149-2;
ο锻炼支持142;
ο日历148;
ο计算器149-3;
ο闹钟149-4;
ο字典149-5;以及
ο用户创建的小窗口部件149-6。
在一些实施例中,用户接口400B包含以下元件,或其子集或超集:
·402、404、405、406、141、148、144、143、149-3、149-2、149-1、149-4、410、414、138、140和147,如上文所描述;
·地图154;
·便笺153;
·设定412,其提供对装置100及其各种应用程序136的设定的存取,如下文进一步所描述;
·视频和音乐播放器模块152,也称作iPod(苹果公司的商标)模块152;以及
·在线视频模块155,也称作YouTube(谷歌公司的商标)模块155。
图4C说明具有与显示器450(例如,触摸屏显示器112)分开的触敏表面451(例如,平板或触摸板355,图3)的装置(例如,装置300,图3)上的示范性用户接口。虽然将参考触摸屏显示器112(其中触敏表面和显示器经组合)上的输入来给出以下许多实例,但在一些实施例中,所述装置检测与显示器分开的触敏表面上的输入,如图4C中所示。在一些实施例中,触敏表面(例如,图4C中的451)具有对应于显示器(例如,450)上的主轴线(例如,图4C中的453)的主轴线(例如,图4C中的452)。根据这些实施例,所述装置在对应于显示器上的相应位置的位置(例如,在图4C中,460对应于468且462对应于470)处检测与触敏表面451的接触(例如,图4C中的460和462)。以此方式,当触敏表面与显示器分开时,触敏表面(例如,图4C中的451)上的由装置检测到的用户输入(例如,接触460和462及其移动)由所述装置用以操纵多功能装置的显示器(例如,图4C中的450)上的用户接口。应理解,类似方法可用于本文中所描述的其它用户接口。
另外,虽然主要参考手指输入(例如,手指接触、手指轻扫手势)来给出以下实例,但应理解,在一些实施例中,手指输入中的一者或一者以上可被来自另一输入装置的输入(例如,基于鼠标的输入、笔输入,或尖笔输入)取代。举例来说,连续接触可被在光标位于连续接触的位置上时的鼠标点击和鼠标点击的按住取代。类似地,当同时检测到多个用户输入时,应理解,可同时使用多个计算机鼠标,或可同时使用鼠标和手指(或笔或尖笔)接触。
现在将注意力转向可实施于具有显示器和触敏表面的多功能装置(例如,装置300或便携式多功能装置100)上的用户接口(“UI”)和相关联的过程的实施例。
图5A到5J说明根据一些实施例的用于精确地定位对象的示范性用户接口。这些图中的用户接口用于说明下文所描述的过程,包含图6A到6B和7A到7B中的过程。
在图5A到5J中,出于说明的目的,可能夸示一些手指接触大小和接触移动大小,以及一些对象平移大小。出于理解与本文中所揭示的方法和装置相关联的大小和尺度的目的,图中的涉及手指接触移动的描绘不应被视为要求或限制。
虽然图5A到5J说明含有图形对象(例如,形状)的示范性用户接口,但以下说明性论述无意为详尽的或将本发明限于所揭示的精确形式。举例来说,类似的用户接口可用于精确地移动并放置其它对象(例如,文本框、表格、图表、图示、图、图片、照片、页、文档等)。
UI 500A(图5A)描绘用于操纵装置100的触摸屏112上的用户接口对象的示范性用户接口。举例来说,UI 500A可为用于绘图应用程序、呈现应用程序、图像编辑或操纵应用程序,或其中可操纵用户接口对象的任何其它应用程序的用户接口。UI 500A包含内容区域502和内容区域502内的画布504。内容区域502是用户接口的在其中显示所关注的内容的区域。内容区域502内的画布504表示可将内容添加到其且所述内容将可见的区域,与用于绘画的画布一样。举例来说,在呈现或绘图应用程序中,画布504表示其中呈现或绘图将分别出现且可见的页。画布504和画布504上的内容(例如,用户接口对象)可在内容区域502内放大和缩小。
可将一个或一个以上用户接口对象放置于画布504中。举例来说,在UI 500A中,用户接口对象506位于画布504上。可对用户接口对象506执行各种操纵,包含(但不限于)调整对象的大小、在对象内输入文本、旋转对象、改变对象的特性和性质,以及在画布504内移动对象。可通过(例如)在触摸屏112上执行一个或一个以上手势来激活这些操纵中的至少一些操纵。图5A描绘在用户接口对象506的边界内的位置处检测到的接触508。
UI 500B(图5B)描绘在用户接口对象506的边界内持续检测到的接触508。在一些实施例中,响应于检测到接触508而显示范围框510,从而指示用户接口对象506已被选择用于操纵。
在一些实施例中,响应于检测到接触508,显示展示画布504上的用户接口对象506的位置的标注512。在一些实施例中,在持续检测到接触508时显示标注512。
在一些实施例中,用户接口对象506的位置是作为画布504上用户接口对象506的中心或形心的坐标而显示于标注512中。因此,在图5B中,用户接口对象506的形心位于画布504上的位置(-123,-22)处。在一些实施例中,画布504上的原点(0,0)位于画布504的左上角,且沿着x轴和y轴的正方向是从原点分别向右和向下。在一些其它实施例中,画布504上的原点位于画布504的中心,且沿着x轴和y轴的正方向是从原点分别向右和向下。
UI 500B还描绘通过移动接触508拖动用户接口对象506。接触508在触摸屏112上在一方向上移动513。响应于移动513,用户接口对象506在与移动513相同的方向上移动515。在一些实施例中,如果移动513未超过预定义的长度阈值(例如,如果移动513是由接触508的抖动而引起的微小移动),则用户接口对象506不响应于移动513而移动。在2009年9月25日申请的标题为“用于减少触敏表面和显示器上的抖动的装置和方法(Device and Method for Jitter Reduction on Touch-Sensitive Surfaces and Display)”的第12/567,642号美国专利申请案中描述了用户接口对象不响应于接触的微小移动而移动的实例,所述申请案以全文引用的方式并入本文中。此外,在一些实施例中,随着其间接触508的移动不超过长度阈值所历经的时间量增加,所述长度阈值自身增加。
UI 500C(图5C)描绘在持续检测到接触508时在触摸屏112上检测到的手指手势(例如,轻拂或轻扫手势)。可从用户接口对象506的边界内(或在一些实施例中,从范围框510内)或画布504上的空区域(即,未由另一用户接口对象占据的区域)中起始手势。举例来说,从画布504的空区域起始的手势514包含触摸屏112上的向下移动514-2的接触514-1。作为另一实例,从用户接口对象506的边界内起始的手势516包含触摸屏112上的向下移动516-2的接触516-1。在一些实施例中,还可从画布504上的除了对象506之外的另一用户接口对象的边界或范围框内起始手势。举例来说,从用户接口对象532的边界内起始的手势534包含触摸屏112上的向下移动534-2的接触534-1。
UI 500D(图5D)描绘用户接口对象506响应于检测到手势514、516或534而进行的平移。响应于检测到手势514、516或534中的任一者,用户接口对象506向下平移518预定义的数目个像素。在一些实施例中,所述预定义的数目个像素是一个像素。如标注512中所示的用户接口对象506的位置改变以反映所述平移。举例来说,在图5D中,标注512中所示的y坐标从-23改变为-22,从而反映归因于平移而引起的用户接口对象506的垂直位置的改变。依据画布504的缩放水平,由于平移的量相对于画布504的缩放水平的精细度,用户接口对象506的平移对于用户来说可能不明显。在持续检测到接触508时,可执行额外的手指手势(例如,轻拂或轻扫)以在与所述手势相同的方向上或在任一其它方向上将用户接口对象506移动预定义的数目个像素的另一增量。
在一些实施例中,响应于检测到手指手势而对用户接口对象506的平移被限于沿着根据手势的水平或垂直方向。举例来说,如果手指手势是大体上水平的,则用户接口对象506水平平移。如果手指手势是大体上垂直的,则用户接口对象506垂直平移。在一些实施例中,如果手势正好在一方向上或在朝向那个方向的预定义的角度范围内,则所述手势大体上在那个方向上(垂直向上或向下,水平向右或向左)。举例来说,如果手指手势是向右但不是正好水平的,则在所述手势在向右水平方向以上或以下预定义的角度范围(例如,20°、30°或40°)内的情况下,用户接口对象仍水平向右平移。
在一些实施例中,如果所述手势不是正好水平或垂直的,则可通过将手势的水平分量的量值与手势的垂直分量的量值进行比较来确定用户接口对象506的平移的方向,如果水平量值较大,则用户接口对象506的平移是水平的,且如果垂直量值较大,则平移是垂直的。
在一些实施例中,用户接口对象506基于手指手势的速率而响应于手指手势平移不同的预定义数目个像素。举例来说,返回到图5C到5D,如果手势514/516的速率低于预定义的阈值,则用户接口对象506响应于手势514/516而平移518第一预定义的数目个像素(例如,一个像素)。如果手势514/516的速率高于预定义的阈值,则用户接口对象506响应于手势514/516而平移518第二预定义的数目个像素(例如,十个像素)。
在一些实施例中,用户接口对象506基于用于手指手势中的手指的数目而响应于手指手势平移不同的预定义数目个像素。UI 500E(图5E)描绘在持续检测到接触508时在触摸屏112上检测到的两根手指手势(例如,两根手指轻拂或轻扫手势)。所述手势可从用户接口对象506的边界内、画布504上的空区域中,或画布504上的另一用户接口对象532的边界或范围框内起始。举例来说,手势520包含触摸屏112上的向下移动520-2的两根手指接触520-1。
UI 500F(图5F)描绘用户接口对象506响应于检测到手势520(图5E)而进行的平移。响应于检测到手势520,用户接口对象506向下平移522与手势使用一根手指的情况不同的预定义数目个像素。在一些实施例中,所述不同的预定义数目个像素是十个像素。如标注512中所示的用户接口对象506的位置改变以反映所述平移。举例来说,在图5F中,标注512中的y坐标从-23改变为-13,从而反映归因于平移而引起的用户接口对象506的垂直位置的改变。
UI 500G(图5G)描绘在持续检测到接触508时在触摸屏112上检测到的三根手指手势(例如,轻拂或轻扫手势)。可从用户接口对象506的边界内或画布504上的空区域(即,未由另一用户接口对象占据的区域)中起始所述手势。举例来说,手势524包含触摸屏112上的向下移动524-2的三根手指接触524-1。
UI 500H(图5H)描绘用户接口对象506响应于检测到手势524(图5G)而进行的平移。响应于检测到手势524,用户接口对象506向下平移526另一预定义的数目个像素(例如,20个像素、50个像素(图H中所示),或100个像素)。如标注512中所示的用户接口对象506的位置改变以反映所述平移。举例来说,在图5H中,标注512中的y坐标从-23改变为27,从而反映归因于平移而引起的用户接口对象506的垂直位置的改变。
因此,在一些实施例中,通过改变用于手势中的接触(例如,手指)的数目,在每次检测到手势时用户接口对象506平移的像素数目会改变。在以上所描述的实例中,用户接口对象506每一根手指手势平移1个像素,每两根手指手势平移10个像素,且每三根手指手势平移50个像素。在一些实施例中,针对用于手势中的手指的相应数目而预定义了要平移的像素数目。类似地,在一些实施例中,如果平移的像素数目是基于手势的速率,则可针对不同的速率梯度预定义平移的像素数目(例如,低速率手势下是1个像素,中等速率手势下是10个像素,高速手势下是50个像素)。
应了解,用户可依序执行任何数目个手指手势,其中相应手势的手指的数目和/或方向与紧接在前面的手势的手指的数目和/或方向相同或不同,以在任何所要的方向上将用户接口对象移动所要数目个像素。因此,举例来说,用户可执行一根手指手势,随后执行两根手指手势,随后连续执行2个一根手指手势,以此类推。类似地,在平移的像素数目是基于手势速率的实施例中,手势速率可在手势间变化。
在一些实施例中,可将用户接口对象506在对角线方向上以及上文所描述的水平或垂直方向上移动精细的量。UI 500I(图5I)描绘在持续检测到接触508时在触摸屏112上检测到的对角线的一根手指手势(例如,轻拂或轻扫手势)。可从用户接口对象506的边界内或画布504中的空区域(即,未由另一用户接口对象占据的区域)中起始所述手势。举例来说,手势528包含触摸屏112上的向左上方移动528-2的接触528-1。
UI 500J(图5J)描绘用户接口对象506响应于检测到对角线手势而进行的平移。响应于检测到手势528(图5I),用户接口对象506以45度角在对角线方向上移动530,在水平方向上移动预定义的数目个像素且在垂直方向上移动相同的预定义数目个像素。在一些实施例中,所述预定义的数目个像素是一个像素。如标注512中所示的用户接口对象506的位置改变以反映所述平移。举例来说,在图5H中,标注512中的坐标从(-123,-23)改变为(-124,-24),从而反映归因于平移而引起的用户接口对象506的水平和垂直位置的改变。
图6A到6B是说明根据一些实施例的精确地定位对象的方法600的流程图。在具有显示器和触敏表面的多功能装置(例如,装置300,图3,或便携式多功能装置100,图1)处执行方法600。在一些实施例中,所述显示器是触摸屏显示器,且触敏表面位于显示器上。在一些实施例中,显示器是与触敏表面分开的。方法600中的一些操作可经组合和/或一些操作的次序可改变。
如下文所描述,方法600提供一种用以在不使用键盘的情况下精确地移动并定位对象的直观方式。所述方法减少在将对象移动精细量时用户的认知负担,进而产生更有效率的人机接口。对于靠电池操作的计算装置,使得用户能够更快且更有效率地将对象移动精细量节省了电力且增加了电池充电之间的时间。
装置在触敏显示器上显示(602)用户接口对象(例如,绘图应用程序、呈现应用程序、字处理应用程序、电子表格应用程序、网站创建应用程序或其它应用程序中的数字图像、视频、文本、几何对象,或其它对象)。举例来说,在图5A中,在触摸屏112上的呈现应用程序的UI 500A中显示用户接口对象506(在此情况下是几何对象)。
装置检测(604)用户接口对象上的接触。所述检测到的接触可为(例如)手指接触。在一些实施例中,如果在触摸屏112上的对应于用户接口对象的边界内的位置的位置处检测到接触,则在所述用户接口对象上检测到接触。在一些实施例中,如果在触摸屏112上的对应于环绕用户接口对象的范围框内的位置的位置处检测到接触,则在所述用户接口对象上检测到接触。举例来说,在图5B中,在用户接口对象506上检测到接触508。接触508位于用户接口对象506的边界内和环绕用户接口对象506的范围框510内。
在持续检测到用户接口对象上的接触时(606),装置检测(608)触敏显示器上的第一方向上的不同于所述接触的M根手指手势,其中M是整数。所述M根手指手势可为(例如)触敏显示器上的向上、向下、向右或向左的轻拂或轻扫手势。所述手势可从用户接口对象内(或从环绕用户接口对象的范围框内),空区域中,或除了需要移动的用户接口对象之外的用户接口对象内(或其范围框内)起始。举例来说,图5C描绘在持续检测到接触508时触摸屏112上的画布504的空区域中的不同于接触508的向下手势514。手势514包含一根手指,其由接触514-1表示。作为另一实例,图5C还描绘在持续检测到接触508时从触摸屏112上的用户接口对象506内起始的不同于接触508的向下手势516。手势516包含一根手指,其由接触516-1表示。作为另一实例,图5C还描绘在持续检测到接触508时从触摸屏112上的用户接口对象532内起始的不同于接触508的向下手势534。手势534包含一根手指,其由接触534-1表示。
在持续检测到用户接口对象上的接触时(606),响应于检测到M根手指手势,装置在根据第一方向的方向上将用户接口对象平移(610)预定义的数目个像素。举例来说,在图5D中,响应于手势514或516,用户接口对象506在根据手势514/516的方向(向下)的方向上(向下)平移518预定义的数目个像素(在图5D的情况下,对于一根手指手势,其为一个像素)。
在一些实施例中,并不是平移对象,M根手指手势将用户接口对象的大小改变预定义的数目个像素(例如,当接触(例如,接触508)位于用户接口对象的调整大小图柄上时)。在一些实施例中,并不是平移对象,M根手指手势将用户接口对象旋转预定义的角度(例如,当接触(例如,接触508)位于用户接口对象的旋转图柄上时)。
在一些实施例中,当M是一时,所述预定义的数目个像素是一个像素(612)。当手势包含一根手指时,用户接口对象平移一个像素。举例来说,在图5D中,响应于一根手指手势514/516,用户接口对象506平移518一个像素。
在一些实施例中,当M是二时,所述预定义的数目个像素是十个像素(614)。当手势包含两根手指时,用户接口对象平移十个像素。举例来说,在图5E到5F中,响应于两根手指手势520,用户接口对象506平移522十个像素。
在一些实施例中,预定义的数目个像素针对M=1、2和3分别为1个、10个和20个像素。在一些其它实施例中,预定义的数目个像素针对M=1、2和3分别为1个、10个和50个像素。上文描述了其中M=1或M=2的实例。在一些其它实施例中,还针对大于3的M值预定义了平移的像素数目。图5G到5H描绘其中预定义的像素数目在M=3时是50的实例。在图5G到5H中,响应于三根手指手势524,用户接口对象506平移526了50个像素。此外,应了解,M可在手势序列中的手势间变化;用户可执行两根手指手势,随后执行三根手指手势,随后连续执行若干个一根手指手势,以此类推。换句话说,用户可执行M根手指手势的序列,其中所述序列中的一个手势的M和/或方向可与紧接在前面的手势的M和/或方向相同或不同,以将用户接口对象移动到显示器上的所要位置。
在一些实施例中,第一方向是向右方向(例如,向右或在向右的预定义的角度范围内)且用户接口对象向右移动;第一方向是向左方向(例如,向左或在向左的预定义的角度范围内)且用户接口对象向左移动;第一方向是向上方向(例如,垂直向上或在垂直向上的预定义的角度范围内)且用户接口对象向上移动;或第一方向是向下方向(例如,垂直向下或在垂直向下的预定义的角度范围内)且用户接口对象向下移动(616)。用户接口对象的平移的方向(向上、向下、向左、向右)遵循手势的方向(分别为向上、向下、向左、向右),但可限于垂直或水平方向。举例来说,在图5C到5D中,遵循手势514/516的向下方向,用户接口对象506向下平移518。在一些实施例中,如果手势不是正好垂直或水平的,则如果手势分别在与垂直或水平方向相差预定义的角度范围内,则平移仍然分别是垂直或水平的。举例来说,在图5C到5D中,如果手势514的移动514-2不是正好垂直向下,则如果移动514-2在向下垂直方向的预定义的角度范围内(例如,向左或向右20°、30°或40°),则用户接口对象506的平移518仍然是向下的。
在一些实施例中,第一方向是对角线方向且用户接口对象在对角线方向上移动(618)。如果手势的方向是对角线方向(例如,与垂直轴或水平轴成45°,或在与45°线相差预定义的角度范围内(例如,15°)),则用户接口对象在对角线方向上平移。在一些实施例中,对角线方向上的平移包含水平地平移预定义的数目个像素(例如,对于M=1是1个像素,对于M=2是10个像素,等等)且垂直地平移相同的预定义数目个像素。举例来说,在图5I到5J中,用户接口对象506响应于对角线手势528而向上平移530一个像素且向左平移一个像素。
在一些实施例中,在检测到M根手指手势之前,装置检测(620)接触跨越触敏显示器的移动,且根据所述接触的移动而移动(622)用户接口对象。在一些实施例中,可能存在与接触的移动一致地移动的用户接口对象的粗糙移动/定位(例如,通过拖动用户接口对象),随后是用M根手指手势进行的对用户接口对象的精确定位。举例来说,在图5B中,接触508在触摸屏112上在一方向上移动513,且响应于检测到移动513,用户接口对象506根据移动513而移动515;用户接口对象506被移动的接触508拖动。通过拖动来移动用户接口对象相对于上文所描述的使用M根手指手势的移动可为粗糙的。
在一些实施例中,当在触敏显示器上检测到接触时,装置显示(624)用户接口对象的位置标记。举例来说,在图5B中,当在触敏显示器上检测到接触508时,具有用户接口对象506的坐标的临时文本框(例如,标注512,平视显示)出现在接触508附近。标注512中的坐标随着用户接口对象506移动或平移而改变,如图5D、5F、5H、5J中所示。在一些实施例中,当用户接口对象响应于手势而平移时,位置标记中的未受影响的坐标灰化、变暗或另外被削弱。举例来说,在图5D中,当用户接口对象506向下平移518时,标注512中的x坐标可变暗。
图7A到7B是说明根据一些实施例的精确地定位对象的方法700的流程图。在具有显示器和触敏表面的多功能装置(例如,装置300,图3,或便携式多功能装置100,图1)处执行方法700。在一些实施例中,所述显示器是触摸屏显示器,且触敏表面位于显示器上。在一些实施例中,显示器是与触敏表面分开的。方法700中的一些操作可经组合和/或一些操作的次序可改变。
如下文所描述,方法700提供一种用以在不使用键盘的情况下精确地移动并定位对象的直观方式。所述方法减少在将对象移动精细量时用户的认知负担,进而产生更有效率的人机接口。对于靠电池操作的计算装置,使得用户能够更快且更有效率地将对象移动精细量节省了电力且增加了电池充电之间的时间。
装置在触敏显示器上显示(702)用户接口对象(例如,绘图应用程序、呈现应用程序、字处理应用程序、电子表格应用程序、网站创建应用程序或其它应用程序中的数字图像、视频、文本、几何对象,或其它对象)。举例来说,在图5A中,在触摸屏112上的呈现应用程序的UI 500A中显示用户接口对象506(在此情况下是几何对象)。
装置检测(704)用户接口对象上的接触。所述检测到的接触可为(例如)手指接触。在一些实施例中,如果在触摸屏112上的对应于用户接口对象的边界内的位置的位置处检测到接触,则在所述用户接口对象上检测到接触。在一些实施例中,如果在触摸屏112上的对应于环绕用户接口对象的范围框内的位置的位置处检测到接触,则在所述用户接口对象上检测到接触。举例来说,在图5B中,在用户接口对象506上检测到接触508。接触508位于用户接口对象506的边界内和环绕用户接口对象506的范围框510内。
在持续检测到用户接口对象上的接触时(706),装置检测(708)触敏显示器上的第一方向上的具有第一速率的不同于所述接触的手势。所述手势可为(例如)触敏显示器上的向上、向下、向右或向左的轻拂或轻扫手势。所述手势可从用户接口对象内(或从环绕用户接口对象的范围框内)或空区域中起始。举例来说,图5C描绘在持续检测到接触508时触摸屏112上的画布504的空区域中的不同于接触508的向下手势514。作为另一实例,图5C还描绘在持续检测到接触508时从触摸屏112上的用户接口对象506内起始的不同于接触508的向下手势516。
所述手势具有第一速率。举例来说,在图5C中,手势514具有一速率,接触514-1以某一速度移动514-2。类似地,手势516具有一速率,接触516-1以某一速度移动516-2。
响应于检测到手势(710),当所述第一速率低于预定义的阈值时,装置在根据所述第一方向的方向上将所述用户接口对象平移(712)第一预定义的数目个像素;以及,当所述第一速率高于所述预定义的阈值时,装置在根据所述第一方向的方向上将所述用户接口对象平移(714)不同于所述第一预定义的数目个像素的第二预定义的数目个像素。举例来说,在图5C到5D中,如果手势514的速率低于第一预定义的阈值,则用户接口对象506平移518第一预定义的数目个像素(例如,一个像素)。如果手势514的速率大于第一预定义的阈值,则用户接口对象506平移518不同于第一预定义的数目的第二预定义的数目个像素(例如,十个像素)。
在一些实施例中,并不是平移对象,手势将用户接口对象的大小改变预定义的数目个像素(例如,当接触(例如,接触508)位于用户接口对象的调整大小图柄上时)。在一些实施例中,并不是平移对象,手势将用户接口对象旋转预定义的角度(例如,当接触(例如,接触508)位于用户接口对象的旋转图柄上时)。
在一些实施例中,所述第一预定义的数目个像素是一个像素(716)。当手势低于第一预定义的阈值时,用户接口对象平移一个像素。举例来说,在图5C到5D中,响应于手势514/516,如果手势514/516的速率低于第一预定义的阈值,则用户接口对象506平移518一个像素。
在一些实施例中,所述第二预定义的数目个像素是十个像素(718)。当速率大于第一预定义的阈值时,用户接口对象平移十个像素。举例来说,在图5C到5D中,响应于手势514/516,如果手势514/516的速率高于第一预定义的阈值,则用户接口对象506平移518十个像素。
在一些实施例中,可存在多个预定义的阈值和用户接口对象可平移的对应的预定义数目个像素。举例来说,如果手势514不超过第一阈值,则用户接口对象506平移518第一预定义的数目个像素(例如,1个像素)。如果手势514超过第一阈值但不超过第二阈值,则用户接口对象506平移518第二预定义的数目个像素(例如,10个像素)。如果手势514超过第二阈值(且因此也超过第一阈值),则用户接口对象506平移518第三预定义的数目个像素(例如,20个像素)。
在一些实施例中,第一方向是向右方向(例如,向右或在向右的预定义的角度范围内)且用户接口对象向右移动;第一方向是向左方向(例如,向左或在向左的预定义的角度范围内)且用户接口对象向左移动;第一方向是向上方向(例如,垂直向上或在垂直向上的预定义的角度范围内)且用户接口对象向上移动;或第一方向是向下方向(例如,垂直向下或在垂直向下的预定义的角度范围内)且用户接口对象向下移动(720)。用户接口对象的平移的方向(向上、向下、向左、向右)遵循手势的方向(分别为向上、向下、向左、向右),但可限于垂直或水平方向。举例来说,在图5C到5D中,遵循手势514/516的向下方向,用户接口对象506向下平移518。在一些实施例中,如果手势不是正好垂直或水平的,则如果手势分别在与垂直或水平方向相差预定义的角度范围内,则平移仍然分别是垂直或水平的。举例来说,在图5C到5D中,如果手势514的移动514-2不是正好垂直向下,则如果移动514-2在向下垂直方向的预定义的角度范围内(例如,向左或向右20°、30°或40°),则用户接口对象506的平移518仍然是向下的。
在一些实施例中,第一方向是对角线方向且用户接口对象在对角线方向上移动(722)。如果手势的方向是对角线方向(例如,与垂直轴或水平轴成45°,或在与45°线相差预定义的角度范围内(例如,15°)),则用户接口对象在对角线方向上平移。在一些实施例中,对角线方向上的平移包含水平地平移预定义的数目个像素(例如,对于具有低于第一预定义的阈值的速率的手势是1个像素,对于具有大于第一预定义的阈值的速率的手势是10个像素)且垂直地平移相同的预定义数目个像素。举例来说,在图5I到5J中,如果手势528的速率低于第一预定义的阈值,则用户接口对象506响应于对角线手势528而向上平移530一个像素且向左平移一个像素。
在一些实施例中,在检测到手势之前,装置检测(724)接触跨越触敏显示器的移动,且根据所述接触的移动而移动(726)用户接口对象。在一些实施例中,可能存在与接触的移动一致地移动的用户接口对象的粗糙移动/定位(例如,通过拖动用户接口对象),随后是用手势进行的对用户接口对象的精确定位。举例来说,在图5B中,接触508在触摸屏112上在一方向上移动513,且响应于检测到移动513,用户接口对象506根据移动513而移动515;用户接口对象506被移动的接触508拖动。通过拖动来移动用户接口对象相对于上文所描述的使用手势的移动可为粗糙的。
在一些实施例中,当在触敏显示器上检测到接触时,装置显示(728)用户接口对象的位置标记。举例来说,在图5B中,当在触敏显示器上检测到接触508时,具有用户接口对象506的坐标的临时文本框(例如,标注512,平视显示)出现在接触508附近。标注512中的坐标随着用户接口对象506移动或平移而改变,如图5D、5F、5H、5J中所示。在一些实施例中,当用户接口对象响应于手势而平移时,位置标记中的未受影响的坐标灰化、变暗或另外被削弱。举例来说,在图5D中,当用户接口对象506向下平移518时,标注512中的x坐标可变暗。
可通过在例如通用处理器或专用芯片等信息处理设备中运行一个或一个以上功能模块而实施上文所描述的信息处理方法中的操作。这些模块、这些模块的组合,和/或其与一般硬件(例如,上文关于图1A、1B和3所描述)的组合全部包含于本发明的保护范围内。
上文参考图6A到6B以及7A到7B所描述的操作可由图1A到1C中所描绘的组件实施。举例来说,检测操作604、608和平移操作610可由事件分类器170、事件辨识器180和事件处置器190来实施。事件分类器170中的事件监视器171检测触敏显示器112上的接触,且事件分派器模块174将事件信息递送到应用程序136-1。应用程序136-1的相应事件辨识器180将事件信息与相应的事件定义186进行比较,且确定触敏表面上的第一位置处的第一接触是否对应于预定义的事件或子事件,例如对用户接口上的对象的选择。当检测到相应的预定义的事件或子事件时,事件辨识器180激活与事件或子事件的检测相关联的事件处置器180。事件处置器180可利用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施例中,事件处置器180存取相应的GUI更新器178以更新应用程序所显示的内容。类似地,所属领域的技术人员将清楚,可如何基于图1A到1C中所描绘的组件来实施其它过程。
根据一些实施例,图8展示根据上文所描述的本发明的原理而配置的电子装置800的功能框图。装置的功能块可由硬件、软件或硬件与软件的组合来实施以实行本发明的原理。所属领域的技术人员应理解,图8中所描述的功能块可经组合或分离为若干子块以实施如上文所描述的本发明的原理。因此,本文中的描述可支持对本文中所描述的功能块的任何可能组合或分离或进一步定义。
如图8中所示,计算装置800包含:触敏显示器单元802,其经配置以显示用户接口对象并接收用户接触;以及处理单元806,其耦合到触敏显示器单元802。在一些实施例中,处理单元806包含检测单元808、平移单元810、移动单元812和显示器启用单元814。
处理单元806经配置以:使得能够显示用户接口对象(例如,用显示器启用单元814);检测用户接口对象上的接触(例如,在触敏显示器单元802上)(例如,用检测单元808);在持续检测到用户接口对象上的接触时:检测触敏显示器单元802上的第一方向上的不同于所述接触的M根手指手势,其中M是整数(例如,用检测单元808);以及,响应于检测到所述M根手指手势,在根据所述第一方向的方向上将所述用户接口对象平移预定义的数目个像素(例如,用平移单元810)。
在一些实施例中,当M是一时,所述预定义的数目个像素是一个像素。
在一些实施例中,当M是二时,所述预定义的数目个像素是十个像素。
在一些实施例中,第一方向是向右方向且用户接口对象向右移动;第一方向是向左方向且用户接口对象向左移动;第一方向是向上方向且用户接口对象向上移动;或第一方向是向下方向且用户接口对象向下移动。
在一些实施例中,第一方向是对角线方向且用户接口对象在对角线方向上移动。
在一些实施例中,处理单元806经配置以:在检测到M根手指手势之前,检测接触跨越触敏显示器单元802的移动(例如,用检测单元808);以及根据所述接触的移动而移动用户接口对象(例如,用移动单元812)。
在一些实施例中,处理单元806经配置以在触敏显示器单元802上检测到接触时使得能够显示用户接口对象的位置标记(例如,用显示器启用单元814)。
根据一些实施例,图9展示根据上文所描述的本发明的原理而配置的电子装置900的功能框图。装置的功能块可由硬件、软件或硬件与软件的组合来实施以实行本发明的原理。所属领域的技术人员应理解,图9中所描述的功能块可经组合或分离为若干子块以实施如上文所描述的本发明的原理。因此,本文中的描述可支持对本文中所描述的功能块的任何可能组合或分离或进一步定义。
如图9中所示,计算装置900包含:触敏显示器单元902,其经配置以显示用户接口对象并接收用户接触;以及处理单元906,其耦合到触敏显示器单元902。在一些实施例中,处理单元906包含检测单元908、平移单元910、移动单元912和显示器启用单元914。
处理单元906经配置以:使得能够在触敏显示器单元902上显示用户接口对象;检测用户接口对象上的接触(例如,在触敏显示器单元902上)(例如,用检测单元908);在持续检测到用户接口对象上的接触时:检测触敏显示器单元902上的第一方向上的具有第一速率的不同于所述接触的手势(例如,用检测单元908);以及,响应于检测到所述手势:当所述第一速率低于预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移第一预定义的数目个像素(例如,用平移单元910);以及,当所述第一速率高于所述预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移不同于所述第一预定义的数目个像素的第二预定义的数目个像素(例如,用平移单元910)。
在一些实施例中,所述第一预定义的数目个像素是一个像素。
在一些实施例中,所述第二预定义的数目个像素是十个像素。
在一些实施例中,第一方向是向右方向且用户接口对象向右移动;第一方向是向左方向且用户接口对象向左移动;第一方向是向上方向且用户接口对象向上移动;或第一方向是向下方向且用户接口对象向下移动。
在一些实施例中,第一方向是对角线方向且用户接口对象在对角线方向上移动。
在一些实施例中,处理单元906经配置以:在检测到手势之前,检测接触跨越触敏显示器单元902的移动(例如,用检测单元908);以及根据所述接触的移动而移动用户接口对象(例如,用移动单元912)。
在一些实施例中,处理单元906经配置以在触敏显示器单元902上检测到接触时使得能够显示用户接口对象的位置标记(例如,用显示器启用单元914)。
出于阐释的目的,已参考特定实施例描述了前述描述。然而,以上说明性论述无意为详尽的或将本发明限于所揭示的精确形式。鉴于以上教示,许多修改和变化都是可能的。选择和描述所述实施例以便最佳地阐释本发明的原理及其实际应用,进而使得所属领域的技术人员能够最佳地利用本发明和具有适用于所预期的特定用途的各种修改的各种实施例。
Claims (55)
1.一种计算装置,其包括:
触敏显示器;
一个或一个以上处理器;
存储器;以及
一个或一个以上程序,其中所述一个或一个以上程序存储于所述存储器中,且经配置以由所述一个或一个以上处理器执行,所述一个或一个以上程序包含用于进行以下操作的指令:
在所述触敏显示器上显示用户接口对象;
检测所述用户接口对象上的接触;
在持续检测到所述用户接口对象上的所述接触时:
检测所述触敏显示器上的第一方向上的不同于所述接触的M根手指手势,其中M是整数;以及,
响应于检测到所述M根手指手势,在根据所述第一方向的方向上将所述用户接口对象平移预定义的数目个像素。
2.根据权利要求1所述的装置,其中当M是一时,所述预定义的数目个像素是一个像素。
3.根据权利要求1到2中任一权利要求所述的装置,其中当M是二时,所述预定义的数目个像素是十个像素。
4.根据权利要求1到3中任一权利要求所述的装置,其中:
所述第一方向是向右方向且所述用户接口对象向右移动;
所述第一方向是向左方向且所述用户接口对象向左移动;
所述第一方向是向上方向且所述用户接口对象向上移动;或
所述第一方向是向下方向且所述用户接口对象向下移动。
5.根据权利要求1到3中任一权利要求所述的装置,其中所述第一方向是对角线方向且所述用户接口对象在所述对角线方向上移动。
6.根据权利要求1到5中任一权利要求所述的装置,其包含用于以下操作的指令:
在检测到所述M根手指手势之前,检测所述接触跨越所述触敏显示器的移动;以及,
根据所述接触的所述移动而移动所述用户接口对象。
7.根据权利要求1到6中任一权利要求所述的装置,其包含用于以下操作的指令:
在所述触敏显示器上检测到所述接触时显示所述用户接口对象的位置标记。
8.一种计算装置,其包括:
触敏显示器;
一个或一个以上处理器;
存储器;以及
一个或一个以上程序,其中所述一个或一个以上程序存储于所述存储器中,且经配置以由所述一个或一个以上处理器执行,所述一个或一个以上程序包含用于进行以下操作的指令:
在所述触敏显示器上显示用户接口对象;
检测所述用户接口对象上的接触;
在持续检测到所述用户接口对象上的所述接触时:
检测所述触敏显示器上的第一方向上的具有第一速率的不同于所述接触的手势;以及,
响应于检测到所述手势:
当所述第一速率低于预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移第一预定义的数目个像素;以及,
当所述第一速率高于所述预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移不同于所述第一预定义的数目个像素的第二预定义的数目个像素。
9.根据权利要求8所述的装置,其中所述第一预定义的数目个像素是一个像素。
10.根据权利要求8到9中任一权利要求所述的装置,其中所述第二预定义的数目个像素是十个像素。
11.根据权利要求8到10中任一权利要求所述的装置,其中:
所述第一方向是向右方向且所述用户接口对象向右移动;
所述第一方向是向左方向且所述用户接口对象向左移动;
所述第一方向是向上方向且所述用户接口对象向上移动;或
所述第一方向是向下方向且所述用户接口对象向下移动。
12.根据权利要求8到10中任一权利要求所述的装置,其中所述第一方向是对角线方向且所述用户接口对象在所述对角线方向上移动。
13.根据权利要求8到12中任一权利要求所述的装置,其包含:
在检测到所述手势之前,检测所述接触跨越所述触敏显示器的移动;以及,
根据所述接触的所述移动而移动所述用户接口对象。
14.根据权利要求8到13中任一权利要求所述的装置,其包含:
在所述触敏显示器上检测到所述接触时显示所述用户接口对象的位置标记。
15.一种方法,其包括:
在具有触敏显示器的计算装置处:
在所述触敏显示器上显示用户接口对象;
检测所述用户接口对象上的接触;
在持续检测到所述用户接口对象上的所述接触时:
检测所述触敏显示器上的第一方向上的不同于所述接触的M根手指手势,其中M是整数;以及,
响应于检测到所述M根手指手势,在根据所述第一方向的方向上将所述用户接口对象平移预定义的数目个像素。
16.根据权利要求15所述的方法,其中当M是一时,所述预定义的数目个像素是一个像素。
17.根据权利要求15到16中任一权利要求所述的方法,其中当M是二时,所述预定义的数目个像素是十个像素。
18.根据权利要求15到17中任一权利要求所述的方法,其中:
所述第一方向是向右方向且所述用户接口对象向右移动;
所述第一方向是向左方向且所述用户接口对象向左移动;
所述第一方向是向上方向且所述用户接口对象向上移动;或
所述第一方向是向下方向且所述用户接口对象向下移动。
19.根据权利要求15到17中任一权利要求所述的方法,其中所述第一方向是对角线方向且所述用户接口对象在所述对角线方向上移动。
20.根据权利要求15到19中任一权利要求所述的方法,其包含:
在检测到所述M根手指手势之前,检测所述接触跨越所述触敏显示器的移动;以及,
根据所述接触的所述移动而移动所述用户接口对象。
21.根据权利要求15到20中任一权利要求所述的方法,其包含:
在所述触敏显示器上检测到所述接触时显示所述用户接口对象的位置标记。
22.一种方法,其包括:
在具有触敏显示器的计算装置处:
在所述触敏显示器上显示用户接口对象;
检测所述用户接口对象上的接触;
在持续检测到所述用户接口对象上的所述接触时:
检测所述触敏显示器上的第一方向上的具有第一速率的不同于所述接触的手势;以及,
响应于检测到所述手势:
当所述第一速率低于预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移第一预定义的数目个像素;以及,
当所述第一速率高于所述预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移不同于所述第一预定义的数目个像素的第二预定义的数目个像素。
23.根据权利要求22所述的方法,其中所述第一预定义的数目个像素是一个像素。
24.根据权利要求22到23中任一权利要求所述的方法,其中所述第二预定义的数目个像素是十个像素。
25.根据权利要求22到24中任一权利要求所述的方法,其中:
所述第一方向是向右方向且所述用户接口对象向右移动;
所述第一方向是向左方向且所述用户接口对象向左移动;
所述第一方向是向上方向且所述用户接口对象向上移动;或
所述第一方向是向下方向且所述用户接口对象向下移动。
26.根据权利要求22到24中任一权利要求所述的方法,其中所述第一方向是对角线方向且所述用户接口对象在所述对角线方向上移动。
27.根据权利要求22到26中任一权利要求所述的方法,其包含:
在检测到所述手势之前,检测所述接触跨越所述触敏显示器的移动;以及,
根据所述接触的所述移动而移动所述用户接口对象。
28.根据权利要求22到27中任一权利要求所述的方法,其包含:
在所述触敏显示器上检测到所述接触时显示所述用户接口对象的位置标记。
29.一种在计算装置上的图形用户接口,所述计算装置具有触敏显示器、存储器和用以执行存储于所述存储器中的一个或一个以上程序的一个或一个以上处理器,所述图形用户接口包括:
用户接口对象,其在所述触敏显示器上;
其中:
检测所述用户接口对象上的接触;
在持续检测到所述用户接口对象上的所述接触时:
检测所述触敏显示器上的第一方向上的不同于所述接触的M根手指手势,其中M是整数;以及,
响应于检测到所述M根手指手势,在根据所述第一方向的方向上将所述用户接口对象平移预定义的数目个像素。
30.一种在计算装置上的图形用户接口,所述计算装置具有触敏显示器、存储器和用以执行存储于所述存储器中的一个或一个以上程序的一个或一个以上处理器,所述图形用户接口包括:
用户接口对象,其在所述触敏显示器上;
其中:
检测所述用户接口对象上的接触;
在持续检测到所述用户接口对象上的所述接触时:
检测所述触敏显示器上的第一方向上的具有第一速率的不同于所述接触的手势;以及,
响应于检测到所述手势:
当所述第一速率低于预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移第一预定义的数目个像素;以及,
当所述第一速率高于所述预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移不同于所述第一预定义的数目个像素的第二预定义的数目个像素。
31.一种存储一个或一个以上程序的计算机可读存储媒体,所述一个或一个以上程序包括指令,所述指令在由具有触敏显示器的计算装置执行时致使所述装置:
在所述触敏显示器上显示用户接口对象;
检测所述用户接口对象上的接触;
在持续检测到所述用户接口对象上的所述接触时:
检测所述触敏显示器上的第一方向上的不同于所述接触的M根手指手势,其中M是整数;以及,
响应于检测到所述M根手指手势,在根据所述第一方向的方向上将所述用户接口对象平移预定义的数目个像素。
32.一种存储一个或一个以上程序的计算机可读存储媒体,所述一个或一个以上程序包括指令,所述指令在由具有触敏显示器的计算装置执行时致使所述装置:
在所述触敏显示器上显示用户接口对象;
检测所述用户接口对象上的接触;
在持续检测到所述用户接口对象上的所述接触时:
检测所述触敏显示器上的第一方向上的具有第一速率的不同于所述接触的手势;以及,
响应于检测到所述手势:
当所述第一速率低于预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移第一预定义的数目个像素;以及,
当所述第一速率高于所述预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移不同于所述第一预定义的数目个像素的第二预定义的数目个像素。
33.一种计算装置,其包括:
触敏显示器;
用于在所述触敏显示器上显示用户接口对象的构件;
用于检测所述用户接口对象上的接触的构件;
在持续检测到所述用户接口对象上的所述接触时:
用于检测所述触敏显示器上的第一方向上的不同于所述接触的M根手指手势的构件,其中M是整数;以及,
响应于检测到所述M根手指手势,用于在根据所述第一方向的方向上将所述用户接口对象平移预定义的数目个像素的构件。
34.一种计算装置,其包括:
触敏显示器;
用于在所述触敏显示器上显示用户接口对象的构件;
用于检测所述用户接口对象上的接触的构件;
在持续检测到所述用户接口对象上的所述接触时:
用于检测所述触敏显示器上的第一方向上的具有第一速率的不同于所述接触的手势的构件;以及,
响应于检测到所述手势,用于进行以下操作的构件:
当所述第一速率低于预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移第一预定义的数目个像素;以及,
当所述第一速率高于所述预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移不同于所述第一预定义的数目个像素的第二预定义的数目个像素。
35.一种供在具有触敏显示器的计算装置中使用的信息处理设备,其包括:
用于在所述触敏显示器上显示用户接口对象的构件;
用于检测所述用户接口对象上的接触的构件;
在持续检测到所述用户接口对象上的所述接触时:
用于检测所述触敏显示器上的第一方向上的不同于所述接触的M根手指手势的构件,其中M是整数;以及,
响应于检测到所述M根手指手势,用于在根据所述第一方向的方向上将所述用户接口对象平移预定义的数目个像素的构件。
36.一种供在具有触敏显示器的计算装置中使用的信息处理设备,其包括:
用于在所述触敏显示器上显示用户接口对象的构件;
用于检测所述用户接口对象上的接触的构件;
在持续检测到所述用户接口对象上的所述接触时:
用于检测所述触敏显示器上的第一方向上的具有第一速率的不同于所述接触的手势的构件;以及,
响应于检测到所述手势,用于进行以下操作的构件:
当所述第一速率低于预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移第一预定义的数目个像素;以及,
当所述第一速率高于所述预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移不同于所述第一预定义的数目个像素的第二预定义的数目个像素。
37.一种计算装置,其包括:
显示器;
触敏表面;
一个或一个以上处理器;
存储器;以及
一个或一个以上程序,其中所述一个或一个以上程序存储于所述存储器中,且经配置以由所述一个或一个以上处理器执行,所述一个或一个以上程序包含用于执行根据权利要求15到28所述的方法中的任一者的指令。
38.一种在计算装置上的图形用户接口,所述计算装置具有显示器、触敏表面、存储器和用以执行存储于所述存储器中的一个或一个以上程序的一个或一个以上处理器,所述图形用户接口包括根据权利要求15到28所述的方法中的任一者而显示的用户接口。
39.一种存储一个或一个以上程序的计算机可读存储媒体,所述一个或一个以上程序包括指令,所述指令在由具有显示器和触敏表面的计算装置执行时致使所述装置执行根据权利要求15到28所述的方法中的任一者。
40.一种计算装置,其包括:
显示器和触敏表面;以及
用于执行根据权利要求15到28所述的方法中的任一者的构件。
41.一种供在具有显示器和触敏表面的计算装置中使用的信息处理设备,其包括:
用于执行根据权利要求15到28所述的方法中的任一者的构件。
42.一种计算装置,其包括:
触敏显示器单元,其经配置以显示用户接口对象并接收用户接触;以及
处理单元,其耦合到所述触敏显示器单元,所述处理单元经配置以:
使得能够在所述触敏显示器单元上显示用户接口对象;
检测所述用户接口对象上的接触;
在持续检测到所述用户接口对象上的所述接触时:
检测所述触敏显示器单元上的第一方向上的不同于所述接触的M根手指手势,其中M是整数;以及,
响应于检测到所述M根手指手势,在根据所述第一方向的方向上将所述用户接口对象平移预定义的数目个像素。
43.根据权利要求42所述的装置,其中当M是一时,所述预定义的数目个像素是一个像素。
44.根据权利要求42到43中任一权利要求所述的装置,其中当M是二时,所述预定义的数目个像素是十个像素。
45.根据权利要求42到44中任一权利要求所述的装置,其中:
所述第一方向是向右方向且所述用户接口对象向右移动;
所述第一方向是向左方向且所述用户接口对象向左移动;
所述第一方向是向上方向且所述用户接口对象向上移动;或
所述第一方向是向下方向且所述用户接口对象向下移动。
46.根据权利要求42到44中任一权利要求所述的装置,其中所述第一方向是对角线方向且所述用户接口对象在所述对角线方向上移动。
47.根据权利要求42到46中任一权利要求所述的装置,其中所述处理单元经配置以:
在检测到所述M根手指手势之前,检测所述接触跨越所述触敏显示器单元的移动;以及,
根据所述接触的所述移动而移动所述用户接口对象。
48.根据权利要求42到47中任一权利要求所述的装置,其中所述处理单元经配置以:
使得能够在所述触敏显示器单元上检测到所述接触时显示所述用户接口对象的位置标记。
49.一种计算装置,其包括:
触敏显示器单元,其经配置以显示用户接口对象并接收用户接触;以及
处理单元,其耦合到所述触敏显示器单元,所述处理单元经配置以:
使得能够在所述触敏显示器单元上显示用户接口对象;
检测所述用户接口对象上的接触;
在持续检测到所述用户接口对象上的所述接触时:
检测所述触敏显示器单元上的第一方向上的具有第一速率的不同于所述接触的手势;以及,
响应于检测到所述手势:
当所述第一速率低于预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移第一预定义的数目个像素;以及,
当所述第一速率高于所述预定义的阈值时,在根据所述第一方向的方向上将所述用户接口对象平移不同于所述第一预定义的数目个像素的第二预定义的数目个像素。
50.根据权利要求49所述的装置,其中所述第一预定义的数目个像素是一个像素。
51.根据权利要求49到50中任一权利要求所述的装置,其中所述第二预定义的数目个像素是十个像素。
52.根据权利要求49到51中任一权利要求所述的装置,其中:
所述第一方向是向右方向且所述用户接口对象向右移动;
所述第一方向是向左方向且所述用户接口对象向左移动;
所述第一方向是向上方向且所述用户接口对象向上移动;或
所述第一方向是向下方向且所述用户接口对象向下移动。
53.根据权利要求49到51中任一权利要求所述的装置,其中所述第一方向是对角线方向且所述用户接口对象在所述对角线方向上移动。
54.根据权利要求49到53中任一权利要求所述的装置,其中所述处理单元经配置以:在检测到所述手势之前,检测所述接触跨越所述触敏显示器单元的移动;以及,根据所述接触的所述移动而移动所述用户接口对象。
55.根据权利要求49到54中任一权利要求所述的装置,其中所述处理单元经配置以:使得能够在所述触敏显示器单元上检测到所述接触时显示所述用户接口对象的位置标记。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US29851910P | 2010-01-26 | 2010-01-26 | |
US61/298,519 | 2010-01-26 | ||
US12/790,516 US8539385B2 (en) | 2010-01-26 | 2010-05-28 | Device, method, and graphical user interface for precise positioning of objects |
US12/790,516 | 2010-05-28 | ||
PCT/US2011/022525 WO2011094276A1 (en) | 2010-01-26 | 2011-01-26 | Device, method, and graphical user interface for precise positioning of objects |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102822788A true CN102822788A (zh) | 2012-12-12 |
CN102822788B CN102822788B (zh) | 2016-10-12 |
Family
ID=44309943
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201180016102.7A Active CN102822788B (zh) | 2010-01-26 | 2011-01-26 | 用于对象的精确定位的装置、方法和图形用户接口 |
Country Status (6)
Country | Link |
---|---|
US (1) | US8539385B2 (zh) |
EP (1) | EP2529293A1 (zh) |
KR (3) | KR20120114381A (zh) |
CN (1) | CN102822788B (zh) |
AU (1) | AU2011209729B2 (zh) |
WO (1) | WO2011094276A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106716327A (zh) * | 2014-06-27 | 2017-05-24 | 微软技术许可有限责任公司 | 利用无缝转换的阅读和编辑的合并体验 |
Families Citing this family (53)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3260969B1 (en) | 2009-09-22 | 2021-03-03 | Apple Inc. | Device, method, and graphical user interface for manipulating user interface objects |
US8780069B2 (en) | 2009-09-25 | 2014-07-15 | Apple Inc. | Device, method, and graphical user interface for manipulating user interface objects |
US8799826B2 (en) | 2009-09-25 | 2014-08-05 | Apple Inc. | Device, method, and graphical user interface for moving a calendar entry in a calendar application |
US8766928B2 (en) | 2009-09-25 | 2014-07-01 | Apple Inc. | Device, method, and graphical user interface for manipulating user interface objects |
US8832585B2 (en) | 2009-09-25 | 2014-09-09 | Apple Inc. | Device, method, and graphical user interface for manipulating workspace views |
US8539386B2 (en) | 2010-01-26 | 2013-09-17 | Apple Inc. | Device, method, and graphical user interface for selecting and moving objects |
US8612884B2 (en) | 2010-01-26 | 2013-12-17 | Apple Inc. | Device, method, and graphical user interface for resizing objects |
US8539385B2 (en) * | 2010-01-26 | 2013-09-17 | Apple Inc. | Device, method, and graphical user interface for precise positioning of objects |
TWI447638B (zh) * | 2010-02-12 | 2014-08-01 | Esobi Inc | The display method of the displacement of the object on the electronic device screen |
US8810509B2 (en) * | 2010-04-27 | 2014-08-19 | Microsoft Corporation | Interfacing with a computing application using a multi-digit sensor |
US8286102B1 (en) * | 2010-05-27 | 2012-10-09 | Adobe Systems Incorporated | System and method for image processing using multi-touch gestures |
US9613325B2 (en) * | 2010-06-30 | 2017-04-04 | Zeus Data Solutions | Diagnosis-driven electronic charting |
US9081494B2 (en) | 2010-07-30 | 2015-07-14 | Apple Inc. | Device, method, and graphical user interface for copying formatting attributes |
US9098182B2 (en) | 2010-07-30 | 2015-08-04 | Apple Inc. | Device, method, and graphical user interface for copying user interface objects between content regions |
JP5936298B2 (ja) * | 2010-10-14 | 2016-06-22 | キヤノン株式会社 | 表示制御装置、表示制御方法、およびプログラム |
US9223471B2 (en) * | 2010-12-28 | 2015-12-29 | Microsoft Technology Licensing, Llc | Touch screen control |
US11262892B2 (en) * | 2011-09-13 | 2022-03-01 | Newman Infinite, Inc. | Apparatus, method and computer-readable storage medium for manipulating a user interface element |
JP5553812B2 (ja) | 2011-10-26 | 2014-07-16 | 株式会社ソニー・コンピュータエンタテインメント | スクロール制御装置、端末装置およびスクロール制御方法 |
US9244583B2 (en) | 2011-12-09 | 2016-01-26 | Microsoft Technology Licensing, Llc | Adjusting user interface screen order and composition |
CA2862435A1 (en) * | 2012-01-10 | 2013-07-18 | Smart Technologies Ulc | Method for manipulating a graphical object and an interactive input system employing the same |
KR101892567B1 (ko) * | 2012-02-24 | 2018-08-28 | 삼성전자 주식회사 | 단말기에서 콘텐츠 이동 방법 및 장치 |
CN102662576B (zh) * | 2012-03-29 | 2015-04-29 | 华为终端有限公司 | 基于触摸的信息发送方法及装置 |
JP5663519B2 (ja) * | 2012-04-10 | 2015-02-04 | 京セラドキュメントソリューションズ株式会社 | 表示入力装置および画像形成装置 |
JP5645869B2 (ja) * | 2012-04-13 | 2014-12-24 | 京セラドキュメントソリューションズ株式会社 | 表示入力装置および画像形成装置 |
JP2014010777A (ja) * | 2012-07-02 | 2014-01-20 | Fujitsu Ltd | 表示プログラム、表示方法、及び情報処理装置 |
US9285979B2 (en) * | 2012-09-17 | 2016-03-15 | Adobe Systems Incorporated | Computer-implemented methods and systems for multi-touch duplication and swapping interactions |
US9703469B2 (en) | 2012-10-18 | 2017-07-11 | Dreamworks Animation Llc | Distinguishing between impulses and continuous drag operations on a touch-sensitive surface |
US9965162B2 (en) * | 2012-11-29 | 2018-05-08 | Facebook, Inc. | Scrolling across boundaries in a structured document |
US10191643B2 (en) * | 2012-11-29 | 2019-01-29 | Facebook, Inc. | Using clamping to modify scrolling |
FR2999316A1 (fr) * | 2012-12-12 | 2014-06-13 | Sagemcom Broadband Sas | Dispositif et procede de reconnaissance de gestes pour un controle d'interface utilisateur |
EP2752758A3 (en) * | 2013-01-07 | 2016-10-26 | LG Electronics Inc. | Image display device and controlling method thereof |
US9892097B2 (en) * | 2013-04-01 | 2018-02-13 | Adobe Systems Incorporated | Enabling absolute positioning with publishable HTML code |
KR102068663B1 (ko) * | 2013-07-10 | 2020-01-21 | 삼성전자 주식회사 | 전자 기기의 그래픽 효과 적용 방법 및 장치 |
KR102140811B1 (ko) * | 2013-07-23 | 2020-08-03 | 삼성전자주식회사 | 디바이스의 사용자 인터페이스 제공 방법 및 그 디바이스 |
US9405398B2 (en) * | 2013-09-03 | 2016-08-02 | FTL Labs Corporation | Touch sensitive computing surface for interacting with physical surface devices |
US9058480B2 (en) * | 2013-11-05 | 2015-06-16 | Google Inc. | Directional touch unlocking for electronic devices |
US10430776B2 (en) | 2014-01-09 | 2019-10-01 | Datalogic Usa, Inc. | System and method for exception handling in self-checkout and automated data capture systems |
US9733734B2 (en) | 2014-11-13 | 2017-08-15 | Grayhill, Inc. | Method for using a two-dimensional touchpad to manipulate a three-dimensional image |
US9927892B2 (en) | 2015-03-27 | 2018-03-27 | International Business Machines Corporation | Multiple touch selection control |
US9886230B2 (en) * | 2015-06-07 | 2018-02-06 | Apple Inc. | Device, method, and graphical user interface for collaborative editing in documents |
US9811448B2 (en) * | 2015-12-18 | 2017-11-07 | Fujitsu Limited | Event-driven software testing |
US10055626B2 (en) | 2016-12-06 | 2018-08-21 | Datalogic Usa, Inc. | Data reading system and method with user feedback for improved exception handling and item modeling |
CN107450841B (zh) * | 2017-08-08 | 2019-05-07 | 腾讯科技(深圳)有限公司 | 交互对象控制方法及装置 |
US10984179B2 (en) * | 2017-12-04 | 2021-04-20 | Microsoft Technology Licensing, Llc | Intelligent object movement |
USD916892S1 (en) | 2019-04-09 | 2021-04-20 | Google Llc | Display screen or portion thereof with graphical user interface with icon |
USD926809S1 (en) * | 2019-06-05 | 2021-08-03 | Reliaquest Holdings, Llc | Display screen or portion thereof with a graphical user interface |
USD926810S1 (en) | 2019-06-05 | 2021-08-03 | Reliaquest Holdings, Llc | Display screen or portion thereof with a graphical user interface |
USD926811S1 (en) | 2019-06-06 | 2021-08-03 | Reliaquest Holdings, Llc | Display screen or portion thereof with a graphical user interface |
USD926200S1 (en) | 2019-06-06 | 2021-07-27 | Reliaquest Holdings, Llc | Display screen or portion thereof with a graphical user interface |
USD926782S1 (en) | 2019-06-06 | 2021-08-03 | Reliaquest Holdings, Llc | Display screen or portion thereof with a graphical user interface |
WO2021247811A1 (en) * | 2020-06-03 | 2021-12-09 | Cser Ventures, LLC | A system for modifying an arrangement of files |
WO2022231380A1 (ko) * | 2021-04-29 | 2022-11-03 | 키네마스터 주식회사 | 미세 조절 제어를 위한 컨텐츠 편집 제어 방법, 장치 및 컴퓨터 프로그램 |
CN114895832B (zh) * | 2022-05-17 | 2023-08-08 | 网易(杭州)网络有限公司 | 对象的调整方法、装置、电子设备及计算机可读介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101063925A (zh) * | 2006-04-24 | 2007-10-31 | 宏达国际电子股份有限公司 | 信息导读方法 |
WO2008138046A1 (en) * | 2007-05-11 | 2008-11-20 | Rpo Pty Limited | Double touch inputs |
CN101446884A (zh) * | 2008-12-19 | 2009-06-03 | 腾讯科技(深圳)有限公司 | 一种触摸屏设备及其滚屏方法 |
CN101458586A (zh) * | 2007-12-11 | 2009-06-17 | 义隆电子股份有限公司 | 以多根手指在触控屏幕上操作对象的方法 |
CN101599002A (zh) * | 2008-06-04 | 2009-12-09 | 佳能株式会社 | 用户接口的控制方法和信息处理装置 |
CN101617288A (zh) * | 2007-01-07 | 2009-12-30 | 苹果公司 | 用于平移显示内容的便携式多功能设备、方法和图形用户界面 |
Family Cites Families (239)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US3859005A (en) | 1973-08-13 | 1975-01-07 | Albert L Huebner | Erosion reduction in wet turbines |
US4885786A (en) | 1984-10-24 | 1989-12-05 | International Business Machines Corporation | Method for enlarging an image stored in run representation form |
US4826405A (en) | 1985-10-15 | 1989-05-02 | Aeroquip Corporation | Fan blade fabrication system |
US5394521A (en) | 1991-12-09 | 1995-02-28 | Xerox Corporation | User interface with multiple workspaces for sharing display system objects |
US5283561A (en) | 1989-02-24 | 1994-02-01 | International Business Machines Corporation | Color television window for a video display unit |
US5327161A (en) | 1989-08-09 | 1994-07-05 | Microtouch Systems, Inc. | System and method for emulating a mouse input device with a touchpad input device |
US5490241A (en) | 1989-10-06 | 1996-02-06 | Xerox Corporation | Interactive computer graphics system for making precise drawings |
US5371845A (en) | 1990-04-27 | 1994-12-06 | Ashlar, Inc. | Technique for providing improved user feedback in an interactive drawing system |
US5359703A (en) | 1990-08-02 | 1994-10-25 | Xerox Corporation | Moving an object in a three-dimensional workspace |
US5483261A (en) | 1992-02-14 | 1996-01-09 | Itu Research, Inc. | Graphical input controller and method with rear screen image detection |
US6028271A (en) * | 1992-06-08 | 2000-02-22 | Synaptics, Inc. | Object position detector with edge motion feature and gesture recognition |
DE69430967T2 (de) | 1993-04-30 | 2002-11-07 | Xerox Corp | Interaktives Kopiersystem |
US5581670A (en) | 1993-07-21 | 1996-12-03 | Xerox Corporation | User interface having movable sheet with click-through tools |
US5729673A (en) | 1995-04-07 | 1998-03-17 | Avid Technology, Inc. | Direct manipulation of two-dimensional moving picture streams in three-dimensional space |
US5675753A (en) | 1995-04-24 | 1997-10-07 | U.S. West Technologies, Inc. | Method and system for presenting an electronic user-interface specification |
US5808601A (en) | 1995-09-12 | 1998-09-15 | International Business Machines Corporation | Interactive object selection pointer method and apparatus |
US6750877B2 (en) | 1995-12-13 | 2004-06-15 | Immersion Corporation | Controlling haptic feedback for enhancing navigation in a graphical environment |
US5825352A (en) | 1996-01-04 | 1998-10-20 | Logitech, Inc. | Multiple fingers contact sensing method for emulating mouse buttons and mouse operations on a touch sensor pad |
US6374255B1 (en) | 1996-05-21 | 2002-04-16 | Immersion Corporation | Haptic authoring |
US6208329B1 (en) | 1996-08-13 | 2001-03-27 | Lsi Logic Corporation | Supplemental mouse button emulation system, method and apparatus for a coordinate based data input device |
US5872559A (en) | 1996-10-04 | 1999-02-16 | International Business Machines Corporation | Breakaway and re-grow touchscreen pointing device |
US6253218B1 (en) | 1996-12-26 | 2001-06-26 | Atsushi Aoki | Three dimensional data display method utilizing view point tracing and reduced document images |
US6073036A (en) * | 1997-04-28 | 2000-06-06 | Nokia Mobile Phones Limited | Mobile station with touch input having automatic symbol magnification function |
US5910800A (en) * | 1997-06-11 | 1999-06-08 | Microsoft Corporation | Usage tips for on-screen touch-sensitive controls |
US6025844A (en) | 1997-06-12 | 2000-02-15 | Netscape Communications Corporation | Method and system for creating dynamic link views |
JPH11143724A (ja) | 1997-11-13 | 1999-05-28 | Sharp Corp | 情報処理装置および情報処理プログラムを記録したコンピュータ読み取り可能な記録媒体 |
US6075531A (en) | 1997-12-15 | 2000-06-13 | International Business Machines Corporation | Computer system and method of manipulating multiple graphical user interface components on a computer display with a proximity pointer |
US7760187B2 (en) | 2004-07-30 | 2010-07-20 | Apple Inc. | Visual expander |
US7840912B2 (en) | 2006-01-30 | 2010-11-23 | Apple Inc. | Multi-touch gesture dictionary |
US7844914B2 (en) | 2004-07-30 | 2010-11-30 | Apple Inc. | Activating virtual keys of a touch-screen virtual keyboard |
US9292111B2 (en) | 1998-01-26 | 2016-03-22 | Apple Inc. | Gesturing with a multipoint sensing device |
US6323846B1 (en) | 1998-01-26 | 2001-11-27 | University Of Delaware | Method and apparatus for integrating manual input |
US7663607B2 (en) | 2004-05-06 | 2010-02-16 | Apple Inc. | Multipoint touchscreen |
US20060033724A1 (en) | 2004-07-30 | 2006-02-16 | Apple Computer, Inc. | Virtual input device placement on a touch screen user interface |
US7800592B2 (en) | 2005-03-04 | 2010-09-21 | Apple Inc. | Hand held electronic device with multiple touch sensing devices |
US7614008B2 (en) | 2004-07-30 | 2009-11-03 | Apple Inc. | Operation of a computer with touch screen interface |
US8479122B2 (en) | 2004-07-30 | 2013-07-02 | Apple Inc. | Gestures for touch sensitive input devices |
US6215490B1 (en) | 1998-02-02 | 2001-04-10 | International Business Machines Corporation | Task window navigation method and system |
US6065021A (en) | 1998-04-07 | 2000-05-16 | Adobe Systems Incorporated | Apparatus and method for alignment of graphical elements in electronic document |
US6278443B1 (en) | 1998-04-30 | 2001-08-21 | International Business Machines Corporation | Touch screen with random finger placement and rolling on screen to control the movement of information on-screen |
US6433800B1 (en) | 1998-08-31 | 2002-08-13 | Sun Microsystems, Inc. | Graphical action invocation method, and associated method, for a computer system |
US6392673B1 (en) | 1998-09-04 | 2002-05-21 | Microsoft Corporation | Method for resizing user interface elements for an operating system |
US6346935B1 (en) | 1998-09-14 | 2002-02-12 | Matsushita Electric Industrial Co., Ltd. | Touch-sensitive tablet |
US20020018051A1 (en) | 1998-09-15 | 2002-02-14 | Mona Singh | Apparatus and method for moving objects on a touchscreen display |
US7469381B2 (en) | 2007-01-07 | 2008-12-23 | Apple Inc. | List scrolling and document translation, scaling, and rotation on a touch-screen display |
US6480813B1 (en) | 1999-02-24 | 2002-11-12 | Autodesk, Inc. | Method and apparatus for defining a precision drawing in a drawing program |
US7093192B2 (en) | 1999-07-30 | 2006-08-15 | Microsoft Corporation | Establishing and displaying dynamic grids |
JP3998376B2 (ja) | 1999-09-10 | 2007-10-24 | 富士通株式会社 | 入力処理方法及びそれを実施する入力処理装置 |
US7484183B2 (en) | 2000-01-25 | 2009-01-27 | Autodesk, Inc. | Method and apparatus for providing access to and working with architectural drawings on the internet |
US6807361B1 (en) | 2000-07-18 | 2004-10-19 | Fuji Xerox Co., Ltd. | Interactive custom video creation system |
US7218226B2 (en) | 2004-03-01 | 2007-05-15 | Apple Inc. | Acceleration-based theft detection system for portable electronic devices |
US7688306B2 (en) | 2000-10-02 | 2010-03-30 | Apple Inc. | Methods and apparatuses for operating a portable device based on an accelerometer |
US6897853B2 (en) | 2000-11-10 | 2005-05-24 | Microsoft Corp. | Highlevel active pen matrix |
JP4196536B2 (ja) | 2000-11-21 | 2008-12-17 | コニカミノルタビジネステクノロジーズ株式会社 | ファイル管理装置、ファイル管理方法およびファイル管理プログラムを記録したコンピュータ読取可能な記録媒体 |
US6677932B1 (en) | 2001-01-28 | 2004-01-13 | Finger Works, Inc. | System and method for recognizing touch typing under limited tactile feedback conditions |
US7030861B1 (en) | 2001-02-10 | 2006-04-18 | Wayne Carl Westerman | System and method for packing multi-touch gestures onto a hand |
US6570557B1 (en) | 2001-02-10 | 2003-05-27 | Finger Works, Inc. | Multi-touch system and method for emulating modifier keys via fingertip chords |
US20020161772A1 (en) | 2001-02-20 | 2002-10-31 | Bergelson Alan P. | Automated procedure for database creation for a form-based data collection system |
US7134093B2 (en) | 2001-04-18 | 2006-11-07 | International Business Machines Corporation | Graphical user interface for direct control of display of data |
US7190379B2 (en) | 2001-06-29 | 2007-03-13 | Contex A/S | Method for resizing and moving an object on a computer screen |
US6690365B2 (en) | 2001-08-29 | 2004-02-10 | Microsoft Corporation | Automatic scrolling |
US8004496B2 (en) | 2002-01-08 | 2011-08-23 | Koninklijke Philips Electronics N.V. | User interface for electronic devices for controlling the displaying of long sorted lists |
US20030142137A1 (en) | 2002-01-28 | 2003-07-31 | International Business Machines Corporation | Selectively adjusting the order of windows in response to a scroll wheel rotation |
JP3800524B2 (ja) | 2002-03-15 | 2006-07-26 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 表示制御方法、これを用いたプログラム及び情報処理装置 |
US6903751B2 (en) | 2002-03-22 | 2005-06-07 | Xerox Corporation | System and method for editing electronic images |
US6928619B2 (en) | 2002-05-10 | 2005-08-09 | Microsoft Corporation | Method and apparatus for managing input focus and z-order |
US7456823B2 (en) | 2002-06-14 | 2008-11-25 | Sony Corporation | User interface apparatus and portable information apparatus |
US11275405B2 (en) | 2005-03-04 | 2022-03-15 | Apple Inc. | Multi-functional hand-held device |
US7656393B2 (en) | 2005-03-04 | 2010-02-02 | Apple Inc. | Electronic device having display and surrounding touch sensitive bezel for user interface and control |
US7302648B1 (en) | 2002-07-10 | 2007-11-27 | Apple Inc. | Method and apparatus for resizing buffered windows |
US8255814B2 (en) | 2002-09-06 | 2012-08-28 | Autodesk, Inc. | Temporary text and graphic feedback for object manipulators |
EP1546857A4 (en) * | 2002-09-30 | 2007-09-05 | Microsoft Corp | SYSTEM AND METHOD FOR INTERFACE AND USER TO BE INFORMED OF PRESENT INTERFACE ELEMENTS |
US20040066407A1 (en) | 2002-10-08 | 2004-04-08 | Microsoft Corporation | Intelligent windows movement and resizing |
US20040088656A1 (en) | 2002-10-30 | 2004-05-06 | Kazuto Washio | Method, apparatus, and program for image processing |
US7158123B2 (en) | 2003-01-31 | 2007-01-02 | Xerox Corporation | Secondary touch contextual sub-menu navigation for touch screen interface |
US7231609B2 (en) | 2003-02-03 | 2007-06-12 | Microsoft Corporation | System and method for accessing remote screen content |
JP3864145B2 (ja) * | 2003-02-10 | 2006-12-27 | オプトレックス株式会社 | 有機el表示装置の駆動方法 |
US7185291B2 (en) | 2003-03-04 | 2007-02-27 | Institute For Information Industry | Computer with a touch screen |
US7158158B1 (en) | 2003-03-12 | 2007-01-02 | Apple Computer, Inc. | Method and apparatus for nonlinear anamorphic scaling of video images |
US7545392B2 (en) | 2003-05-30 | 2009-06-09 | Apple Inc. | Dynamic guides |
US7287241B2 (en) | 2003-06-17 | 2007-10-23 | Microsoft Corporation | Snaplines for control object positioning |
US7246311B2 (en) | 2003-07-17 | 2007-07-17 | Microsoft Corporation | System and methods for facilitating adaptive grid-based document layout |
US20050052427A1 (en) * | 2003-09-10 | 2005-03-10 | Wu Michael Chi Hung | Hand gesture interaction with touch surface |
US7661959B2 (en) | 2003-09-19 | 2010-02-16 | Minutes Matter Solutions, Inc. | Interior design system and method |
US7471423B2 (en) | 2003-09-26 | 2008-12-30 | Seiko Epson Corporation | Image processing system and image processing method |
US20050068290A1 (en) | 2003-09-28 | 2005-03-31 | Denny Jaeger | Method for creating and using user-friendly grids |
US7532753B2 (en) | 2003-09-29 | 2009-05-12 | Lipsky Scott E | Method and system for specifying color of a fill area |
US8739060B2 (en) | 2003-09-29 | 2014-05-27 | Eqapez Foundation, L.L.C. | Method and system for displaying multiple aspect ratios of a viewport |
US7398478B2 (en) | 2003-11-14 | 2008-07-08 | Microsoft Corporation | Controlled non-proportional scaling display |
US20050108620A1 (en) | 2003-11-19 | 2005-05-19 | Microsoft Corporation | Method and system for selecting and manipulating multiple objects |
US20080109751A1 (en) | 2003-12-31 | 2008-05-08 | Alias Systems Corp. | Layer editor system for a pen-based computer |
US7620915B2 (en) | 2004-02-13 | 2009-11-17 | Ludwig Lester F | Electronic document editing employing multiple cursors |
JP4325449B2 (ja) | 2004-03-19 | 2009-09-02 | ソニー株式会社 | 表示制御装置,表示制御方法,記録媒体 |
US7469833B1 (en) | 2004-04-08 | 2008-12-30 | Adobe Systems Incorporated | Creating and using documents with machine-readable codes |
US20050231512A1 (en) | 2004-04-16 | 2005-10-20 | Niles Gregory E | Animation of an object using behaviors |
US7801419B2 (en) | 2004-05-10 | 2010-09-21 | Sony Computer Entertainment Inc. | Multimedia reproduction device and menu screen display method |
US8281241B2 (en) | 2004-06-28 | 2012-10-02 | Nokia Corporation | Electronic device and method for providing extended user interface |
US7743348B2 (en) | 2004-06-30 | 2010-06-22 | Microsoft Corporation | Using physical objects to adjust attributes of an interactive display application |
EP2000894B1 (en) | 2004-07-30 | 2016-10-19 | Apple Inc. | Mode-based graphical user interfaces for touch sensitive input devices |
US8381135B2 (en) | 2004-07-30 | 2013-02-19 | Apple Inc. | Proximity detector in handheld device |
US7653883B2 (en) | 2004-07-30 | 2010-01-26 | Apple Inc. | Proximity detector in handheld device |
US7728821B2 (en) | 2004-08-06 | 2010-06-01 | Touchtable, Inc. | Touch detecting interactive display |
US7761814B2 (en) | 2004-09-13 | 2010-07-20 | Microsoft Corporation | Flick gesture |
US7904810B2 (en) | 2004-09-21 | 2011-03-08 | Microsoft Corporation | System and method for editing a hand-drawn list in ink input |
US7728823B2 (en) | 2004-09-24 | 2010-06-01 | Apple Inc. | System and method for processing raw data of track pad device |
US20070198942A1 (en) | 2004-09-29 | 2007-08-23 | Morris Robert P | Method and system for providing an adaptive magnifying cursor |
US7454717B2 (en) | 2004-10-20 | 2008-11-18 | Microsoft Corporation | Delimiters for selection-action pen gesture phrases |
US7925996B2 (en) | 2004-11-18 | 2011-04-12 | Microsoft Corporation | Method and system for providing multiple input connecting user interface |
US20060136833A1 (en) | 2004-12-15 | 2006-06-22 | International Business Machines Corporation | Apparatus and method for chaining objects in a pointer drag path |
US20060129945A1 (en) | 2004-12-15 | 2006-06-15 | International Business Machines Corporation | Apparatus and method for pointer drag path operations |
US20060136246A1 (en) | 2004-12-22 | 2006-06-22 | Tu Edgar A | Hierarchical program guide |
JP4238222B2 (ja) | 2005-01-04 | 2009-03-18 | インターナショナル・ビジネス・マシーンズ・コーポレーション | オブジェクト編集システム、オブジェクト編集方法及びオブジェクト編集プログラム |
KR101205023B1 (ko) | 2005-01-30 | 2012-11-26 | 스위프트포인트 리미티드 | 컴퓨터 마우스 주변 장치 |
US7839385B2 (en) | 2005-02-14 | 2010-11-23 | Hillcrest Laboratories, Inc. | Methods and systems for enhancing television applications using 3D pointing |
US8819569B2 (en) | 2005-02-18 | 2014-08-26 | Zumobi, Inc | Single-handed approach for navigation of application tiles using panning and zooming |
US7489324B2 (en) | 2005-03-07 | 2009-02-10 | Vistaprint Technologies Limited | Automated image processing |
US7477233B2 (en) | 2005-03-16 | 2009-01-13 | Microsoft Corporation | Method and system for providing modifier key behavior through pen gestures |
US7624354B2 (en) | 2005-04-29 | 2009-11-24 | Microsoft Corporation | Efficient workspace management using content groups |
US20060279532A1 (en) | 2005-06-14 | 2006-12-14 | Olszewski Piotr S | Data input device controlled by motions of hands and fingers |
KR20060133389A (ko) | 2005-06-20 | 2006-12-26 | 엘지전자 주식회사 | 이동 단말기의 데이터 처리 장치 및 그 방법 |
US7665028B2 (en) | 2005-07-13 | 2010-02-16 | Microsoft Corporation | Rich drag drop user interface |
US20090013350A1 (en) | 2005-08-11 | 2009-01-08 | Vvond, Llc | Display of movie titles in a library |
US20070245257A1 (en) | 2005-08-24 | 2007-10-18 | Kwan-Ho Chan | Graphical Interface for Direct Manipulation of Software Objects |
JP2007058785A (ja) | 2005-08-26 | 2007-03-08 | Canon Inc | 情報処理装置及び前記装置におけるドラグオブジェクトの操作方法 |
US7581189B2 (en) | 2005-09-09 | 2009-08-25 | Microsoft Corporation | Dynamically generating a database report during a report building process |
US20070152980A1 (en) | 2006-01-05 | 2007-07-05 | Kenneth Kocienda | Touch Screen Keyboards for Portable Electronic Devices |
US7694231B2 (en) | 2006-01-05 | 2010-04-06 | Apple Inc. | Keyboards for portable electronic devices |
US7633076B2 (en) | 2005-09-30 | 2009-12-15 | Apple Inc. | Automated response to and sensing of user activity in portable devices |
US20070079236A1 (en) | 2005-10-04 | 2007-04-05 | Microsoft Corporation | Multi-form design with harmonic composition for dynamically aggregated documents |
US7523405B2 (en) | 2005-11-16 | 2009-04-21 | Microsoft Corporation | Displaying 2D graphic content using depth wells |
US7663620B2 (en) | 2005-12-05 | 2010-02-16 | Microsoft Corporation | Accessing 2D graphic content using axonometric layer views |
US7657849B2 (en) | 2005-12-23 | 2010-02-02 | Apple Inc. | Unlocking a device by performing gestures on an unlock image |
WO2007079425A2 (en) | 2005-12-30 | 2007-07-12 | Apple Inc. | Portable electronic device with multi-touch input |
US8510669B2 (en) | 2006-02-06 | 2013-08-13 | Yahoo! Inc. | Method and system for presenting photos on a website |
US7696998B2 (en) | 2006-02-21 | 2010-04-13 | Chrysler Group Llc | Pen-based 3D drawing system with 3D orthographic plane or orthographic ruled surface drawing |
US8930834B2 (en) | 2006-03-20 | 2015-01-06 | Microsoft Corporation | Variable orientation user interface |
KR100672605B1 (ko) | 2006-03-30 | 2007-01-24 | 엘지전자 주식회사 | 아이템 선택 방법 및 이를 위한 단말기 |
US9395905B2 (en) | 2006-04-05 | 2016-07-19 | Synaptics Incorporated | Graphical scroll wheel |
US8077153B2 (en) | 2006-04-19 | 2011-12-13 | Microsoft Corporation | Precise selection techniques for multi-touch screens |
JP4796435B2 (ja) | 2006-04-28 | 2011-10-19 | 富士フイルム株式会社 | 画像ビューア |
US8279180B2 (en) | 2006-05-02 | 2012-10-02 | Apple Inc. | Multipoint touch surface controller |
US10503342B2 (en) | 2006-08-04 | 2019-12-10 | Apple Inc. | User interface spaces |
US7813774B2 (en) | 2006-08-18 | 2010-10-12 | Microsoft Corporation | Contact, motion and position sensing circuitry providing data entry associated with keypad and touchpad |
US7864163B2 (en) | 2006-09-06 | 2011-01-04 | Apple Inc. | Portable electronic device, method, and graphical user interface for displaying structured electronic documents |
US8106856B2 (en) | 2006-09-06 | 2012-01-31 | Apple Inc. | Portable electronic device for photo management |
US7934156B2 (en) * | 2006-09-06 | 2011-04-26 | Apple Inc. | Deletion gestures on a portable multifunction device |
US7581186B2 (en) | 2006-09-11 | 2009-08-25 | Apple Inc. | Media manager with integrated browsers |
WO2008047552A1 (en) * | 2006-09-28 | 2008-04-24 | Kyocera Corporation | Portable terminal and method for controlling the same |
CA2666313A1 (en) | 2006-10-10 | 2008-05-08 | Cedara Software Corp. | System and method for segmenting a region in a medical image |
US8570278B2 (en) | 2006-10-26 | 2013-10-29 | Apple Inc. | Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker |
US7856605B2 (en) * | 2006-10-26 | 2010-12-21 | Apple Inc. | Method, system, and graphical user interface for positioning an insertion marker in a touch screen display |
US20080100642A1 (en) | 2006-10-31 | 2008-05-01 | International Business Machines Corporation | User definable aspect ratios for image regions |
US8006002B2 (en) | 2006-12-12 | 2011-08-23 | Apple Inc. | Methods and systems for automatic configuration of peripherals |
US8584038B2 (en) | 2006-12-18 | 2013-11-12 | Microsoft Corporation | Techniques for use with a calendar and messaging component |
US8250490B2 (en) | 2006-12-18 | 2012-08-21 | Canon Kabushiki Kaisha | Display image control apparatus |
TWI399670B (zh) | 2006-12-21 | 2013-06-21 | Elan Microelectronics Corp | 操作控制方法及系統及其機器可讀取媒體 |
US7956847B2 (en) | 2007-01-05 | 2011-06-07 | Apple Inc. | Gestures for controlling, manipulating, and editing of media files using touch sensitive devices |
US7957762B2 (en) | 2007-01-07 | 2011-06-07 | Apple Inc. | Using ambient light sensor to augment proximity sensor output |
US10437459B2 (en) | 2007-01-07 | 2019-10-08 | Apple Inc. | Multitouch data fusion |
WO2008095132A2 (en) | 2007-01-31 | 2008-08-07 | Perceptive Pixel, Inc. | Methods of interfacing with multi-point input devices and multi-point input systems employing interfacing techniques |
JP4939959B2 (ja) | 2007-02-02 | 2012-05-30 | ペンタックスリコーイメージング株式会社 | 携帯機器 |
US8139919B2 (en) | 2007-03-29 | 2012-03-20 | Microsoft Corporation | Light table editor for video snippets |
US8065603B2 (en) | 2007-04-30 | 2011-11-22 | Google Inc. | Hiding portions of display content |
WO2008138030A1 (en) * | 2007-05-11 | 2008-11-20 | Rpo Pty Limited | User-defined enablement protocol |
US7936341B2 (en) | 2007-05-30 | 2011-05-03 | Microsoft Corporation | Recognizing selection regions from multiple simultaneous inputs |
US8095884B2 (en) | 2007-06-01 | 2012-01-10 | Microsoft Corporation | Automatic alignment with subcomponents on a visual layout |
US9933937B2 (en) | 2007-06-20 | 2018-04-03 | Apple Inc. | Portable multifunction device, method, and graphical user interface for playing online videos |
US8947364B2 (en) | 2007-08-20 | 2015-02-03 | Synaptics Incorporated | Proximity sensor device and method with activation confirmation |
JP4904223B2 (ja) | 2007-08-23 | 2012-03-28 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
US8130211B2 (en) | 2007-09-24 | 2012-03-06 | Microsoft Corporation | One-touch rotation of virtual objects in virtual workspace |
US8171431B2 (en) | 2007-10-05 | 2012-05-01 | Microsoft Corporation | Handle flags |
US7958460B2 (en) | 2007-10-30 | 2011-06-07 | International Business Machines Corporation | Method for predictive drag and drop operation to improve accessibility |
US20090122018A1 (en) | 2007-11-12 | 2009-05-14 | Leonid Vymenets | User Interface for Touchscreen Device |
EP2060970A1 (en) | 2007-11-12 | 2009-05-20 | Research In Motion Limited | User interface for touchscreen device |
US9513765B2 (en) | 2007-12-07 | 2016-12-06 | Sony Corporation | Three-dimensional sliding object arrangement method and system |
US8365235B2 (en) | 2007-12-18 | 2013-01-29 | Netflix, Inc. | Trick play of streaming media |
JP4605478B2 (ja) | 2007-12-19 | 2011-01-05 | ソニー株式会社 | 情報処理装置、表示制御方法及び表示制御プログラム |
US20090172606A1 (en) | 2007-12-31 | 2009-07-02 | Motorola, Inc. | Method and apparatus for two-handed computer user interface with gesture recognition |
US20090174679A1 (en) | 2008-01-04 | 2009-07-09 | Wayne Carl Westerman | Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface |
TWI460621B (zh) | 2008-01-21 | 2014-11-11 | Elan Microelectronics Corp | 可供進行多物件操作之觸控板及應用其中之方法 |
EP2243072A2 (en) | 2008-01-23 | 2010-10-27 | N-Trig Ltd. | Graphical object manipulation with a touch sensitive screen |
US8201109B2 (en) * | 2008-03-04 | 2012-06-12 | Apple Inc. | Methods and graphical user interfaces for editing on a portable multifunction device |
US20110012856A1 (en) * | 2008-03-05 | 2011-01-20 | Rpo Pty. Limited | Methods for Operation of a Touch Input Device |
US9503562B2 (en) | 2008-03-19 | 2016-11-22 | Universal Electronics Inc. | System and method for appliance control via a personal communication or entertainment device |
US20090237363A1 (en) | 2008-03-20 | 2009-09-24 | Microsoft Corporation | Plural temporally overlapping drag and drop operations |
US20110012848A1 (en) | 2008-04-03 | 2011-01-20 | Dong Li | Methods and apparatus for operating a multi-object touch handheld device with touch sensitive display |
WO2009126710A2 (en) | 2008-04-10 | 2009-10-15 | Perceptive Pixel, Inc. | Methods of interfacing with multi-input devices and multi-input display systems employing interfacing techniques |
US20090256809A1 (en) | 2008-04-14 | 2009-10-15 | Sony Ericsson Mobile Communications Ab | Three-dimensional touch interface |
US20090282332A1 (en) | 2008-05-12 | 2009-11-12 | Nokia Corporation | Apparatus, method and computer program product for selecting multiple items using multi-touch |
US8477139B2 (en) | 2008-06-09 | 2013-07-02 | Apple Inc. | Touch screen device, method, and graphical user interface for manipulating three-dimensional virtual objects |
US9589381B2 (en) * | 2008-06-12 | 2017-03-07 | Microsoft Technology Licensing, Llc | Copying of animation effects from a source object to at least one target object |
US20090327975A1 (en) | 2008-06-27 | 2009-12-31 | Stedman Roy W | Multi-Touch Sorting Gesture |
JP5500855B2 (ja) | 2008-07-11 | 2014-05-21 | キヤノン株式会社 | 情報処理装置及びその制御方法 |
US20100031202A1 (en) | 2008-08-04 | 2010-02-04 | Microsoft Corporation | User-defined gesture set for surface computing |
US20100053111A1 (en) * | 2008-09-04 | 2010-03-04 | Sony Ericsson Mobile Communications Ab | Multi-touch control for touch sensitive display |
US20100058238A1 (en) | 2008-09-04 | 2010-03-04 | Avigdor Ben Moshe | Data navigation system |
JP2010092455A (ja) | 2008-09-10 | 2010-04-22 | Ricoh Co Ltd | ファイル管理システム及びプログラム |
US8176438B2 (en) | 2008-09-26 | 2012-05-08 | Microsoft Corporation | Multi-modal interaction for a screen magnifier |
US20100088624A1 (en) | 2008-10-03 | 2010-04-08 | The Provost, Fellows And Scholars Of The College Of The Holy And Undivided Trinity Of Queen Elizabe | Animation tool |
KR101586627B1 (ko) | 2008-10-06 | 2016-01-19 | 삼성전자주식회사 | 멀티 터치를 이용한 리스트 관리 방법 및 장치 |
KR20100041006A (ko) | 2008-10-13 | 2010-04-22 | 엘지전자 주식회사 | 3차원 멀티 터치를 이용한 사용자 인터페이스 제어방법 |
US8024667B2 (en) | 2008-10-24 | 2011-09-20 | Microsoft Corporation | In-document floating object re-ordering |
US8610673B2 (en) | 2008-12-03 | 2013-12-17 | Microsoft Corporation | Manipulation of list on a multi-touch display |
US20100185949A1 (en) | 2008-12-09 | 2010-07-22 | Denny Jaeger | Method for using gesture objects for computer control |
GB2478230B (en) | 2008-12-15 | 2014-05-14 | Hewlett Packard Development Co | Gesture based edit mode |
US8838461B2 (en) | 2008-12-19 | 2014-09-16 | Qualcomm Incorporated | Access and management of cross-platform calendars |
US8451236B2 (en) * | 2008-12-22 | 2013-05-28 | Hewlett-Packard Development Company L.P. | Touch-sensitive display screen with absolute and relative input modes |
US20100214571A1 (en) | 2009-02-26 | 2010-08-26 | Konica Minolta Systems Laboratory, Inc. | Drag-and-drop printing method with enhanced functions |
US8839155B2 (en) * | 2009-03-16 | 2014-09-16 | Apple Inc. | Accelerated scrolling for a multifunction device |
US8589374B2 (en) * | 2009-03-16 | 2013-11-19 | Apple Inc. | Multifunction device with integrated search and application selection |
US8633904B2 (en) | 2009-04-24 | 2014-01-21 | Cypress Semiconductor Corporation | Touch identification for multi-touch technology |
KR101553629B1 (ko) | 2009-05-06 | 2015-09-17 | 삼성전자주식회사 | 인터페이스 제공 방법 |
US8669945B2 (en) | 2009-05-07 | 2014-03-11 | Microsoft Corporation | Changing of list views on mobile device |
KR20100130671A (ko) | 2009-06-04 | 2010-12-14 | 삼성전자주식회사 | 터치 인터페이스에서 선택 영역의 제공 장치 및 그 방법 |
US8493344B2 (en) * | 2009-06-07 | 2013-07-23 | Apple Inc. | Devices, methods, and graphical user interfaces for accessibility using a touch-sensitive surface |
US8171401B2 (en) | 2009-06-19 | 2012-05-01 | Microsoft Corporation | Resizing an editable area in a web page |
US8543946B2 (en) * | 2009-06-29 | 2013-09-24 | Sharp Laboratories Of America, Inc. | Gesture-based interface system and method |
US8407613B2 (en) * | 2009-07-13 | 2013-03-26 | Apple Inc. | Directory management on a portable multifunction device |
US8762886B2 (en) | 2009-07-30 | 2014-06-24 | Lenovo (Singapore) Pte. Ltd. | Emulating fundamental forces of physics on a virtual, touchable object |
US8656314B2 (en) | 2009-07-30 | 2014-02-18 | Lenovo (Singapore) Pte. Ltd. | Finger touch gesture for joining and unjoining discrete touch objects |
KR101608532B1 (ko) | 2009-08-11 | 2016-04-01 | 엘지전자 주식회사 | 이동 통신 단말기에서의 데이터 표시방법 및 이를 적용한 이동 통신 단말기 |
EP3260969B1 (en) | 2009-09-22 | 2021-03-03 | Apple Inc. | Device, method, and graphical user interface for manipulating user interface objects |
US8766928B2 (en) | 2009-09-25 | 2014-07-01 | Apple Inc. | Device, method, and graphical user interface for manipulating user interface objects |
US8677283B2 (en) | 2009-10-21 | 2014-03-18 | Microsoft Corporation | Displaying lists as reacting against barriers |
US8381125B2 (en) | 2009-12-16 | 2013-02-19 | Apple Inc. | Device and method for resizing user interface content while maintaining an aspect ratio via snapping a perimeter to a gridline |
US20110163944A1 (en) | 2010-01-05 | 2011-07-07 | Apple Inc. | Intuitive, gesture-based communications with physics metaphors |
US8786559B2 (en) * | 2010-01-06 | 2014-07-22 | Apple Inc. | Device, method, and graphical user interface for manipulating tables using multi-contact gestures |
US9052894B2 (en) * | 2010-01-15 | 2015-06-09 | Apple Inc. | API to replace a keyboard with custom controls |
US10007393B2 (en) | 2010-01-19 | 2018-06-26 | Apple Inc. | 3D view of file structure |
US8209630B2 (en) | 2010-01-26 | 2012-06-26 | Apple Inc. | Device, method, and graphical user interface for resizing user interface content |
US8539385B2 (en) * | 2010-01-26 | 2013-09-17 | Apple Inc. | Device, method, and graphical user interface for precise positioning of objects |
US8683363B2 (en) | 2010-01-26 | 2014-03-25 | Apple Inc. | Device, method, and graphical user interface for managing user interface content and user interface elements |
US20110231796A1 (en) | 2010-02-16 | 2011-09-22 | Jose Manuel Vigil | Methods for navigating a touch screen device in conjunction with gestures |
US8751970B2 (en) * | 2010-02-25 | 2014-06-10 | Microsoft Corporation | Multi-screen synchronous slide gesture |
US20110252357A1 (en) * | 2010-04-07 | 2011-10-13 | Imran Chaudhri | Device, Method, and Graphical User Interface for Managing Concurrently Open Software Applications |
US8707195B2 (en) | 2010-06-07 | 2014-04-22 | Apple Inc. | Devices, methods, and graphical user interfaces for accessibility via a touch-sensitive surface |
US9483175B2 (en) | 2010-07-26 | 2016-11-01 | Apple Inc. | Device, method, and graphical user interface for navigating through a hierarchy |
US9098182B2 (en) * | 2010-07-30 | 2015-08-04 | Apple Inc. | Device, method, and graphical user interface for copying user interface objects between content regions |
US8972879B2 (en) | 2010-07-30 | 2015-03-03 | Apple Inc. | Device, method, and graphical user interface for reordering the front-to-back positions of objects |
-
2010
- 2010-05-28 US US12/790,516 patent/US8539385B2/en active Active
-
2011
- 2011-01-26 KR KR1020127022449A patent/KR20120114381A/ko not_active Application Discontinuation
- 2011-01-26 KR KR1020127022448A patent/KR101533145B1/ko active IP Right Grant
- 2011-01-26 AU AU2011209729A patent/AU2011209729B2/en active Active
- 2011-01-26 EP EP11702358A patent/EP2529293A1/en not_active Withdrawn
- 2011-01-26 CN CN201180016102.7A patent/CN102822788B/zh active Active
- 2011-01-26 WO PCT/US2011/022525 patent/WO2011094276A1/en active Application Filing
- 2011-01-26 KR KR1020127022209A patent/KR101408554B1/ko active IP Right Grant
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101063925A (zh) * | 2006-04-24 | 2007-10-31 | 宏达国际电子股份有限公司 | 信息导读方法 |
CN101617288A (zh) * | 2007-01-07 | 2009-12-30 | 苹果公司 | 用于平移显示内容的便携式多功能设备、方法和图形用户界面 |
WO2008138046A1 (en) * | 2007-05-11 | 2008-11-20 | Rpo Pty Limited | Double touch inputs |
CN101458586A (zh) * | 2007-12-11 | 2009-06-17 | 义隆电子股份有限公司 | 以多根手指在触控屏幕上操作对象的方法 |
CN101599002A (zh) * | 2008-06-04 | 2009-12-09 | 佳能株式会社 | 用户接口的控制方法和信息处理装置 |
CN101446884A (zh) * | 2008-12-19 | 2009-06-03 | 腾讯科技(深圳)有限公司 | 一种触摸屏设备及其滚屏方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106716327A (zh) * | 2014-06-27 | 2017-05-24 | 微软技术许可有限责任公司 | 利用无缝转换的阅读和编辑的合并体验 |
US11256388B2 (en) | 2014-06-27 | 2022-02-22 | Microsoft Technology Licensing, Llc | Merged experience of reading and editing with seamless transition |
Also Published As
Publication number | Publication date |
---|---|
AU2011209729B2 (en) | 2015-01-29 |
KR20120123474A (ko) | 2012-11-08 |
US8539385B2 (en) | 2013-09-17 |
WO2011094276A1 (en) | 2011-08-04 |
KR20120114381A (ko) | 2012-10-16 |
US20110185321A1 (en) | 2011-07-28 |
KR20120115554A (ko) | 2012-10-18 |
KR101533145B1 (ko) | 2015-07-02 |
KR101408554B1 (ko) | 2014-06-17 |
CN102822788B (zh) | 2016-10-12 |
EP2529293A1 (en) | 2012-12-05 |
AU2011209729A1 (en) | 2012-09-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102822788A (zh) | 用于对象的精确定位的装置、方法和图形用户接口 | |
CN103052935B (zh) | 用于对对象的前后位置进行重新排序的装置、方法和图形用户接口 | |
CN102763074B (zh) | 自动键盘布局确定 | |
CN102754062B (zh) | 具有内容显示模式和显示旋转启发的装置、方法和图形用户接口 | |
CN102754071B (zh) | 具有包含具有另一设备的显示分辨率的模式的多个应用程序显示模式的设备和方法 | |
CN102063253B (zh) | 用于管理并行打开的软件应用的方法和相关设备 | |
CN102763065B (zh) | 用于导航经过多个查看区域的装置、方法和图形用户接口 | |
CN102763073B (zh) | 具有交互式弹出视图的装置和方法 | |
CN102763128A (zh) | 用于附件查看和编辑的装置、方法和图形用户接口 | |
CN102754061A (zh) | 用于改变电子文档中的页的装置、方法和图形用户接口 | |
CN102763066B (zh) | 用于导航经过一范围的值的装置、方法和图形用户接口 | |
CN102763079B (zh) | 用自定义控件取代键盘的应用程序编程接口(api) | |
CN102763058B (zh) | 用于存取可选键的装置、方法和图形用户接口 | |
CN102216893B (zh) | 在不使用光标的情况下移动屏上对象的触摸屏设备、方法和图形用户界面 | |
CN102033698B (zh) | 滚动多节文档的方法和装置及多功能设备 | |
CN102763077A (zh) | 自动显示及隐藏屏幕上键盘 | |
CN102414755A (zh) | 用于编辑电子消息中的音频或视频附件的设备、方法和图形用户界面 | |
CN103186343A (zh) | 用于调整内容查看和文本输入接口的大小的装置、方法和图形用户接口 | |
CN103069378A (zh) | 用于用户接口屏幕导航的装置、方法和图形用户接口 | |
CN102265586A (zh) | 使用表情字符的便携式触摸屏设备、方法和图形用户界面 | |
CN103218148A (zh) | 用于配置与用户接口的受约束的交互的装置、方法和图形用户接口 | |
CN103164152A (zh) | 用于编辑视频的装置、方法和图形用户接口 | |
CN103348301A (zh) | 用于导航通过电子文档的装置、方法和图形用户接口 | |
CN103403659A (zh) | 用于导览识别符列表的装置、方法和图形用户接口 | |
CN103186318A (zh) | 用于使用单点触摸输入提供多点触摸输入和基于硬件的特征的装置、方法和图形用户接口 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |