CN102830933A - 使用手势选择文本 - Google Patents

使用手势选择文本 Download PDF

Info

Publication number
CN102830933A
CN102830933A CN2012102959790A CN201210295979A CN102830933A CN 102830933 A CN102830933 A CN 102830933A CN 2012102959790 A CN2012102959790 A CN 2012102959790A CN 201210295979 A CN201210295979 A CN 201210295979A CN 102830933 A CN102830933 A CN 102830933A
Authority
CN
China
Prior art keywords
text
touch
end points
finger
handle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012102959790A
Other languages
English (en)
Other versions
CN102830933B (zh
Inventor
W·C·维斯特曼
B·奥丁
B·M·维克托
S·O·勒梅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Publication of CN102830933A publication Critical patent/CN102830933A/zh
Application granted granted Critical
Publication of CN102830933B publication Critical patent/CN102830933B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/1444—Selective acquisition, locating or processing of specific regions, e.g. highlighted text, fiducial marks or predetermined fields
    • G06V30/1456—Selective acquisition, locating or processing of specific regions, e.g. highlighted text, fiducial marks or predetermined fields based on user interactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及使用手势选择文本。根据一些实施例，使用具有触摸敏感显示器的电子装置执行计算机实现的文本选择方法。该方法可以包括：在触摸屏显示器上显示文本；检测对触摸屏显示器的文本选择启动手势；以及响应于该文本选择启动手势，插入由位于文本中第一位置处的第一端点和位于文本中第二位置处的第二端点限制范围的文本选择区。通过在触摸敏感显示器上执行进一步的手势可以移动第一和第二端点。此外，可以在位于文本选择区中的文本上执行字处理功能。

Description

使用手势选择文本
本申请是申请日为2009年3月4日的申请号为200910118597.9的发明专利申请的分案申请。
技术领域
披露的实施例一般地涉及选择显示在显示屏上的文本，更具体地涉及使用手势在多点触摸敏感显示屏上选择文本。
背景技术
随着便携式电子装置变得更加紧凑，并且由给定装置执行的功能的数量增加，设计出使用户很容易地与多功能装置进行交互的用户界面是巨大的挑战。这种挑战对于具有比台式计算机或膝上型计算机的屏幕小很多的手持便携式装置来说特别显著。这种情况之所以不利，是因为用户界面不仅是用户接收内容的途径，而且是用户接收对用户动作或行为的响应的途径，用户动作或行为包括用户试图访问装置的特性、工具和功能。一些便携式通信装置（例如移动电话——有时被称作手机、蜂窝电话等）已经凭借添加更多的按钮、增加按钮的密度、重载（overload）按钮的功能、或使用复杂菜单系统来使用户访问、存储以及处理数据。这些传统的用户界面通常导致用户必须记忆复杂的按键顺序和菜单层次。
许多传统用户界面，例如包括物理按钮的那些界面，也是不灵活的。这是不利的，因为其可能阻止由运行在便携式装置上的应用或用户来配置和/或修改用户界面。当与记忆多键顺序和菜单层次所需要的时间花费以及激活期望按钮的困难联系到一起时，这样的不灵活性对大多数用户来说是很令人沮丧的。
大部分便携式电子装置包括使用文本输入的应用。这样的应用可以包括即时消息应用、电子邮件应用、以及字处理（wordprocessing）程序，还可包括具有文本输入的其他应用。因为便携式电子装置上的屏幕相对较小，文本和相应的文本输入工具也相对较小。典型地，选择在装置上显示的文本还不是可用的或是非常麻烦的。至今，便携式电子装置还没有提供一种简单的、有效的方法来在显示在便携式电子装置上的文本中定位文本选择区。
因此，需要具有多个易于使用、配置、和/或修改的用于在文本中定位文本选择区以及修改文本选择区的端点的直观的用户界面的便携式多功能装置。这样的用户界面增加了便携式多功能装置的有效性、效率以及用户满意度。
发明内容
与便携式装置的用户界面有关的上述缺陷和其他问题可以被本公开的便携式多功能装置减少或去除。在一些实施例中，装置可以包括具有图形用户界面（GUI）的触摸敏感显示器（也称作“触摸屏”）、一个或多个处理器、存储器以及存储在存储器中的用于执行多种功能的一个或多个模块、程序或指令集。在一些实施例中，用户主要可以通过触摸敏感显示器上的手指接触和手势来与GUI交互。在一些实施例中，功能可以包括电话、视频会议、电子邮件、即时消息、博客（blog）、照相、数字视频、网页浏览、数字音乐播放、和/或数字视频播放。用于执行这些功能的指令可以包括在被配置为由一个或多个处理器执行的计算机程序产品中。
根据一些实施例，使用具有触摸敏感显示器的电子装置来执行计算机实现的文本选择方法。该方法可以包括：在触摸屏显示器上显示文本；检测对触摸屏显示器检测文本的选择启动手势；以及响应于该文本选择启动手势，插入由位于文本中第一位置处的第一端点和位于文本中第二位置处的第二端点限制范围的文本选择区。可以在位于文本选择区中的文本上执行字处理功能。
附图说明
为了更好地理解本发明的上述实施例以及其他实施例，应该参考下面结合附图对实施例的具体描述，在全部附图中，相似的附图标记表示相应的部件。
图1是示出了根据一些实施例的具有触摸敏感显示器的便携式多功能装置的框图。
图2示出了根据一些实施例的具有触摸屏的便携式多功能装置。
图3示出了根据一些实施例的用于插入文本选择区的示例性用户界面。
图4示出了根据一些实施例的具有幻影句柄（ghost handle）的图3的装置的示例性用户界面。
图5是示出了根据一些实施例的用于使用手势选择文本的示例性过程的流程图。
图6a和6b示出了根据一些实施例的示例性文本选择启动手势。
图7a和7b示出了根据一些实施例的另一示例性文本选择启动手势。
图8a和8b示出了根据一些实施例的再一示例性文本选择启动手势。
图9a和9b示出了根据一些实施例的又一示例性文本选择启动手势。
图10a和10b示出了根据一些实施例的示例性的使用文本选择图标启动文本选择。
图11a和11b示出了根据一些实施例的用于改变文本选择区的端点的位置的示例性过程。
图12a和12b示出了根据一些实施例的用于改变文本选择区的端点的位置的另一示例性过程。
图13a和13b示出了根据一些实施例的用于改变文本选择区的端点的位置的再一示例性过程。
具体实施方式
下面具体参考实施例，实施例的示例在附图中示出。在下面的具体描述中，阐述了大量具体细节以提供对本发明的全面理解。然而，本领域的普通技术人员应该理解没有这些具体细节也可以实施本发明。在其他实例中，没有具体描述已知的方法、过程、部件、电路和网络，以免不必要地模糊实施例的各方面。
也应该理解，尽管在此使用了术语第一、第二等来描述各种元件，但是这些元件不应该局限于这些术语。这些术语仅用来将一个元件与另一元件区分开。例如，第一手势可以被称作第二手势，并且类似地，第二手势可以被称作第一手势，而不会背离本发明的范围。
在此在本发明的说明书中使用的术语仅为了描述特定的实施例，而不旨在限制本发明。如在本发明的说明书和所附权利要求中使用的，单数形式“一个”和“该”旨在也包括复数形式，除非上下文以别的方式清楚指明。应该理解在此使用的术语“和/或”指的是、且包含一个或多个相关列出项目的任何和所有可能的组合。还应该理解术语“包括”和/或“包含”当用在该说明书中时，表示存在陈述的特征、整体（integer）、步骤、操作、元件和/或部件，但是不排除存在或增加一个或多个特征、整体、步骤、操作、元件、部件、和/或其集合。
描述便携式多功能装置的实施例、用于这样装置的用户界面、以及使用这样装置的相关过程。在一些实施例中，该装置是诸如移动电话的便携式通信装置，其也包含其他功能，例如PDA和/或音乐播放器功能。
为了简洁，在接下来的讨论中，包括触摸屏的便携式多功能装置被用作示例性实施例。然而应该理解，一些用户界面和相关过程可以被应用于其他装置，例如个人计算机和膝上型计算机，其可以包括一个或多个诸如物理点拨轮（click wheel）、物理键盘、鼠标和/或操纵杆之类的其他物理用户接口装置。
该装置可以支持多种应用，例如电话应用、视频会议应用、电子邮件应用、即时消息收发应用、博客应用、数字相机应用、数字摄像机应用、网页浏览应用、数字音乐播放器应用、和/或数字视频播放器应用。
能够在该装置上执行的各种应用可以使用至少一个公共的物理用户界面装置，例如触摸屏。触摸屏的一个或多个功能以及在装置上显示的对应信息可以从一个应用到下一个应用和/或在各个应用中被调节和/或改变。以该方式，装置的公共的物理结构（诸如触摸屏）可以支持具有可能直观明晰的用户界面的多个应用。
用户界面可以包括一个或多个软键盘实施例。软键盘实施例可以包括键盘的所显示的图标上的符号的标准（QWERTY）和/或非标准配置，例如在2006年7月24日提交的题为“Keyboard For PortableElectronic Devices”的美国专利申请No.11/459,606以及在2006年7月24日提交的题为“Touch Screen Keyboards For PortableElectronic Devices”的美国专利申请No.11/459,615中所描述的，其全部内容通过引用结合于此。所述键盘实施例可以包括其数量相对于现有物理键盘——例如打字机——中的键的数量要少的图标（或软键）。这可以使得用户易于选择键盘中的一个或多个图标，从而选择一个或多个相应的符号。所述键盘实施例可以是适应性的。例如，所显示的图标可以根据诸如选择一个或多个图标和/或一个或多个相应的符号之类的用户动作而被修改。在便携式装置上的一个或多个应用可以利用公共的和/或不同的键盘实施例。这样，所使用的键盘实施例可以适应于至少一些应用。在一些实施例中，一个或多个键盘实施例可以适应于各个用户。例如，一个或多个键盘实施例可以基于各个用户的字使用历史（词典学、俚语、个人使用）而适应于该用户。一些键盘实施例可以被调节为在使用软键盘实施例时，减少在选择一个或多个图标从而选择一个或多个符号时用户错误的概率。
现在转向装置的实施例。图1是示出了根据一些实施例的具有触摸敏感显示器112的便携式多功能装置100的结构图。为了方便起见，触摸敏感显示器112有时被称作“触摸屏”，并且也可以被认为是或称作触摸敏感显示系统。装置100可以包括存储器102（其可以包括一种或多种计算机可读存储介质）、存储器控制器122、一个或多个处理单元（CPU）120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出（I/O）子系统106、其他输入或控制装置116、以及外部端口124。装置100可以包括一个或多个光学传感器164。这些部件可以通过一个或多个通信总线或信号线103通信。
应该理解装置100仅是便携式多功能装置100的一个示例，并且与示出的相比，装置100可以具有更多或更少的部件，可以组合两个或更多的部件，或者可以具有不同的部件配置或布置。图1中示出的各种部件可以用硬件、软件或硬件和软件的组合实现，包括一个或多个信号处理和/或专用集成电路。
存储器102可以包括高速随机存取存储器，以及也可以包括非易失性存储器，例如一个或多个磁盘存储装置、闪存装置、或其他非易失性固态存储装置。由诸如CPU120和外围设备接口118之类的装置100的其他部件对存储器102的存取可以由存储器控制器122控制。
外围设备接口118可以将装置100的输入和输出外围设备耦接至CPU 120和存储器102。一个或多个处理器120可以运行或执行存储在存储器102中的各种软件程序和/或指令集以执行装置100的各种功能以及处理数据。
在一些实施例中，外围设备接口118、CPU 120、以及存储器控制器122可以在单一芯片上实现，例如芯片104。在一些实施例中，它们也可以在独立的芯片上分别实现。
RF（射频）电路108可以接收并发射RF信号，RF信号也被称作电磁信号。RF电路108可以将电信号转换为电磁信号/将电磁信号转换为电信号，并通过电磁信号与通信网络和其他通信装置通信。RF电路108可以包括用于执行这些功能的已知的电路，包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC芯片组、用户标识模块（SIM）卡、存储器等等。RF电路108可以通过无线通信与网络和其他装置通信，其中网络诸如因特网——也被称作全球信息网（WWW）、内部网和/或无线网络，例如蜂窝电话网络、无线局域网（LAN）和/或城域网（MAN）。无线通信可以使用多种通信标准、协议和技术中任意一种，包括但不限于：全球移动通信系统（GSM）、增强数据GSM环境（EDGE）、高速下行链路分组接入（HSDPA）、宽带码分多址（W-CDMA）、码分多址（CDMA）、时分多址（TDMA）、蓝牙、无线保真（Wi-Fi）（例如IEEE 802.11a，IEEE802.11b，IEEE 802.11g和/或IEEE 802.11n）、互联网协议语音（VoIP）、Wi-MAX、用于电子邮件的协议（例如因特网消息访问协议（IMAP）和/或邮局协议（POP））、即时消息（例如可扩展消息处理现场协议（XMPP）、即时信息和现场支持扩展的会话初始化协议（SIMPLE）、和/或即时消息和现场服务（IMPS）、和/或短消息服务（SMS）），或任何适当的通信协议，包括在本文档的申请日时还没有被开发出的通信协议。
音频电路110、扬声器111、麦克风113可以提供用户和装置100之间的音频接口。音频电路110可以接收来自外围设备接口118的音频数据，将音频数据转换为电信号，并将电信号发送到扬声器111。扬声器111可以将电信号转换为人类可以听见的声波。音频电路110也可以接收由麦克风113从声波转换来的电信号。音频电路110可以将电信号转换为音频数据并将音频数据发送到外围设备接口118用于处理。音频数据可以通过外围设备接口118从存储器102和/或RF电路108得到和/或发送到存储器102和/或RF电路108。在一些实施例中，音频电路110也可以包括头戴式送受话器（headset）插孔（例如，图2的212）。头戴式送受话器插孔可以提供音频电路110和可去除的音频输入/输出外围设备（例如仅输出的双耳式耳机或具有输出（例如用于一只或两只耳朵的耳机）和输入（例如麦克风）的头戴式送受话器）之间的接口。
I/O子系统106可以将装置100上的诸如触摸屏112和其他输入/控制装置116之类的输入/输出外围设备耦接至外围设备接口118。I/O子系统106可以包括显示器控制器156和用于其他输入或控制装置的一个或多个输入控制器160。一个或多个输入控制器160可以从其他输入或控制装置116接收电信号/将电信号发送至其他输入或控制装置116。其他输入/控制装置116可以包括物理按钮（例如按钮开关（push button）、摇杆按钮（rocker button）等）、转盘、滑动开关、操纵杆、点拨轮等等。在一些可供替换的实施例中，一个或多个输入控制器160可以耦接至以下任意项（或不耦接至任一项）：键盘、红外端口、USB端口、和诸如鼠标之类的指针装置。一个或多个按钮（例如图2的208）可以包括用于扬声器111和/或麦克风113的音量控制的调高/调低按钮。一个或多个按钮可以包括按钮开关（例如图2的206）。快速按压按钮开关可以解除触摸屏112的锁定或开始在触摸屏上使用手势来解锁装置的处理，如在2005年12月23日提交的题为“Unlocking a Device by Performing Gestures on anUnlock Image”的美国专利申请No.11/322,549所述的，其通过引用结合于此。较长时间按压按钮开关（例如206）可以打开或关闭装置100的电源。用户也能够定制一个或多个按钮的功能。触摸屏112用于实现虚拟或软按钮以及一个或多个软键盘。
触摸敏感触摸屏112可以提供装置和用户之间的输入界面和输出界面。显示器控制器156可以接收来自触摸屏112的电信号和/或发送电信号至触摸屏112。触摸屏112可以显示视觉输出给用户。视觉输出可以包括图形、文本、图标、视频或其任何组合（统称为“图形”）。在一些实施例中，一些或所有视觉输出可以对应于用户界面对象，下面将描述用户界面对象的更多细节。
触摸屏112可以具有基于触觉（haptic）和/或触知（tactile）接触来接受来自用户的输入的触摸敏感表面、传感器或传感器组。触摸屏112和显示器控制器156（连同任何相关的模块和/或存储器102中的指令集）可以检测触摸屏112上的接触（以及接触的任何移动或中断），并能够将检测到的接触转换为与显示在触摸屏112上的用户界面对象（例如，一个或多个软键、图标、网页或图像）的交互。在示例性实施例中，触摸屏112和用户之间的接触点对应于用户的手指。
触摸屏112可以使用LCD（液晶显示器）技术、或LPD（发光聚合物显示器）技术，尽管在其他实施例中可以使用其他显示器技术。使用已知或以后开发的多种触摸感测技术中的任意技术，触摸屏112和显示器控制器156可以检测到接触及其移动或中断，触摸感测技术包括但不限于：电容的、电阻的、红外的、和表面声波技术，以及其他接近传感器（proximity sensor）阵列或用于确定与触摸屏112接触的一个或多个点的其他元件。
在触摸屏112的一些实施例中的触摸敏感显示器可以类似于在下列美国专利中描述的多点触摸敏感平板（multi-touch sensitivetablet）：6,323,846（Westerman等人）、6,570,557（Westerman等人）、和/或6,677,932（Westerman），和/或类似于美国专利公开2002/0015024A1中描述的多点触摸敏感平板，这些文件通过引用结合于此。然而，触摸屏112可以显示来自便携式装置100的视觉输出，而触摸敏感平板不提供视觉输出。
在触摸屏112的一些实施例中的触摸敏感显示器可以如下列申请中所描述的：（1）2006年5月2日提交的美国专利申请No.11/381,313，“Multipoint Touch Surface Controller”；（2）2004年5月6日提交的美国专利申请No.10/840,862，“MultipointTouchscreen”；（3）2004年7月30日提交的美国专利申请No.10/903,964，“Gestures For Touch Sensitive Input Devices”;（4）2005年1月31日提交的美国专利申请No.11/048,264，“GesturesFor Touch Sensitive Input Devices”;（5）2005年1月18日提交的美国专利申请No.11/038,590，“Mode-Based Graphical User InterfacesFor Touch Sensitive Input Devices”;（6）2005年9月16日提交的美国专利申请No.11/228,758，“Virtual Input Device Placement On ATouch Screen User Interface”;（7）2005年9月16日提交的美国专利申请No.11/228,700，“Operation Of A Computer With A TouchScreen Interface”;（8）2005年9月16日提交的美国专利申请No.11/228,737，“Activating Virtual Keys Of A Touch-Screen VirtualKeyboard”;以及（9）2006年3月3日提交的美国专利申请No.11/367,749，“Multi-Functional Hand-Held Device”。所有这些申请通过引用结合于此。
触摸屏112可以具有超过100dpi的分辨率。在一个示例性实施例中，触摸屏112可以具有大约160dpi的分辨率。用户可以使用任何适合的诸如指示笔（stylus）、手指等的物体或配件来与触摸屏112接触。在一些实施例中，用户界面被设计为主要使用基于手指的接触和手势来工作，通常，由于手指与触摸屏112接触的面积较大，所以基于手指的接触和手势的准确性远远小于基于指示笔的输入。在一些实施例中，装置100可以将粗略的基于手指的输入转变为精确的指针/光标位置或用于执行用户期望动作的命令。
在一些实施例中，除了触摸屏112，装置100还可以包括用于激活或去激活特定功能的触摸板（未示出）。在一些实施例中，触摸板可以是装置的触摸敏感区域，其与触摸屏不同，不显示视觉输出。触摸板可以是与触摸屏112分开的触摸敏感表面，或者是由触摸屏112形成的触摸敏感表面的延伸部分。
在一些实施例中，装置100可以包括物理或虚拟点拨轮作为输入控制装置116。通过旋转点拨轮或通过移动与点拨轮的接触点（例如，接触点的移动量通过其相对于点拨轮的中心点的角位移来测量），用户可以在显示在触摸屏112中的一个或多个图形对象（以下称作图标）之间导航或与其交互。点拨轮也可以被用来选择一个或多个所显示的图标。例如，用户可以向下按压点拨轮的至少一部分或相关的按钮。由用户通过点拨轮提供的用户命令和导航命令可以由输入控制器160处理，也可以由存储器102中的一个或多个模块和/或指令集来处理。对于虚拟点拨轮，点拨轮和点拨轮控制器可以分别是触摸屏112和显示器控制器156的一部分。对于虚拟点拨轮，点拨轮可以是透明或半透明的对象，其响应于用户与装置的交互，在触摸屏显示器上出现或消失。在一些实施例中，虚拟点拨轮被显示在便携式多功能装置的触摸屏上并由用户与触摸屏的接触来操作。
装置100也可以包括用于为各部件供电的供电系统（powersystem）162。供电系统162可以包括电源管理系统，一个或多个电源（例如电池、交流（AC））、充电系统、电源故障检测电路、电源转换器或逆变器、电源状态指示器（例如，发光二极管（LED））和各种与便携式装置中的功率产生、管理和分配有关的其他部件。
装置100也可以包括一个或多个光学传感器164。图1示出了耦接至I/O子系统106中的光学传感器控制器158的（一个或多个）光学传感器164。光学传感器164可包括电荷耦合器件（CCD）或互补金属氧化物半导体（CMOS）光电晶体管。光学传感器164可以接收来自环境的经过一个或多个透镜投射的光，并将光转换为表示图像的数据。与成像模块143（也称作相机模块）一起，光学传感器164可以捕获静态图像或视频。在一些实施例中，光学传感器可以位于装置100的背面，与在装置正面的触摸屏显示器112相对，从而触摸屏显示器112可以被用作用于获取静态和/或视频图像的取景器。在一些实施例中，光学传感器164可以位于装置的正面，从而在用户查看在触摸屏显示器上的其他视频会议参加者的同时能够为视频会议获取用户的图像。在一些实施例中，光学传感器164的位置可以被用户改变（例如，通过旋转装置外壳中的透镜和传感器），从而单个光学传感器164可以与触摸屏显示器112一起被用于视频会议和静态和/或视频图像获取。
装置100也可以包括一个或多个接近传感器166。图1示出了耦接至外围设备接口118的接近传感器166。可替换地，接近传感器166可以耦接至I/O子系统106中的输入控制器160。在一些实施例中，接近传感器166在多功能装置靠近用户耳朵放置时（例如，当用户正在打电话时）关闭并禁用触摸屏112。在一些实施例中，接近传感器166在装置100位于用户口袋、钱包、或其他黑暗区域中时保持触摸屏112关闭，以防止装置100在锁定状态时不必要的电池消耗。
装置100也可以包括一个或多个加速计（accelerometer）168。图1示出了耦接至外围设备接口118的加速计168。可替换地，加速计168可以耦接到I/O子系统106中的输入控制器160。加速计168可以如在美国专利公开No.20050190059“Acceleration-based TheftDetection System for Portable Electronic Devices”和美国专利公开No.20060017692“Methods And Apparatuses For Operating A PortableDevice Based On An Accelerometer”中所描述的一样执行，这两份公开都通过引用结合于此。在一些实施例中，基于从一个或多个加速计接收到的数据分析来在触摸屏显示器112上以纵向视图或横向视图显示信息。
在一些实施例中，存储在存储器102中的软件部件可以包括操作系统126、通信模块（或指令集）128、接触/运动模块（或指令集）130、图形模块（或指令集）132、文本输入模块（或指令集）134、全球定位系统（GPS）模块（或指令集）135、以及应用（或指令集）136。
操作系统126（例如，Darwin、RTXC、LINUX、UNIX、OSX、WINDOWS、或诸如VxWorks之类的嵌入式操作系统）可以包括各种软件部件和/或用于控制和管理通用系统任务（例如，存储器管理、存储装置控制、电源管理等）的驱动器，并且可以有助于各种硬件和软件部件之间的通信。
通信模块128可以有助于通过一个或多个外部端口124与其他装置进行通信，并且也可以包括各种用于处理由RF电路108和/或外部端口124接收到的数据的软件部件。外部端口124（例如，通用串行总线（USB）、FIREWIRE等）可以适用于直接耦接至其他装置或通过网络（例如，因特网、无线LAN等）间接耦接至其他装置。在一些实施例中，外部端口可以是多针（例如30针）连接器，其与在iPod（Apple Computer,Inc.的商标）装置上所使用的30针连接器相同、类似和/或兼容。
接触/运动模块130可以检测与触摸屏112（与显示器控制器156一起）和其他触摸敏感装置（例如触摸板或物理点拨轮）的接触。接触/运动模块130可以包括各种软件部件，用于执行各种与检测接触有关的操作，例如确定是否发生了接触、确定是否存在接触的移动并跟踪在触摸屏112上的移动、以及确定是否已经中断接触（即接触是否已经终止）。确定接触点的移动可以包括确定接触点的速率（幅度）、速度（幅度和方向）、和/或加速度（幅度和/或方向的变化）。这些操作可以被应用于单接触（例如，一个手指接触）或应用于多个同时发生的接触（例如，“多点触摸”/多个手指接触）。在一些实施例中，接触/运动模块130和显示器控制器156也可以检测触摸板上的接触。在一些实施例中，接触/运动模块130和控制器160可以检测点拨轮上的接触。
图形模块132可以包括各种已知的用于在触摸屏112上渲染（render）和显示图形的软件部件，包括用于改变所显示的图形的亮度的部件。如在此所使用的，术语“图形”包括可以显示给用户的任何对象，包括但不限于：文本、网页、图标（诸如包括软键的用户界面对象）、数字图像、视频、动画等。这里的动画是显示一连串图像，其呈现运动并通知用户动作已经被执行了（诸如将电子邮件消息移至文件夹）。在该情况下，用于确认装置的用户的动作的各个动画通常花费预定的有限时间量，例如在0.2秒和1.0秒之间的时间量，或在0.5秒和2.0秒之间的时间量，这取决于具体情况。
可以是图形模块132的部件的文本输入模块134可以提供用于在各种应用（诸如，联系人137、电子邮件140、IM 141、博客142、浏览器147、以及需要文本输入的任何其他应用）中键入文本的软键盘。
GPS模块135可以确定装置100的位置并可以提供该信息供各种应用使用（例如，提供给电话138供基于位置的拨号使用，提供给相机143和/或博客142作为图片/视频元数据、以及提供给提供基于位置的服务的应用，诸如天气小插件（widgets）、本地黄页小插件、以及地图/导航小插件）。
应用136可以包括下列模块（或指令集）或其子集或超集：
·联系人模块137（有时被称作地址簿或联系人列表）；
·电话模块138；
·视频会议模块139；
·电子邮件客户端模块140；
·即时消息（IM）模块141；
·博客模块142；
·用于静态和/或视频图像的相机模块143；
·图像管理模块144；
·视频播放器模块145；
·音乐播放器模块146；
·浏览器模块147；
·日历模块148；
·小插件模块149，可以包括天气小插件149-1、股票小插件149-2、计算器小插件149-3、闹钟小插件149-4、词典小插件149-5、和由用户获取的其他小插件，以及由用户创建的小插件149-6；
·小插件创建器模块150，用于制作用户创建的小插件149-6；
·搜索模块151；
·视频和音乐播放器模块152，其将视频播放器模块145和音乐播放器模块146合并；
·记事本模块153；和/或
·地图模块154。
可以被存储在存储器102中的其他应用136的示例包括其他字处理应用、JAVA启用（JAVA-enabled）的应用、加密、数字版权管理、语音识别、以及语音复制。
上述每个确定的模块和应用可以对应于用于执行上述一个或多个功能的指令集。这些模块（即指令集）不需要被实现为独立的软件程序、进程或模块，因此在各种实施例中，这些模块的各种子集可以被组合或重新排列。例如，视频播放器模块145可以与音乐播放器模块146组合成单一模块（例如，图1B的视频和音乐播放器模块152）。在一些实施例中，存储器102可以存储上述模块和数据结构的子集。此外，存储器102还可以存储上面没有描述的其他模块和数据结构。
在一些实施例中，装置100可以是这样的装置，在该装置上可以只通过触摸屏112和/或触摸板来执行预定义功能集的操作。通过使用触摸屏和/或触摸板作为操作装置100的主输入/控制装置，可以减少装置100上的物理输入/控制装置（例如按钮开关、拨号盘等）的数量。
可以只通过触摸屏和/或触摸板执行的预定义功能集包括在用户界面之间的导航。在一些实施例中，触摸板在被用户触摸时，可以将装置100从可显示在装置100上的任何用户界面导航至主菜单、始位（home）菜单、或根菜单。在这样的实施例中，触摸板可以被称为“菜单按钮”。在一些其他实施例中，菜单按钮可以是物理按钮或其他物理输入/控制装置，而不是触摸板。
图2示出了根据一些实施例的具有触摸屏112的便携式多功能装置100。触摸屏112可以显示用户界面（UI）200中的一个或多个图形。在该实施例中，以及下面描述的其他实施例中，用户可以通过例如使用一个或多个手指202（在图中没有按比例示出）接触或触摸图形来选择一个或多个所述图形。在一些实施例中，当用户终止与一个或多个图形的接触时，发生对所述一个或多个图形的选择。在一些实施例中，接触可以包括已经与装置100进行了接触的手势，诸如一次或多次轻击（tap）、一次或多次掠过（swipe）（从左至右、从右至左、向上和/或向下）和/或滚动（rolling）手指（从右至左、从左至右、向上和/或向下）。在一些实施例中，与图形的无意接触不能选择该图形。例如，当与选择相对应的手势是轻击时，扫过（sweep）应用图标的掠过手势不能选择该对应的应用。
装置100也可以包括一个或多个物理按钮，例如“始位”或菜单按钮204。如前所述，菜单按钮204可以被用于导航到能够在装置100上执行的应用集中的任意应用136。可替换地，在一些实施例中，菜单按钮204可以被实现为触摸屏112中的GUI中的软键。
在一个实施例中，装置100可以包括触摸屏112、菜单按钮204、用于打开/关闭装置的电源并锁定装置的按钮开关206、（一个或多个）音量调节按钮208、用户标识模块（SIM）卡槽210、头戴式送受话器插孔212、以及对接（docking）/充电外部端口124。通过压下按钮并保持按钮在被压下状态达预定时间间隔，按钮开关206可以被用于打开/关闭装置100的电源；通过压下按钮并在预定时间间隔消逝之前释放按钮，按钮开关206可以被用来锁定装置；和/或为装置解锁或启动解锁处理。在可替换的实施例中，装置100也可以通过麦克风113接受用于激活或去激活一些功能的口头输入。
现在将注意力转向用于使用诸如装置100之类的多点触摸敏感装置来选择文本的方法和系统。通常，装置100可以提供允许简单快速选择显示在用户界面（UI）上的文本的UI。有时，根据被用在文本编辑环境中，例如当装置100运行字处理、电子邮件、记事本、即时消息或博客应用时，来对用于实现文本选择实施例的装置和方法进行描述。此外，在此描述的实施例的特征也可被应用在网页浏览环境中。提供根据这些示例性环境的描述，以使得各种特征和实施例可应用在示例性应用的上下文中。然而，本领域技术人员在阅读该披露后，应该理解该披露不应限制于这些特定实施方式，而是也可以以其他方式被应用。
图3示出了根据各种实施例的实现文本选择特征的装置100。在此，装置100被示出为具有在文本编辑环境或模式下的UI。在该模式下，显示屏200可以显示文本行形式的图形300和用于输入文本的软键盘302。软键盘实施例可以包括键盘所显示的图标上的符号的标准（QWERTY）和/或非标准配置，例如在2006年7月24日提交的美国专利申请No.11/459,606，“Keyboards For Portable ElectronicDevices”和2006年7月24日提交的No.11/459,615，“Touch ScreenKeyboards For Portable Electronic Devices”中所描述的软键盘，这些内容通过引用结合于此。
继续参考图3，选择的文本区305可以在显示器200上表示为由第一端点304a和第二端点304b限定范围的加亮的文本。应该理解，选择的文本区305可以包含图3中示出的文本的任何部分，并且在图3中选择的文本仅仅是一个示例。此外，第一端点304a可以具有关联的第一句柄（handle）306a，第二端点可以具有关联的第二句柄306b。如在下面进一步详细描述的，句柄306a和306b因为可以指示端点304a和304b的位置而可以非常有用。如果用户希望移动端点304a或304b中的一个或全部，句柄306a和306b也可以作为供用户选择的容易选择的目标区。例如，根据各种实施例，用户通过选择对应的句柄306a（例如，将一个手指放置在触摸屏显示器200上接近句柄304a）并将其拖拽至第二位置（例如，通过将手指移过触摸屏显示器200），可以将端点304a从其初始位置移动至文本中的第二位置。以该方式，选择的文本区305可以被修改。在一些实施例中，句柄306a和306b可以是三角形的并且可以是透明的，但是在其它一些实施例中，句柄306a和306b可以是其他形状和大小，并可以是不透明的。
在一些实施例中，每个句柄306a和306b的可选择区域可以具有与可见的句柄本身不同的大小。句柄306的可选择区域在此可以被称作“虚拟句柄（virtual handle）”。图3示出了分别与句柄306a和306b关联的虚拟句柄307a和307b。因此，例如，即使触摸的形心不落在句柄306a的可见区域中，而是落在虚拟句柄307a的区域中，用户也能选择句柄306a。因此，虚拟句柄307a和307b可以分别大于或至少延伸经过句柄306a和306b的部分，从而被关联的句柄306a或306b通过提供额外的目标区域而易于供用户进行选择。虚拟句柄307可以具有任何形状，例如诸如圆形、椭圆形、三角形或矩形。在一些实施例中，虚拟句柄307的大小可以近似手指尖的大小；而被关联的句柄306可以小于手指尖的大小。
参考图4，可在UI的角落或边缘上显示幻影句柄406。幻影句柄406可以对应于位于UI的查看区之外的端点304。为了说明，例如，文本可以被向下滚动以使第一端点304a位于显示区域之外。因此，第一端点304a在图4中没有示出。滚动条310可以表明文本被向下滚动。因为第一端点304a在触摸屏200之外，幻影句柄406a可以置于装置100的文本输入区的上边缘上，以表示第一端点304a位于当前显示文本之外。在一些实施例中，幻影句柄406a沿文本查看区的边缘的水平定位可以对应于在非显示文本中的端点304a的水平位置。因此，幻影句柄406a可以提供关于第一端点304a的位置的参考。此外，在一些实施例中，选择幻影句柄406可以触发装置100显示对应的端点304以及周围的文本。在其他实施例中，用户可以抓住幻影标记406并拖拽幻影标记406至期望位置。用户可以使相关联的端点304被插入用户拖拽幻影句柄406所至的位置。
继续图3，根据各种实施例，在UI中也可以提供文本选择图标308。文本选择图标308可以被用于启动文本选择模式并可以以剪贴板（clipboard）的形式被显示。例如，根据实施例，用户可以轻击文本选择图标308以启动文本选择模式。此后，用户可以在期望的位置轻击触摸屏显示器200以在文本中插入第一端点304a，然后在第二位置轻击触摸屏显示器200以在文本中插入第二端点304b。然后位于端点304a和304b之间的任何文本可以被加亮以表示当前选择的文本区305。这将在下面参考图10a和10b详细讨论。此外，一旦选择了文本，用户就可以拖放所选择的文本至文本选择图标308中。例如，该文本可以稍后被用户访问并被完整地复制或粘贴至文档中的不同位置或不同的文档。
图5是示出了根据一些实施例的用于选择文本的示例性过程500的流程图。如上所述，当装置100处于文本编辑模式时可以使用过程500，但不是必须在文本编辑模式下。例如，过程500可以在网页浏览模式中被使用。
在步骤502，过程500可以在装置100检测到文本选择启动手势时开始。根据各种实施例，文本选择启动手势不需要局限于特定手势，可以使用各种类型的手势。下面是根据各种实施例的可以用来启动文本选择的非限制性示例性手势列表：
（1）触摸并保持两个手指在触摸屏200上达预定时间量（例如，2秒）。手指可以分开，或手指可以在一起。
（2）将两个手指放在触摸屏显示器上，然后将手指分开。
（3）手指双击触摸屏200。
（4）选择文本选择图标308（图4中示出的）。
（5）两个手指水平滑过显示面板200的一部分。
（6）通过首先启动文本标记插入模式，然后执行进一步的手势来启动文本选择模式。例如，文本选择启动手势可以是一个手指的水平滑动，其可以进入插入标记放置模式。插入标记放置模式在2007年12月27日提交的美国专利申请No.11/965,570，“InsertionMarker Placement On Touch Sensitive Display”中具体描述，其全部内容通过参考结合于此。一旦装置100在插入标记放置模式下，通过第二手指在触摸面板200上的触摸，装置100然后可以进入文本选择模式。
当然，文本选择启动手势不需要局限于在此所描述的，也可以使用其他的。此外，各种实施例可以使用一个或更多不同的文本选择启动手势，并且不需要局限于单一手势。
接下来，在步骤504，端点304a和304b可以被插入文本中。在一些实施例中，根据用来启动文本选择的特定手势可以将端点304插入文本。下面参考图6－10来讨论用来启动文本选择的各种手势和得到的端点插入位置。
作为示例，文本选择启动手势可以包括在触摸屏200上分开第一手指和第二手指。为了说明，图6a示出了示例性检测到的手指分开手势。检测到的第一手指的开始手指接触区和结束手指接触区分别被表示为区A1和区A2。检测到的第二手指的开始手指接触区和结束手指接触区分别被表示为区B1和区B2。虚线箭头表示检测到的手指在触摸屏200上的移动方向。因此，图6a示出了一开始检测到第一手指在区A1和随后检测到第一手指移至区A2，以及一开始检测到第二手指在区B1和随后检测到第二手指移至区B2。得到的手指的结束位置A2和B2可以分别指明文本选择区305的端点304a和304b被插入到文本300中的位置。例如，图6b示出了第一端点304a位于或靠近区A2的放置，以及第二端点304b位于或靠近区B2的放置。
作为另一示例，图7a示出了一种文本选择启动手势，其可以包括检测到两个手指放置并保持在触摸屏200上的位置A1和B1处达预定时间量而没有移动手指。图7b示出了得到的端点304a和304b的插入位置，其是最接近所检测到的手指触摸位置A1和B1的形心700（在图7中被表示为在检测到的手指接触区A1和B1之间的点）的字的开始和结尾。
可替换地，当使用两个手指时，第一端点304a可以位于最接近两个手指接触的字的一端或内部，随后两个手指滑过触摸屏200至第二位置，从而可以确定第二端点304b的位置。在图8a中示出了检测到这样的手势的示例，图8b示出了得到的文本选择区305和端点304a和304b。根据各种实施例，可以以与先前引用的2007年12月27日提交的美国专利申请No.11/965,570，“Insertion MarkerPlacement On Touch Sensitive Display”中所述的插入标记的移动相类似的方式执行文本端点的插入和移动，所述申请的内容全部再次通过引用结合于此。
作为另一示例，图9a和9b示出了又一文本选择启动手势，其包括在触摸屏200上放置并保持三个手指。如图9a所示，装置100可以检测到第一、第二和第三手指分别在触摸屏200上的手指接触区A1、B1和C1。作为响应，文本选择区305可以是位于手指接触区A1、B1和C1的形心900下面的段落或句子。图9b示出了得到的选择区305，其包括位于形心900下面的整个段落；但是，如上所述，在其他实施例中，选择区305可以包围落在形心900下面或与之最接近的单个句子。
参考图10a和10b描述使用文本选择图标308的示例性文本选择启动手势。首先，用户可以例如通过使用手指轻击文本选择图标308来选择文本选择启动图标308。接下来，如图10a所示，用户可在文本300的第一位置上轻击——其可以被检测为手指接触A1——以插入第一端点304a，以及在文本300的第二位置上轻击——其可以被检测为手指接触B1——以插入第二端点304b。如在图10b中所示，然后，端点304a和304b可以分别插入到最接近所检测到的第一和第二轻击A1和B1的相应位置。
在初始放置了端点304a和304b之后，在步骤506中，端点304a和304b可以被移动至新的位置。根据一些实施例，用户可以通过首先选择其相应的句柄306a或306b并然后将句柄306a或306b在触摸屏200上拖拽至新的期望位置，来移动端点304a或304b。参考图11描述用户选择句柄304b并将句柄304b拖拽至新位置的示例。如图所示，用户可以轻击句柄304b以选择句柄304b。检测到的手指轻击由手指接触区A1表示。然后用户可以使手指滑过触摸屏200（由虚线箭头表示）至第二位置，被表示为检测到的手指接触区A2。图11b示出了被移至其在文本305中的第二位置的端点304a。
在一些实施例中，端点304a和304b可同时被选择，并同时或共同被移动。例如，参考图12a，用户可以通过将第一手指放置在句柄306a之上而将第一端点304a与第一手指关联（表示为手指接触A1），以及通过将第二手指放置在句柄306b之上而将第二端点304b与第二手指关联（表示为手指接触区B1）。图12a还示出了根据虚线箭头的各个方向，用户将第一和第二手指滑过触摸屏200至文本300中与各个检测到的手指区A2和B2相对应的新位置。如果期望，用户可以同时滑动每个手指。图12b示出了在端点304a和304b已经移动至它们在文本300中的新位置之后的所选择的文本区305。
在步骤506中检测到的手指移动也可以在触摸屏200的远离正在被移动的句柄306或端点304的部分上执行。换句话说，使用与端点304a或304b之一相关联的手指，用户可通过在触摸屏200的远离相关联的端点304a或304b或句柄306a或306b的部分上向一边（例如水平地）掠过触摸屏200，来移动端点304a或304b。该掠过可以使相关联的端点304a和304b根据检测到的掠过的方向和幅度移动。在步骤508中允许手指远离相关联的端点304a或304b和句柄306a或306b移动可以使用户能够移动端点304a或304b而不妨碍观看到相关联的端点304a或304b，并且可要求不那么精确的手指瞄准。图13a和13b示出了以该方式移动第一端点304a的示例性过程。作为初始步骤，端点304a可以通过轻击其关联句柄306a（表示为检测到的接触区A1）来被选择。接下来，用户可以远离端点304a和306a使手指掠过触摸屏200，作为在图13a中的示例，其可以开始于检测到的接触点A2，并结束于检测到的接触点A3。图13b示出了响应于该掠过，端点304a从其初始位置移动至文本300中的第二位置。在一些实施例中，可以根据（例如，成比例地）检测到的手指掠过的方向和幅度来移动端点304a。此外，端点304a或304b可以沿文本行滚动并继续沿文本的下一行滚动。同样，在第一次掠过之后，用户可以执行其他掠过以将端点304a或304b进一步沿文本行移动。
各种方式可以用来将手指与端点304相关联。例如，在插入步骤504过程中可能已经发生了关联，其中，每个端点304a和304b可以分别与确定端点304a或304b的初始放置的各个手指相关联。在其他实施例中，如上所述，通过在相关联的句柄306上轻击手指可以执行关联。当然，也可以使用其他的将手指与端点304相关联的方法。
在一些实施例中，例如，通过同时移动与端点304a和304b关联的手指来同时执行移动端点304a和304b至新位置。在其他实施例中，第一手指可以用来锚定（anchor）（即，保持）端点304的位置，第二手指可以用来滚动文本（例如，通过在触摸屏200上轻弹（flick）第二手指或拖拽图4中的滚动条310）。第一手指然后可以移动至滚动到的文本中的第二位置，从而移动端点304至第二位置。
上述特征可以提供各种使用触摸敏感显示器来快速且容易地选择文本的方式。
回过来参考图5，也可以在步骤508中对所选择的文本执行各种编辑功能。这样的编辑功能例如可以包括各种传统的字处理、电子邮件、记事本、即时消息、博客或网页浏览编辑功能。这样的功能可以包括复制和粘贴选择的文本、剪切和粘贴选择的文本、为选择的文本加下划线、使选择的文本变粗体、改变所选择文本的字体、等等。
注意，实现过程500的计算机可读指令例如可以在任何计算机可读介质上存储并运输，用于供指令执行系统、设备或装置使用或与指令执行系统、设备或装置一同使用，指令执行系统、设备或装置诸如是基于计算机的系统、包含处理器的系统或可以从指令执行系统、设备或装置获取指令并执行指令的其他系统。在本文的上下文中，“计算机可读介质”可以是包含、存储、传送、传播、或传输程序以供指令执行系统、设备或装置使用或与指令执行系统、设备或装置一同使用的任何介质。计算机可读介质可以是例如但不限于：电子的、磁的、光的、电磁的、红外的、或半导体的系统、设备、装置或传播介质。计算机可读介质的更多具体示例（非穷举列表）可以包括具有一根或多根导线的电连接（电子）、便携式计算机盘（磁）、随机存取存储器（RAM）（磁）、只读存储器（ROM）（磁）、可擦可编程只读存储器（EPROM）（磁）、光纤（光）、诸如CD、CD-R、CD-RW、DVD、DVD-R或DVD-RW之类的便携式光盘、或诸如压缩闪存卡、安全数字卡、USB存储装置、记忆棒之类的闪速存储器等。注意计算机可读介质甚至可以是其上印刷有程序的纸张或其他适合介质，这是因为程序文本可以通过光学扫描纸张或其他介质而电子获取，然后被编译、解释或如果必要以其他合适方式来处理，然后存储在计算机存储器中。
如在此公开中所使用的，例如，短语“根据……”来移动可以指例如相对于另一对象来移动一个对象或按与另一对象的比例来移动一个对象。
为了解释的目的，参考特定实施例描述了上述的说明书。然而，上述示出的讨论不旨在穷举或限制本发明于所公开的精确形式。鉴于上面的教导，许多修改和改变都是可行的。例如，在此描述的特征不需要局限于放置和选择文本，在此的教导也可以用于放置和选择其他类型的图形，例如图片、符号、图标等。此外，在此公开的各种实施方式不局限于使用触摸敏感显示器，不显示输出的触摸敏感面板也同样适用。这样的非显示触摸敏感面板可以从显示器延伸出来或与显示器分离连接，并且例如可以是触摸板或轨迹板形式。连接到这样的非显示触摸敏感面板的显示器也可以是触摸敏感的，但并不必须是触摸敏感的。在一些实施例中的触摸敏感面板可以类似于在下面的美国专利中描述的多点触摸敏感平板：6,323,846（Westerman等人）、6,570,557（Westerman等人）、和/或6,677,932（Westerman），和/或类似于美国专利公开2002/0015024A1中描述的多点触摸敏感平板，这些文件均通过引用结合于此。
上述实施例被选择并描述，旨在最好地解释本发明的原理和其实践应用，从而使本领域技术人员最好地应用本发明和各种适合预期特定用途的具有各种修改的实施例。

Claims (10)

1.一种选择文本的方法，包括：
在电子装置的触摸敏感显示器上显示文本；
检测文本选择启动手势；
响应于检测到所述文本选择启动手势，插入由位于所述文本中第一位置处的第一端点和位于所述文本中第二位置处的第二端点限制范围的文本选择区；
检测对第一端点的选择；
在第一端点被选择时，检测在所述触摸敏感显示器上的手指的滑动，其中，在触摸敏感显示器的远离所述第一位置的部分上检测到手指的滑动；以及
根据检测到的手指的滑动，将所述第一端点移动至所述文本中的第三位置。
2.根据权利要求1所述的方法，包括：对位于所述文本选择区中的文本执行字处理功能。
3.根据权利要求2所述的方法，其中所述字处理功能包括复制或剪切位于所述文本选择区中的文本。
4.根据权利要求1所述的方法，包括：显示与所述第一端点相关联的第一句柄和与所述第二端点关联的第二句柄。
5.根据权利要求1所述的方法，包括：显示与所述第一端点关联的幻影句柄，其中，当所述第一端点位于当前显示的文本之外时显示所述幻影句柄来代替第一端点。
6.一种用于选择文本的设备，包括：
用于在电子装置的触摸敏感显示器上显示文本的单元；
用于检测文本选择启动手势的单元；
用于响应于检测到所述文本选择启动手势而被启用，以插入由位于所述文本中第一位置处的第一端点和位于所述文本中第二位置处的第二端点限制范围的文本选择区的单元；
用于检测对第一端点的选择的单元；
用于在第一端点被选择时被启用，以检测在所述触摸敏感显示器上的手指的滑动的单元，其中，在触摸敏感显示器的远离所述第一位置的部分上检测到手指的滑动；以及
用于根据检测到的手指的滑动，将所述第一端点移动至所述文本中的第三位置的单元。
7.根据权利要求6所述的设备，包括：用于对位于所述文本选择区中的文本执行字处理功能的单元。
8.根据权利要求7所述的设备，其中所述字处理功能包括复制或剪切位于所述文本选择区中的文本。
9.根据权利要求6所述的设备，包括：用于显示与所述第一端点相关联的第一句柄和与所述第二端点关联的第二句柄的单元。
10.根据权利要求6所述的设备，包括：用于显示与所述第一端点关联的幻影句柄的单元，其中，当所述第一端点位于当前显示的文本之外时显示所述幻影句柄来代替第一端点。
CN201210295979.0A 2008-03-04 2009-03-04 使用手势选择文本 Active CN102830933B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/042,313 US8650507B2 (en) 2008-03-04 2008-03-04 Selecting of text using gestures
US12/042,313 2008-03-04

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN2009101185979A Division CN101526881B (zh) 2008-03-04 2009-03-04 使用手势选择文本

Publications (2)

Publication Number Publication Date
CN102830933A true CN102830933A (zh) 2012-12-19
CN102830933B CN102830933B (zh) 2016-08-03

Family

ID=40602627

Family Applications (3)

Application Number Title Priority Date Filing Date
CN2009200075267U Expired - Lifetime CN201491068U (zh) 2008-03-04 2009-03-04 便携式电子装置及具有触摸敏感显示器的电子装置
CN2009101185979A Active CN101526881B (zh) 2008-03-04 2009-03-04 使用手势选择文本
CN201210295979.0A Active CN102830933B (zh) 2008-03-04 2009-03-04 使用手势选择文本

Family Applications Before (2)

Application Number Title Priority Date Filing Date
CN2009200075267U Expired - Lifetime CN201491068U (zh) 2008-03-04 2009-03-04 便携式电子装置及具有触摸敏感显示器的电子装置
CN2009101185979A Active CN101526881B (zh) 2008-03-04 2009-03-04 使用手势选择文本

Country Status (4)

Country Link
US (1) US8650507B2 (zh)
EP (2) EP2098947A3 (zh)
CN (3) CN201491068U (zh)
WO (1) WO2009111249A2 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103218135A (zh) * 2013-04-24 2013-07-24 北京小米科技有限责任公司 移动终端上的截屏方法及装置、移动终端
CN107247698A (zh) * 2017-05-15 2017-10-13 捷开通讯(深圳)有限公司 一种文本编辑的方法、移动终端和具有存储功能的装置
CN109154878A (zh) * 2016-06-03 2019-01-04 株式会社半导体能源研究所 数据处理装置及其显示方法
CN110197725A (zh) * 2019-05-23 2019-09-03 浙江大学 一种基于智能移动终端对指动作检测的手指灵活度测试方法

Families Citing this family (444)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7760187B2 (en) 2004-07-30 2010-07-20 Apple Inc. Visual expander
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US11442619B2 (en) 2005-06-02 2022-09-13 Eli I Zeevi Integrated document editor
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US7856605B2 (en) 2006-10-26 2010-12-21 Apple Inc. Method, system, and graphical user interface for positioning an insertion marker in a touch screen display
US8570278B2 (en) 2006-10-26 2013-10-29 Apple Inc. Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
US8074172B2 (en) 2007-01-05 2011-12-06 Apple Inc. Method, system, and graphical user interface for providing word recommendations
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US8610671B2 (en) 2007-12-27 2013-12-17 Apple Inc. Insertion marker placement on touch sensitive display
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8201109B2 (en) 2008-03-04 2012-06-12 Apple Inc. Methods and graphical user interfaces for editing on a portable multifunction device
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
JP4792058B2 (ja) * 2008-04-28 2011-10-12 株式会社東芝 情報処理装置、制御方法およびプログラム
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
JP4801701B2 (ja) * 2008-07-30 2011-10-26 京セラ株式会社 携帯端末およびデータ制御方法
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8924892B2 (en) * 2008-08-22 2014-12-30 Fuji Xerox Co., Ltd. Multiple selection on devices with many gestures
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
EP2175354A1 (en) * 2008-10-07 2010-04-14 Research In Motion Limited Portable electronic device and method of controlling same
US9442648B2 (en) * 2008-10-07 2016-09-13 Blackberry Limited Portable electronic device and method of controlling same
US8619041B2 (en) * 2008-10-07 2013-12-31 Blackberry Limited Portable electronic device and method of controlling same
US8996995B2 (en) * 2009-02-25 2015-03-31 Nokia Corporation Method and apparatus for phrase replacement
US8786556B2 (en) * 2009-03-12 2014-07-22 Nokia Corporation Method and apparatus for selecting text information
US20100235784A1 (en) 2009-03-16 2010-09-16 Bas Ording Methods and Graphical User Interfaces for Editing on a Multifunction Device with a Touch Screen Display
KR20120016060A (ko) * 2009-03-20 2012-02-22 구글 인코포레이티드 입력 방식 편집기 컴퓨팅 디바이스와의 상호작용
JP4734435B2 (ja) * 2009-03-23 2011-07-27 株式会社スクウェア・エニックス タッチパネル式ディスプレイを持った携帯型ゲーム装置
US8294680B2 (en) * 2009-03-27 2012-10-23 Sony Mobile Communications Ab System and method for touch-based text entry
US20100293460A1 (en) * 2009-05-14 2010-11-18 Budelli Joe G Text selection method and system based on gestures
KR101613838B1 (ko) * 2009-05-19 2016-05-02 삼성전자주식회사 휴대 단말기의 홈 스크린 지원 방법 및 이를 지원하는 휴대 단말기
JP5158014B2 (ja) * 2009-05-21 2013-03-06 ソニー株式会社 表示制御装置、表示制御方法およびコンピュータプログラム
KR20100130671A (ko) * 2009-06-04 2010-12-14 삼성전자주식회사 터치 인터페이스에서 선택 영역의 제공 장치 및 그 방법
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US9141768B2 (en) * 2009-06-10 2015-09-22 Lg Electronics Inc. Terminal and control method thereof
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
KR101608532B1 (ko) * 2009-08-11 2016-04-01 엘지전자 주식회사 이동 통신 단말기에서의 데이터 표시방법 및 이를 적용한 이동 통신 단말기
CN102023787B (zh) * 2009-09-17 2012-09-05 宏碁股份有限公司 操作触控屏幕的方法、定义触控手势的方法及其电子装置
US20110074696A1 (en) * 2009-09-25 2011-03-31 Peter William Rapp Device, Method, and Graphical User Interface Using Mid-Drag Gestures
WO2011037733A1 (en) * 2009-09-25 2011-03-31 Apple Inc. Device, method, and graphical user interface using mid-drag gestures
US20110074830A1 (en) * 2009-09-25 2011-03-31 Peter William Rapp Device, Method, and Graphical User Interface Using Mid-Drag Gestures
US20110074695A1 (en) * 2009-09-25 2011-03-31 Peter William Rapp Device, Method, and Graphical User Interface Using Mid-Drag Gestures
WO2011041943A1 (zh) * 2009-10-09 2011-04-14 禾瑞亚科技股份有限公司 分析位置的方法与装置
CN101777067B (zh) * 2009-12-31 2012-03-28 优视科技有限公司 一种用于移动通讯设备终端的网页内容识别管理系统
US8621380B2 (en) * 2010-01-06 2013-12-31 Apple Inc. Apparatus and method for conditionally enabling or disabling soft buttons
US20110167350A1 (en) * 2010-01-06 2011-07-07 Apple Inc. Assist Features For Content Display Device
KR101632750B1 (ko) * 2010-01-13 2016-06-22 삼성전자주식회사 터치스크린의 한글 입력 방법
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
JP2011154555A (ja) * 2010-01-27 2011-08-11 Fujitsu Toshiba Mobile Communications Ltd 電子機器
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
CN102193720A (zh) * 2010-03-03 2011-09-21 宏碁股份有限公司 内容选取方法及其触控系统
US20110219323A1 (en) * 2010-03-03 2011-09-08 Samsung Electronics Co., Ltd. Mobile device and method for letter input based on cut or copy and paste
US8756522B2 (en) * 2010-03-19 2014-06-17 Blackberry Limited Portable electronic device and method of controlling same
US9292161B2 (en) * 2010-03-24 2016-03-22 Microsoft Technology Licensing, Llc Pointer tool with touch-enabled precise placement
US8704783B2 (en) * 2010-03-24 2014-04-22 Microsoft Corporation Easy word selection and selection ahead of finger
US9069416B2 (en) * 2010-03-25 2015-06-30 Google Inc. Method and system for selecting content using a touchscreen
US20110283212A1 (en) * 2010-05-13 2011-11-17 Nokia Corporation User Interface
US8791900B2 (en) * 2010-05-21 2014-07-29 Microsoft Corporation Computing device notes
CN102314282B (zh) * 2010-06-29 2016-04-20 腾讯科技（深圳）有限公司 一种基于滚动控件实现内容选择的方法及装置
KR101694154B1 (ko) * 2010-06-29 2017-01-09 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
WO2012007034A1 (en) * 2010-07-13 2012-01-19 Nokia Corporation Sending and receiving information
JP2012033059A (ja) * 2010-07-30 2012-02-16 Sony Corp 情報処理装置、情報処理方法及び情報処理プログラム
JP2012058857A (ja) * 2010-09-06 2012-03-22 Sony Corp 情報処理装置、操作方法及び情報処理プログラム
KR101705872B1 (ko) 2010-09-08 2017-02-10 삼성전자주식회사 모바일 디바이스의 화면상의 영역 선택 방법 및 장치
US9047006B2 (en) * 2010-09-29 2015-06-02 Sony Corporation Electronic device system with information processing mechanism and method of operation thereof
US9513791B2 (en) * 2010-09-29 2016-12-06 Sony Corporation Electronic device system with process continuation mechanism and method of operation thereof
US20130198273A1 (en) 2010-10-16 2013-08-01 James Charles Vago Methods, devices, and systems for video gaming
US20120102401A1 (en) * 2010-10-25 2012-04-26 Nokia Corporation Method and apparatus for providing text selection
US8587547B2 (en) 2010-11-05 2013-11-19 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
US8593422B2 (en) 2010-11-05 2013-11-26 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
JP5679782B2 (ja) * 2010-11-26 2015-03-04 京セラ株式会社 携帯電子機器、画面制御方法および画面制御プログラム
US9244545B2 (en) 2010-12-17 2016-01-26 Microsoft Technology Licensing, Llc Touch and stylus discrimination and rejection for contact sensitive computing devices
US8988398B2 (en) 2011-02-11 2015-03-24 Microsoft Corporation Multi-touch input device with orientation sensing
US8982045B2 (en) 2010-12-17 2015-03-17 Microsoft Corporation Using movement of a computing device to enhance interpretation of input events produced when interacting with the computing device
US8994646B2 (en) 2010-12-17 2015-03-31 Microsoft Corporation Detecting gestures involving intentional movement of a computing device
US20120154295A1 (en) * 2010-12-17 2012-06-21 Microsoft Corporation Cooperative use of plural input mechanisms to convey gestures
CN102541331B (zh) * 2010-12-30 2014-09-17 福建星网视易信息系统有限公司 触控显示器中多区域滑动点击响应方法及系统
US9250798B2 (en) 2011-01-24 2016-02-02 Apple Inc. Device, method, and graphical user interface with a dynamic gesture disambiguation threshold
US10365819B2 (en) 2011-01-24 2019-07-30 Apple Inc. Device, method, and graphical user interface for displaying a character input user interface
US20120192118A1 (en) 2011-01-24 2012-07-26 Migos Charles J Device, Method, and Graphical User Interface for Navigating through an Electronic Document
FR2971066B1 (fr) 2011-01-31 2013-08-23 Nanotec Solution Interface homme-machine tridimensionnelle.
US9665250B2 (en) 2011-02-07 2017-05-30 Blackberry Limited Portable electronic device and method of controlling same
EP2487569B1 (en) * 2011-02-07 2019-11-06 BlackBerry Limited Portable electronic device and method of controlling same
US9201520B2 (en) 2011-02-11 2015-12-01 Microsoft Technology Licensing, Llc Motion and context sharing for pen-based computing inputs
TWI431521B (zh) * 2011-02-16 2014-03-21 Acer Inc 觸控方法
JP5697491B2 (ja) * 2011-03-03 2015-04-08 京セラ株式会社 電子機器、表示方法及びプログラム
KR101842457B1 (ko) * 2011-03-09 2018-03-27 엘지전자 주식회사 이동 단말기 및 그의 텍스트 커서 운용방법
CN102681748B (zh) * 2011-03-09 2015-01-28 联想(北京)有限公司 一种信息处理设备以及信息处理方法
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US20120249595A1 (en) * 2011-03-31 2012-10-04 Feinstein David Y Area selection for hand held devices with display
WO2012144989A1 (en) * 2011-04-19 2012-10-26 Research In Motion Limited Text indicator method and electronic device
US20120268387A1 (en) * 2011-04-19 2012-10-25 Research In Motion Limited Text indicator method and electronic device
US20120268388A1 (en) * 2011-04-21 2012-10-25 Mahmoud Razzaghi Touch screen text selection
US20120289290A1 (en) * 2011-05-12 2012-11-15 KT Corporation, KT TECH INC. Transferring objects between application windows displayed on mobile terminal
WO2012159254A1 (en) * 2011-05-23 2012-11-29 Microsoft Corporation Invisible control
CN102799568B (zh) * 2011-05-26 2016-04-13 腾讯科技（深圳）有限公司 只读文本的选中复制方法及系统
KR20120132069A (ko) * 2011-05-27 2012-12-05 삼성전자주식회사 다중 선택 및 다중 붙이기를 이용한 텍스트 편집을 위한 방법 및 장치
US8656315B2 (en) 2011-05-27 2014-02-18 Google Inc. Moving a graphical selector
US8826190B2 (en) 2011-05-27 2014-09-02 Google Inc. Moving a graphical selector
US8661339B2 (en) 2011-05-31 2014-02-25 Apple Inc. Devices, methods, and graphical user interfaces for document manipulation
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
CN105955617B (zh) * 2011-06-03 2019-07-12 谷歌有限责任公司 用于选择文本的手势
JP5360140B2 (ja) * 2011-06-17 2013-12-04 コニカミノルタ株式会社 情報閲覧装置及び制御プログラム並びに制御方法
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US9317196B2 (en) 2011-08-10 2016-04-19 Microsoft Technology Licensing, Llc Automatic zooming for text selection/cursor placement
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US9612670B2 (en) * 2011-09-12 2017-04-04 Microsoft Technology Licensing, Llc Explicit touch selection and cursor placement
WO2013044450A1 (en) * 2011-09-27 2013-04-04 Motorola Mobility, Inc. Gesture text selection
US11099733B2 (en) * 2011-09-30 2021-08-24 Microsoft Technology Licensing, Llc Dynamic command presentation and key configuration for keyboards
US9251144B2 (en) 2011-10-19 2016-02-02 Microsoft Technology Licensing, Llc Translating language characters in media content
KR101873741B1 (ko) * 2011-10-26 2018-07-03 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
US8490008B2 (en) 2011-11-10 2013-07-16 Research In Motion Limited Touchscreen keyboard predictive display and generation of a set of characters
TW201319921A (zh) * 2011-11-07 2013-05-16 Benq Corp 觸控螢幕畫面控制方法及觸控螢幕畫面顯示方法
US9122672B2 (en) 2011-11-10 2015-09-01 Blackberry Limited In-letter word prediction for virtual keyboard
US9652448B2 (en) 2011-11-10 2017-05-16 Blackberry Limited Methods and systems for removing or replacing on-keyboard prediction candidates
US9715489B2 (en) 2011-11-10 2017-07-25 Blackberry Limited Displaying a prediction candidate after a typing mistake
US9310889B2 (en) 2011-11-10 2016-04-12 Blackberry Limited Touchscreen keyboard predictive display and generation of a set of characters
CN102681764A (zh) * 2012-01-14 2012-09-19 广东欧珀移动通信有限公司 一种触摸屏文字输入交互方法
CA2789827C (en) 2012-01-19 2017-06-13 Research In Motion Limited Virtual keyboard providing an indication of received input
US9557913B2 (en) 2012-01-19 2017-01-31 Blackberry Limited Virtual keyboard display having a ticker proximate to the virtual keyboard
US20130191785A1 (en) * 2012-01-23 2013-07-25 Microsoft Corporation Confident item selection using direct manipulation
US9652132B2 (en) * 2012-01-27 2017-05-16 Google Inc. Handling touch inputs based on user intention inference
US8902181B2 (en) 2012-02-07 2014-12-02 Microsoft Corporation Multi-touch-movement gestures for tablet computing devices
CA2865272C (en) 2012-02-24 2019-11-05 Blackberry Limited Virtual keyboard with dynamically reconfigurable layout
DE112012000189B4 (de) 2012-02-24 2023-06-15 Blackberry Limited Berührungsbildschirm-Tastatur zum Vorsehen von Wortvorhersagen in Partitionen der Berührungsbildschirm-Tastatur in naher Assoziation mit Kandidaten-Buchstaben
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
CN103294657B (zh) * 2012-03-02 2017-10-27 富泰华工业（深圳）有限公司 文本编辑方法及系统
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
CN102768597B (zh) * 2012-03-19 2015-06-24 联想(北京)有限公司 一种操作电子设备的方法及装置
KR101931676B1 (ko) 2012-03-23 2018-12-24 삼성디스플레이 주식회사 광 센서, 이를 포함하는 표시 장치 및 그 구동 방법
CN103365570B (zh) * 2012-03-26 2016-12-14 华为技术有限公司 一种选择内容的方法及装置
CN102662576B (zh) * 2012-03-29 2015-04-29 华为终端有限公司 基于触摸的信息发送方法及装置
US9201510B2 (en) 2012-04-16 2015-12-01 Blackberry Limited Method and device having touchscreen keyboard with visual cues
US10025487B2 (en) * 2012-04-30 2018-07-17 Blackberry Limited Method and apparatus for text selection
US9292192B2 (en) 2012-04-30 2016-03-22 Blackberry Limited Method and apparatus for text selection
US9354805B2 (en) * 2012-04-30 2016-05-31 Blackberry Limited Method and apparatus for text selection
KR101977072B1 (ko) * 2012-05-07 2019-05-10 엘지전자 주식회사 음성 파일과 관련된 텍스트의 표시 방법 및 이를 구현한 전자기기
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
CN106201316B (zh) 2012-05-09 2020-09-29 苹果公司 用于选择用户界面对象的设备、方法和图形用户界面
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
EP3264252B1 (en) 2012-05-09 2019-11-27 Apple Inc. Device, method, and graphical user interface for performing an operation in accordance with a selected mode of operation
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
JP6182207B2 (ja) 2012-05-09 2017-08-16 アップル インコーポレイテッド ユーザインタフェースオブジェクトのアクティブ化状態を変更するためのフィードバックを提供するためのデバイス、方法、及びグラフィカルユーザインタフェース
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
CN105260049B (zh) 2012-05-09 2018-10-23 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
WO2013169853A1 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
JP6002836B2 (ja) 2012-05-09 2016-10-05 アップル インコーポレイテッド ジェスチャに応答して表示状態間を遷移するためのデバイス、方法、及びグラフィカルユーザインタフェース
KR20130127146A (ko) * 2012-05-14 2013-11-22 삼성전자주식회사 다중 터치에 대응하는 기능을 처리하기 위한 방법 및 그 전자 장치
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
EP4220370A1 (en) * 2012-05-24 2023-08-02 BlackBerry Limited Presentation of image on display screen with combination crop and rotation and with auto-resizing of crop field
US9207860B2 (en) 2012-05-25 2015-12-08 Blackberry Limited Method and apparatus for detecting a gesture
US9652141B2 (en) 2012-05-29 2017-05-16 Blackberry Limited Portable electronic device including touch-sensitive display and method of controlling same
US20130325758A1 (en) * 2012-05-30 2013-12-05 Microsoft Corporation Tailored operating system learning experience
CN102722334B (zh) * 2012-06-06 2016-02-24 中兴通讯股份有限公司 触摸屏幕的控制方法及装置
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
CN102768614B (zh) * 2012-06-14 2015-07-15 广东步步高电子工业有限公司 一种应用于触屏移动手持装置的文本文字处理方法
US9189144B2 (en) * 2012-06-18 2015-11-17 Cisco Technology, Inc. Multi-touch gesture-based interface for network design and management
USD729259S1 (en) 2012-06-20 2015-05-12 Microsoft Corporation Display screen with graphical user interface
US9116552B2 (en) 2012-06-27 2015-08-25 Blackberry Limited Touchscreen keyboard providing selection of word predictions in partitions of the touchscreen keyboard
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
CN103514147A (zh) * 2012-06-29 2014-01-15 腾讯科技（深圳）有限公司 复制粘贴网页内容的方法和系统
US9268424B2 (en) * 2012-07-18 2016-02-23 Sony Corporation Mobile client device, operation method, recording medium, and operation system
KR102078390B1 (ko) 2012-07-30 2020-02-17 삼성전자 주식회사 멀티 터치를 통한 기하학적 도형을 그리는 방법 및 장치
KR20140019678A (ko) * 2012-08-07 2014-02-17 삼성전자주식회사 그래픽 사용자 인터페이스 객체 생성 방법 및 장치
CN102902454B (zh) * 2012-08-10 2016-02-03 广州市动景计算机科技有限公司 网页边缘内容选择方法及装置和移动终端
JP5883745B2 (ja) * 2012-08-28 2016-03-15 京セラ株式会社 携帯端末、カーソル位置制御プログラムおよびカーソル位置制御方法
US9524290B2 (en) 2012-08-31 2016-12-20 Blackberry Limited Scoring predictions based on prediction length and typing speed
US9063653B2 (en) 2012-08-31 2015-06-23 Blackberry Limited Ranking predictions based on typing speed and typing confidence
KR102039553B1 (ko) * 2012-08-31 2019-11-01 삼성전자 주식회사 사용자 디바이스에서 입력 문자를 이용한 지능형 서비스 제공 방법 및 장치
US10162492B2 (en) * 2012-09-11 2018-12-25 Microsoft Technology Licensing, Llc Tap-to-open link selection areas
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
KR102086454B1 (ko) * 2012-09-21 2020-03-09 삼성전자주식회사 휴대용 장치에서 텍스트 선택 방법 및 장치
CN102880422A (zh) * 2012-09-27 2013-01-16 深圳Tcl新技术有限公司 触摸屏智能设备文字处理方法和装置
US8656296B1 (en) * 2012-09-27 2014-02-18 Google Inc. Selection of characters in a string of characters
US9355086B2 (en) * 2012-10-09 2016-05-31 Microsoft Technology Licensing, Llc User interface elements for content selection and extended content selection
US9098127B2 (en) * 2012-10-17 2015-08-04 Blackberry Limited Electronic device including touch-sensitive display and method of controlling same
KR101329584B1 (ko) * 2012-10-22 2013-11-14 신근호 멀티터치 기반의 텍스트블록 설정에 따른 편집제공 방법 및 이를 위한 컴퓨터로 판독가능한 기록매체
US9804777B1 (en) 2012-10-23 2017-10-31 Google Inc. Gesture-based text selection
CN103793159A (zh) * 2012-10-30 2014-05-14 中兴通讯股份有限公司 一种移动终端及其设置显示区域和显示内容的方法
CN102937864B (zh) * 2012-10-31 2015-11-25 百度在线网络技术（北京）有限公司 一种用于在触摸终端上确定所选文本的方法与设备
CN103870003A (zh) * 2012-12-13 2014-06-18 联想(北京)有限公司 一种信息处理方法及电子设备
US20140173407A1 (en) * 2012-12-17 2014-06-19 Empire Technology Development Llc Progressively triggered auto-fill
US9652131B2 (en) 2012-12-18 2017-05-16 Microsoft Technology Licensing, Llc Directional selection
US10216402B2 (en) * 2012-12-21 2019-02-26 Nokia Technologies Oy Method and apparatus for related user inputs
CN103902141A (zh) * 2012-12-27 2014-07-02 北京富纳特创新科技有限公司 实现桌面功能化图标动态排列的装置及方法
US20140188894A1 (en) * 2012-12-27 2014-07-03 Google Inc. Touch to search
EP2939095B1 (en) 2012-12-29 2018-10-03 Apple Inc. Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
WO2014105275A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
KR102000253B1 (ko) 2012-12-29 2019-07-16 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
KR102001332B1 (ko) 2012-12-29 2019-07-17 애플 인크. 콘텐츠를 스크롤할지 선택할지 결정하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
KR20140089696A (ko) * 2013-01-07 2014-07-16 삼성전자주식회사 가상 키패드 운용 방법 및 이를 지원하는 단말기
KR102073615B1 (ko) 2013-01-22 2020-02-05 엘지전자 주식회사 인풋 인터페이스를 제공하는 터치 센서티브 디스플레이 디바이스 및 그 제어 방법
EP2759921B1 (en) * 2013-01-25 2020-09-23 Morpho, Inc. Image display apparatus, image displaying method and program
CN103135901B (zh) * 2013-02-04 2016-01-20 广东欧珀移动通信有限公司 移动终端中精确选择文本文字的方法及该移动终端
CN104969289B (zh) 2013-02-07 2021-05-28 苹果公司 数字助理的语音触发器
FR3002052B1 (fr) 2013-02-14 2016-12-09 Fogale Nanotech Procede et dispositif pour naviguer dans un ecran d'affichage et appareil comprenant une telle navigation
CN104007918B (zh) * 2013-02-27 2018-03-27 联想(北京)有限公司 一种数据处理方法以及一种电子设备
US8782550B1 (en) * 2013-02-28 2014-07-15 Google Inc. Character string replacement
US9785240B2 (en) * 2013-03-18 2017-10-10 Fuji Xerox Co., Ltd. Systems and methods for content-aware selection
KR102097079B1 (ko) * 2013-03-22 2020-04-03 엘지전자 주식회사 단말기 및 그 동작 방법
US20140306897A1 (en) * 2013-04-10 2014-10-16 Barnesandnoble.Com Llc Virtual keyboard swipe gestures for cursor movement
KR102091235B1 (ko) 2013-04-10 2020-03-18 삼성전자주식회사 휴대 단말기에서 메시지를 편집하는 장치 및 방법
US10719224B1 (en) 2013-04-29 2020-07-21 David Graham Boyers Methods and graphical user interfaces for pointing and editing on computing devices with touch-sensitive displays
CN103324667B (zh) * 2013-05-20 2016-08-17 吴涛军 一种在网页上生成自适应选择文本的方法
US10282067B2 (en) * 2013-06-04 2019-05-07 Sony Corporation Method and apparatus of controlling an interface based on touch operations
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
KR101959188B1 (ko) 2013-06-09 2019-07-02 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US9898187B2 (en) 2013-06-09 2018-02-20 Apple Inc. Managing real-time handwriting recognition
KR102113674B1 (ko) * 2013-06-10 2020-05-21 삼성전자주식회사 다중 터치를 이용한 객체 선택 장치, 방법 및 컴퓨터 판독 가능한 기록 매체
US9442642B2 (en) 2013-06-14 2016-09-13 Microsoft Technology Licensing, Llc Tethered selection handle
WO2014205605A1 (en) 2013-06-28 2014-12-31 France Telecom Method to select portion of graphical user interface
CN103324440B (zh) * 2013-07-05 2016-06-08 广东欧珀移动通信有限公司 一种利用多点触控选择文字内容的方法
CN104423852B (zh) * 2013-08-22 2019-01-29 腾讯科技（深圳）有限公司 文本复制的方法及装置
US20150058774A1 (en) * 2013-08-22 2015-02-26 Intuit Inc. Gesture-based visualization of financial data
US9934611B2 (en) * 2013-09-11 2018-04-03 Qualcomm Incorporated Structural modeling using depth sensors
GB2521338A (en) * 2013-09-26 2015-06-24 Ibm Text selection
US9329692B2 (en) 2013-09-27 2016-05-03 Microsoft Technology Licensing, Llc Actionable content displayed on a touch screen
CN103472998B (zh) * 2013-09-27 2017-03-15 小米科技有限责任公司 一种选取文字的方法、装置和终端设备
US9377949B2 (en) 2013-09-27 2016-06-28 Xiaomi Inc. Method and terminal device for selecting character
US9507482B2 (en) * 2013-10-07 2016-11-29 Narsys, LLC Electronic slide presentation controller
US9436918B2 (en) * 2013-10-07 2016-09-06 Microsoft Technology Licensing, Llc Smart selection of text spans
US9594736B2 (en) * 2013-10-11 2017-03-14 Apple Inc. Display and selection of bidirectional text
US9841881B2 (en) 2013-11-08 2017-12-12 Microsoft Technology Licensing, Llc Two step content selection with auto content categorization
US10990267B2 (en) 2013-11-08 2021-04-27 Microsoft Technology Licensing, Llc Two step content selection
US9383816B2 (en) * 2013-11-15 2016-07-05 Kopin Corporation Text selection using HMD head-tracker and voice-command
US10209955B2 (en) 2013-11-15 2019-02-19 Kopin Corporation Automatic speech recognition (ASR) feedback for head mounted displays (HMD)
US9500867B2 (en) 2013-11-15 2016-11-22 Kopin Corporation Head-tracking based selection technique for head mounted displays (HMD)
US9904360B2 (en) 2013-11-15 2018-02-27 Kopin Corporation Head tracking based gesture control techniques for head mounted displays
TWI514238B (zh) * 2013-11-28 2015-12-21 Inventec Corp 閱讀提示訊息的系統及其方法
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9507520B2 (en) 2013-12-16 2016-11-29 Microsoft Technology Licensing, Llc Touch-based reorganization of page element
US20150178289A1 (en) * 2013-12-20 2015-06-25 Google Inc. Identifying Semantically-Meaningful Text Selections
US20160320944A1 (en) * 2013-12-27 2016-11-03 Huawei Device Co., Ltd. Character processing method and device
CN103914441A (zh) * 2014-03-13 2014-07-09 何峰 利用手势在触摸屏上进行文档编辑的方法
US20170083207A1 (en) * 2014-03-20 2017-03-23 Nec Corporation Information processing apparatus, information processing method, and information processing program
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9966065B2 (en) 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9727161B2 (en) 2014-06-12 2017-08-08 Microsoft Technology Licensing, Llc Sensor correlation for pen and touch-sensitive computing device interaction
CN105302783B (zh) * 2014-06-13 2018-04-20 珠海金山办公软件有限公司 对文档中对象进行设置的方法及系统
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
CN104102452A (zh) * 2014-07-11 2014-10-15 厦门美图移动科技有限公司 一种触摸屏的增强型文本选择方法
KR20160019760A (ko) * 2014-08-12 2016-02-22 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR102277217B1 (ko) * 2014-08-28 2021-07-15 삼성전자주식회사 블록을 설정하는 전자 장치 및 방법
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
KR102411890B1 (ko) * 2014-09-02 2022-06-23 삼성전자주식회사 컨텐츠를 처리하는 방법 및 이를 위한 전자 장치
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
JP6019074B2 (ja) * 2014-09-16 2016-11-02 京セラドキュメントソリューションズ株式会社 電子機器、及び、タッチパネルの操作方法
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
KR20160051081A (ko) * 2014-10-31 2016-05-11 엘지전자 주식회사 이동 단말기 및 이의 제어방법
CN104461348B (zh) * 2014-10-31 2018-09-04 小米科技有限责任公司 信息选取方法及装置
US10423706B2 (en) 2014-10-31 2019-09-24 Xiaomi Inc. Method and device for selecting information
CN104461284B (zh) * 2014-11-25 2018-04-06 北京智谷睿拓技术服务有限公司 关联方法及装置
CN104484113A (zh) * 2014-11-27 2015-04-01 广东欧珀移动通信有限公司 屏幕取词的方法、装置及移动终端
CN104503693B (zh) * 2014-11-28 2017-12-22 英业达科技有限公司 多段文件内容的选取方法
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
KR102211776B1 (ko) * 2015-01-02 2021-02-03 삼성전자주식회사 컨텐츠 선택 방법 및 그 전자 장치
US9535527B2 (en) 2015-02-18 2017-01-03 Blackberry Limited Portable electronic device including touch-sensitive display and method of controlling selection of information
US10534502B1 (en) 2015-02-18 2020-01-14 David Graham Boyers Methods and graphical user interfaces for positioning the cursor and selecting text on computing devices with touch-sensitive displays
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9785305B2 (en) * 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US10067653B2 (en) 2015-04-01 2018-09-04 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10019425B2 (en) 2015-04-03 2018-07-10 Qualcomm Incorporated Enhancement to text selection controls
US10126846B2 (en) * 2015-04-09 2018-11-13 Blackberry Limited Portable electronic device including touch-sensitive display and method of controlling selection of information
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
CN104808903B (zh) * 2015-04-24 2018-01-26 三星电子（中国）研发中心 文本选择方法和装置
CN106201293B (zh) * 2015-04-29 2020-06-26 中兴通讯股份有限公司 文本选取方法和装置、文本处理方法和装置
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US9678642B2 (en) * 2015-05-29 2017-06-13 Lexmark International, Inc. Methods of content-based image area selection
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
JP5906344B1 (ja) * 2015-07-06 2016-04-20 ヤフー株式会社 情報処理装置、情報表示プログラムおよび情報表示方法
US10055120B2 (en) 2015-07-07 2018-08-21 International Business Machines Corporation Managing content displayed on a touch screen enabled device using gestures
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
WO2017035739A1 (zh) * 2015-08-31 2017-03-09 华为技术有限公司 一种选择文本的方法
WO2017035740A1 (zh) * 2015-08-31 2017-03-09 华为技术有限公司 一种选择文本的方法
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
JP6614914B2 (ja) * 2015-10-27 2019-12-04 株式会社東芝 画像処理装置、画像処理方法及び画像処理プログラム
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
KR102491543B1 (ko) * 2015-11-06 2023-01-26 삼성전자주식회사 전자 장치의 날짜 및 시간 설정 방법 및 그 전자 장치
US20170131873A1 (en) * 2015-11-09 2017-05-11 Microsoft Technology Licensing, Llc. Natural user interface for selecting a target element
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10409465B2 (en) 2015-12-08 2019-09-10 International Business Machines Corporation Selecting areas of content on a touch screen
CN106855768A (zh) * 2015-12-08 2017-06-16 阿里巴巴集团控股有限公司 信息处理方法、装置、系统及终端设备
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
KR20170082392A (ko) * 2016-01-06 2017-07-14 삼성전자주식회사 압력 센서를 이용한 사용자 인터페이스 제공 장치와 이의 화면 구성 방법
KR102648551B1 (ko) * 2016-01-28 2024-03-18 삼성전자주식회사 콘텐트를 선택하기 위한 방법 및 그 전자 장치
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US10628505B2 (en) 2016-03-30 2020-04-21 Microsoft Technology Licensing, Llc Using gesture selection to obtain contextually relevant information
CN105867820A (zh) * 2016-03-31 2016-08-17 百度在线网络技术（北京）有限公司 用于触摸屏的文本编辑方法和装置
CN106066760B (zh) * 2016-05-26 2019-04-12 北京金山安全软件有限公司 一种文字处理方法及装置
KR101866417B1 (ko) * 2016-05-26 2018-06-11 주식회사 한글과컴퓨터 단말기의 다중 터치 조작에 따른 처리방법 및 그 장치
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179329B1 (en) 2016-06-12 2018-05-07 Apple Inc Handwriting keyboard for monitors
CN106095243B (zh) * 2016-06-15 2019-02-15 维沃移动通信有限公司 一种复制粘贴的方法及移动终端
CN106126052A (zh) * 2016-06-23 2016-11-16 北京小米移动软件有限公司 文本选择方法及装置
US10049087B2 (en) 2016-07-19 2018-08-14 International Business Machines Corporation User-defined context-aware text selection for touchscreen devices
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
CN107015738A (zh) * 2016-09-20 2017-08-04 阿里巴巴集团控股有限公司 一种文本选择方法和设备
US10318034B1 (en) * 2016-09-23 2019-06-11 Apple Inc. Devices, methods, and user interfaces for interacting with user interface objects via proximity-based and contact-based inputs
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10459612B2 (en) 2016-10-05 2019-10-29 Microsoft Technology Licensing, Llc Select and move hint
CN106970758B (zh) * 2016-12-01 2020-07-03 阿里巴巴集团控股有限公司 电子文档操作处理方法、装置和电子设备
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US10359930B2 (en) 2017-01-23 2019-07-23 Blackberry Limited Portable electronic device including physical keyboard and method of controlling selection of information
TWI647609B (zh) * 2017-04-14 2019-01-11 緯創資通股份有限公司 即時通訊方法、系統及電子裝置與伺服器
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10725633B2 (en) * 2017-07-11 2020-07-28 THUMBA, Inc. Changing the location of one or more cursors and/or outputting a selection indicator between a plurality of cursors on a display area in response to detecting one or more touch events
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
JP7157340B2 (ja) * 2018-02-16 2022-10-20 日本電信電話株式会社 非言語情報生成装置、非言語情報生成モデル学習装置、方法、及びプログラム
US10895979B1 (en) 2018-02-16 2021-01-19 David Graham Boyers Methods and user interfaces for positioning a selection, selecting, and editing, on a computing device running under a touch-based operating system, using gestures on a touchpad device
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US11320983B1 (en) 2018-04-25 2022-05-03 David Graham Boyers Methods and graphical user interfaces for positioning a selection, selecting, and editing, on a computing device running applications under a touch-based operating system
CN110058761B (zh) * 2018-04-26 2021-12-14 努比亚技术有限公司 复制选择方法、移动终端及计算机可读存储介质
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
CN109032465B (zh) * 2018-05-29 2020-09-22 Oppo广东移动通信有限公司 数据处理方法、装置以及移动终端
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10776006B2 (en) 2018-06-03 2020-09-15 Apple Inc. Systems and methods for activating and using a trackpad at an electronic device with a touch-sensitive display and no force sensors
US11669243B2 (en) 2018-06-03 2023-06-06 Apple Inc. Systems and methods for activating and using a trackpad at an electronic device with a touch-sensitive display and no force sensors
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
CN109388464B (zh) * 2018-09-28 2022-03-08 广州视源电子科技股份有限公司 元素控制方法及装置
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
WO2020101067A1 (en) * 2018-11-15 2020-05-22 Samsung Electronics Co., Ltd. Method and device for selecting text in electronic terminal
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
CN110096188A (zh) * 2019-03-29 2019-08-06 北京点众科技股份有限公司 一种在阅读软件中选取页面内容的方法及装置
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11194467B2 (en) 2019-06-01 2021-12-07 Apple Inc. Keyboard management user interfaces
US11379113B2 (en) 2019-06-01 2022-07-05 Apple Inc. Techniques for selecting text
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
CN113117330B (zh) * 2021-05-20 2022-09-23 腾讯科技（深圳）有限公司 虚拟对象的技能释放方法、装置、设备及介质

Family Cites Families (226)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4322464A (en) * 1976-11-05 1982-03-30 Hitco Fusion laminated high-temperature fabric
US4332464A (en) 1980-09-22 1982-06-01 Xerox Corporation Interactive user-machine interface method and apparatus for copier/duplicator
US4698625A (en) 1985-05-30 1987-10-06 International Business Machines Corp. Graphic highlight adjacent a pointing cursor
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
US4680429A (en) 1986-01-15 1987-07-14 Tektronix, Inc. Touch panel
US4790028A (en) 1986-09-12 1988-12-06 Westinghouse Electric Corp. Method and apparatus for generating variably scaled displays
US4755811A (en) 1987-03-24 1988-07-05 Tektronix, Inc. Touch controlled zoom of waveform displays
US5053758A (en) 1988-02-01 1991-10-01 Sperry Marine Inc. Touchscreen control panel with sliding touch control
US5079723A (en) 1988-03-04 1992-01-07 Xerox Corporation Touch dialogue user interface for reproduction machines
FI80536C (fi) 1988-04-15 1990-06-11 Nokia Mobira Oy Matrisdisplay.
US5201034A (en) 1988-09-30 1993-04-06 Hitachi Ltd. Interactive intelligent interface
US5027110A (en) 1988-12-05 1991-06-25 At&T Bell Laboratories Arrangement for simultaneously displaying on one or more display terminals a series of images
US5266949A (en) 1990-03-29 1993-11-30 Nokia Mobile Phones Ltd. Lighted electronic keyboard
DE4023318A1 (de) 1990-07-21 1992-02-20 Fraunhofer Ges Forschung Verfahren zur durchfuehrung eines variablen dialogs mit technischen geraeten
US5119079A (en) 1990-09-17 1992-06-02 Xerox Corporation Touch screen user interface with expanding touch locations for a reprographic machine
US5347295A (en) 1990-10-31 1994-09-13 Go Corporation Control of a computer through a position-sensed stylus
US5260697A (en) 1990-11-13 1993-11-09 Wang Laboratories, Inc. Computer with separate display plane and user interface processor
FI88345C (fi) 1991-01-29 1993-04-26 Nokia Mobile Phones Ltd Belyst tastatur
US5341466A (en) 1991-05-09 1994-08-23 New York University Fractal computer user centerface with zooming capability
JP3123558B2 (ja) 1991-05-09 2001-01-15 ソニー株式会社 情報入力処理装置および方法
US5202828A (en) 1991-05-15 1993-04-13 Apple Computer, Inc. User interface system having programmable user interface elements
US5326270A (en) 1991-08-29 1994-07-05 Introspect Technologies, Inc. System and method for assessing an individual's task-processing style
US6061062A (en) 1991-12-20 2000-05-09 Apple Computer, Inc. Zooming controller
US5483261A (en) 1992-02-14 1996-01-09 Itu Research, Inc. Graphical input controller and method with rear screen image detection
US5757358A (en) 1992-03-31 1998-05-26 The United States Of America As Represented By The Secretary Of The Navy Method and apparatus for enhancing computer-user selection of computer-displayed objects through dynamic selection area and constant visual feedback
US5523775A (en) 1992-05-26 1996-06-04 Apple Computer, Inc. Method for selecting objects on a computer display
US5488204A (en) 1992-06-08 1996-01-30 Synaptics, Incorporated Paintbrush stylus for capacitive touch sensor pad
US5880411A (en) 1992-06-08 1999-03-09 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
US5543588A (en) 1992-06-08 1996-08-06 Synaptics, Incorporated Touch pad driven handheld computing device
AU4013693A (en) 1992-06-16 1993-12-23 Honeywell Inc. A method for utilizing a low resolution touch screen system in a high resolution graphics environment
US5319386A (en) 1992-08-04 1994-06-07 Gunn Gary J Ideographic character selection method and apparatus
US7084859B1 (en) 1992-09-18 2006-08-01 Pryor Timothy R Programmable tactile touch screen displays and man-machine interfaces for improved vehicle instrumentation and telematics
US5982352A (en) 1992-09-18 1999-11-09 Pryor; Timothy R. Method for providing human input to a computer
US5465401A (en) 1992-12-15 1995-11-07 Texas Instruments Incorporated Communication system and methods for enhanced information transfer
US5335276A (en) 1992-12-16 1994-08-02 Texas Instruments Incorporated Communication system and methods for enhanced information transfer
US5463725A (en) 1992-12-31 1995-10-31 International Business Machines Corp. Data processing system graphical user interface which emulates printed material
DE69418908T2 (de) 1993-01-26 2000-01-20 Sun Microsystems Inc Verfahren und Gerät zum Informationsanschauen in einer Rechnerdatenbank
JP2986047B2 (ja) 1993-04-29 1999-12-06 インターナショナル・ビジネス・マシーンズ・コーポレイション ディジタル入力用表示装置並びに入力処理装置および方法
EP0622722B1 (en) * 1993-04-30 2002-07-17 Xerox Corporation Interactive copying system
DE69432199T2 (de) 1993-05-24 2004-01-08 Sun Microsystems, Inc., Mountain View Graphische Benutzerschnittstelle mit Verfahren zur Schnittstellebildung mit fernsteuernden Einrichtungen
WO1994029788A1 (en) 1993-06-15 1994-12-22 Honeywell Inc. A method for utilizing a low resolution touch screen system in a high resolution graphics environment
JP2648558B2 (ja) 1993-06-29 1997-09-03 インターナショナル・ビジネス・マシーンズ・コーポレイション 情報選択装置及び情報選択方法
JP2899194B2 (ja) * 1993-06-30 1999-06-02 キヤノン株式会社 意思伝達支援装置及び意思伝達支援方法
US5710831A (en) 1993-07-30 1998-01-20 Apple Computer, Inc. Method for correcting handwriting on a pen-based computer
US5367453A (en) 1993-08-02 1994-11-22 Apple Computer, Inc. Method and apparatus for correcting words
JP2813728B2 (ja) 1993-11-01 1998-10-22 インターナショナル・ビジネス・マシーンズ・コーポレイション ズーム／パン機能付パーソナル通信機
US5422656A (en) 1993-11-01 1995-06-06 International Business Machines Corp. Personal communicator having improved contrast control for a liquid crystal, touch sensitive display
US20010040587A1 (en) 1993-11-15 2001-11-15 E. J. Scheck Touch control of cursonr position
US5977950A (en) 1993-11-29 1999-11-02 Motorola, Inc. Manually controllable cursor in a virtual image
DE69428675T2 (de) 1993-12-30 2002-05-08 Xerox Corp Apparat und Verfahren zur Unterstützung einer impliziten Strukturation von Freiform-Listen, Übersichten, Texten, Tabellen und Diagrammen in einem auf Handzeichen basierenden Eingabesystem und Editiersystem
US5568536A (en) 1994-07-25 1996-10-22 International Business Machines Corporation Selective reconfiguration method and apparatus in a multiple application personal communications device
CN1059303C (zh) * 1994-07-25 2000-12-06 国际商业机器公司 在个人通讯设备的显示屏幕上标记文本的装置和方法
JP3565453B2 (ja) 1994-08-23 2004-09-15 キヤノン株式会社 画像入出力装置
EP0703525B1 (en) 1994-09-22 2001-12-05 Aisin Aw Co., Ltd. Touch display type information input system
US5553225A (en) 1994-10-25 1996-09-03 International Business Machines Corporation Method and apparatus for combining a zoom function in scroll bar sliders
US5760773A (en) 1995-01-06 1998-06-02 Microsoft Corporation Methods and apparatus for interacting with data objects using action handles
US5565888A (en) 1995-02-17 1996-10-15 International Business Machines Corporation Method and apparatus for improving visibility and selectability of icons
US5543897A (en) 1995-03-07 1996-08-06 Eastman Kodak Company Reproduction apparatus having touch screen operator interface and auxiliary keyboard
US5754873A (en) 1995-06-01 1998-05-19 Adobe Systems, Inc. Method and apparatus for scaling a selected block of text to a preferred absolute text height and scaling the remainder of the text proportionately
US5790819A (en) 1995-07-14 1998-08-04 International Business Machines Corporation Mechanism for fine-grained and coarse-grained control of zooming in a display of a one-dimensional data set
US5721939A (en) * 1995-08-03 1998-02-24 Xerox Corporation Method and apparatus for tokenizing text
US5778404A (en) 1995-08-07 1998-07-07 Apple Computer, Inc. String inserter for pen-based computer systems and method for providing same
JPH0981320A (ja) 1995-09-20 1997-03-28 Matsushita Electric Ind Co Ltd ペン入力式選択入力装置及びその方法
US6037939A (en) 1995-09-27 2000-03-14 Sharp Kabushiki Kaisha Method for enabling interactive manipulation of data retained in computer system, and a computer system for implementing the method
JPH09146708A (ja) 1995-11-09 1997-06-06 Internatl Business Mach Corp <Ibm> タッチパネルの駆動方法及びタッチ入力方法
US5825352A (en) 1996-01-04 1998-10-20 Logitech, Inc. Multiple fingers contact sensing method for emulating mouse buttons and mouse operations on a touch sensor pad
GB9605216D0 (en) 1996-03-12 1996-05-15 Ncr Int Inc Display system and method of moving a cursor of the display system
US6173194B1 (en) 1996-04-15 2001-01-09 Nokia Mobile Phones Limited Mobile terminal having improved user interface
US5835079A (en) 1996-06-13 1998-11-10 International Business Machines Corporation Virtual pointing device for touchscreens
US6054990A (en) 1996-07-05 2000-04-25 Tran; Bao Q. Computer system with handwriting annotation
US6121960A (en) 1996-08-28 2000-09-19 Via, Inc. Touch screen systems and methods
US6157935A (en) 1996-12-17 2000-12-05 Tran; Bao Q. Remote data access and management system
US5926769A (en) 1997-02-18 1999-07-20 Nokia Mobile Phones Limited Cellular telephone having simplified user interface for storing and retrieving telephone numbers
US6073036A (en) 1997-04-28 2000-06-06 Nokia Mobile Phones Limited Mobile station with touch input having automatic symbol magnification function
US6049326A (en) 1997-05-12 2000-04-11 Siemens Information And Communication Networks, Inc. System and method for dual browser modes
US5910800A (en) 1997-06-11 1999-06-08 Microsoft Corporation Usage tips for on-screen touch-sensitive controls
CN1122214C (zh) 1997-10-21 2003-09-24 艾利森公司 使用拖放接口联系控制对象与应用的系统和方法
FI109733B (fi) 1997-11-05 2002-09-30 Nokia Corp Viestin sisällön hyödyntäminen
JPH11143724A (ja) 1997-11-13 1999-05-28 Sharp Corp 情報処理装置および情報処理プログラムを記録したコンピュータ読み取り可能な記録媒体
US6310610B1 (en) 1997-12-04 2001-10-30 Nortel Networks Limited Intelligent touch display
US9292111B2 (en) * 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US7614008B2 (en) 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
KR100595917B1 (ko) 1998-01-26 2006-07-05 웨인 웨스터만 수동 입력 통합 방법 및 장치
US20060033724A1 (en) 2004-07-30 2006-02-16 Apple Computer, Inc. Virtual input device placement on a touch screen user interface
US7760187B2 (en) 2004-07-30 2010-07-20 Apple Inc. Visual expander
US7844914B2 (en) 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
US6211856B1 (en) 1998-04-17 2001-04-03 Sung M. Choi Graphical user interface touch screen with an auto zoom feature
US6188391B1 (en) 1998-07-09 2001-02-13 Synaptics, Inc. Two-layer capacitive touchpad and method of making same
JP4542637B2 (ja) 1998-11-25 2010-09-15 セイコーエプソン株式会社 携帯情報機器及び情報記憶媒体
US6552719B2 (en) 1999-01-07 2003-04-22 Microsoft Corporation System and method for automatically switching between writing and text input modes
US6643824B1 (en) 1999-01-15 2003-11-04 International Business Machines Corporation Touch screen region assist for hypertext links
JP3659065B2 (ja) * 1999-01-29 2005-06-15 松下電器産業株式会社 画像表示装置
US6411283B1 (en) 1999-05-20 2002-06-25 Micron Technology, Inc. Computer touch screen adapted to facilitate selection of features at edge of screen
US7030863B2 (en) 2000-05-26 2006-04-18 America Online, Incorporated Virtual keyboard system with automatic correction
US6971071B1 (en) 1999-06-10 2005-11-29 Microsoft Corporation System and method for implementing an image ancillary to a cursor
EP1094383A3 (en) 1999-10-18 2005-11-02 Honeywell International, Inc. Methods and apparatus for cursor control
US7322524B2 (en) 2000-10-20 2008-01-29 Silverbrook Research Pty Ltd Graphic design software using an interface surface
US6664991B1 (en) 2000-01-06 2003-12-16 Microsoft Corporation Method and apparatus for providing context menus on a pen-based device
US6822635B2 (en) 2000-01-19 2004-11-23 Immersion Corporation Haptic interface for laptop computers and other portable devices
EP1285330B1 (en) 2000-05-11 2006-08-30 Nes Stewart Irvine Zeroclick
US6459364B2 (en) 2000-05-23 2002-10-01 Hewlett-Packard Company Internet browser facility and method for the visually impaired
US6563913B1 (en) 2000-08-21 2003-05-13 Koninklijke Philips Electronics N.V. Selective sending of portions of electronic content
US6788288B2 (en) 2000-09-11 2004-09-07 Matsushita Electric Industrial Co., Ltd. Coordinate input device and portable information apparatus equipped with coordinate input device
EP1191430A1 (en) 2000-09-22 2002-03-27 Hewlett-Packard Company, A Delaware Corporation Graphical user interface for devices having small tactile displays
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
JP5039911B2 (ja) 2000-10-11 2012-10-03 インターナショナル・ビジネス・マシーンズ・コーポレーション データ処理装置、入出力装置、タッチパネルの制御方法、記憶媒体及びプログラム伝送装置
US6891551B2 (en) 2000-11-10 2005-05-10 Microsoft Corporation Selection handles in editing electronic documents
US6941507B2 (en) 2000-11-10 2005-09-06 Microsoft Corporation Insertion point bungee space tool
US7155676B2 (en) 2000-12-19 2006-12-26 Coolernet System and method for multimedia authoring and playback
US20040039934A1 (en) 2000-12-19 2004-02-26 Land Michael Z. System and method for multimedia authoring and playback
US7190348B2 (en) 2000-12-26 2007-03-13 International Business Machines Corporation Method for touchscreen data input
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US7030861B1 (en) 2001-02-10 2006-04-18 Wayne Carl Westerman System and method for packing multi-touch gestures onto a hand
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US7047503B1 (en) 2001-03-28 2006-05-16 Palmsource, Inc. Method and apparatus for the selection of records
US7219309B2 (en) 2001-05-02 2007-05-15 Bitstream Inc. Innovations for the display of web pages
US20050024341A1 (en) 2001-05-16 2005-02-03 Synaptics, Inc. Touch screen with user interface enhancement
US7246329B1 (en) 2001-05-18 2007-07-17 Autodesk, Inc. Multiple menus for use with a graphical user interface
JP3800984B2 (ja) 2001-05-21 2006-07-26 ソニー株式会社 ユーザ入力装置
TW521205B (en) 2001-06-05 2003-02-21 Compal Electronics Inc Touch screen capable of controlling amplification with pressure
WO2002101534A1 (en) 2001-06-12 2002-12-19 Idelix Software Inc. Graphical user interface with zoom for detail-in-context presentations
US6971068B2 (en) 2001-07-26 2005-11-29 International Business Machines Corporation Dialog box positioning
JP3872322B2 (ja) 2001-09-17 2007-01-24 インターナショナル・ビジネス・マシーンズ・コーポレーション タッチパネルに対応した入力方法、入力システムおよびプログラム
JP2003173237A (ja) 2001-09-28 2003-06-20 Ricoh Co Ltd 情報入出力システム、プログラム及び記憶媒体
US7254775B2 (en) 2001-10-03 2007-08-07 3M Innovative Properties Company Touch panel system and method for distinguishing multiple touch inputs
US6690387B2 (en) 2001-12-28 2004-02-10 Koninklijke Philips Electronics N.V. Touch-screen image scrolling system and method
FI116425B (fi) 2002-01-18 2005-11-15 Nokia Corp Menetelmä ja laite laajan näppäimistön integroimiseksi pieneen laitteeseen
US7075512B1 (en) 2002-02-07 2006-07-11 Palmsource, Inc. Method and system for navigating a display screen for locating a desired item of information
US6938222B2 (en) * 2002-02-08 2005-08-30 Microsoft Corporation Ink gestures
US7787908B2 (en) 2002-03-19 2010-08-31 Qualcomm Incorporated Multi-call display management for wireless communication devices
JP2003296022A (ja) 2002-04-01 2003-10-17 Pioneer Electronic Corp タッチパネル一体型表示装置
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
US20040183817A1 (en) 2002-12-03 2004-09-23 Bitstream Inc. Methods, systems, and programming for scaled display of web pages
TW589577B (en) 2003-01-03 2004-06-01 Tatung Co Method to display software keyboard
US7194699B2 (en) 2003-01-14 2007-03-20 Microsoft Corporation Animating images to reflect user selection
US20040155888A1 (en) 2003-02-11 2004-08-12 Padgitt David Gary Method for displaying the contents of a collection of media objects
US20040160419A1 (en) 2003-02-11 2004-08-19 Terradigital Systems Llc. Method for entering alphanumeric characters into a graphical user interface
US7185291B2 (en) 2003-03-04 2007-02-27 Institute For Information Industry Computer with a touch screen
JP4215549B2 (ja) 2003-04-02 2009-01-28 富士通株式会社 タッチパネル・モードとポインティング・デバイス・モードで動作する情報処理装置
US7312981B2 (en) 2003-04-16 2007-12-25 Carroll David W Mobile, hand-held personal computer
US8555165B2 (en) 2003-05-08 2013-10-08 Hillcrest Laboratories, Inc. Methods and systems for generating a zoomable graphical user interface
JP2006527439A (ja) 2003-06-13 2006-11-30 ユニヴァーシティ オブ ランカスター ユーザインタフェース
WO2005008444A2 (en) 2003-07-14 2005-01-27 Matt Pallakoff System and method for a portbale multimedia client
US7545412B2 (en) 2003-09-09 2009-06-09 Konica Minolta Holdings, Inc. Image-sensing apparatus with a solid-state image sensor switchable between linear and logarithmic conversion
JP4035497B2 (ja) 2003-09-26 2008-01-23 キヤノン株式会社 画像表示システム、画像表示装置、画像表示方法ならびにプログラム
US20050076300A1 (en) 2003-10-02 2005-04-07 International Business Machines Corporation Block marker system
KR100537280B1 (ko) 2003-10-29 2005-12-16 삼성전자주식회사 휴대용 단말기에서 터치스크린을 이용한 문자 입력 장치및 방법
US7437005B2 (en) * 2004-02-17 2008-10-14 Microsoft Corporation Rapid visual sorting of digital files and data
KR100539904B1 (ko) 2004-02-27 2005-12-28 삼성전자주식회사 터치 스크린을 구비한 단말기에 사용되는 포인팅 디바이스및 그 사용 방법
US7743348B2 (en) 2004-06-30 2010-06-22 Microsoft Corporation Using physical objects to adjust attributes of an interactive display application
US20060001654A1 (en) 2004-06-30 2006-01-05 National Semiconductor Corporation Apparatus and method for performing data entry with light based touch screen displays
US7409600B2 (en) * 2004-07-12 2008-08-05 International Business Machines Corporation Self-healing cache system
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
EP2000894B1 (en) 2004-07-30 2016-10-19 Apple Inc. Mode-based graphical user interfaces for touch sensitive input devices
KR100958490B1 (ko) 2004-07-30 2010-05-17 애플 인크. 사용자 인터페이스 방법, 미디어 항목들을 통해 스크롤하는방법, 디스플레이 및 터치 스크린을 갖는 사용자-조작되는전자 장치 상에서 수행되는 방법, 디스플레이 및 터치감지 입력 장치를 갖는 컴퓨팅 장치 상에서 수행되는 방법,컴퓨팅 시스템, 컴퓨팅 장치, 터치 감지 장치를 통해플로팅 컨트롤을 기동시키는 컴퓨터 구현 방법 및 컴퓨터구현 방법
US7519573B2 (en) 2004-08-23 2009-04-14 Fuji Xerox Co., Ltd. System and method for clipping, repurposing, and augmenting document content
US7728823B2 (en) 2004-09-24 2010-06-01 Apple Inc. System and method for processing raw data of track pad device
US7683889B2 (en) 2004-12-21 2010-03-23 Microsoft Corporation Pressure based selection
US7489306B2 (en) 2004-12-22 2009-02-10 Microsoft Corporation Touch screen accuracy
DE102005014178A1 (de) * 2005-03-29 2006-10-05 Basf Ag Verfahren zur Gewinnung eines Stromes von Kohlenwasserstoffen, enthaltend 4 bis 12 Kohlenstoffatome pro Molekül, mit erhöhtem Anteil an linearen alpha-Olefinen
US7605804B2 (en) 2005-04-29 2009-10-20 Microsoft Corporation System and method for fine cursor positioning using a low resolution imaging touch screen
US7886233B2 (en) 2005-05-23 2011-02-08 Nokia Corporation Electronic text input involving word completion functionality for predicting word candidates for partial word inputs
US9785329B2 (en) 2005-05-23 2017-10-10 Nokia Technologies Oy Pocket computer and associated methods
WO2006126055A2 (en) 2005-05-23 2006-11-30 Nokia Corporation Improved pocket computer and associated methods
US20060277481A1 (en) 2005-06-03 2006-12-07 Scott Forstall Presenting clips of content
JP2006345209A (ja) 2005-06-08 2006-12-21 Sony Corp 入力装置、情報処理装置、情報処理方法、及びプログラム
TW200701082A (en) 2005-06-23 2007-01-01 Elan Microelectronics Corp Scroll control method used in the touch panel
US7694234B2 (en) 2005-08-04 2010-04-06 Microsoft Corporation Virtual magnifying glass with on-the fly control functionalities
CN101243382B (zh) 2005-09-15 2013-01-30 苹果公司 处理跟踪板装置的原始数据的系统和方法
US20080098331A1 (en) 2005-09-16 2008-04-24 Gregory Novick Portable Multifunction Device with Soft Keyboards
US7694231B2 (en) 2006-01-05 2010-04-06 Apple Inc. Keyboards for portable electronic devices
US20070152980A1 (en) 2006-01-05 2007-07-05 Kenneth Kocienda Touch Screen Keyboards for Portable Electronic Devices
US7542029B2 (en) 2005-09-20 2009-06-02 Cliff Kushler System and method for a user interface for text editing and menu selection
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
US8643605B2 (en) 2005-11-21 2014-02-04 Core Wireless Licensing S.A.R.L Gesture based document editor
US7565613B2 (en) 2005-12-01 2009-07-21 Microsoft Corporation User interface incorporating data ecosystem awareness
GB2433402B (en) 2005-12-14 2007-11-28 Siemens Plc An input device
US7701440B2 (en) 2005-12-19 2010-04-20 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Pointing device adapted for small handheld devices having two display modes
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US7877685B2 (en) 2005-12-29 2011-01-25 Sap Ag Persistent adjustable text selector
WO2007079425A2 (en) 2005-12-30 2007-07-12 Apple Inc. Portable electronic device with multi-touch input
KR100823083B1 (ko) 2006-02-09 2008-04-18 삼성전자주식회사 터치스크린을 구비한 문서 표시장치의 문서 교정 방법 및그 장치
FR2898197A1 (fr) 2006-03-02 2007-09-07 Thomas Joseph Pouit Ecran tactile a point d'interaction distinct du point de contact
US20070238489A1 (en) 2006-03-31 2007-10-11 Research In Motion Limited Edit menu for a mobile communication device
US8077153B2 (en) 2006-04-19 2011-12-13 Microsoft Corporation Precise selection techniques for multi-touch screens
KR100771626B1 (ko) 2006-04-25 2007-10-31 엘지전자 주식회사 단말기 및 이를 위한 명령 입력 방법
US8279180B2 (en) 2006-05-02 2012-10-02 Apple Inc. Multipoint touch surface controller
KR100813062B1 (ko) * 2006-05-03 2008-03-14 엘지전자 주식회사 휴대용 단말기 및 이를 이용한 텍스트 표시 방법
US8873858B2 (en) 2006-06-29 2014-10-28 Rpx Corporation Apparatus, method, device and computer program product providing enhanced text copy capability with touch input display
US7864163B2 (en) 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
US7940250B2 (en) 2006-09-06 2011-05-10 Apple Inc. Web-clip widgets on a portable multifunction device
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US9304675B2 (en) 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
US9128596B2 (en) 2006-09-22 2015-09-08 Opera Software Asa Method and device for selecting and displaying a region of interest in an electronic document
EP2437155A1 (en) 2006-10-26 2012-04-04 Apple Inc. Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
US8570278B2 (en) 2006-10-26 2013-10-29 Apple Inc. Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
US7856605B2 (en) 2006-10-26 2010-12-21 Apple Inc. Method, system, and graphical user interface for positioning an insertion marker in a touch screen display
US7900145B2 (en) 2006-11-08 2011-03-01 Yahoo! Inc. System and method for synchronizing data
US8656295B2 (en) 2007-01-05 2014-02-18 Apple Inc. Selecting and manipulating web content
US8689132B2 (en) 2007-01-07 2014-04-01 Apple Inc. Portable electronic device, method, and graphical user interface for displaying electronic documents and lists
US8451232B2 (en) 2007-01-07 2013-05-28 Apple Inc. Portable multifunction device, method, and graphical user interface for interacting with user input elements in displayed content
US8519963B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture on a touch screen display
WO2008092079A2 (en) 2007-01-25 2008-07-31 Clipmarks Llc System, method and apparatus for selecting content from web sources and posting content to web logs
US9524353B2 (en) 2007-02-09 2016-12-20 Nokia Technologies Oy Method and system for providing portions of information content to a client device
US7949935B2 (en) 2007-04-27 2011-05-24 International Business Machines Corporation Selecting and rendering a section of a web page
US20080294974A1 (en) 2007-05-24 2008-11-27 Nokia Corporation Webpage history view
US8059101B2 (en) 2007-06-22 2011-11-15 Apple Inc. Swipe gestures for touch screen keyboards
KR101398134B1 (ko) 2007-10-04 2014-05-20 엘지전자 주식회사 휴대 단말기의 동영상 재생장치 및 방법
US20090125848A1 (en) 2007-11-14 2009-05-14 Susann Marie Keohane Touch surface-sensitive edit system
US8078979B2 (en) 2007-11-27 2011-12-13 Microsoft Corporation Web page editor with element selection mechanism
US8212784B2 (en) 2007-12-13 2012-07-03 Microsoft Corporation Selection and display of media associated with a geographic area based on gesture input
US8610671B2 (en) 2007-12-27 2013-12-17 Apple Inc. Insertion marker placement on touch sensitive display
US9772689B2 (en) 2008-03-04 2017-09-26 Qualcomm Incorporated Enhanced gesture-based image manipulation
US8201109B2 (en) 2008-03-04 2012-06-12 Apple Inc. Methods and graphical user interfaces for editing on a portable multifunction device
CN101533320B (zh) 2008-03-10 2012-04-25 神基科技股份有限公司 触控显示装置区域影像的近接放大显示方法及其装置
US20090235186A1 (en) 2008-03-12 2009-09-17 Microsoft Corporation Limited-scope rendering
US20100042933A1 (en) 2008-08-15 2010-02-18 International Business Machines Corporation Region selection control for selecting browser rendered elements
WO2010071630A1 (en) 2008-12-15 2010-06-24 Hewlett-Packard Development Company, L.P. Gesture based edit mode
US8291348B2 (en) 2008-12-31 2012-10-16 Hewlett-Packard Development Company, L.P. Computing device and method for selecting display regions responsive to non-discrete directional input actions and intelligent content analysis
US8473467B2 (en) 2009-01-02 2013-06-25 Apple Inc. Content profiling to dynamically configure content processing
US8593666B2 (en) 2009-02-11 2013-11-26 Hewlett-Packard Development Company, L.P. Method and system for printing a web page
US8786556B2 (en) 2009-03-12 2014-07-22 Nokia Corporation Method and apparatus for selecting text information

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103218135A (zh) * 2013-04-24 2013-07-24 北京小米科技有限责任公司 移动终端上的截屏方法及装置、移动终端
CN103218135B (zh) * 2013-04-24 2016-02-24 小米科技有限责任公司 移动终端上的截屏方法及装置、移动终端
CN109154878A (zh) * 2016-06-03 2019-01-04 株式会社半导体能源研究所 数据处理装置及其显示方法
CN107247698A (zh) * 2017-05-15 2017-10-13 捷开通讯(深圳)有限公司 一种文本编辑的方法、移动终端和具有存储功能的装置
CN110197725A (zh) * 2019-05-23 2019-09-03 浙江大学 一种基于智能移动终端对指动作检测的手指灵活度测试方法

Also Published As

Publication number Publication date
EP2469398A2 (en) 2012-06-27
CN102830933B (zh) 2016-08-03
CN101526881A (zh) 2009-09-09
EP2098947A2 (en) 2009-09-09
US20090228842A1 (en) 2009-09-10
CN201491068U (zh) 2010-05-26
EP2469398B1 (en) 2019-07-10
US8650507B2 (en) 2014-02-11
EP2469398A3 (en) 2015-07-01
CN101526881B (zh) 2012-10-10
WO2009111249A2 (en) 2009-09-11
WO2009111249A3 (en) 2009-10-29
EP2098947A3 (en) 2009-09-23

Similar Documents

Publication Publication Date Title
CN101526881B (zh) 使用手势选择文本
JP5277328B2 (ja) タッチスクリーンディスプレイとの指接触からカーソル位置を決定する方法
CN101627361B (zh) 用于解释触摸屏显示器上的手指姿态的便携式多功能设备、方法和图形用户界面
CN101529367B (zh) 用于便携式多功能设备的语音邮件管理器
US8661362B2 (en) Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
CN104808926A (zh) 触敏显示器上的插入标记放置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1177518

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1177518

Country of ref document: HK