CN105706038B - 具有自动内容分类的两步内容选择 - Google Patents

具有自动内容分类的两步内容选择 Download PDF

Info

Publication number
CN105706038B
CN105706038B CN201480061383.1A CN201480061383A CN105706038B CN 105706038 B CN105706038 B CN 105706038B CN 201480061383 A CN201480061383 A CN 201480061383A CN 105706038 B CN105706038 B CN 105706038B
Authority
CN
China
Prior art keywords
content
selection
module
selection operation
described processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480061383.1A
Other languages
English (en)
Other versions
CN105706038A (zh
Inventor
Z·刘
J·黄
C·C·B·麦克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN105706038A publication Critical patent/CN105706038A/zh
Application granted granted Critical
Publication of CN105706038B publication Critical patent/CN105706038B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04805—Virtual magnifying lens, i.e. window or frame movable on top of displayed information to enlarge it for better reading or selection

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

在两步内容选择操作的第一步中，可通过检测内容选择物体相对于计算设备的移动来选择初始内容。可基于检测到的物体移动来计算选择区域。选择区域内的内容可被选择并显示在第二显示区域中，其中不同类型的内容被分成各逻辑单元。初始内容的全部或部分可被放大，从而启用在其中选择初始内容的子集的选择操作的第二步。内容在被粘贴到目标之前可被变换。

Description

具有自动内容分类的两步内容选择
背景
在许多计算机程序中，选择内容涉及使用诸如鼠标、触摸垫、手指、指示笔等选择物体。选择内容是在某些条件下可能困难的用户操作的示例。例如，在选择物体(例如，某人的手指)比选择区(例如，触摸屏上的区域)大时，可能变得难以准确地选中所需内容。类似地，环境条件(例如，振动或其他移动)或者用户的运动神经损伤可使得难以精确地选中内容。
发明内容
在两步内容选择操作的第一步中，可通过检测内容选择物体相对于计算设备的移动来选择内容。可基于检测到的物体移动来计算选择区域。可通过确定从内容选择物体的起始选择点和结束释放点的坐标导出的矩形区域来计算选择区域。可选中选择区域内的内容。可将在内容选择操作的第一步中选中的内容(即，初始内容)复制到第二显示区域。在第二显示区域中，可基于内容类型将复制的内容分解成各逻辑单元。可选择各逻辑单元中的一个或多个以供进一步的用户交互。每一逻辑单元可被单独操纵。任选地，多个逻辑单元可被同时操纵。可放大初始内容的全部或部分。
可执行内容选择操作的第二步。可使用内容选择操作的第二步来精确地选择内容。内容选择操作的第二步可选择在该内容选择操作的第一步中选中的内容的子集。可通过检测内容选择物体相对于该第二显示区域的移动来检测选择操作的第二步的启动。可通过检测起始选择指示和结束选择指示来检测内容选择操作的第二步。可将在内容选择操作的第二步中选中的内容(即，最终内容)粘贴到指定目的地(目标)。可在将内容选择操作的第二步所选中的内容粘贴到指定目的地之前编辑该内容。可在将内容选择操作的第二步所选中的内容粘贴到指定目的地之前转换该内容。
提供本发明内容以便以简化形式介绍将在以下具体实施方式中进一步描述的一些概念。本发明内容并不旨在标识所要求保护主题的关键特征或必要特征，也不旨在用于限制所要求保护主题的范围。
附图说明
在附图中：
图1a示出了根据本文描述的主题的各方面的启用两步内容选择的系统100的示例；
图1b示出了根据本文描述的主题的各方面的在计算设备上显示的源内容的示例；
图1c示出了根据本文描述的主题的各方面的图1b的示例，其中检测到了两步内容选择的第一步的起始选择点和结束释放点；
图1d示出了根据本文描述的主题的各方面的图1c的内容的示例，其中计算了选择区域；
图1e示出了根据本文描述的主题的各方面的图1b的另一示例，其中检测到了起始选择点和结束释放点；
图1f示出了根据本文描述的主题的各方面的在目标中的粘贴位置的示例；
图1g1示出了根据本文公开的主题的各方面的图1f的示例，其中在覆盖目标显示的第二显示区域中将内容进行了分类；
图1g2示出了根据本文公开的主题的各方面的图1g1的示例，其中内容分类之一已被选择；
图1h示出了根据本文公开的主题的各方面的图1g的示例，其中检测到了内容选择操作的第二步的起始选择点；
图1i示出了根据本文公开的主题的各方面的图1h的示例，其中检测到了内容选择操作的第二步的结束选择点；
图1j1示出了根据本文公开的主题的各方面的粘贴操作的结果；
图1j2示出了根据本文公开的主题的各方面的另一粘贴操作的结果；
图1k示出了根据本文公开的主题的各方面的内容选择操作的第二步的编辑结果；
图1l示出了根据本文公开的主题的各方面的编辑和粘贴操作的结果；
图1m示出了根据本文公开的主题的各方面的转换粘贴操作；
图2示出了根据本文公开的主题的各方面的启用两步内容选择的方法200的示例；以及
图3是根据本文公开的主题的各方面的计算环境的示例的框图。
具体实施方式
概览
当前，内容选择通常基于通过指示要被选中的内容中的开始和结束位置来精确地指示该内容。例如，用户通常通过指示内容中的开始位置和该内容中的结束位置来选中该内容。所选中的内容是包括以下的内容：所指示的开始位置处的内容、所指示的结束位置处的内容、以及存在于所指示的开始位置和所指示的结束位置之间的内容。
根据本文描述的主题的各方面，可通过检测选择物体跨在第一显示区域中显示源内容的计算设备的区域(例如，表面)的移动来选择来自源位置的内容。选择物体的移动可被用来计算选择区域。可选中计算得到的选择区域内的内容。计算得到的选择区域内的内容可被自动分成不同的逻辑单元。每一逻辑单元可被单独操纵或多个逻辑单元可被同时操纵。可标识要将所复制的内容粘贴到的目标(例如，文件、电子表格、图像等)。可标识要将内容粘贴在目标内的粘贴位置。可在第一目标显示区域中显示目标。可将计算得到的选择区域内的内容复制到第二显示区域。所复制的内容可被放大并且经放大的内容的全部或部分可被显示在第二显示区域中。可指示该第二显示区域内的开始位置和结束位置以选择在内容选择操作的第一步中选中的内容的要被粘贴到目标中的一部分。在内容选择操作的第二步中选中的内容可在粘贴位置处被粘贴到目标中。根据本文描述的主题的各方面，在将在内容选择操作的第二步中选中的内容粘贴到目标之前，该内容可被编辑。可在将内容选择操作的第二步所选中的内容粘贴到目标之前转换该内容。
具有自动内容分类的两步内容选择
图1a示出了启用具有内容自动分类和/或转换的两步内容选择的系统100的示例的框图。在该两步的第一步中，可选择来自源的内容。在该两步的第二步中，可选中在第一步中选择的内容的全部或部分。根据本文描述的主题的各方面，内容选择操作的第二步中选中的内容可被粘贴到目标中。系统100的全部或部分可以驻留在诸如下面参考图3所描述的计算机之类的一个或多个计算机或计算设备上。系统100或其部分可以被提供为独立系统或插件或附件。
系统100或其部分可包括从某一服务(如云中)获得的信息或可在云计算环境中操作。云计算环境可以是其中计算服务不被拥有但被按需提供的环境。例如，信息可驻留在联网云中的多个设备上，和/或数据可被存储在云内的多个设备上。
系统100可包括一个或多个计算设备，如计算设备102。所构想的计算设备包括但不限于台式计算机、平板计算机、膝上型计算机、笔记本计算机、个人数字助理、智能电话、蜂窝电话、移动电话等。诸如计算设备102等计算设备可包括一个或多个处理器(如处理器142等)和与该一个或多个处理器通信的存储器(如存储器144)。
系统100可通过以下各项中的一个或多个来包括图1a中表示的一个或多个程序模块：图1a中由在两步内容选择操作的第一步中选择内容的选择模块1106表示的一个或多个第一选择模块、图1a中由计算模块108表示的一个或多个计算模块、图1a中由复制模块110表示的一个或多个复制模块、图1a中由定标模块112表示的一个或多个定标模块、图1a中由显示模块114表示的一个或多个显示模块、图1a中由在两步内容选择操作的第二步中选择内容的选择模块2 116表示的一个或多个第二选择模块、和/或图1a中由粘贴模块118表示的一个或多个粘贴模块。系统100可包括将所选内容自动分类的一个或多个程序模块。系统100可包括将所选内容进行转换的一个或多个程序模块。各模块功能可被组合。例如，一个模块执行两步内容选择操作的两个步骤是可能的，诸如此类。
将明白，一个或多个程序模块(例如，选择模块1 106、计算模块108等)可被加载到存储器144以使得诸如处理器142等一个或多个处理器执行归因于相应程序模块的动作。将明白，计算设备102可包括本领域已知但在此未示出的其他程序模块。
系统100可包括图1a中由显示器122表示的一个或多个显示器。显示器122可以是触摸屏。显示器122可以是传统显示屏。显示器122可以是高分辨率显示器。显示器122可以显示内容。本文使用的“内容”可包括但不限于：文本数据、图像数据、电子表格数据(例如，诸如但不限于微软的电子表格)、日历数据(例如，诸如但不限于微软的日历)或任何其他内容。显示器122可包括一个或多个显示区域，在图1a中由显示区域1 122a和显示区域2 122b来表示。将明白，虽然示出了两个显示区域，但所描述的概念不限于此。构想了任何数量的显示区域。
诸如图1a的显示区域1 122a等第一显示区域可以显示来自诸如源126等内容源的内容的全部或部分。显示区域1 122a可以显示来自诸如目标128等内容目标的内容的全部或部分。诸如显示区域2 122b等第二显示区域可以显示所选内容，在图1a中被示为所选内容124。显示区域2 122b中显示的内容可被放大或扩大。所选内容124可以是由内容选择操作的第一步所选中的内容。所选内容124可以是由内容选择操作的第二步所选中的内容。所选内容124可以是已被编辑的所选内容。
根据本文描述的主题的一些方面，应用129可以是文字处理应用(例如，包括但不限于微软的)、日历应用(例如，包括但不限于微软的)、电子表格应用(例如，包括但不限于微软的)、图像处理应用或操纵内容的任何应用。应用129可能够编辑内容，诸如但不限于所选内容124。
根据本文描述的主题的一些方面，诸如显示区域1 122a等第一显示区域可以显示在两步内容选择操作的第一步中从中进行了第一选择的内容(例如，从中选择了内容的源)的全部或部分。显示区域1 122a可以显示两步内容选择操作所选择的内容被粘贴到其中的内容的全部或部分。两步内容选择操作所选择的内容被粘贴到其中的内容可以是诸如目标128等粘贴操作的目标，其中内容选择操作的第二步中选中的内容被粘贴到该目标。
图1b示出了在计算设备102上的显示区域1 122a中显示的源内容(例如，源126)的示例。源内容可包括各种类型的内容，包括但不限于文本数据、图像数据、电子表格数据(例如，诸如但不限于微软的电子表格)、日历数据(例如，诸如但不限于微软的日历)或任何其他内容。在图1b中，内容包括图像子显示126d中显示的图像126a、在视频子显示126e中显示的视频126b以及在文本子显示126f中显示的文本126c。诸如显示区域2 122b等第二显示区域可以显示由两步内容选择操作的第一步所选中的内容。第二显示区域(显示区域2 122b)可以显示有两步内容选择操作的第一步所选中的内容，以便于在内容选择操作的第二步中对内容进行选择。内容选择操作的第二步可便于选择在该内容选择操作的第一步中选中的内容的子集。在第二显示区域中，可以显示由内容选择操作的第一步选中的内容(即，初始内容)的全部或部分、在内容选择操作的第二步中选中的内容(即，最终内容)、或被编辑的内容。第二显示区域可以是用于启用对内容选择操作的第二步中选中的内容的编辑的内容编辑器的显示。第二显示区域可以是用于将在内容选择操作的第二步中选中的内容粘贴到目标中的显示。
选择模块1 106可以接收指示要被选中的内容的输入。选择模块1 106可以选择在两步内容选择操作的第一步中所指示的内容。选择模块1 106的执行通过接收到菜单选项选择、通过接收到语音命令、通过检测到用户姿势或以本领域现在已知的或以后想到的任何方式来触发。
选择模块1 106要选择的内容可以通过使用诸如在图1a中由选择物体120表示的选择物体等选择物体来指示。选择物体可以是任何输入设备，包括但不限于鼠标、跟踪球、指示笔、或其他合适的物体。选择物体可以是身体部位，如手指或其他身体部位。要选择的内容可以通过例如在触摸屏上使用手指来指示。选择模块1 106可以通过检测与计算设备的触摸感知表面相接触的选择物体的移动来检测选择操作。选择模块1 106可以通过检测选择物体与计算设备的表面接近来检测选择操作。选择模块1 106可以通过检测诸如激光等光束来检测选择操作。选择模块1 106可以确定起始选择点和结束释放点的坐标，如图1c所示，其中已检测到起始选择点130a和结束释放点134a。选择模块1 106响应于选择信息所选中的内容可由计算模块108来确定。在图1c中，所选内容包括图像(图像126a)、视频(视频126b)以及文本126c。
计算模块108可以接收来自选择模块1 106的选择信息(即，第一选择信息)。从选择模块1 106接收到的选择信息可被用来计算基于选择设备在计算设备的表面上或接近计算设备的表面的移动(例如，手指在触摸屏上的移动)的内容选择区域。可以使用从起始选择点(例如，起始选择点130a)和结束释放点(例如，结束释放点134a)的坐标导出的矩形的四个顶点来计算内容选择区域。起始选择点可以指显示区域1 122a上的位置，在此处首先检测到与选择物体的接触。起始选择点可以指在显示区域1 122a上显示的文件中的、选择物体所指点的位置。假定例如显示区域1 122a显示来自源126的内容。可通过将选择物体(例如，手指)置于显示器(例如，触摸屏)上的其中显示所需内容的坐标(x1,y1)处来选择来自源126的内容或者来自源126的内容的部分或子集。在不断开选择物体与显示表面之间的接触的情况下，选择物体可以在显示器的表面上移动到坐标(x2,y2)处的第二点。“不断开接触”意味着选择物体与计算设备之间的接触以不间断的方式来维持。在图1c中，选择物体跨显示表面上的移动由箭头132a示出。在第二点(x2,y2)处，选择物体与显示器的表面之间的接触可被断开。选择模块不再检测到选择物体的点被称为结束释放点，在图1c中由结束释放点134a示出。
从起始选择点到结束释放点的对角线(例如，图1c中的对角线135a)可被用来创建具有根据起始选择点和结束释放点的坐标计算得到的四个顶点的矩形(例如，矩形131a)。即，例如使用坐标(最小x,最大y)150、(最小x,最小y)151、(最大x,最大y)152以及(最大x,最小y)153来形成矩形，如图1d所示，其中(最小x,最大y)是从起始选择点导出的且(最大x,最小y)是从结束释放点导出的。在图1d中，内容154包括文本126c、图像126a以及视频126b。如图1e所示，如果起始选择点(例如，起始选择点130b)的x坐标不在内容的左边缘，则最小x坐标可被修改以使得所选中的内容延伸到内容的左边缘。类似地，如果结束释放点(例如，结束释放点134b)的x坐标不在内容的右边缘，则最大x坐标可被修改以使得所选中的内容延伸到内容的右边缘以形成矩形131b。选择区域中的内容可被突出显示或以某种方式与显示区域1 122a中的未选择内容在视觉上区分开。
选择模块1 106可以选中计算模块108计算得到的选择区域中的内容。被用来计算选择区域的逻辑可被提供作为试探法，包括但不限于诸如确定在给定单个触摸点(例如，手指轨迹的起始点或结束点)的情况下要选择的行的数量的规则等规则。可为特定用户定制各个规则。例如，对于具有较大手指的用户而言，可包括三行文本，而对于具有平均手指的用户所作出的相同移动，则可包括两行文本。在使用较小字体时，所包括的行的数量可增加，以使得作出的选择可根据显示器大小、屏幕分辨率、字体大小、缩放设置等来定制。其他规则可以指定自动延伸到词语、段落、一页的子节、页、章、节等的末尾。
复制模块110可进行选择模块1 106所选内容(即，初始内容)的复制。复制可通过断开接触或失去对选择物体与计算设备之间的接近的检测来触发。在图1d中，内容154包括文本126c、图像126a以及视频126b。复制模块110可根据类型对内容进行自动分类。例如，复制模块110可自动创建所复制内容的作为文本的子节、作为视频的另一子节以及作为图像的又一子节，等等。或者，选择模块1 106可以将不同类型的内容自动分成各单独的逻辑单元。例如，包括图像和文本的内容可被自动分成包括图像的第一显示区域和包括文本的第二显示区域。或者，单独的自动分类模块(未示出)可将不同类型的内容自动分成各单独的逻辑单元。
定标模块112可以接收选择模块2 116所选中的内容(即，最终内容)能被复制、或编辑以及粘贴到其中的目标128(例如，文件等)。如果适当，则定标模块112可以实例化诸如应用129等相关联应用的实例。定标模块112可指示显示模块114将目标128加载到显示区域1 122a中。例如，假定源126和目标128是文字处理文档。定标模块112可以实例化微软的的新实例，并指示显示模块114在显示区域1 122a中显示目标128，如图1f所示，其中显示区域1 122a显示目标128的内容。可接收要将内容粘贴到目标128中的何处的指示。这在图1f中由粘贴位置138示出。
显示模块114可以在第二显示区域(显示区域2 122b)中显示复制模块110所复制的内容154，如图1g1所示。显示模块114可以显示第二显示区域(显示区域2 122b)，该区域覆盖显示区域1 122a。复制模块所复制的内容的部分或全部可在第二显示区域中被放大。在图1g1中，在内容选择操作的第一步中选中的内容已被自动分类成不同内容类型的多个子显示。例如，所选内容的作为图像的所选子节被显示在图像子显示127a中，所选内容的作为视频的选择子节被显示在视频子显示127b中，以及所选内容的作为文本的所选子节被显示在文本子显示127c中。可通过选择单个子显示来单独地操纵各子显示。可通过选择多个子显示来并发地操纵多个子显示。操纵可包括放大、编辑、转换、和/或粘贴到目标。图1g2示出了选择文本子显示127c并将它放大的结果。
选择模块2 116可通过接收第二起始选择点和第二结束选择点来接收标识要选择的内容子集的选择输入。或者，如以上参考选择模块1 106所描述的起始选择点和结束释放点的坐标可被用来计算选择区域。图1h示出了接收标识第二起始选择点(起始选择139a)的选择输入。如果所选内容并非全部被显示在显示区域2 122b中，则可启动滚动操作，如图1i所示。响应于接收第二结束选择点(例如，结束选择点139b)，所指示的内容可被粘贴到目标128中指定位置处(例如，粘贴位置138，如图1f所示)。在选中文本126c时粘贴操作的结果128a被显示在图1j1中，其中“her time answering the door.This just made the younglady even more impatient.”134c已被粘贴到目标128a中。在选中图像子显示126a时粘贴操作的结果128b被显示在图1j2中。
任选地，可在将内容选择操作的第二步所选中的内容粘贴到目标之前编辑该内容，如图1k所示。在图1k中，图1i所示的所选内容124“her time answering the door.Thisjust made the young lady even more impatient.”已被编辑读作“Gremila was slowanswering the door.This just made the young lady even more impatient.”的已编辑内容124a。可调用适当的内容编辑器来执行编辑过程。编辑和粘贴操作的结果在图1l中显示。本文所述的编辑可包括内容的转换。例如，内容可被翻译成不同的语言。转换可包括光学字符识别(OCR)，即扫描的图像转换成数字化文本。原始内容可以是手写的、键入的、或打印的文本。图1m示出了所构想的转换粘贴操作的示例。在图1m中，原始内容126m已被转换成经转换的内容126n。
图2示出了根据本文描述的主题的各方面的启用两步内容选择的方法200的示例。图2中所描述的方法可由诸如但不限于参考图1a所描述的系统来实践。尽管方法200描述了顺序执行的一系列操作，但要理解，方法200不受所示顺序的次序的限制。例如，一些操作可以与所描述的不同的次序发生。另外，一个操作可以与另一操作并发发生。在一些实例中，不是所有的所描述操作都被执行。
在操作202，可按某种方式在计算设备上激活内容选择的第一步和/或复制操作。这样的选择和/或复制操作的激活的非限制性示例可包括：使用物理移动、使用语音命令或以任何其他合适的方式激活选择和/或复制操作。物理移动包括但不限于一个或多个动作，包括将计算设备的一个或多个部分按下、按下并保持、按下并保持特定时间段等。计算设备的接收到该动作的一个或多个部分可以是屏幕或显示部分、键盘上的键、面板、计算设备上的一个或多个按钮等。
在操作204，可在内容选择操作的第一步中指示要选择的内容。要选择的内容可通过例如使用指示笔、鼠标或其他输入设备选择内容来进行指示。要选择的内容可以通过例如以上充分描述的在触摸屏上使用手指选择初始内容来进行指示。
在操作206，可计算选择区域(从中选择内容的区域)。根据本文描述的主题的一些方面，基于输入设备在计算设备的一部分上的移动(例如，手指在触摸屏上的移动)来计算要选择的内容区域。可使用从起始选择点和结束释放点的坐标导出的矩形的四个顶点来计算内容区域。假定例如用户通过将输入设备(例如，手指)置于显示设备(例如，触摸屏)上的坐标(最小x,最大y)处并在不断开输入设备与显示设备之间的接触的情况下来选择内容，跨显示设备的表面上将输入设备移动到坐标(最大x,最小y)处的第二点(在此输入设备与显示设备的表面之间的接触断开)。其中选择模块不再检测到输入设备的点被称为结束释放点。
从起始选择点到结束释放点的对角线可被用来创建具有根据起始选择点和结束释放点的坐标计算得到的四个顶点的矩形。即，例如使用坐标(最小x,最大y)、(最小x,最小y)、(最大x,最大y)以及(最大x,最小y)来形成矩形，其中(最小x,最大y)是起始选择点且(最大x,最小y)是结束释放点。如果起始选择点的x坐标不在内容的左边缘，则最小x坐标可被修改以使得所选中的内容延伸到内容的左边缘。类似地，如果结束释放点的x坐标不在内容的右边缘，则最大x坐标可被修改以使得所选中的内容延伸到内容的右边缘。所选内容可被突出显示或以某种其他方式在视觉上与未选择内容区分开。如以上充分描述的，选择操作可将内容自动分类。
在操作208，可复制选择区域内的内容。复制操作可通过断开输入设备与计算设备之间的接触来触发。如以上充分描述的，复制操作可将内容自动分类。在操作210，用户可指示目标。目标可标识启动的应用。例如，如果标识了微软文档，则可启动WORD编辑器。如果标识了微软电子表格文件，则EXCEL可被启动，等等。在操作212，复制的内容可被显示在与该应用相关联的第二显示区域中。可放大复制的内容的部分或全部。在操作214，可通过指示第二起始选择点和第二结束选择点来在内容选择操作的第二步中选择包括最终内容的初始内容的子集。初始内容的子集可以是已如以上充分描述的那样被自动分类的内容。任选地，如以上充分描述的，所指示的选择可被转换。在操作216，第二起始选择点和第二结束选择点之间的并且包括第二起始选择点和第二结束选择点的内容(任选地被转换)可被粘贴到目标中粘贴位置处。或者，在操作215，内容可在操作216粘贴到目标中粘贴位置处之前被编辑。
合适的计算环境的示例
为了提供有关本文所公开主题的各方面的上下文，图3以及以下讨论旨在提供其中可以实现本文所公开主题的各实施例的合适计算环境510的简要概括描述。尽管本文所公开的主题是在诸如程序模块等由一个或多个计算机或其他计算设备执行的计算机可执行指令的通用上下文中描述的，但本领域技术人员将认识到，本文所公开的主题的各部分还能够结合其他程序模块和/或硬件和软件的组合来实现。通常，程序模块包括执行特定任务或实现特定数据类型的例程、程序、对象、物理人为产物、数据结构等。通常，程序模块的功能可在各个实施例中按需进行组合或分布。计算环境510只是合适的操作环境的一个示例，并且不旨在对此处所公开的主题的使用范围或功能提出任何限制。
参考图3，描述了计算机512形式的计算设备。计算机512可包括至少一个处理单元514、系统存储器516和系统总线518。至少一个处理单元514可执行被存储在诸如但不限于系统存储器516之类的存储器中的指令。处理单元514可以是各种可用处理器中的任何一种。例如，处理单元514可以是图形处理单元(GPU)。这些指令可以是用于实现被描述为由上述一个或多个组件或模块所执行的功能的指令或用于实现上述方法中的一个或多个的指令。也可以使用双微处理器及其他多处理器体系结构作为处理单元514。计算机512可被用于支持在显示屏上呈现图形的系统中。在另一示例中，计算设备的至少一部分可以用在包括图形处理单元的系统中。系统存储器516可包括易失性存储器520和非易失性存储器522。非易失性存储器522可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)或闪存。易失性存储器520可包括可充当外高速缓冲存储器的随机存取存储器(RAM)。系统总线518将包括系统存储器516的系统物理人为产物耦合到处理单元514。系统总线518可以是几种类型的总线结构中的任何一种，包括存储器总线、存储控制器、外围总线、外总线或局部总线，并且可以使用各种可用总线体系结构中的任一种。计算机512可包括处理单元514可通过系统总线518访问的数据存储。数据存储可包括用于图形呈现的可执行指令、3D模型、素材、材质等。
计算机512通常包括各种计算机可读介质，诸如易失性和非易失性介质、可移动和不可移动介质。计算机可读介质可以通过用于存储诸如计算机可读指令、数据结构、程序模块或其他数据等信息的任何方法或技术来实现。计算机可读介质包括计算机可读存储介质(也称为计算机存储介质)以及通信介质。计算机存储介质包括物理(有形)介质，诸如但不限于可存储所希望的数据以及可由计算机512访问的RAM、ROM、EEPROM、闪存或其他存储器技术、CDROM、数字多功能盘(DVD)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储设备。通信介质包括诸如但不限于通信信号、调制载波或可被用于传递所希望的信息以及可由计算机512访问的任何其他无形介质之类的介质。
将理解，图3描述了可充当用户与计算机资源之间的媒介的软件。该软件可以包括可存储在盘存储524上的操作系统528，该操作系统可分配计算机512的资源。盘存储524可以是通过诸如接口526等不可移动存储器接口连接到系统总线518的硬盘驱动器。系统应用程序530利用由操作系统528通过存储在系统存储器516或者存储在盘存储524上的程序模块532和程序数据534对资源的管理。可以理解，计算机可用各种操作系统或操作系统的组合来实现。
用户可通过输入设备536向计算机512输入命令或信息。输入设备536包括但不限于定点设备，诸如鼠标、跟踪球、指示笔、触摸垫、键盘、话筒、语音识别和姿势识别系统等。这些及其他输入设备通过系统总线518经由接口端口538连接到处理单元514。接口端口538可表示串行端口、并行端口、通用串行总线(USB)等。输出设备540可与输入设备使用相同类型的端口。提供输出适配器542以举例说明存在像监视器、扬声器、以及打印机的需要特定适配器的一些输出设备540。输出适配器542包括但不限于，在输出设备540和系统总线518之间提供连接的视频卡和声卡。其他设备和/或系统和/或设备，诸如远程计算机544，可提供输入和输出两种能力。
计算机512可以使用到诸如远程计算机544之类的一个或多个远程计算机的逻辑连接来在联网环境中操作。远程计算机544可以是个人计算机、服务器、路由器、网络PC、对等设备或其他常见的网络节点，并且通常包括许多或所有以上相对于计算机512所描述的元件，但在图3中仅示出了存储器存储设备546。远程计算机544可经由通信连接550逻辑地连接。网络接口548涵盖诸如局域网(LAN)和广域网(WAN)这样的通信网络，但也可包括其他网络。通信连接550是指用来将网络接口548连接到总线518的硬件/软件。通信连接550可以在计算机512内或外并且包括诸如调制解调器(电话、电缆、DSL和无线)和ISDN适配器、以太网卡等内和外技术。
可以理解，所示网络连接仅是示例，并且可以使用在计算机之间建立通信链路的其他手段。本领域的普通技术人员可以理解，计算机512或其他客户机设备可作为计算机网络的一部分来部署。在这一点上，本文所公开的主题涉及具有任意数量的存储器或存储单元以及在任意数量的存储单元或卷上发生的任意数量的应用和进程的任何计算机系统。本文所公开的主题的各方面可应用于具有部署在网络环境中的具有远程或本地存储的服务器计算机和客户计算机的环境。本文所公开的主题的各方面也可应用于具有编程语言功能、解释和执行能力的独立计算设备。
本文所述的各种技术可结合硬件或软件，或在适当时以其组合来实现。由此，本文所公开的方法和装置或其特定方面或部分可采取包含在诸如软盘、CD-ROM、硬盘驱动器或任何其他机器可读存储介质等有形介质中的程序代码(即，指令)的形式，其中当程序代码被加载到诸如计算机等机器内并由其执行时，该机器成为用于实现本文所公开的主题的各方面的装置。如此出所用的，术语“机器可读存储介质”应被用来排除提供(即存储和/或传输)任何形式的传播信号的任何机制。在程序代码在可编程计算机上执行的情况下，计算设备通常将包括处理器、该处理器可读的存储介质(包括易失性和非易失性的存储器和/或存储元件)、至少一个输入设备、以及至少一个输出设备。可例如通过使用数据处理API等来利用域专用编程模型各方面的创建和/或实现的一个或多个程序可用高级过程语言或面向对象的编程语言来实现以与计算机系统通信。然而，如果需要，该程序可以用汇编语言或机器语言来实现。在任何情形中，语言可以是编译语言或解释语言，且与硬件实现相结合。
尽管用结构特征和/或方法动作专用的语言描述了本主题，但可以理解，所附权利要求书中定义的主题不必限于上述具体特征或动作。更确切而言，上述具体特征和动作是作为实现权利要求的示例形式公开的。

Claims (8)

1.一种用于两步内容选择的系统，包括：
至少一个处理器；
连接到所述至少一个处理器的存储器；以及
模块，所述模块在被加载到所述至少一个处理器时使得所述至少一个处理器：
基于内容选择物体的移动在内容选择操作的第一步中选择内容；
基于内容类型将所述内容选择操作的所述第一步中选择的内容分类成多个逻辑单元；
在所述内容选择操作的第二步中，选择在所述内容选择操作的所述第一步中选中的内容的子集；以及
模块，所述模块在被加载到所述至少一个处理器时使得所述至少一个处理器：
编辑在所述内容选择操作的所述第二步中选择的内容；以及将所述内容选择操作的所述第二步中选择的经编辑的内容粘贴到指定粘贴位置处的指定目标。
2.如权利要求1所述的系统，其特征在于，进一步包括：
模块，所述模块在被加载到所述至少一个处理器时使得所述至少一个处理器：
通过检测开始选择点和结束释放点来确定所述内容选择操作的所述第一步中要选择的内容。
3.如权利要求1所述的系统，其特征在于，进一步包括：
模块，所述模块在被加载到所述至少一个处理器时使得所述至少一个处理器：
基于所述内容选择物体在计算设备的触摸感知表面上的移动来在所述内容选择操作的所述第一步中选择所述内容。
4.如权利要求2所述的系统，其特征在于，进一步包括：
模块，所述模块在被加载到所述至少一个处理器时使得所述至少一个处理器：
通过以下来计算选择区域：
确定所述开始选择点的x坐标；
确定所述结束释放点的x坐标；
基于所述开始选择点的x坐标将所述选择区域的x坐标延伸到所述内容的左边缘；以及
基于所述结束释放点的x坐标将所述选择区域的x坐标延伸到所述内容的右边缘。
5.一种用于两步内容选择的方法，包括：
由计算设备的处理器接收要在两步内容选择操作中的第一步中选择的初始内容的指示，所述初始内容由选择物体的移动来指示，所述移动指示开始选择点和结束释放点；
基于内容类型将所述初始内容分类成多个逻辑单元；以及
在所述两步内容选择操作的第二步中选择所述多个逻辑单元中的至少一个逻辑单元；
接收目标；
编辑所述两步内容选择操作的所述第二步中选择的初始内容的子集；以及
将经编辑的子集粘贴到所述目标。
6.如权利要求5所述的方法，进一步包括：
在显示器中放大所述经分类的初始内容。
7.如权利要求5所述的方法，其特征在于，所选择的至少一个逻辑单元的子集是通过在显示所选择的至少一个逻辑单元的显示器上指定开始选择点和结束选择点来选择的。
8.一种用于两步内容选择的方法，包括：
执行两步内容选择操作的第一步，所述第一步基于检测到内容选择物体与计算设备的触摸屏的表面的在开始选择点处的接触以及检测到到结束释放点的维持接触来选择初始内容；
执行所述两步内容选择操作的第二步，所述第二步选择所述初始内容的子集并编辑所述初始内容的所选择的子集。
CN201480061383.1A 2013-11-08 2014-11-05 具有自动内容分类的两步内容选择 Active CN105706038B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/074,762 US9841881B2 (en) 2013-11-08 2013-11-08 Two step content selection with auto content categorization
US14/074,762 2013-11-08
PCT/US2014/063966 WO2015069671A1 (en) 2013-11-08 2014-11-05 Two step content selection with auto content categorization

Publications (2)

Publication Number Publication Date
CN105706038A CN105706038A (zh) 2016-06-22
CN105706038B true CN105706038B (zh) 2019-09-03

Family

ID=51946048

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480061383.1A Active CN105706038B (zh) 2013-11-08 2014-11-05 具有自动内容分类的两步内容选择

Country Status (4)

Country Link
US (1) US9841881B2 (zh)
EP (1) EP3066549A1 (zh)
CN (1) CN105706038B (zh)
WO (1) WO2015069671A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10990267B2 (en) 2013-11-08 2021-04-27 Microsoft Technology Licensing, Llc Two step content selection
US9824076B2 (en) * 2014-10-14 2017-11-21 Bank Of America Coporation Big file editor
KR20170017572A (ko) * 2015-08-07 2017-02-15 삼성전자주식회사 사용자 단말 장치 및 이의 제어 방법
WO2018090372A1 (zh) * 2016-11-21 2018-05-24 深圳市柔宇科技有限公司 电子装置及其显示控制方法
US10345957B2 (en) 2017-06-21 2019-07-09 Microsoft Technology Licensing, Llc Proximity selector
CN109189303B (zh) * 2018-08-30 2021-02-09 维沃移动通信有限公司 文本编辑方法及移动终端
KR20200054699A (ko) * 2018-11-12 2020-05-20 삼성전자주식회사 전자 펜에 의한 터치 입력을 수신하는 터치 스크린을 포함하는 디바이스 및 그 동작 방법

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101031914A (zh) * 2004-06-30 2007-09-05 诺基亚公司 图像和其它用户数据的自动分组
CN102893299A (zh) * 2010-05-13 2013-01-23 微软公司 通过社交网络共享的可编辑的书签

Family Cites Families (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030101044A1 (en) * 2001-11-28 2003-05-29 Mark Krasnov Word, expression, and sentence translation management tool
US7315848B2 (en) * 2001-12-12 2008-01-01 Aaron Pearse Web snippets capture, storage and retrieval system and method
US7496230B2 (en) 2003-06-05 2009-02-24 International Business Machines Corporation System and method for automatic natural language translation of embedded text regions in images during information transfer
US20050052427A1 (en) 2003-09-10 2005-03-10 Wu Michael Chi Hung Hand gesture interaction with touch surface
US8117542B2 (en) * 2004-08-16 2012-02-14 Microsoft Corporation User interface for displaying selectable software functionality controls that are contextually relevant to a selected object
US7895531B2 (en) * 2004-08-16 2011-02-22 Microsoft Corporation Floating command object
US7509345B2 (en) * 2004-09-29 2009-03-24 Microsoft Corporation Method and system for persisting and managing computer program clippings
US20060277481A1 (en) 2005-06-03 2006-12-07 Scott Forstall Presenting clips of content
US7877685B2 (en) 2005-12-29 2011-01-25 Sap Ag Persistent adjustable text selector
JP5129478B2 (ja) 2006-03-24 2013-01-30 株式会社デンソーアイティーラボラトリ 画面表示装置
US8451232B2 (en) 2007-01-07 2013-05-28 Apple Inc. Portable multifunction device, method, and graphical user interface for interacting with user input elements in displayed content
US20090125848A1 (en) 2007-11-14 2009-05-14 Susann Marie Keohane Touch surface-sensitive edit system
US8650507B2 (en) 2008-03-04 2014-02-11 Apple Inc. Selecting of text using gestures
US8201109B2 (en) * 2008-03-04 2012-06-12 Apple Inc. Methods and graphical user interfaces for editing on a portable multifunction device
US8756534B2 (en) * 2009-03-16 2014-06-17 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US20110231796A1 (en) 2010-02-16 2011-09-22 Jose Manuel Vigil Methods for navigating a touch screen device in conjunction with gestures
US20110219323A1 (en) 2010-03-03 2011-09-08 Samsung Electronics Co., Ltd. Mobile device and method for letter input based on cut or copy and paste
US9069416B2 (en) 2010-03-25 2015-06-30 Google Inc. Method and system for selecting content using a touchscreen
WO2011122627A1 (ja) 2010-03-29 2011-10-06 京セラ株式会社 情報処理装置および文字入力方法
WO2011148210A1 (en) 2010-05-25 2011-12-01 Sony Ericsson Mobile Communications Ab A user interface for a touch sensitive display on an electronic device
US20110320978A1 (en) 2010-06-29 2011-12-29 Horodezky Samuel J Method and apparatus for touchscreen gesture recognition overlay
JP5510185B2 (ja) 2010-08-20 2014-06-04 ソニー株式会社 情報処理装置、プログラム及び表示制御方法
JP2012058857A (ja) * 2010-09-06 2012-03-22 Sony Corp 情報処理装置、操作方法及び情報処理プログラム
WO2012044714A1 (en) 2010-10-01 2012-04-05 Imerj LLC Pinch gesture to swap windows
US20120089942A1 (en) 2010-10-07 2012-04-12 Research In Motion Limited Method and portable electronic device for presenting text
US20120216113A1 (en) 2011-02-18 2012-08-23 Google Inc. Touch gestures for text-entry operations
TWI434202B (zh) * 2011-02-25 2014-04-11 Asustek Comp Inc 具觸控式螢幕的電子裝置及其顯示控制方法
KR20120097944A (ko) * 2011-02-28 2012-09-05 삼성전자주식회사 터치 스크린을 구비한 단말기 및 그 단말기에서 데이터 출력 방법
KR20120107356A (ko) 2011-03-21 2012-10-02 삼성전자주식회사 휴대단말에서 클립보드 기능 제공 방법 및 장치
US20120249595A1 (en) 2011-03-31 2012-10-04 Feinstein David Y Area selection for hand held devices with display
US20120268388A1 (en) 2011-04-21 2012-10-25 Mahmoud Razzaghi Touch screen text selection
WO2012162895A1 (en) 2011-06-03 2012-12-06 Google Inc. Gestures for selecting text
KR20130004654A (ko) 2011-07-04 2013-01-14 삼성전자주식회사 휴대단말기의 텍스트 편집방법 및 장치
US9317196B2 (en) 2011-08-10 2016-04-19 Microsoft Technology Licensing, Llc Automatic zooming for text selection/cursor placement
US9612670B2 (en) 2011-09-12 2017-04-04 Microsoft Technology Licensing, Llc Explicit touch selection and cursor placement
US20130113719A1 (en) * 2011-11-09 2013-05-09 Jason Tyler Griffin Touch-sensitive display method and apparatus
JP5994300B2 (ja) 2012-03-12 2016-09-21 ブラザー工業株式会社 入力装置及び入力プログラム
US9164658B2 (en) * 2012-10-12 2015-10-20 Cellco Partnership Flexible selection tool for mobile devices
US9134893B2 (en) * 2012-12-14 2015-09-15 Barnes & Noble College Booksellers, Llc Block-based content selecting technique for touch screen UI
US20150052430A1 (en) 2013-08-13 2015-02-19 Dropbox, Inc. Gestures for selecting a subset of content items
US20150067570A1 (en) * 2013-09-04 2015-03-05 Jae In Yoon Method and Apparatus for Enhancing User Interface in a Device with Touch Screen
US20150130723A1 (en) 2013-11-08 2015-05-14 Microsoft Corporation Two step content selection with trajectory copy
US10990267B2 (en) 2013-11-08 2021-04-27 Microsoft Technology Licensing, Llc Two step content selection

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101031914A (zh) * 2004-06-30 2007-09-05 诺基亚公司 图像和其它用户数据的自动分组
CN102893299A (zh) * 2010-05-13 2013-01-23 微软公司 通过社交网络共享的可编辑的书签

Also Published As

Publication number Publication date
WO2015069671A1 (en) 2015-05-14
CN105706038A (zh) 2016-06-22
US20150135103A1 (en) 2015-05-14
EP3066549A1 (en) 2016-09-14
US9841881B2 (en) 2017-12-12

Similar Documents

Publication Publication Date Title
CN105706038B (zh) 具有自动内容分类的两步内容选择
CN1318940C (zh) 在文档上覆盖电子墨迹的方法
CN105264517B (zh) 用于文本表示转换的墨水
CN104520843A (zh) 在电子阅读器中提供基于笔记的内容注释
CN102067079B (zh) 在用户界面显示上呈现教导动画
US20140019905A1 (en) Method and apparatus for controlling application by handwriting image recognition
JP6147825B2 (ja) 電子機器および方法
CN106843715A (zh) 用于远程化的应用的触摸支持
CN106575291A (zh) 检测数字墨水的选择
US20120110471A2 (en) Systems and Methods for Collaborative Interaction
CN107861784A (zh) 一种桌面图标的整理方法、装置及移动终端
US20140304586A1 (en) Electronic device and data processing method
CN109643213A (zh) 用于协同编辑工具的触摸屏用户界面的系统和方法
DE112012006165T5 (de) Touchscreen-Anwenderschnittstelle mit Spracheingabe
US10776570B2 (en) Supporting digital ink in markup language documents
CN104040469A (zh) 在基于笔的计算系统中的内容选择
CN103885704A (zh) 文本放大显示方法
CN107562320A (zh) 一种提供应用程序的功能的方法及触屏智能终端设备
JP5306528B1 (ja) 電子機器および手書き文書処理方法
CN105867820A (zh) 用于触摸屏的文本编辑方法和装置
JP5813792B2 (ja) システムおよびデータ提供方法並びに電子機器
CN105247463B (zh) 增强的画布环境
CN105723314A (zh) 两步内容选择
CN105359131B (zh) 栓系选择句柄
JP6759552B2 (ja) 情報処理装置及び情報処理プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant