CN110622119A - 对象插入 - Google Patents

对象插入 Download PDF

Info

Publication number
CN110622119A
CN110622119A CN201880032362.5A CN201880032362A CN110622119A CN 110622119 A CN110622119 A CN 110622119A CN 201880032362 A CN201880032362 A CN 201880032362A CN 110622119 A CN110622119 A CN 110622119A
Authority
CN
China
Prior art keywords
closed shape
interactive canvas
object insertion
user input
computing device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201880032362.5A
Other languages
English (en)
Inventor
E·松尼诺
A·达特
A·M·凯茜
M·罗杰斯
J·A·阿拉科迭斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN110622119A publication Critical patent/CN110622119A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1615—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
    • G06F1/1616—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with folding flat displays, e.g. laptop computers or notebooks having a clamshell configuration, with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

描述了用于对象插入的技术。在一种或多种实现中，将数字内容生成为交互式画布，并在计算设备的一个或多个显示设备上显示该交互式画布。接收针对交互式画布的用户输入，并检测到用户输入对应于闭合形状。响应于检测到用户输入对应于闭合形状，将用户输入数字化并显示为交互式画布上的附加数字内容，并通过在交互式画布上显示对象插入菜单来启动对象插入模式。响应于从对象插入菜单中选择对象，将所选择的对象插入到闭合形状内的交互式画布中。

Description

对象插入
背景技术
用户越来越多地通过使用触控笔或用户的手指向触摸显示器提供用户输入，来与设备进行交互。使用触控笔可以使用户例如通过在显示设备上进行书写或绘图，来轻松地向显示设备提供“自由形式”输入。但是，当用于与该设备交互的主输入设备是触控笔或用户的手指时，用户可能很难启动其它功能，例如访问菜单以将对象或内容插入画布。此外，在具有较小显示器的设备(例如，智能手机或平板设备)上，用于将内容插入到画布中的菜单的显示占用了宝贵的屏幕空间，否则用户可以利用该屏幕空间来创建内容。
发明内容
描述了用于对象插入的技术。在一种或多种实现中，将数字内容生成为交互式画布，并在计算设备的一个或多个显示设备上显示该交互式画布。接收针对交互式画布的用户输入，并检测到用户输入对应于闭合形状。响应于检测到用户输入对应于闭合形状，将用户输入数字化并显示为交互式画布上的附加数字内容，并通过在交互式画布上显示对象插入菜单来启动对象插入模式。响应于从对象插入菜单中选择对象，将所选择的对象插入到闭合形状内的交互式画布中。
在一种或多种实现中，将数字内容生成为交互式画布，并在计算设备的一个或多个显示设备上显示该交互式画布以及一个或多个对象。接收针对交互式画布的用户输入，并检测到用户输入对应于闭合形状，并且所述一个或多个对象在该闭合形状内。响应于检测到用户输入对应于闭合形状并且所述一个或多个对象在闭合形状内，显示可被选择以对闭合形状内的所述一个或多个对象执行一个或多个相应的操作的一个或多个控件。
在一种或多种实现中，接收针对交互式画布的用户输入，并检测到用户输入对应于闭合形状。响应于检测到用户输入对应于闭合形状，在交互式画布上显示对象插入菜单。该对象插入菜单包括与可插入到闭合形状内的交互式画布中的多个不同对象类型相对应的可选择表示。响应于从对象插入菜单接收到对于与对象类型相关联的可选择表示的用户选择，在对象插入菜单中显示与所选择的对象类型相关联的对象插入控件。对象插入控件包括与和所选择的对象类型相关联的对象相对应的附加可选择表示，其中可选择该附加可选择表示以将相应对象插入到闭合形状内的交互式画布中。
附图说明
参照附图描述具体实施方式。在这些附图中，附图标记的最左侧数字标识该附图标记第一次出现时的附图。说明书和附图中的不同实例中对于相同附图标记的使用，指示类似或相同的项。
图1是示例性实现中的环境100的图示，该示例性实现可用于采用本文所讨论的用于对象插入的技术。
图2描绘了用于更详细地示出图1的对象插入模块的系统。
图3A到图3F示出了根据一种或多种实施方式的对象插入的各种例子。
图4示出了围绕一个或多个对象绘制闭合形状的例子。
图5是根据一种或多种实现，描述用于将对象插入到交互式画布的方法中的步骤的流程图。
图6是描述用于显示一个或多个控件的方法中的步骤的流程图，其中所述一个或多个控件可被选择以对闭合形状内的对象执行操作。
图7是根据一种或多种实现，描述用于响应于检测到与闭合形状相对应的用户输入，显示对象插入菜单的方法中的步骤的流程图。
图8示出了包括示例性计算设备的示例系统，该示例性计算设备代表可以实现本文所描述的各种技术的一个或多个计算系统和/或设备。
具体实施方式
描述了用于对象插入的技术。在一种或多种实现中，将数字内容生成为交互式画布，并在一个或多个显示设备上显示该交互式画布。对象插入模块监测针对交互式画布的用户输入，并检测到针对交互式画布的用户输入对应于闭合形状。响应于检测到用户输入对应于闭合形状，将用户输入数字化并显示为交互式画布上的数字内容，并且通过在交互式画布上动态地显示对象插入菜单来启动对象插入模式。在一种或多种实现中，除非闭合形状高于某个尺寸阈值，否则不显示对象插入菜单。例如，对象插入菜单可以包括与各种类型的对象或内容(例如，图像、视频、音频文件、文本等等)相关联的可选择表示。响应于从对象插入菜单中选择对象，将所选择的对象插入到闭合形状内的交互式画布中。
因此，所描述的技术通过使对象能够快速且高效地插入到交互式画布中来改善用户体验。另外，特别是与持久地显示菜单项的常规解决方案相比，动态地并且响应于检测到闭合形状来显示对象插入菜单，可以最大化用户能够用于创建的屏幕空间。
图1是可操作以采用本文所讨论的用于对象插入的技术的示例性实现中的环境100的图示。环境100包括可以被配置用于移动用途的客户端设备102，例如移动电话、平板计算机、可穿戴设备、手持游戏设备、媒体播放器等等。在该例子中，将客户端设备102实现为“双显示器”设备，并且包括通过铰链108彼此连接的显示设备104和显示设备106。显示设备104包括触摸表面110，以及显示设备106包括触摸表面112。客户端设备102还包括输入模块114，该输入模块114被配置为处理经由触摸表面110、112之一和/或经由铰链108接收的输入。虽然本文所讨论的一些技术将参照双显示设备来描述，但应当理解，在一些情况下，这些技术也可以在诸如移动电话、平板计算机、媒体播放器、膝上型计算机、台式计算机等等之类的单屏幕设备上实现。另外，铰链108还可以允许显示设备104和106彼此折回以提供“单个显示”设备。因此，本文所描述的技术可以被设计为在用户是以双显示器模式还是单显示器模式操作时起作用。另外，虽然在该例子中示出了具有铰链的双显示设备，但应当理解，在一些情况下，这些技术可以在单显示设备、双显示设备或不具有铰链的多显示设备中实现。
铰链108被配置为绕铰链108的纵轴116旋转运动以允许显示设备104、106之间的角度发生改变。用此方式，铰链108允许显示设备104、106彼此连接，但相对于彼此以不同的角度和/或平面方向进行取向。在至少一些实现中，触摸表面110、112可以代表能沿着铰链108弯曲的单个集成且连续的显示表面的不同部分。
虽然在移动设备的上下文中讨论了本文所提出的实施方式，但应当理解，根据所要求保护的实施方式，可以利用各种其它类型和形状因素的设备。因此，客户端设备102的范围可以从具有大量存储器和处理器资源的全资源设备到具有有限存储器和/或处理资源的低资源设备。下面参照图8讨论客户端设备102的示例性实现。
客户端设备102包括使得能够执行各种活动和任务的各种不同功能。例如，客户端设备102包括操作系统118、应用程序120和通信模块122。通常，操作系统118表示用于对客户端设备102的各种系统组件(例如，硬件、内核级模块和服务等等)进行抽象的功能。例如，操作系统118可以提取客户端设备102的各种组件(例如，硬件、软件和固件)，以使得能够在客户端设备102上运行的组件和应用程序之间进行交互。
应用程序120表示用于通过客户端设备102执行不同任务的功能。在一个特定的实现中，应用程序120表示网络浏览器、网络平台或可以用于通过网络来浏览网站的其它应用程序。
通信模块122表示用于使客户端设备102能够通过有线和/或无线连接进行通信的功能。例如，通信模块122表示用于经由各种不同的有线和/或无线技术和协议进行数据通信的硬件和逻辑。
根据各种实现，显示设备104、106通常表示用于客户端设备102的视觉输出的功能。另外，显示设备104、106表示用于经由触摸表面110、112中的一个或多个，接收诸如触摸输入、触控笔输入、非触摸接近输入等等之类的各种类型的输入的功能，其中触摸表面110、112可以用作显示设备104、106的可视输出部分。输入模块114表示使客户端设备102能够接收输入(例如，经由输入装置124)、并以各种方式处理和路由输入的功能。
输入装置124通常表示用于接收针对客户端设备102的输入的不同功能，并且包括数字化器126、触摸输入设备128和模拟输入设备130。输入装置124的例子包括姿势敏感传感器和设备(例如，例如基于触摸的传感器)、触控笔、触摸板、加速度计、具有附随语音识别软件的麦克风等等。输入装置124可以与显示设备104、106分离或集成在一起；集成示例包括带有集成触摸感应传感器的手势感应显示器。
数字化器126表示用于以各种方式，将针对显示设备104、106，触摸输入设备128和模拟输入设备130的各种类型的输入转换为可由客户端设备102使用的数字数据的功能，例如通过显示与用户输入相对应的数字内容。模拟输入设备130表示可用于生成表示数据的不同物理量的硬件装置(例如，铰链108)。例如，铰链108表示可以通过测量诸如铰链108的铰链角之类的物理变量，来利用其生成输入数据的装置。例如，一个或多个传感器132可以测量铰链角，数字化器126可以将这些测量结果转换为客户端设备102可以使用的数字数据，以对通过显示设备104、106显示的数字内容执行操作。
通常，传感器132表示用于检测客户端设备102接收的不同输入信号的功能。例如，传感器132可以包括一个或多个铰链传感器，这些铰链传感器被配置为检测显示设备104、106之间的铰链角。另外，传感器132还可以包括握持传感器(例如，触摸传感器)，其被配置为检测用户如何握住客户端设备102。因此，可以实现各种不同的传感器132以检测各种不同类型的数字和/或模拟输入。这些和其他方面将在下面进行进一步详细讨论。
在一个特定的实现中，应用程序120表示日记应用程序，该应用程序提供数字内容作为代表日记页面的交互式画布。例如，可以将日记应用程序的第一页面显示为显示设备104的触摸表面110上的数字内容，而可以将日记应用程序的第二页面显示为显示设备106的触摸表面112上的数字内容。然后，用户使用触控笔或用户的手指在交互式画布上进行书写和绘图，以便生成与输入相对应的其它数字内容，以及插入和/或操作各种不同的对象(例如，通过插入图像或视频、使用客户端设备102的摄像头进行拍照、将显示在网络浏览器上的图像拖动到交互式画布等等)。
在至少一些实现中，应用程序120包括或者以其它方式利用对象插入模块134。例如，对象插入模块134表示独立的应用程序。在其它实现中，将对象插入模块134包括为另一个应用程序或系统软件(例如，操作系统118或日记应用程序)的一部分。通常，对象插入模块134被配置为响应于检测到针对交互式画布的用户输入对应于闭合形状，而将对象插入到交互式画布中。例如，用户可以在交互式画布上绘制闭合形状，以触发对象插入模块134显示对象插入菜单，其中对象插入菜单允许将各种类型的对象(例如，图像、视频或文本)插入到交互式画布中。下面提供对该功能和其它功能的进一步讨论。
图2描绘了用于更详细地示出对象插入模块134的系统200。
在系统200中，对象插入模块134在监测模式204下，监测针对交互式画布的用户输入202。例如，用户可以使用触控笔、用户的手指等等与交互式画布进行交互。在206处，对象插入模块134确定用户输入202是否对应于闭合形状。如果用户输入不对应于闭合形状，则对象插入模块134保持在监测模式。但是，如果用户输入202对应于闭合形状，则对象插入模块134启动对象插入模式208。
作为示例，考虑图3A到图3F，这些图根据一种或多种实现，示出了对象插入的各种例子300。
在图3A中，客户端设备102将数字内容生成为交互式画布302，并且在一个或多个显示设备上显示交互式画布302。在该例子中，跨“双显示器”客户端设备102的两个显示设备104和106来显示交互式画布302，并且交互式画布302与日记应用程序相关联。但是，如贯穿本文所描述的，在其它情况下，可以在“单显示器”设备上显示交互式画布302和/或交互式画布302与不同类型的应用程序相关联。日记应用程序使用户能够使用诸如触控笔或用户的手指之类的输入设备，在交互式画布302上记笔记和/或进行绘图。在该例子中，当用户使用触控笔303在交互式画布302的左上角书写时，接收到针对交互式画布的用户输入，作为响应，对用户输入进行数字化并显示为交互式画布302上的附加数字内容301。
除了使用户能够在交互式画布302上进行书写或绘图外，交互式画布302还使用户能够插入和操纵各种不同类型的对象。如本文所描述的，对象可以包括任何类型的内容，例如图像和照片、视频、音频文件、文本、符号、绘图等等。用户可以插入对象的一种方式是通过使用触控笔或用户的手指在交互式画布302上进行书写或绘图。用户可以将对象插入交互式画布302的另一种方式是通过启动诸如网络浏览器之类的应用程序，并将网络浏览器所显示的网页中包含的各种图像拖放到交互式画布302中。
另外，对象插入模块134使用户能够通过在交互式画布302上绘制闭合形状，将对象快速且高效地插入到交互式画布中。如本文所描述的，闭合形状可以包括各种不同类型的规定的几何形状，例如，圆形、椭圆形、正方形、矩形、三角形等等。在一种或多种实现中，将该形状插入到绘制的形状中。或者，系统可以检测形状的类型，并对形状的干净版本进行格式化。例如，系统可以检测正方形，并清理形状(例如，通过使直线变直、具有相同的大小等等)。
在一种或多种实现中，闭合形状不需要对应于规定的几何形状，而是包括任何“闭合”的“自由形式”形状。因此，用户可以将对象插入各种不同类型的形状中，而不受限于所规定的几何形状。
在一种或多种实现中，可以将对象插入模块实现为以一定程度的误差来识别“闭合”形状，使得用户可以鉴于该形状的结束绘制笔划没有与该形状的开始绘制笔划相交而快速地绘制未闭合的形状。在该情况下，即使笔划在交互式画布上不相交，对象插入模块134也可以由于开始笔划与结束笔划的接近，而识别出用户想要绘制闭合形状的意图。
为了能够插入对象，对象插入模块134以监测模式204监测针对交互式画布302的用户输入。响应于接收到用户输入，将用户输入数字化并在交互式画布上显示为附加数字内容。然后，对象插入模块134检测用户输入是否对应于闭合形状。例如，在图3A中，对象插入模块134检测到用户输入对应于闭合形状304，该闭合形状在该例子中为正方形。值得注意的是，对闭合形状304进行数字化并在交互式画布302上显示为附加的数字内容。
另外，响应于检测到用户输入对应于闭合形状，对象插入模块134启动对象插入模式208，该对象插入模式208使用户能够快速且高效地将对象插入到交互式画布上的闭合形状内的区域中。值得注意的是，可以在用户在画布上书写时触发对象插入模式208，从而实现从在交互式画布302上进行书写或绘图到插入对象的无缝过渡。换句话说，用户不需要首先选择转换到对象插入模式208的控件，而是可以在交互式画布上快速地绘制闭合形状。
在对象插入模式208中，对象插入模块134动态地提供对象插入菜单。例如，在图3B中，对象插入模块134响应于闭合形状304的检测，而在交互式画布302上显示对象插入菜单306。在该例子中，将对象插入菜单306显示在闭合形状的附加数字内容内。但是，可以将对象插入菜单306显示在各种不同的位置中，例如在交互式画布302上靠近闭合形状、交互式画布302上的固定位置(例如，交互式画布302的右上角)等等。以动态方式显示对象插入菜单306使客户端设备102的屏幕空间最大化，这是因为直到触发对象插入模式208才利用对象插入菜单306所占据的空间。此外，在该例子中，将对象插入菜单306显示在闭合形状304内，这确保了对象插入菜单306将不会与交互式画布302中的其它对象或内容重叠。
对象插入菜单212实现将各种不同类型的对象或内容插入到交互式画布302中。这些对象可以存储在客户端设备102上，也可以远离客户端设备102，例如存储在与客户端设备102相关联的云服务。通常，对象插入菜单212包括可以插入到闭合形状内的交互式画布的多种不同类型对象的可选择表示，例如用于插入一个或多个图像或照片、文档、文本、视频、音频文件、3D模型等等的可选择表示。
在一种或多种实现中，对象插入菜单包括与可以插入到闭合形状内的交互式画布中的多个不同对象类型相对应的可选择表示。例如，在图3B中，对象插入菜单306包括可选择表示307，在该例子中，其对应于指示多种不同对象类型的图标。在该例子中，多种不同的对象类型包括照片、文档、视频和文本。用户可以选择对象插入菜单306的可选择表示之一，以便将对象插入到闭合形状304内的区域中。
在一种或多种实现中，对象插入菜单被配置为显示与第一子集的对象类型相对应的可选择表示、以及可被选择以使得显示与至少第二子集的对象类型相对应的附加可选择表示的导航控件。在图3B中，例如，对象插入菜单306显示由三个点表示的导航控件309，其指示可以控制对象插入菜单以显示对象类型的三个不同子集。例如，在图3C中，用户已选择导航控件309滚动到第二子集的对象类型，在该例子中，第二子集的对象类型包括录音、联系卡、3D对象、以及来自客户端设备102的相机的照片。
在一种或多种实现中，响应于从对象插入菜单306接收到与对象类型相关联的表示307的用户选择，对象插入模块134将与所选择的对象类型相关联的对象插入控件放置在对象插入菜单中。对象插入控件包括与和所选择的对象类型相关联的对象相对应的其它可选择表示。
例如，在图3D中，用户选择与照片的对象类型相对应的可选择表示307。作为响应，与照片的对象类型相关联的对象插入控件308显示在对象插入菜单306中，如图3E中所示。对象插入控件308包括与可以选择的照片的对象类型相对应的附加可选择表示，以便将各个照片插入到闭合形状内的交互式画布中。例如，可以将照片存储在客户端设备102上和/或存储在一个或多个远程存储设备上，并且对象插入控件308的其它可选择表示与照片的预览图像相对应。值得注意的是，对象插入控件可以显示与任何类型的对象相对应的任何类型(例如，视频、文档等等)的可选择表示。
响应于从对象插入控件308中选择附加的可选择表示，在闭合形状内的区域处将所选择的对象插入到交互式画布302中。例如，在图3E中，用户经由来自触控笔303的用户输入来选择男人的照片。在图3F中，响应于该选择，将与该男子的照片相对应的对象310插入到交互式画布302上的闭合形状304内的区域中。在一些情况下，可以实现对象插入模块134以例如通过裁剪、拉伸、或调整所选择的对象的大小，来编辑所选择的对象以适合闭合形状304内部的区域。在一些情况下，对象插入模块134使闭合形状的轮廓保留在交互式画布上。用此方式，在插入的对象周围显示闭合形状的可见轮廓。替代地，可以在插入对象后，从交互式画布中删除闭合形状的轮廓。
在一种或多种实现中，对象插入模块134被配置为：如果用户在特定的时间段内(例如，2秒、5秒等等)未与对象插入菜单进行交互，则去除对象插入菜单306的显示。在一些情况下，用户可以通过向交互式画布进行特定类型的用户输入和/或选择触控笔上的某个按钮，来取消对象插入模式。例如，可以响应于用户与交互式画布的除对象插入菜单之外的部分进行交互(例如，通过继续在交互式画布上进行绘图)，来取消对象插入模式。在该情况下，去除对象插入菜单306的显示。在一种或多种实现中，如果在用户没有提供输入以将对象插入到闭合形状中的情况下禁用了对象插入模式，则对象插入模块134允许与闭合形状304相对应的数字内容保留在交互式画布302上。用此方式，用户能够在交互式画布302上绘制闭合形状。
在一种或多种实现中，对象插入模块134被配置为监测用户输入的模式，以便响应于确定用户当前正在交互式画布302上绘图而暂时地禁用对象插入模式，因此不希望不断地显示对象插入菜单。此外，在一种或多种实现中，用户可以手动地禁用对象插入模式208。
在一种或多种实现中，响应于检测到用户输入对应于也大于某个尺寸阈值的闭合形状，对象插入模块134启动对象插入模式208。该特定尺寸阈值确保与特定形状相对应的用户输入不是旨在进行书写输入，从而确保不响应于用户输入字母“O”或“D”或任何其它具有“闭合”形状的字母、数字、标点或重音来触发对象插入模式。在一些情况下，该特定尺寸阈值可以是动态地基于用户当前的书写的。例如，如果用户正在写的字比较小并且突然画一个大圆圈，这将触发对象插入模式208，而如果用户正在写的字比较大并且在书写附近画一个大圆圈，则对象插入模块134可以将其解释为“O”。
在一种或多种实现中，对象插入模块134使用户能够通过围绕一个或多个对象绘制闭合形状来选择一个或多个对象。响应于检测到用户输入对应于闭合形状，显示一个或多个控件。可选择所述一个或多个控件以对闭合形状内的一个或多个对象执行一个或多个相应的操作。
可以基于闭合形状内的对象来动态地选择一个或多个控件。例如，对象插入模块134可以确定闭合形状内的对象的上下文或对象类型，并基于上下文或对象类型来动态地选择显示的控件。例如，如果闭合形状内的一个或多个对象是图片，则可以显示可选择的对图片执行操作的控件，而如果闭合形状内的一个或多个对象是视频，则可以显示可选择的对视频执行操作的控件。再举一个例子，如果围绕写在交互式画布上的电话号码绘制了闭合形状，则对象插入模块134可以浮出与创建或编辑联系卡相关联的一个或多个控件。
在一些情况下，可以选择所述一个或多个控件以对闭合形状内的多个对象执行操作。例如，如果多个对象在闭合形状内，则可以显示可选择以对闭合形状内的对象执行操作的控件(例如，使得将闭合形状内的对象组合在一起的分组控件)。举例而言，考虑图4，图4示出了围绕一个或多个对象绘制闭合形状的例子400。在该例子中，接收到围绕多个对象404和406绘制闭合形状402的用户输入。响应于检测到用户输入对应于围绕对象404和406绘制的闭合形状，对象插入模块134在闭合形状402内显示与对象404和406相关联的一个或多个控件408。在该例子中，控件408包括可以选择以便对对象404和406进行组合的分组控件。
下面的讨论描述了根据一个或多个实施例的用于对象插入的示例性过程。可以在图1的环境100、图8的系统800和/或任何其它适当的环境中，采用该示例性过程。例如，该过程表示用于实现上面所讨论的示例性实现场景的过程。
图5是根据一种或多种实现，描述用于将对象插入到交互式画布的方法中的步骤的流程图。
在502处，将数字内容生成为交互式画布，并且在504处，在计算设备的一个或多个显示设备上显示该交互式画布。例如，对象插入模块134将数字内容生成为交互式画布302，并且在客户端设备102的显示设备104和/或显示设备106上显示交互式画布。
在506处，接收到用户输入，并且检测到该用户输入对应于闭合形状。例如，对象插入模块134接收针对交互式画布302的用户输入，并检测到该用户输入对应于闭合形状304。
在508处，响应于检测到用户输入对应于闭合形状，将用户输入数字化并显示在交互式画布上，并且通过在交互式画布上显示对象插入菜单来启动对象插入模式。例如，对象插入模块134数字化与闭合形状304相对应的用户输入并在交互式画布302上进行显示，并通过在交互式画布302上显示对象插入菜单306来启动对象插入模式208。
在510处，响应于从对象插入菜单中选择对象，将所选择的对象插入到闭合形状内的交互式画布中。例如，响应于从对象插入菜单306中选择与对象相对应的可选择表示，将对象310插入到闭合形状304内的交互式画布302中。如果没有在特定的时间段内从对象插入菜单中选择对象，则对象插入模块134可以通过删除对象插入菜单306的显示来禁用对象插入模式208。但是，对象插入模块134使与闭合形状304相对应的附加数字内容保留在交互式画布302上。
图6是描述用于显示一个或多个控件的方法中的步骤的流程图，所述一个或多个控件可被选择以对闭合形状内的对象执行操作。
在602处，将数字内容生成为交互式画布，在604处，在计算设备的一个或多个显示设备上显示交互式画布。例如，对象插入模块134将数字内容生成为交互式画布302，并且在客户端设备102的显示设备104和/或显示设备106上显示交互式画布。
在606处，在交互式画布上显示一个或多个对象。例如，对象插入模块134在交互式画布上显示对象404和406。
在608处，接收到用户输入，并且检测到该用户输入对应于闭合形状并且一个或多个对象在闭合形状内。例如，对象插入模块134接收针对交互式画布302的用户输入，检测到该用户输入对应于闭合形状402，并且对象404和406位于该闭合形状内。
在610处，响应于检测到用户输入对应于闭合形状并且一个或多个对象在闭合形状内，显示可被选择以对闭合形状内的一个或多个对象执行一个或多个相应操作的一个或多个控件。例如，对象插入模块134显示可被选择以对闭合形状402内的对象404和406执行一个或多个相应操作的一个或多个控件408。
在612处，响应于对控件之一的选择，对闭合形状内的一个或多个对象执行相应的操作。例如，对象插入模块134对闭合形状402内的对象404和406执行与所选控件408相对应的所选操作。
图7是根据一种或多种实现，描述用于响应于检测到用户输入对应于闭合形状，显示对象插入菜单的方法中的步骤的流程图。
在702处，接收到针对交互式画布的用户输入，并且检测到该用户输入对应于闭合形状。例如，对象插入模块134接收到针对交互式画布302的用户输入，并检测到该用户输入对应于闭合形状304。
在704处，在交互式画布上显示对象插入菜单，并且该对象插入菜单包括与可以插入到闭合形状内的交互式画布中的多个不同对象类型相对应的可选择表示。例如，对象插入模块134显示对象插入菜单306，该对象插入菜单306包括与可以插入到闭合形状304内的交互式画布302中的多个不同对象类型相对应的可选择表示307。
在706处，响应于从对象插入菜单接收到对于与对象类型相关联的可选择表示的用户选择，在对象插入菜单中显示与所选择的对象类型相关联的对象插入控件。该对象插入控件包括与和所选择的对象类型相关联的对象相对应的附加可选择表示，其中可选择该附加可选择表示以将相应对象插入到闭合形状内的交互式画布中。例如，响应于从对象插入菜单306接收到对于与对象类型相关联的可选择表示307的用户选择，对象插入模块134在对象插入菜单306中显示与所选择的对象类型相关联的对象插入控件308。该对象插入控件包括与和所选择的对象类型相关联的对象相对应的附加可选择表示，其中可选择该附加可选择表示以将相应对象插入到闭合形状内的交互式画布中。
图8示出了包括示例性计算设备802的大体以800表示的示例性系统，其中计算设备802代表可以实现本文所描述的各种技术的一个或多个计算系统和/或设备。在至少一些实现中，计算设备802表示上面所讨论的客户端设备102的实现。例如，计算设备802可以被配置为通过使用外壳而采用移动配置，该外壳的形状和尺寸被设计成可以由用户的一只或多只手抓住和携带，其说明性示例包括移动电话、移动游戏和音乐设备和平板电脑，但也可以考虑其它示例。在至少一些实现中，可以将客户端设备102实现为诸如智能手表、智能眼镜、用于计算设备的双面手势输入外围设备等等之类的可穿戴设备。
如图所示的示例性计算设备802包括处理系统804、一个或多个计算机可读介质806、以及一个或多个I/O接口808，它们彼此通信地耦合。虽然没有示出，但计算设备802还可以包括用于将各种组件彼此耦合的系统总线或其它数据和命令传输系统。系统总线可以包括不同总线结构中的任何一个或组合，例如存储器总线或存储器控制器、外围总线、通用串行总线、和/或利用各种总线架构中的任何总线架构的处理器或本地总线。还可以预期各种各样的其它示例(例如，控制线和数据线)。
处理系统804表示使用硬件执行一个或多个操作的功能。因此，将处理系统804示出为包括可以被配置成处理器、功能块等等的硬件元件810。这可以包括利用硬件实现成专用集成电路或者使用一个或多个半导体形成的其它逻辑器件。硬件元件810不受制成它们的材料或者其中采用的处理机制的限制。例如，处理器可以包括半导体和/或晶体管(例如，电子集成电路(IC))。在这样的上下文中，处理器可执行指令可以是电子可执行指令。
计算机可读存储介质806示出为包括存储器/存贮设备812。存储器/存贮设备812表示与一个或多个计算机可读介质相关联的存储器/存储容量。存储器/存贮设备812可以包括易失性介质(例如，随机存取存储器(RAM))和/或非易失性介质(例如，只读存储器(ROM)、闪存、光盘、磁盘等等)。存储器/存贮设备812可以包括固定介质(例如，RAM、ROM、固定硬盘驱动器等等)以及可移动介质(例如，闪存、可移动硬盘驱动器、光盘等等)。可以以各种其它方式来配置计算机可读介质806，如下面进一步描述的。
输入/输出接口808表示允许用户向计算设备802输入命令和信息，并且还允许使用各种输入/输出设备将信息呈现给用户和/或其它组件或设备的功能。输入设备的示例包括键盘、光标控制设备(例如，鼠标)、麦克风、扫描仪、触摸功能(例如，被配置为检测物理触摸的电容或其它传感器)、相机(例如，其可以采用诸如红外频率之类的可见或不可见波长来识别不涉及触摸的手势的运动)等等。输出设备的示例包括显示设备(例如，监视器或投影仪)、扬声器、打印机、网卡、触觉响应设备等等。因此，可以以支持用户交互的各种方式来配置计算设备802。
本文可以在软件、硬件元件或程序模块的通常上下文中描述各种技术。通常，这样的模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、元素、组件、数据结构等等。如本文所使用的术语“模块”、“功能”和“组件”通常表示软件、固件、硬件或者其组合。本文所描述的技术的特征是与平台无关的，这意味着可以在具有各种处理器的各种各样的商业计算平台上实现这些技术。
所描述的模块和技术的实现可以存储在某种形式的计算机可读介质上或通过某种形式的计算机可读介质进行传输。计算机可读介质包括可以由计算设备802访问的各种介质。举例而言但非做出限制，计算机可读介质可以包括“计算机可读存储介质”和“计算机可读信号介质”。
“计算机可读存储介质”可以指代与仅仅信号传输、载波波形或信号本身相比，能够持久地存储信息的介质和/或设备。因此，计算机可读存储介质指代非信号承载介质并且本身不包括信号。计算机可读存储介质包括诸如易失性和非易失性、可移动和不可移动介质和/或存储设备之类的硬件，其以适于存储诸如计算机可读指令、数据结构、程序模块、逻辑单元/电路或其它数据之类的信息的方法或技术来实现。计算机可读存储介质的示例可以包括但不限于：RAM、ROM、EEPROM、闪存或其它存储器技术、CD-ROM、数字通用光盘(DVD)或其它光学存储器、硬盘、盒式磁带、磁带、磁盘存储器或其它磁存储设备、或其它存储设备、有形介质、或者适于存储期望的信息并且可由计算机访问的制品。
“计算机可读信号介质”可以指代信号承载介质，其被配置为例如经由网络将指令发送到计算设备802的硬件。信号介质通常可以体现计算机可读指令、数据结构、程序模块、或调制数据信号中的其它数据(例如，载波波形、数据信号或其它传输机制)。信号介质还包括任何信息传递介质。术语“调制的数据信号”是以对信号中的信息进行编码的方式来设置或改变其一个或多个特征的信号。举例而言但非做出限制，通信介质包括诸如有线网络或直接有线连接之类的有线介质、以及诸如声波、RF、红外线之类的无线介质和其它无线介质。
如先前所描述的，硬件元件810和计算机可读介质806表示以硬件形式实现的模块、可编程设备逻辑和/或固定设备逻辑，在一些实现中，其可以用于实现本文所描述的技术的至少一些方面，比如执行一个或多个指令。硬件可以包括集成电路或片上系统的组件、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、复杂可编程逻辑器件(CPLD)以及在硅或其它硬件设备中的其它实现。在此上下文中，硬件可以作为处理设备进行操作，该处理设备执行由该硬件以及用于存储要执行的指令(例如，先前描述的计算机可读存储介质)的硬件实现的指令和/或逻辑所规定的程序任务。
还可以采用前述的组合来实现本文所描述的各种技术。因此，软件、硬件或可执行模块可以实现成在某种形式的计算机可读存储介质上体现和/或由一个或多个硬件元件810实现的一个或多个指令和/或逻辑。计算设备802可以被配置为实现与软件和/或硬件模块相对应的特定指令和/或功能。因此，可以由计算设备802作为软件执行的模块的实现，可以至少部分地用硬件来实现，例如通过使用处理系统804的计算机可读存储介质和/或硬件元件810。指令和/或功能可以由一个或多个制品(例如，一个或多个计算设备802和/或处理系统804)执行/操作，以实现本文所描述的技术、模块和示例。
本文所描述的示例性实现包括但不限于下面的示例中的一个或多个里的一个或者任意组合。
在一个或多个例子中，一种计算设备包括：一个或多个显示设备；至少一个处理器；以及存储指令的至少一个计算机可读存储介质，其中所述指令可由所述至少一个处理器执行以用于：将数字内容生成为交互式画布；在所述一个或多个显示设备上显示所述交互式画布；监测针对在所述一个或多个显示设备上显示的交互式画布的用户输入；检测到针对所述交互式画布的用户输入对应于闭合形状；响应于检测到所述用户输入对应于所述闭合形状，将所述用户输入数字化并显示为所述交互式画布上的附加数字内容，并通过在所述交互式画布上显示对象插入菜单来启动对象插入模式；以及响应于从所述对象插入菜单中选择对象，将所选择的对象插入到所述闭合形状内的所述交互式画布中。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，还包括：如果没有在特定的时间段内从所述对象插入菜单中选择对象，则禁用所述对象插入模式。如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，还包括：使与所述闭合形状相对应的所述附加数字内容保留在所述交互式画布上。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，如果所述用户输入对应于闭合形状并且如果所述闭合形状高于某个尺寸阈值，则启动所述对象插入模式。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，如果所述用户输入对应于在所述交互式画布的空白区域上绘制的闭合形状，则启动所述对象插入模式。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，还包括可由所述至少一个处理器执行以用于以下操作的指令：确定在所述交互式画布上的一个或多个对象周围绘制了所述闭合形状，并通过显示与所述闭合形状内的所述一个或多个对象相关联的一个或多个控件来启动所述对象插入模式。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，还包括可由所述至少一个处理器执行以用于以下操作的指令：监测用户输入的模式，并在所述用户输入的所述模式指示所述用户正在所述交互式画布上绘图时，暂时地禁用所述对象插入模式。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，所选择的对象包括图像、视频、音频文件、或者文本。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，所述闭合形状包括正方形、矩形、圆形、椭圆形、或者三角形、以及诸如星形之类的非凸形状。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，所述闭合形状包括自由形状。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，将所述交互式画布的所述数字内容显示为双显示设备的第一显示设备和第二显示设备上的日记应用程序的页面。
在一个或多个例子中，一种由计算设备实现的方法包括：将数字内容生成为交互式画布；在所述计算设备的一个或多个显示设备上显示所述交互式画布；接收针对所述交互式画布的用户输入，并检测到所述用户输入对应于闭合形状；响应于检测到所述用户输入对应于所述闭合形状，将所述用户输入数字化并显示为所述交互式画布上的附加数字内容，并通过在所述交互式画布上显示对象插入菜单来启动对象插入模式；以及响应于从所述对象插入菜单中选择对象，将所选择的对象插入到所述闭合形状内的所述交互式画布中。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，还包括：将与所述闭合形状相对应的所述用户输入数字化，并显示为所述交互式画布上的附加数字内容。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，将所述对象插入菜单显示在所述闭合形状的所述附加数字内容内。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，所述对象插入菜单包括可以插入到所述闭合形状内的所述交互式画布中的与多个不同对象类型相对应的可选择表示。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，所述对象插入菜单显示与第一子集的对象类型相对应的可选择表示，其中所述对象插入菜单包括可被选择以使得显示与至少第二子集的对象类型相对应的附加可选择表示的导航控件。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，还包括：响应于从所述对象插入菜单接收到与对象类型相关联的表示的用户选择，显示与所述对象插入菜单中的所选择的对象类型相关联的对象插入控件，所述对象插入控件包括与所选择的对象类型相关联的对象相对应的附加可选择表示。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，所述插入包括：响应于对于与所选择的对象类型相关联的所述对象相对应的相应附加可选择表示的选择，将所选择的对象插入到所述闭合形状内的所述交互式画布中。
在一个或多个例子中，一个或多个计算机可读存储设备包括其上存储的指令，响应于所述指令由计算设备的一个或多个处理器执行，执行包括以下的操作：将数字内容生成为交互式画布；在计算设备的一个或多个显示设备上显示所述交互式画布；在所述交互式画布上显示一个或多个对象；接收针对所述交互式画布的用户输入，并检测到所述用户输入对应于闭合形状并且一个或多个对象在所述闭合形状内；响应于检测到所述用户输入对应于闭合形状并且一个或多个对象在所述闭合形状内，显示可被选择以对闭合形状内的所述一个或多个对象执行一个或多个相应的操作的一个或多个控件。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，所述检测包括：检测到多个对象位于所述闭合形状内，并且其中所述可选择控件至少包括可被选择以对所述闭合形状内的所述多个对象进行组合的分组控件。
在一个或多个例子中，一种由计算设备实现的方法包括：接收针对交互式画布的用户输入，并检测到所述用户输入对应于闭合形状；在所述交互式画布上显示对象插入菜单，所述对象插入菜单包括与可以插入到所述闭合形状内的所述交互式画布中的多个不同对象类型相对应的可选择表示；响应于从所述对象插入菜单中接收到对于与对象类型相关联的可选择表示的用户选择，在所述对象插入菜单中显示与所选择的对象类型相关联的对象插入控件，所述对象插入控件包括与所选择的对象类型相关联的对象相对应的附加可选择表示，其中可选择所述附加可选择表示以将相应对象插入到所述闭合形状内的所述交互式画布中。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，还包括：接收对于所述附加可选择表示之一并且来自所述对象插入控件的用户选择，将与所选择的附加可选择控件相关联的相应对象插入到所述闭合形状内的所述交互式画布中。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，所述对象插入菜单显示与第一子集的对象类型相对应的可选择表示，其中所述对象插入菜单包括可被选择以使得显示与至少第二子集的对象类型相对应的附加可选择表示的导航控件。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，还包括：将与所述闭合形状相对应的所述用户输入数字化并显示在所述交互式画布上。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，在所述闭合形状内显示所述对象插入菜单。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，在所述交互式画布上的所述闭合形状附近显示所述对象插入菜单。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，在所述交互式画布的固定位置显示所述对象插入菜单。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，还包括：如果没有在特定的时间段内从所述对象插入菜单中选择可选择表示，则去除所述对象插入菜单的显示。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，还包括：使所述闭合形状保持显示在所述交互式画布上。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，所述可选择表示与和照片、视频、文本或文档中的至少两个相对应的对象类型相关联。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，所述闭合形状包括正方形、矩形、圆形、或者三角形。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，所述闭合形状包括自由形状。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，将所述交互式画布显示为双显示设备的第一显示设备和第二显示设备上的日记应用程序的页面。
在一个或多个例子中，一种计算设备包括：一个或多个显示设备；至少一个处理器；以及存储指令的至少一个计算机可读存储介质，其中所述指令可由所述至少一个处理器执行以用于：接收针对在所述一个或多个显示设备上显示的交互式画布的用户输入，并检测到所述用户输入对应于闭合形状；在所述交互式画布上显示对象插入菜单，所述对象插入菜单包括与可以插入到所述闭合形状内的所述交互式画布中的多个不同对象类型相对应的可选择表示；响应于从所述对象插入菜单中接收到对于与对象类型相关联的可选择表示的用户选择，在所述对象插入菜单中显示与所选择的对象类型相关联的对象插入控件，所述对象插入控件包括与所选择的对象类型相关联的对象相对应的附加可选择表示，其中可选择所述附加可选择表示以将相应对象插入到所述闭合形状内的所述交互式画布中。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，还包括可由所述至少一个处理器执行以用于以下操作的指令：接收对于所述附加可选择表示之一并且来自所述对象插入控件的用户选择，将与所选择的附加可选择控件相关联的相应对象插入到所述闭合形状内的所述交互式画布中。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，所述对象插入菜单显示与第一子集的对象类型相对应的可选择表示，其中所述对象插入菜单包括可被选择以使得显示与至少第二子集的对象类型相对应的附加可选择表示的导航控件。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，还包括：将与所述闭合形状相对应的所述用户输入数字化并显示在所述交互式画布上。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，在所述闭合形状内显示所述对象插入菜单。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，在所述交互式画布上的所述闭合形状附近显示所述对象插入菜单。
如单独描述的或者结合上面或下面所描述的其它示例中的任何示例所描述的示例，其中，在所述交互式画布的固定位置显示所述对象插入菜单。
虽然利用特定于结构特征和/或方法动作的语言来描述了示例性实现，但应当理解的是，所附权利要求书中规定的实现并不是必需限于所描述的特定特征或动作。相反，只是将这些特定特征和动作公开成实现所主张的特征的示例性形式。

Claims (15)

1.一种计算设备，其包括：
一个或多个显示设备；
至少一个处理器；以及
存储指令的至少一个计算机可读存储介质，其中所述指令可由所述至少一个处理器执行以用于：
将数字内容生成为交互式画布；
在所述一个或多个显示设备上显示所述交互式画布；
监测针对在所述一个或多个显示设备上显示的交互式画布的用户输入；
检测到针对所述交互式画布的用户输入对应于闭合形状；
响应于检测到所述用户输入对应于所述闭合形状，将所述用户输入数字化并显示为所述交互式画布上的附加数字内容，并通过在所述交互式画布上显示对象插入菜单来启动对象插入模式；以及
响应于从所述对象插入菜单中选择对象，将所选择的对象插入到所述闭合形状内的所述交互式画布中。
2.根据权利要求1所述的计算设备，还包括：
如果没有在特定的时间段内从所述对象插入菜单中选择对象，则禁用所述对象插入模式。
3.根据权利要求2所述的计算设备，还包括：
在禁用所述对象插入模式之后，使与所述闭合形状相对应的所述附加数字内容保留在所述交互式画布上。
4.根据权利要求1所述的计算设备，其中，如果所述用户输入对应于闭合形状并且如果所述闭合形状高于某个尺寸阈值，则启动所述对象插入模式。
5.根据权利要求1所述的计算设备，其中，如果所述用户输入对应于在所述交互式画布的空白区域上绘制的闭合形状以使得在所述闭合形状的轮廓内不存在对象，则启动所述对象插入模式。
6.根据权利要求1所述的计算设备，还包括可由所述至少一个处理器执行以用于以下操作的指令：
确定在所述交互式画布上的一个或多个对象周围绘制了所述闭合形状，并通过显示与所述闭合形状内的所述一个或多个对象相关联的一个或多个控件来启动所述对象插入模式。
7.根据权利要求1所述的计算设备，还包括可由所述至少一个处理器执行以用于以下操作的指令：
监测用户输入的模式，并在所述用户输入的模式指示所述用户正在所述交互式画布上绘图时，暂时地禁用所述对象插入模式。
8.根据权利要求1所述的计算设备，其中，所选择的对象包括图像、视频、音频文件、或者文本。
9.根据权利要求1所述的计算设备，其中，所述闭合形状包括正方形、矩形、圆形、椭圆形、或者三角形。
10.根据权利要求1所述的计算设备，其中，所述闭合形状包括自由形状。
11.根据权利要求1所述的计算设备，其中，将所述交互式画布的所述数字内容显示为双显示设备的第一显示设备和第二显示设备上的日记应用程序的页面。
12.一种由计算设备实现的方法，所述方法包括：
将数字内容生成为交互式画布；
在所述计算设备的一个或多个显示设备上显示所述交互式画布；
接收针对所述交互式画布的用户输入，并检测到所述用户输入对应于闭合形状；
响应于检测到所述用户输入对应于所述闭合形状，将所述用户输入数字化并显示为所述交互式画布上的附加数字内容，并通过在所述交互式画布上显示对象插入菜单来启动对象插入模式；以及
响应于从所述对象插入菜单中选择对象，将所选择的对象插入到所述闭合形状内的所述交互式画布中。
13.根据权利要求12所述的方法，还包括：
将与所述闭合形状相对应的所述用户输入数字化，并显示为所述交互式画布上的附加数字内容。
14.根据权利要求13所述的方法，其中，将所述对象插入菜单显示在所述闭合形状的所述附加数字内容内。
15.根据权利要求12所述的方法，其中，所述对象插入菜单包括能够插入到所述闭合形状内的所述交互式画布中的与多个不同对象类型相对应的可选择表示。
CN201880032362.5A 2017-05-15 2018-04-13 对象插入 Withdrawn CN110622119A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762506479P 2017-05-15 2017-05-15
US62/506,479 2017-05-15
US15/638,101 2017-06-29
US15/638,101 US20180329621A1 (en) 2017-05-15 2017-06-29 Object Insertion
PCT/US2018/027399 WO2018212864A1 (en) 2017-05-15 2018-04-13 Object insertion

Publications (1)

Publication Number Publication Date
CN110622119A true CN110622119A (zh) 2019-12-27

Family

ID=64096105

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880032362.5A Withdrawn CN110622119A (zh) 2017-05-15 2018-04-13 对象插入

Country Status (4)

Country Link
US (2) US20180329621A1 (zh)
EP (1) EP3625660A1 (zh)
CN (1) CN110622119A (zh)
WO (2) WO2018212864A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111833917A (zh) * 2020-06-30 2020-10-27 北京印象笔记科技有限公司 信息交互方法、可读存储介质和电子设备

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5539427A (en) * 1992-02-10 1996-07-23 Compaq Computer Corporation Graphic indexing system
US20060001656A1 (en) * 2004-07-02 2006-01-05 Laviola Joseph J Jr Electronic ink system
US7454717B2 (en) * 2004-10-20 2008-11-18 Microsoft Corporation Delimiters for selection-action pen gesture phrases
US20060267967A1 (en) * 2005-05-24 2006-11-30 Microsoft Corporation Phrasing extensions and multiple modes in one spring-loaded control
US8643605B2 (en) * 2005-11-21 2014-02-04 Core Wireless Licensing S.A.R.L Gesture based document editor
US9081464B2 (en) * 2009-11-20 2015-07-14 Adobe Systems Incorporated Object selection
KR20110074166A (ko) * 2009-12-24 2011-06-30 삼성전자주식회사 디지털 컨텐츠 생성방법
US9454304B2 (en) * 2010-02-25 2016-09-27 Microsoft Technology Licensing, Llc Multi-screen dual tap gesture
US9098192B2 (en) * 2012-05-11 2015-08-04 Perceptive Pixel, Inc. Overscan display device and method of using the same
CN102750104A (zh) * 2012-06-29 2012-10-24 鸿富锦精密工业（深圳）有限公司 具有触摸输入单元的电子设备
TWI563397B (en) * 2012-12-20 2016-12-21 Chiun Mai Comm Systems Inc Method and system for inserting image objects to a note software
US20140298223A1 (en) * 2013-02-06 2014-10-02 Peter Duong Systems and methods for drawing shapes and issuing gesture-based control commands on the same draw grid
US9811238B2 (en) * 2013-08-29 2017-11-07 Sharp Laboratories Of America, Inc. Methods and systems for interacting with a digital marking surface

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111833917A (zh) * 2020-06-30 2020-10-27 北京印象笔记科技有限公司 信息交互方法、可读存储介质和电子设备

Also Published As

Publication number Publication date
EP3625660A1 (en) 2020-03-25
WO2018212877A1 (en) 2018-11-22
US20180329621A1 (en) 2018-11-15
US20180329583A1 (en) 2018-11-15
WO2018212864A1 (en) 2018-11-22

Similar Documents

Publication Publication Date Title
US11675476B2 (en) User interfaces for widgets
JP6584638B2 (ja) 文書編集における手書きサポートを提供するデバイス及び方法
US8413075B2 (en) Gesture movies
US8650509B2 (en) Touchscreen gestures for virtual bookmarking of pages
US20180329589A1 (en) Contextual Object Manipulation
US10304163B2 (en) Landscape springboard
US9448694B2 (en) Graphical user interface for navigating applications
US9501218B2 (en) Increasing touch and/or hover accuracy on a touch-enabled device
US20120159402A1 (en) Method and apparatus for providing different user interface effects for different implementation characteristics of a touch event
US9286279B2 (en) Bookmark setting method of e-book, and apparatus thereof
EP2770422A2 (en) Method for providing a feedback in response to a user input and a terminal implementing the same
US10182141B2 (en) Apparatus and method for providing transitions between screens
KR20130115016A (ko) 단말기에서 전자책과 연관된 피드백 제공 방법 및 장치
US8762840B1 (en) Elastic canvas visual effects in user interface
US10599320B2 (en) Ink Anchoring
US20150009154A1 (en) Electronic device and touch control method thereof
US9658865B2 (en) Method of editing content and electronic device for implementing the same
EP2838000A1 (en) Method of Displaying Page and Electronic Device Implementing the Same
US20160299657A1 (en) Gesture Controlled Display of Content Items
US20160357381A1 (en) Selecting Content Items in a User Interface Display
JP6359862B2 (ja) タッチ操作入力装置、タッチ操作入力方法及びプログラム
US9626742B2 (en) Apparatus and method for providing transitions between screens
CN110622119A (zh) 对象插入
JP6449459B2 (ja) トグルインターフェース用のシステム及び方法
US20180329610A1 (en) Object Selection Mode

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20191227

WW01 Invention patent application withdrawn after publication