CN108292304A - 跨应用数字墨水库 - Google Patents

跨应用数字墨水库 Download PDF

Info

Publication number
CN108292304A
CN108292304A CN201780004317.4A CN201780004317A CN108292304A CN 108292304 A CN108292304 A CN 108292304A CN 201780004317 A CN201780004317 A CN 201780004317A CN 108292304 A CN108292304 A CN 108292304A
Authority
CN
China
Prior art keywords
digital ink
application
input
ink
digital
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780004317.4A
Other languages
English (en)
Other versions
CN108292304B (zh
Inventor
F·周
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN108292304A publication Critical patent/CN108292304A/zh
Application granted granted Critical
Publication of CN108292304B publication Critical patent/CN108292304B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/171—Editing, e.g. inserting or deleting by use of digital ink
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/60—Software deployment
    • G06F8/61—Installation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/32—Digital ink
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/34—Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters 
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/10—Recognition assisted with metadata

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

计算设备包括在该计算设备上提供数字墨水支持的数字墨水系统。数字墨水输入由数字墨水系统接收，该系统以应用所想要的方式和格式将数字墨水输入的墨水笔画数据提供给应用供存储。该数字墨水系统还生成与数字墨水输入相关联的数字墨水容器，并将数字墨水容器传送到数字墨水库。数字墨水库存储多个应用的数字墨水容器，并且可以从计算设备中被搜索，以标识输入到应用的数字墨水输入，而不管数字墨水输入到哪个应用。

Description

跨应用数字墨水库
背景技术
当今设备(例如，计算设备)通常支持各种不同的输入技术。例如，特定设备可经由键盘、鼠标、语音输入、(例如，到触摸屏的)触摸输入等接收来自用户的输入。一种尤其直观的输入技术允许用户能够利用触摸工具(例如，笔、触控笔、手指等)来向诸如触摸屏之类的触摸感测功能提供徒手输入，这被解释为数字墨水。徒手输入可被转换成显示器上的对应视觉表示，诸如用于记笔记、用于创建和编辑电子文档等。
发明内容
提供本概述以便以简化的形式介绍以下在详细描述中进一步描述的一些概念。本概述并不旨在标识所要求保护主题的关键特征或必要特征，也不旨在用于限制所要求保护主题的范围。
根据一个或多个方面，针对应用的数字墨水输入被接受，并且用于该数字墨水输入的墨水笔画数据被提供给该应用。用于该数字墨水输入的该墨水笔画数据的指示以及表示该数字墨水输入的上下文的数据被添加到数字墨水容器中，该数据表示包括应用的标识符的数字墨水输入的上下文。该数字墨水容器被传送到跨应用的数字墨水库。跨应用数字墨水库存储该数字墨水容器以及多个附加数字墨水容器，每个数字墨水容器包括针对一个或多个附加应用中的每个应用的附加数字墨水输入的墨水笔画数据指示。
根据一个或多个方面，计算设备包括一个或多个处理器以及其上存储有多个指令的计算机可读存储介质，这些指令响应于被该一个或多个处理器执行而致使该一个或多个处理器行多个动作。这些动作包括接收由一个或多个处理器执行的应用的数字墨水输入，并向应用提供用于数字墨水输入的墨水笔画数据。这些动作还包括：向数字墨水容器中添加用于数字墨水输入的墨水笔画数据的指示；向数字墨水容器中添加表示数字墨水输入上下文的上下文数据，该上下文数据包括将该应用与其他应用区别开来的应用的统一资源标识符；以及将数字墨水容器传送到跨应用数字墨水库，跨应用数字墨水库存储该数字墨水容器以及多个附加数字墨水容器，每个数字墨水容器包括针对每个其他应用的附加数字墨水输入的墨水笔画数据指示。
附图简述
结合附图来描述具体实施方式。在附图中，附图标记最左边的数字标识该附图标记首次出现的附图。在说明书和附图的不同实例中使用相同的附图标记可指示相似或相同的项目。附图中所表示的各实体可指示一个或多个实体并且因而在讨论中可互换地作出对各实体的单数或复数形式的引用。
图1例示了可在其中使用本文所讨论的用于跨应用数字墨水库的技术的示例环境。
图2例示了根据一个或多个实施例的实现跨应用数字墨水库的示例系统。
图3是例示根据一个或多个实施例的用于实现跨应用数字墨水库的示例过程的流程图。
图4例示了搜索跨应用数字墨水库的示例。
图5是例示根据一个或多个实施例的用于搜索跨应用数字墨水库的示例过程的流程图。
图6例示了包括示例计算设备的示例系统，该示例计算设备代表可实现本文中所描述的各种技术的一个或多个系统和/或设备。
详细描述
本文讨论跨应用数字墨水库。计算设备包括向计算设备上的应用提供数字墨水支持的数字墨水系统。一般而言，数字墨水指的是对诸如触摸屏之类的触摸感测设备的徒手输入，这被计算设备解释为数字墨水(或者简称为“墨水”)。可以以各种方式提供数字墨水，诸如使用笔(例如有源笔，无源笔等)、触控笔、手指等。数字墨水系统提供允许应用从计算设备的用户接收数字墨水输入、存储接收到的数字墨水输入并显示数字墨水输入的功能。多个应用可使用该数字墨水系统提供的功能，从而减轻应用实现它们自己的数字墨水功能的负担。
来自用户的针对应用的数字墨水输入由数字墨水系统代表应用接收。数字墨水输入由该数字墨水系统进行分析，并且墨水笔画数据被生成并被提供给应用供存储。此墨水笔画数据指的是描述数字墨水输入的各种信息，诸如发生数字墨水输入的输入设备上的坐标和指示在数字墨水输入的那些坐标中的每个坐标处施加的压力量的压力信息。然后，应用可将墨水笔画数据以应用想要的任何格式存储或存储在应用想要的任何位置，可以允许随后(例如，响应于用户请求)通过应用检索所存储的墨水笔画数据，并可向数字墨水系统提供检索到的所存储的墨水笔画数据(数字墨水系统使用所检索到的墨水笔画数据来显示数字墨水)。
数字墨水系统还生成与数字墨水输入相关联的数字墨水容器。数字墨水容器是指用于数据(例如，文件、数据库中的记录等)的存储容器。用于数字墨水输入的墨水笔画数据的指示连同表示数字墨水输入的上下文的数据被添加到数字墨水容器中。墨水笔画数据的指示可以是墨水笔画数据它本身，或标识数字墨水输入的其他数据(例如，描绘数字墨水输入的屏幕截图或屏幕抓图)。数字墨水输入的上下文可以包括描述何时接收数字墨水输入和/或在其中接收数字墨水输入的环境的各种信息，诸如接收数字墨水输入时的时间和/或日期、通过其接收数字墨水输入的应用、接收数字墨水输入时接收数字墨水输入的设备的地理位置等等。
数字墨水容器被传送到数字墨水储存库，该数字墨水储存库将用于多个不同数字墨水输入的数字墨水容器存储到多个不同的应用。数字墨水库可被存储在各种位置上，诸如(例如，通过因特网和/或其他网络访问的)远程服务上、用于提供数字墨水输入的笔上，等等。
数字墨水库可由各种不同的应用搜索，包括接收数字墨水输入的应用和不接收数字墨水输入的应用。各种搜索准则由搜索数字墨水库的用户提供，并且这些准则与存储在数字墨水容器中的数据(例如上下文数据)进行比较。例如，这允许用户搜索被输入到特定应用的数字墨水、在特定时间和/或日期被输入的数字墨水、在接收数字墨水的计算设备位于特定地理位置时被输入的数字墨水，等等。
满足搜索准则的不同数字墨水容器，诸如通过显示与数字墨水容器相关联的数字墨水输入(使用数字墨水容器中墨水笔画数据的指示)，被标识给用户。用户可以选择满足搜索准则的数字墨水容器之一，并响应于接收数字墨水输入的应用在运行，并可选择地(使用数字墨水系统)显示数字墨水输入。
因此，本文讨论的技术提供了跨应用数字墨水库，该库将与数字墨水输入相关联的数字墨水容器存储到多个应用中，从而允许用户搜索数字墨水，而不管数字墨水被输入到哪个应用。这提供了用于搜索数字墨水的简化用户界面，减轻了用户打开他或她用于搜索数字墨水的每个不同应用的需要。这还允许用户从一个当前没有应用的设备中搜索数字墨水(在另一设备上数字墨水针对该应用被输入)。这种简化的用于搜索数字墨水的用户界面可以减少用户搜索数字墨水所花费的时间，从而减少他或她的计算设备被用于搜索数字墨水的时间，并且因此减少他或她的计算设备的能量使用。
图1例示了可在其中使用本文所讨论的跨应用数字墨水库的技术的示例环境100。环境100包括计算设备102，该计算设备102可被具体化为任何合适的设备，诸如例如台式计算机、服务器计算机、膝上型计算机或上网本计算机、移动设备(例如，平板或大屏设备、蜂窝式或其他无线电话(例如，智能电话)、记事本计算机、移动站)、可穿戴设备(例如，眼镜、头戴式显示器、手表、手环)、娱乐设备(例如，娱乐电器、通信地耦合到显示设备的机顶盒、游戏控制台)、物联网(IoT)设备(例如，具有用于允许与其他设备的通信的软件、固件和/或硬件的对象或事物)、电视机或其他显示设备、汽车计算机，等等。因此，计算设备102的范围可以是从具有充足存储器和处理器资源的全资源设备(如个人计算机、游戏控制台)到具有有限存储器和/或处理资源的低资源设备(如传统机顶盒、手持式游戏控制台)。
计算设备102包括允许各种活动和任务能够被执行的各种不同的功能。例如，计算设备102包括操作系统104、多个应用106以及通信模块108。一般而言，操作系统104表示用于抽象计算设备102的诸如硬件、内核级模块和服务等各系统组件的功能。例如，操作系统104可向应用106抽象计算设备102的各组件以允许各组件与应用106之间的交互。
应用106表示用于经由计算设备102执行不同任务的功能。应用106的示例包括文字处理应用、信息收集和/或笔记记录应用、电子表格应用、web浏览器、游戏应用等等。应用106可被安装在计算设备102本地以经由本地运行时环境来执行，和/或可表示到诸如基于云的服务、web应用等远程功能的门户。因此，应用106可采取各种形式，诸如在本地执行的代码、到远程地主存的服务的门户等。
通信模块108表示用于允许计算设备102能够通过有线和/或无线连接进行通信的功能。例如，通信模块108表示用于经由各种不同有线和/或无线技术和协议进行通信的硬件和逻辑。
计算设备102进一步包括显示设备110、输入机构112和数字墨水系统116。显示设备110一般表示用于计算设备102的视觉输出的功能。附加地，显示设备110可选地表示用于接收诸如触摸输入、笔输入等各种类型的输入的功能。输入机构112一般表示用于接收到计算设备102的输入的不同的功能。输入机构112的示例包括姿势敏感传感器和设备(例如，诸如基于触摸的传感器和移动跟踪传感器(例如，基于相机))、鼠标、键盘、触控笔、触摸板、加速度计、带有伴随的语音识别软件的话筒等。输入机构112可与显示器110分开或集成在一起，集成示例包括带有集成的触摸敏感或移动敏感传感器的姿势敏感显示器。输入机构112可选地包括数字化仪118和/或触摸输入设备120。数字化仪118表示用于将到显示设备110和/或触摸输入设备120的各种类型的输入转换成可由计算设备102以各种方式使用(诸如用于生成数字墨水)的数字数据的功能。触摸输入设备120表示用于提供与显示器110分开的触摸输入的功能。
尽管本文参考接收各种类型的输入(诸如触摸输入或笔输入)的显示设备110，但替换地，显示设备110可能不接收此类输入。相反，被实现为触摸输入设备120的分开的输入设备(例如，触摸板)可接收此类输入。附加地或替换地，显示设备110可能不接收此类输入，但笔(诸如笔122)可被实现为触摸输入设备120，并且笔提供对输入的指示而不是被显示设备110感测到的输入。
根据各种实现，数字墨水系统116表示用于执行本文所讨论的跨应用数字墨水储存库的技术的各个方面的功能。以下讨论了数字墨水系统116的各种功能。数字墨水系统116可选地包括允许应用106与由数字墨水系统116提供的功能进行交互的应用编程接口(API)。
环境100进一步包括笔122，该笔120表示用于向显示设备110提供输入的输入设备。一般而言，笔122采用常规笔的形状因子，但包括用于与显示设备110和计算设备102的其他功能进行交互的功能。在至少一些实现中，笔122是包括用于与计算设备102进行交互的电子组件的有源笔。例如，笔122包括可向笔122的内部组件提供功率的电池。替换地或附加地，笔122可包括磁体或支持在显示设备110上方的悬停检测的其他功能。然而，这不旨在是限制性的，并且在至少一些实现中，笔122可以是无源的，例如没有内部电子器件的触控笔。
数字墨水可由用户使用笔122来输入。附加地或替换地，数字墨水可由用户使用其他机构(诸如用户的手指、触控笔等等)来输入。
数字墨水被描述为使用墨水笔画数据，其是描述数字墨水输入的各种信息。在一个或多个实施例中，墨水笔画数据包括一组坐标，并且任选地包括施加在每一坐标处的压力。这些坐标可处于各坐标系，诸如2维笛卡尔坐标系、极坐标系等等。压力或力可用各种单位来测量，诸如帕斯卡。这些坐标以及任选地压力可由触摸输入设备120的各传感器感测(例如，显示设备110中的传感器、笔122中的传感器等等)。
包括在墨水笔画数据中的坐标是在输入数字墨水时，标识输入机构在特定时间的位置的坐标集合或坐标系列。这些特定时间可以是规律的或不规律的区间(例如，每10毫秒一次)。这些坐标由数字化仪118或触摸输入设备120(诸如由显示器设备110、由笔122等)检测或感测。使用图1中的“Ink(墨水)”的数字墨水输入的示例，数字墨水输入的墨水笔画数据是在写字母“I”时、在写字母“n”时以及在写字母“k时，标识输入机构的位置的坐标。”
数字墨水可被输入到应用106中的不同的应用中。对于多个(n个)应用中的每一应用，存在相关联的应用数字墨水存储124(1)、…、124(n)。针对应用106的数字墨水输入被存储在与该应用106相关联的应用数字墨水存储124中。每个应用106在其相关的应用数字墨水存储124中存储描述数字墨水输入的墨水笔画数据。应用106可以应用106所想要的任何格式存储墨水笔画数据，并且每个应用106通常只能访问在其关联的应用数字墨水存储124(而非其他应用数字墨水存储124)中的墨水笔画数据。
应用数字墨水存储124可位于诸如在计算设备102上、在经由网络或其他连接访问的服务上、在提供数字墨水输入的笔(例如，笔122)上等各种位置中的任何一处。当位于经由网络或其他连接访问的服务上时，计算设备102可经由各种不同的网络中的任何一种与实现服务的一个或多个计算设备进行通信，这些网络包括因特网、局域网(LAN)、公共电话网络、内联网、其他公共和/或专有网络、它们的组合等等。附加地或替换地，计算设备102可经由各种其他有线或无线连接中的任何一种与实现服务的一个或多个计算设备进行通信，诸如USB(通用串行总线)连接、无线USB连接、红外连接、蓝牙连接、显示端口连接，PCI(外围组件互连)快速连接等。
数字墨水系统116还在跨应用数字墨水库126的数字墨水容器中存储用于数字墨水输入的墨水笔画数据的指示，以及表示数字墨水输入上下文的数据。数字墨水库126存储多个不同应用106的数字墨水容器，并且因此被称为跨应用数字墨水库。另外，尽管图1中示出了单个计算设备102，用于多个不同计算设备(每个计算设备都可以是各种不同类型的中的任何类型的，类似于上文对计算设备102的讨论)上的应用的数字墨水容器可被存储在跨应用数字墨水库126中。
跨应用数字墨水库126可位于诸如在计算设备102上、在经由网络或其他连接访问的服务上、在提供数字墨水输入的笔(例如，笔122)上等各种位置中的任何一处。当位于经由网络或其他连接访问的服务上时，计算设备102可经由各种不同的网络中的任何一种与实现服务的一个或多个计算设备进行通信，这些网络包括因特网、LAN、公共电话网络、内联网、其他公共和/或专有网络、它们的组合等等。附加地或替换地，计算设备102可经由各种其他有线或无线连接中的任何一种与实现服务的一个或多个计算设备进行通信，诸如USB连接、无线USB连接、红外连接、蓝牙连接、DisplayPort(显示端口)连接，PCI快速连接等。跨应用数字墨水库126和应用数字墨水系统116可以位于相同的位置(例如，在同一服务上)，或者替换地位于不同的位置。
图2解说根据一个或多个实施例的实现跨应用数字墨水库的示例系统200。如以上参考图1讨论的，系统200包括应用106和数字墨水系统116。针对应用106的数字墨水输入202被接收，并且能够以上面讨论的各种不同的方式(例如，触摸屏上的钢笔或手指)中的任何一种方式来被接收。
数字墨水系统116提供支持数字墨水的生成和存储的功能。此功能由应用106利用，减轻了应用106它本身实现此类功能的需要。在一个或多个实施例中，应用106调用数字墨水系统116以代表应用106接收数字墨水输入202。数字墨水系统116收集描述数字墨水输入202的墨水笔画数据，并代表应用106显示数字墨水。数字墨水系统116还将墨水笔画数据返回给应用106，该应用以应用所想要的格式将墨水笔画数据204存储在应用数字墨水存储124中。应用106还可以随后从应用数字墨水存储124中检索墨水笔画数据204，并将墨水笔画数据204提供给代表应用106显示墨水笔画数据204的数字墨水系统116。
墨水笔画数据204是指描述如上讨论的数字墨水输入的各种信息。在一个或多个实施例中，墨水笔画数据204包括输入设备的发生数字墨水输入202的坐标，以及指示在数字墨水输入202的那些坐标的每一个坐标上施加的压力或力的量的压力信息。
墨水笔画数据204可选地包括时间戳数据，该时间戳数据是数字墨水输入202被接收的日期和/或时间。在一个或多个实施例中，时间戳信息是针对作为一个整体的数字墨水输入202的(例如，数字墨水输入202开始或结束的日期和/或时间)。替换地，可针对墨水笔画数据204中的每个坐标收集单独的时间戳信息，针对坐标的时间戳信息包括坐标被触摸或以其他方式被检测或感测为数字墨水输入202的一部分的日期和/或时间。
数字墨水系统116还生成一个或多个数字墨水容器206，包括用于数字墨水输入202的数字墨水容器。例如，数字墨水容器208可以是用于数字墨水输入202的数字墨水容器，并数字墨水容器208的内容在图2中被示出。数字墨水容器208包括墨水笔画指示210、压力数据212和时间戳数据214。数字墨水容器208还包括表示数字墨水输入的上下文的数据。所述上下文数据包括应用名216、应用统一资源标识符(URI)218、日期和/或时间220、地理位置数据222和当前用户数据224。应当注意，包括在数字墨水容器208中的数据和信息是示例，而不是图2中示出的所有数据和信息需要被包括。例如，数字墨水容器208可不包括压力数据212、时间戳数据214、应用名216、日期和/或时间数据220、地理位置数据222、当前用户数据224或其组合。
墨水笔画指示210指数字墨水输入202的标识符或其他指示。墨水笔画指示210可以采取各种不同的形式。在一个或多个实施例中，墨水笔画指示210是数字墨水输入202的墨水笔画数据中包含的一组或一系列坐标。附加地或替换地，墨水笔画指示210可以采取其他形式。例如，当数字墨水输入202被输入时，墨水笔画指示210可以是显示设备(或显示设备的一部分，诸如其中应用106正在显示用户界面的窗口)的屏幕截图或屏幕抓图。在这种情况下，墨水笔画指示210包括(例如，以各种不同的格式中的任意一种格式存储的，诸如联合图像专家组(JPEG)格式)静止图像，该静止图像包括数字墨水输入202以及在数字墨水输入202被接收时由应用106显示的任何其他数据。作为另一个示例，墨水笔画指示210可以仅是数字墨水输入202(例如，以各种不同格式中的任意一种格式，例如jpeg格式，存储)的静止图像。在这样的情况下，墨水笔画指示210包括数字墨水输入202的静止图像，但不包括在数字墨水输入202被接收时由应用106显示的其他数据。
通过另一个示例，墨水笔画指示210可以是数字墨水输入202的动画化视图，诸如视频或动画。数字墨水输入202的动画化视图显示在输入数字墨水输入202时输入设备(例如钢笔、手写笔、手指等)的运动。该动画化视图可以是在数字墨水输入202被接收时由数字墨水系统116捕获的视频，或者可以是由数字墨水系统116(例如，根据数字墨水输入被接收处的输入设备的坐标并在那些坐标被标识或被感测时的定时)生成的动画。在数字墨水输入202开始时，动画化视图可以被显示在空白背景上，或替换地被显示在显示设备(或显示设备的一部分，诸如其中应用106正在显示用户界面的窗口)的屏幕截图或屏幕抓图上(或者在接收数字墨水输入202时可能发生更改)。
压力数据212是指在数字墨水输入202期间施加的压力量的指示。这个压力量可以是数字墨水输入的每个坐标处的压力，并且可选地是与墨水笔画数据204中所包含的相同压力数据。附加地或替换地，此压力的量可采取不同的形式，诸如表示在数字墨水输入202期间施加的压力的值(例如，在数字墨水输入202期间施加的压力的平均值)，在数字墨水输入202期间的特定点处(例如，在数字墨水输入202的开始处、在数字墨水输入202的结尾处、在数字墨水输入202的中间点处)所施加的压力的值等。
时间戳数据214是指数字墨水输入202被接收到的日期和/或时间。时间戳数据214可以是作为一个整体的数字墨水输入202(例如，数字墨水输入202开始或结束的日期和/或时间)。替换地，时间戳数据214可以是具有与数字墨水输入202的不同坐标的每一个相关联的不同时间戳数据的一组时间戳数据。时间戳数据214可选地是与墨水笔画数据204中所包含的相同的时间戳信息。
应用名216是指应用106的名称，通常是用户容易标识的公共名称或用户友好名称。例如，这允许在搜索数字墨水时向用户显示用户容易识别的应用106的名称。
应用URI218引用应用106的标识符，该标识符允许将应用106与其他应用区分开来。不同的URI被用于同一平台(例如操作系统)的不同版本的应用，不同平台的不同版本的应用，等等。
日期和/或时间数据220是指数字墨水输入202被输入的日期和/或时间(例如，数字墨水输入202开始或结束的日期和/或时间)。应该注意的是，在某些情况下(诸如其中时间戳数据214是作为整体用于数字墨水输入202的情况)，数字墨水容器208包括数据214或数据220，但不需要同时包括两者。
地理位置(地理区位)数据222是指在数字墨水输入202被接收时实现(例如运行)应用106的计算设备的地理位置。计算设备的地理位置可以使用各种公共和/或专有技术中的任何一种来确定。例如，计算设备可以包括全球定位系统(GPS)模块，该模块可以确定设备的地理位置。作为另一个示例，由计算设备的模块检测到的无线信号(例如，Wi-Fi网络名称，诸如服务集标识符(SSID)值)可被用于确定设备的地理位置。
设备的地理位置可以可选地被转换为用户友好的名称或用户想要的名称。这种转换可以由计算设备执行，或替换地由计算设备访问的另一服务执行。例如，某些GPS坐标和/或Wi-Fi网络名称可能与特定的建筑物(如街道地址)、特定的房间(例如建筑物中的特定办公室或会议室)、特定的公司或企业名称(例如，其跨越多个建筑物)、用户定义的地点(例如“家”或“工作”)等相关。
本用户数据224指在数字墨水输入202被输入时存在的用户标识符。用户可以在与提供数字墨水输入202的输入机构物理位置相同的位置而在场，或者替换地通过与提供数字墨水输入202的用户(例如，在视频会议或电话会议中)进行通信而在场。例如，这些用户不是提供数字墨水输入202的用户。在数字墨水输入202被输入时在场的用户可以以各种不同的方式被标识。在一个或多个实施例中，如果数字墨水输入202是在已被安排在输入用户的日历上的会议期间被输入的，则作为会议一部分的其他用户(例如，被邀请参加会议的用户、接受会议邀请的用户、(例如，通过电话会议或视频会议)登录到会议的用户等)被确定在数字墨水输入202被输入时在场。
附加地或替换地，可以使用其他技术来确定在数字墨水输入202被输入时哪些用户在场。例如，多个用户可以同时登录实现应用106的计算设备或由实现应用106的计算设备标识，并且在数字墨水输入202被输入时，那些多个用户可被确定为在场。作为另一个示例，在会议期间，多个用户可以与输入机构(例如，笔)相关联，并且能够向应用106提供数字墨水输入，并且在数字墨水输入202被输入时，那些多个用户中的每一个用户都可以被确定为在场。
数字墨水系统116向应用106提供用于数字墨水输入202的墨水笔画数据。墨水笔画数据是指数字墨水输入202的每一笔的数据。墨水笔画指数字墨水输入202的至少一部分。例如，墨水笔画可以是从输入设备第一次与触摸屏接触(例如，笔被触摸屏感测)到输入设备中断与触摸屏的接触(例如，笔不再被触摸屏感测到)的时间。例如，如果用户要输入字母“T”，则输入通常是两个墨水笔画——一个笔画是“T”的水平部分，而另一个笔画是“T”的垂直部分。但是，如果用户要输入字母“O”，则输入通常是单笔画。这些墨水笔画的数据被提供给应用106，应用106可以收集墨水笔画数据并以应用106所想要的任何方式(例如，作为单个墨水笔画、墨水笔画集合等)将墨水笔画数据存储在应用数字墨水存储124中。
数字墨水系统116确定在数字墨水容器中包括多少数字墨水输入202(例如，用于多少笔画的数据)。数字墨水系统116可以使用各种不同的准则中的任何一个准则来确定数字墨水输入202中有多少要包含在数字墨水容器中。在一个或多个实施例中，数字墨水系统116定义“会话”，并且在会话期间输入的数字墨水输入202的部分被包括在单个数字墨水容器中。该会话可以以不同方式被定义。在一个或多个实施例中，会话是从第一输入笔画开始，直到计算设备的当前应用从应用106切换到不同的应用为止(例如，用户更改他或她目前正在使用的应用)的所有数字墨水输入202。附加地或替换地，该会话可以以其他方式被定义。例如，会话可以是从第一输入笔画到特定用户选择被作出(例如，用户选择“保存”按钮或选项)为止的所有数字墨水输入202。作为另一示例，会话可以是，从第一输入笔画直到特定时间量流逝(例如10或15分钟)，从第一输入笔画直到时间阈值量流逝(例如，3或5分钟)而没有任何附加输入笔画，等等的所有数字墨水输入202。
数字墨水系统116可以以加密或未加密格式将数字墨水容器206存储在跨应用数字墨水库126中。在一个或多个实施例中，跨应用数字墨水库126被存储在仅在用户使用他或她的凭据(例如智能卡、用户名和密码等)登录到访问数字墨水库126的计算设备之后才可访问的位置(例如，共享网络驱动器或服务)。在这种情况下，数字墨水容器206不需要被加密(然而可以被加密)，因为数字墨水容器206只对于已经提供了他们的凭据的用户可访问。在其他实施例中，跨应用数字墨水库126被存储在可供多个用户(例如，任何拿起笔的用户)访问的不同位置(例如，用于提供数字墨水输入202的笔中的存储器设备)中。在这种情况下，数字墨水容器206可选地被加密，以便只针对能够提供正确的用户凭据(例如智能卡、用户名和密码等)来解密数字墨水容器206的用户才是可访问的。响应于用户提供正确的用户凭据，数字墨水容器(例如，使用与用户凭据相关联的密钥)被解密。
图3是例示根据一个或多个实施例的用于实现跨应用数字墨水库的示例过程300的流程图。过程300由计算设备(诸如图1中的计算设备102)来实施，并可以用软件、固件、硬件、或其组合来实现。过程300被示为一组动作，并且不仅限于所示出的用于执行各种动作的操作的顺序。过程300是用于实现跨应用数字墨水库的示例过程；实现跨应用数字墨水库的附加讨论参考不同的附图被包括于此。
在过程300中，接收针对应用的数字墨水输入(动作302)。数字墨水输入可以被直接输入到应用并被提供给数字墨水系统，也可被提供给代表应用接收数字墨水输入的数字墨水系统。
向应用提供数字墨水输入的墨水笔画数据(动作304)。墨水笔画数据是指描述数字墨水输入的各种信息，诸如上面讨论过的一组或一系列坐标和压力信息。
墨水笔画数据的指示被添加到数字墨水容器(动作306)。墨水笔画数据的指示可以采取如以上所讨论的各种形式，诸如，描述数字墨水输入的一组或一系列坐标，当数字墨水输入被输入时显示设备的屏幕截图或屏幕抓图(或显示设备的一部分，诸如其中应用106正在显示用户界面的窗口)，仅数字墨水输入的静止图像，数字墨水输入的动画化视图，等等。
表示数字墨水输入的上下文的数据也被添加到数字墨水容器(动作308)。例如，数字墨水输入的上下文数据可以是数字墨水输入所被输入到的应用的名称、数字墨水输入所被输入到应用的URI、数字墨水输入所被输入的日期和/或时间、在数字墨水输入被输入时实现过程300的计算设备的地理位置、在数字墨水输入被输入时在场的用户(例如，物理上、通过视频会议、通过电话会议等)，等等。
该数字墨水容器被传送到跨应用的数字墨水库(动作310)。如上面所讨论的，跨应用数字墨水库可以被维护在各种不同的位置，并包括至少部分数字墨水输入(如上述讨论中在会话期间所接收到的数字墨水输入部分)。在一个或多个实施例中，墨水笔画数据的指示和数字墨水输入的上下文在实现过程300的计算设备上被接收并被维护至会话结束，并且响应于会话结束，数字墨水容器被传送到跨应用的数字墨水库。替换地，数字墨水容器可以在跨应用数字墨水库上被创建和被打开，且墨水笔画数据的指示和数字墨水输入的上下文在实现过程300的计算设备上被接收，并在会话期间被传递给跨应用数字墨水库，并且响应会话结束数字墨水容器被关闭。
回到图1，可以使用各种搜索准则来搜索存储在跨应用数字墨水库126中的数字墨水容器。搜索由搜索程序执行，该搜索程序可以是各种程序，诸如应用106中的一个、操作系统104的一部分、数字墨水系统116的一部分等等。数字墨水库126存储用于多个应用106的数字墨水容器，并且因此可以跨多个应用106执行对数字墨水的搜索。搜索可以由支持数字墨水输入的搜索程序执行，或者替换地由不支持数字墨水输入的搜索程序执行。例如，搜索程序可以是浏览器或资源管理器程序，其本身不支持将数字墨水输入到搜索程序，但仍可被用于在数字墨水库126上搜索数字墨水。
搜索准则由用户提供给搜索程序。搜索准则可以是与数字墨水输入的上下文相关的任何准则。例如，准则可以基于应用名、数字墨水输入的日期和/或时间、数字墨水输入的地理位置、数字墨水输入被接收时的用户在场，等等。可以使用各种不同的匹配技术，例如时间和/或日期范围、通配符(例如，用于表示单个字符的问号或表示任意数量字符的星号)等等。
跨应用数字墨水库126的搜索允许用户搜索数字墨水，而不要求用户记住他或她用来输入数字墨水的应用。例如，用户可具有他向其输入数字墨水的信息收集应用、他向其输入数字墨水的字处理应用、他向其输入数字墨水的笔记应用，等等。用户可能记得，他在两周前使用数字墨水输入了一个项目列表，但可能不记得他用来输入该列表的应用。用户可以在跨应用数字墨水库126中搜索大约两周前(例如10至18天前)收到的数字墨水输入，而不是单独查看他的应用并试图寻找列表。如果用户记得其他细节，诸如他输入列表时在家里，那么他可以进一步添加搜索准则，即地理位置为家。然后，搜索程序使用这个搜索准则(例如，大约两周前在家中的地理位置收到的数字墨水输入)来标识满足该搜索准则的数字墨水容器。包括在那些标识的数字墨水容器中的数字墨水的指示可被显示给用户，至少给用户每个数字墨水容器的数字墨水是什么的指示。
搜索程序显示满足搜索条件的零个或更多个数字墨水容器的指示。用户可以选择这些所显示的数字墨水容器其中的一个，并使得被用于输入与所选数字墨水容器相关联的数字墨水的应用被打开，并且数字墨水被显示。响应于针对数字墨水容器的用户选择，搜索程序通知操作系统104运行由所选数字墨水容器中的URI数据标识的应用。操作系统104运行由URI数据标识的应用，它可选择地显示所选数字墨水容器的数字墨水。例如，这种显示可以是来自包括该数字墨水的相应的应用数字墨水存储124的文件的打开和显示，来自包括该数字墨水的相应的应用数字墨水存储124中数据库条目的显示，等等。要打开的文件、数据库条目等，可以用各种不同的方式来确定。例如，应用可能已经向数字墨水系统116提供文件的标识符、数据库条目等，并且数字墨水系统116可以将所提供的标识符包括在由数字墨水系统116创建的数字墨水容器中。然后，当数字墨水容器被选择时，此标识符可以从搜索程序被传递给应用。
可能出现这样的情况，其中由所选数字墨水容器中的URI数据标识的应用没有被安装在计算设备102上。例如，这种情况在与数字墨水容器相关联的数字墨水被输入到一个计算设备上的应用，但是使用不同计算设备上的搜索程序搜索数字墨水库126时会出现。在这种情况中，URI数据允许计算设备102标识和获取应用(例如，从在线商店下载)。应用可以在计算设备102上被下载、安装和运行，或者替换地在其他地方运行(例如，作为通过服务的在线应用)。
应该注意，URI数据还允许数字墨水跨不同平台(例如，操作系统)被使用。例如，数字墨水可被输入到在一种类型的操作系统上运行的应用，但是使用不同类型的操作系统上的搜索程序来被搜索。服务(例如，在线商店、计算设备上的本地服务等)可以维护其中URI对应于不同平台上的相同应用的记录，并且该服务可被访问以确定URI数据代表在运行搜索程序的计算设备上的哪个应用。
图4例示了搜索跨应用数字墨水库的示例400。在示例400中，跨应用数字墨水库126存储与针对运行在一个或多个计算设备上的多个不同应用的数字墨水输入相关联的多个数字墨水容器402。用户搜索准则由用户提供给搜索程序，并且搜索程序搜索数字墨水库126以标识满足搜索准则的一个或多个数字墨水容器402。在解说的示例400中，搜索程序生成显示404，其中来自满足搜索准则的两个数字墨水容器402的所指示的数字笔画被显示。显示器404包括第一数字墨水容器406，其中满足搜索准则的两个数字墨水容器402中的一个的所指示的数字墨水笔画，以及数字墨水笔画被输入到其中的程序的名称的指示(示作为“应用A”)被显示。显示器404包括第二数字墨水容器408，其中满足搜索准则的两个数字墨水容器402中的另一个的所指示的数字墨水笔画，以及数字墨水笔画被输入到其中的程序的名称的指示(示作为“应用B”)被显示。用户选择数字墨水容器408，这将导致应用B被运行，并且与数字墨水容器408相关联的数字墨水将被显示在显示器410中。
图5是例示根据一个或多个实施例的搜索跨应用数字墨水库的示例过程500的流程图。过程500由计算设备(诸如图1中的计算设备102)来实施，并可以用软件、固件、硬件、或其组合来实现。过程500被示为一组动作，并且不仅限于所示出的用于执行各种动作的操作的顺序。过程500是用于搜索跨应用数字墨水库的示例过程；在此参考不同的附图包括搜索跨应用数字墨水库的附加讨论。
在过程500中，数字墨水搜索准则被接收(动作502)。如以上所讨论的，数字墨水搜索准则由搜索程序接收。
跨应用数字墨水库被访问(动作504)。跨应用数字墨水库存储用于多个应用的数字墨水容器，并且满足搜索准则的一个或多个数字墨水容器被标识(动作506)。
与满足搜索准则的一个或多个数字墨水容器相关联的数字墨水的指示被显示(动作508)。这些指示是包括在如以上所讨论的数字墨水容器中的墨水笔画指示。
访问与数字墨水容器相关联的数字墨水的用户选择被接收(动作510)。用户选择可以以各种方式被接收，诸如点击、触摸其中一个显示的数字墨水容器等。
响应于对与数字墨水相关联的数字墨水容器的用户选择，向其输入数字墨水的应用被打开(动作512)。数字墨水也可选地由应用显示。如以上所讨论的，如果先前没有安装，应用也可选地被安装在实现过程500的计算设备上。
回到图1，在本文的讨论中，数字墨水系统116被描述为提供功能，该功能允许应用106从计算设备102的用户接收数字墨水输入，存储接收到的数字墨水输入，并显示数字墨水输入，并因此减轻应用106实现它们自己的数字墨水功能的负担。替换地，本文讨论的数字墨水系统116的功能也可以在应用106中被实现。在这种情况下，应用106可以将墨水笔画数据存储在上面所讨论的应用数字墨水存储124中，但遵循用于生成存储在跨应用数字墨水库126中的数字墨水容器的通用或已知格式。通过遵循通用或已知格式，可以如以上所讨论的搜索来自多个应用的数字墨水容器。
虽然本文中参考特定模块讨论了特定功能，但应注意，本文中讨论的个体模块的功能可被分成多个模块，和/或多个模块的至少一些功能可被组合在单个模块中。附加地，本文讨论的执行某一动作的特定模块包括该特定模块本身执行该动作或另选地该特定模块调用或与其他方式访问执行该动作的另一组件或模块(或与该特定模块联合执行该动作)。因而，执行某一动作的特定模块包括该特定模块本身执行该动作或由该特定模块调用或以其他方式访问的另一模块执行该动作。
图6在600概括地示出了包括示例计算设备602的示例系统，该示例系统表示可以实现本文中所描述的各种技术的一个或多个系统和/或设备。计算设备602可以是，例如，服务提供方的服务器、与客户端相关联的设备(例如，客户端设备)、片上系统、和/或任何其他合适的计算设备或计算系统。
所示的示例计算设备602包括处理系统604、一个或多个计算机可读介质606，以及相互通信地耦合的一个或多个I/O接口608。尽管没有示出，计算设备602可进一步包括系统总线或将各种组件相互耦合的其他数据和命令传输系统。系统总线可以包括不同总线结构中的任一个或其组合，诸如存储器总线或存储器控制器、外围总线、通用串行总线和/或利用各种总线体系结构中的任一种的处理器或局部总线。也构想了各种其他示例，诸如控制和数据线。
处理系统604表示使用硬件执行一个或多个操作的功能。因此，处理系统604被示为包括可被配置成处理器、功能块等的硬件元件610。这可包括在作为专用集成电路或使用一个或多个半导体构成的其他逻辑设备的硬件中的实现。硬件元件610不受形成它们的材料或者其中利用的处理机制的限制。例如，处理器可以由半导体和/或晶体管(例如，电子集成电路(IC))构成。在这一上下文中，处理器可执行指令可以是可电子地执行的指令。
计算机可读介质606被例示为包括存储器/存储612。存储器/存储612表示与一个或多个计算机可读介质相关联的存储器/存储容量。存储器/存储612可包括易失性介质(如随机存取存储器(RAM))和/或非易失性介质(如只读存储器(ROM)、闪存、光盘、磁盘等)。存储器/存储612可包括固定介质(例如，RAM、ROM、固定硬盘驱动器等)以及可移动介质(例如闪存、可移动硬盘驱动器、光盘等)。计算机可读介质606可以下面进一步描述的各种方式来配置。
一个或多个输入/输出接口608表示允许用户向计算设备602输入命令和信息的功能，并且还允许使用各种输入/输出设备向用户和/或其他组件或设备呈现信息。输入设备的示例包括键盘、光标控制设备(例如，鼠标)、麦克风(例如，用于语音输入)、扫描仪、触摸功能(例如，电容性的或被配置来检测物理触摸的其他传感器)、相机(例如，可采用可见或诸如红外频率的不可见波长来将不涉及触摸的移动检测为姿势)，等等。输出设备的示例包括显示设备(例如，监视器或投影仪)、扬声器、打印机、网卡、触觉响应设备，等等。因此，计算设备602可以下面进一步描述的各种方式来配置以支持用户交互。
计算设备602还包括数字墨水系统614。数字墨水系统614提供了支持数字墨水的各种功能和如上所讨论的跨应用数字墨水库。数字墨水系统614可以是例如图1或图2的数字墨水系统116。
本文可以在软件、硬件元件或程序模块的一般上下文中描述各种技术。一般而言，此类模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、元件、组件、数据结构等。本文使用的术语“模块”、“功能”和“组件”一般表示软件、固件、硬件或其组合。本文描述的技术的各特征是平台无关的，从而意味着该技术可在具有各种处理器的各种计算平台上实现。
所描述的模块和技术的实现可以被存储在某种形式的计算机可读介质上或跨某种形式的计算机可读介质传送。计算机可读介质可包括可由计算设备602访问的各种介质。作为示例而非限制，计算机可读介质可包括“计算机可读存储介质”和“计算机可读信号介质”。
“计算机可读存储介质”指相对于仅信号传输、载波或信号本身而言，启用对信息的持久存储和/或有形存储的介质和/或设备。因此，计算机可读存储介质是指非信号承载介质。计算机可读存储介质包括以适合于存储诸如计算机可读指令、数据结构、程序模块、逻辑元件/电路、或其他数据等的方法或技术来实现的诸如易失性和非易失性、可移动和不可移动介质和/或存储设备的硬件。该计算机可读存储介质的示例包括但不限于，RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光存储、硬盘、磁带盒、磁带、磁盘存储或其他磁存储设备、或者可适用于存储所需信息并可由计算机访问的其他存储设备、有形介质或制品。
“计算机可读信号介质”可以指被配置成诸如经由网络向计算设备602的硬件传输指令的信号承载介质。信号介质通常用诸如载波、数据信号、或其他传输机制等经调制数据信号来体现计算机可读指令、数据结构、程序模块或其他数据。信号介质还包括任何信息传送介质。术语“已调制数据信号”意指以在信号中对信息进行编码的方式来使其一个或多个特性被设定或改变的信号。作为示例而非限制，通信介质包括有线介质，诸如有线网络或直接线路连接，以及无线介质，诸如声学、RF、红外线和其他无线介质。
如先前所描述的，硬件元件610和计算机可读介质606代表以硬件形式实现的指令、模块、可编程器件逻辑和/或固定器件逻辑，其可在某些实施例中被采用来实现此处描述的技术的至少某些方面。硬件元件可包括集成电路或片上系统、应用专用集成电路(ASIC)、现场可编程门阵列(FPGA)、复杂可编程逻辑器件(CPLD)，和用硅或其他硬件设备实现的组件。在此上下文中，硬件元件可以充当处理设备，该处理设备执行由该硬件元件以及用于存储供执行的指令的硬件设备(例如前面描述的计算机可读存储介质)所体现的指令、模块和/或逻辑所定义的程序任务。
前面的组合也可被采用来实现本文所述的各种技术。相应地，软件、硬件，或模块和其他程序模块可被实现为一个或多个指令和/或在某种形式的计算机可读存储介质上和/或由一个或多个硬件元件610实现的逻辑。计算设备602可被配置成实现对应于软件和/或硬件模块的特定指令和/或功能。因此，将模块实现为可由计算设备602执行为软件的模块可至少部分以硬件完成，例如，通过使用计算机可读存储介质和/或处理系统的硬件元件610。指令和/或功能可以是一个或多个制品(例如，一个或多个计算设备602和/或处理系统604)可执行/可操作的，以实现本文描述的技术、模块、以及示例。
如在图6中进一步例示的，示例系统600使得用于当在个人计算机(PC)、电视设备和/或移动设备上运行应用时的无缝用户体验的普遍存在的环境成为可能。服务和应用在所有三个环境中基本相似地运行，以便当使用应用、玩视频游戏、看视频等时在从一个设备转换到下一设备时得到共同的用户体验。
在示例系统600中，多个设备通过中央计算设备互连。中央计算设备对于多个设备可以是本地的，或者可以位于多个设备的远程。在一个或多个实施例中，中央计算设备可以是通过网络、互联网或其他数据通信链路连接到多个设备的一个或多个服务器计算机的云。
在一个或多个实施例中，该互连架构使得功能能够跨多个设备递送以向多个设备的用户提供共同且无缝的体验。多个设备的每一个可具有不同的物理要求和能力，且中央计算设备使用一平台来使得为设备定制且又对所有设备共同的体验能被递送到设备。在一个或多个实施例中，创建目标设备的类，且针对设备的通用类来特制体验。设备类可由设备的物理特征、用途类型或其他共同特性来定义。
在各种实现中，计算设备602可采取各种各样不同的配置，诸如用于计算机616、移动设备618和电视机620用途。这些配置中的每一个包括可具有一般不同的配置和能力的设备，并且因而计算设备602可根据不同的设备类中的一个或多个来配置。例如，计算设备602可被实现为计算机616类的设备，该类包括个人计算机、台式计算机、多屏幕计算机、膝上型计算机、上网本等。
计算设备602还可被实现为移动设备618类的设备，该类包括诸如移动电话、便携式音乐播放器、便携式游戏设备、平板计算机、多屏幕计算机等移动设备。计算设备602还可被实现为电视机620类的设备，该类包括在休闲观看环境中具有或连接到通常更大的屏幕的设备。这些设备包括电视机、机顶盒、游戏控制台等。
本文所描述的技术可由计算设备602的这些各种配置来支持，且不限于在本文描述的各具体示例。这个功能性也可被全部或部分通过分布式系统的使用(诸如如下的经由平台624通过“云”622)来实现。
云622包括和/或代表资源626的平台624。平台624抽象云622的硬件(如，服务器)和软件资源的底层功能。资源626可包括可在计算机处理在位于计算设备602远程的服务器上执行时使用的应用和/或数据。资源626也可包括在互联网上和/或通过诸如蜂窝或Wi-Fi网络之类的订户网络上提供的服务。
平台624可抽象资源和功能以将计算设备602与其他计算设备相连接。平台624还可用于抽象资源的缩放以向经由平台624实现的资源626所遇到的需求提供对应的缩放级别。相应地，在互联设备的实施例中，本文描述的功能性的实现可分布在系统600上。例如，该功能性可部分地在计算设备602上以及经由抽象云622的功能性的平台624来实现。
在本文的讨论中，描述了各种不同的实施例。要领会和理解，本文描述的每个实施例可以单独或与本文描述的一个或多个其他实施例结合使用。本文所讨论的技术的进一步方面涉及以下实施例中的一个或多个。
一种方法，包括：接收针对应用的数字墨水输入；向应用提供用于所述数字墨水输入的墨水笔画数据；向数字墨水容器，添加用于所述数字墨水输入的所述墨水笔画数据的指示；向所述数字墨水容器，添加表示所述数字墨水输入的上下文的数据，所述数据表示包括所述应用的标识符的所述数字墨水输入的上下文；以及将所述数字墨水容器传送到跨应用数字墨水库，所述跨应用数字墨水库存储所述数字墨水容器，以及多个附加数字墨水容器，每个数字墨水容器都包括针对一个或多个附加应用中的每个应用的附加数字墨水输入的墨水笔画数据指示。
作为以上所描述的方法中的任一者的替换或补充，以下任一者或其组合：所述方法在运行所述应用及所述附加应用中的至少一个的计算设备的数字墨水系统中被实现；表示所述数字墨水输入的所述上下文的所述数据还包括将所述应用与其他应用区分开来的统一资源标识符、所述数字墨水被输入到所述应用的日期和/或时间，以及在所述数字墨水被输入到所述应用时实现所述应用的设备的地理位置；表示所述数字墨水输入的所述上下文的所述数据进一步包括当所述数字墨水被输入到所述应用时在场的用户的标识符；当所述数字墨水被输入到所述应用时，用户通过处在所述地理位置，或者通过处于与将所述数字墨水输入到所述应用的用户的视频会议或电话会议中而在场。所述墨水笔画数据的指示包括所述数字墨水输入发生处的所述输入装置的坐标；所述墨水笔画数据的所述指示包括所述数字墨水被输入时显示设备至少部分的屏幕截图；所述墨水笔画数据的所述指示包括数字墨水输入的动画化视图；所述方法还包括接收数字墨水搜索准则，在跨应用数字墨水库中标识满足所述数字墨水搜索准则的数字墨水容器，并显示与所标识的数字墨水容器相关联的所述数字墨水的指示；所述方法被实现在计算设备上，所述方法还包括接收针对所标识的数字墨水容器之一的用户选择，并在所述计算设备上运行向其输入与用户所述选择的数字墨水容器相关联的数字墨水的应用；所述方法还包括，基于用户所选择的数字墨水容器中包括的统一资源标识符，来标识应用，从在线商店下载应用，以及在所述计算设备上运行所述应用之前将所下载的应用安装在所述计算设备上。
一种系统，包括：一个或多个存储设备，配置用于存储应用的指令和与所述应用相关联的数字墨水存储；配置用于运行所述应用的一个或多个处理器；数字墨水系统，配置用于接收针对所述应用的数字墨水输入，向所述应用提供用于所述数字墨水输入的墨水笔画数据，向数字墨水容器中添加用于所述数字墨水输入的所述墨水笔画数据的指示，以及向所述数字墨水容器中添加表示所述数字墨水输入的上下文的上下文数据，所述上下文数据包括所述应用的标识符；以及通信模块，配置用于将所述数字墨水容器传送到跨应用数字墨水库，所述跨应用数字墨水库存储所述数字墨水容器，以及多个附加数字墨水容器，每个数字墨水容器都包括针对一个或多个附加应用中的每个应用的附加数字墨水输入的墨水笔画数据指示。
作为以上所描述的系统中的任一者的替换或补充，以下任一者或其组合：所述一个或多个处理器，被进一步配置用于运行配置用于接收数字墨水搜索准则的搜索程序，在所述跨应用数字墨水库中标识满足所述数字墨水搜索准则的数字墨水容器，显示与所标识的数字墨水容器相关联的数字墨水的指示，接收对所标识的数字墨水容器之一的用户选择，并在所述系统上运行向其输入与用户所选择的数字墨水容器相关联的数字墨水的所述应用；所述墨水笔画数据的指示包括数字墨水输入的动画化视图。一种计算设备，包括：一个或多个处理器；以及其上存储有多个指令的计算机可读存储介质，所述多个指令响应于由所述一个或多个处理器执行而促使所述一个或多个处理器执行包括以下的动作：接收针对由一个或多个处理器执行的应用的数字墨水输入；向所述应用提供用于所述数字墨水输入的墨水笔画数据；向数字墨水容器，添加用于所述数字墨水输入的所述墨水笔画数据的指示；向所述数字墨水容器添加表示所述数字墨水输入的上下文的上下文数据，所述上下文数据包括所述应用的统一资源标识符，该统一资源标识符将所述应用和其他应用区分开；以及将所述数字墨水容器传送到跨应用数字墨水库，所述跨应用数字墨水库存储所述数字墨水容器，以及多个附加数字墨水容器，每个数字墨水容器都包括针对其他应用中的每个应用的附加数字墨水输入的墨水笔画数据指示。
作为以上所描述的计算设备中的任一者的替换或补充，以下任一者或其组合：所述动作还包括接收数字墨水搜索准则，在跨应用数字墨水库中标识满足所述数字墨水搜索准则的数字墨水容器，显示与所标识的数字墨水容器相关联的所述数字墨水的指示；接收针对所标识的数字墨水容器之一的用户选择，在所述计算设备上运行向其输入与用户所选择的数字墨水容器相关联数字墨水的应用；所述上下文数据还包括向应用输入所述数字墨水的日期和/或时间，以及在向所述应用输入所述数字墨水时实现所述应用的设备的地理位置；所述上下文数据还包括向所述应用输入所述数字墨水时在场的用户的标识符；所述墨水笔画数据的所述指示包括所述数字墨水被输入时显示设备至少部分的屏幕截图；所述数字墨水输入已通过笔的移动被提供，并且所述跨应用数字墨水库包括在所述笔中实现的存储设备。
尽管用结构特征和/或方法动作专用的语言描述了本主题，但可以理解，所附权利要求书中定义的主题不必限于上述特定特征或动作。更确切而言，以上所描述的具体特征和动作是作为实现权利要求的示例形式公开的。

Claims (15)

1.一种方法，包括：
接收针对应用的数字墨水输入；
向所述应用提供用于所述数字墨水输入的墨水笔画数据；
向数字墨水容器添加用于所述数字墨水输入的所述墨水笔画数据的指示；
向所述数字墨水容器添加表示所述数字墨水输入的上下文的数据，所述数据表示包括所述应用的标识符的所述数字墨水输入的上下文；以及
将所述数字墨水容器传送到跨应用数字墨水库，所述跨应用数字墨水库存储所述数字墨水容器，以及多个附加数字墨水容器，每个数字墨水容器都包括针对一个或多个附加应用中的每个应用的附加数字墨水输入的墨水笔画数据的指示。
2.如权利要求1所述的方法，其特征在于，所述方法在运行所述应用及所述附加应用中的至少一个的计算设备的数字墨水系统中被实现。
3.如权利要求1或权利要求2所述的方法，其特征在于，表示所述数字墨水输入的所述上下文的数据进一步包括：
将所述应用与其他应用区分开的统一资源标识符；
所述数字墨水被输入到所述应用的日期和/或时间；以及
在所述数字墨水被输入到所述应用时实现所述应用的设备的地理位置。
4.如权利要求1－3的任一项所述的方法，其特征在于，表示所述数字墨水输入的所述上下文的所述数据进一步包括当所述数字墨水被输入到所述应用时在场的用户的标识符。
5.如权利要求4所述的方法，其特征在于，当所述数字墨水被输入到所述应用时，用户通过处在所述地理位置，或者通过处于与将所述数字墨水输入到所述应用的用户的视频会议或电话会议中而在场。
6.如权利要求1－5的任一项所述的方法，其特征在于，所述墨水笔画数据的指示包括所述数字墨水输入发生处的所述输入设备的坐标。
7.如权利要求1－6的任一项所述的方法，其特征在于，所述墨水笔画数据的指示包括所述数字墨水输入的动画化视图。
8.如权利要求1－7中任一项所述的方法，其特征在于，进一步包括：
接收数字墨水搜索准则；
在所述跨应用数字墨水库中标识满足所述数字墨水搜索准则的数字墨水容器；以及
显示与所标识的数字墨水容器相关联的所述数字墨水的指示。
9.如权利要求8所述的方法，其特征在于，所述方法被实现在计算设备上，所述方法进一步包括：
接收针对所标识的数字墨水容器之一的用户选择；以及
在所述计算设备上运行向其输入与用户所选择的数字墨水容器相关联数字墨水的应用。
10.根据权利要求9所述的方法，其特征在于，进一步包括：
基于用户所选择的数字墨水容器中包括的统一资源标识符，来标识所述应用；
从在线商店下载所述应用；以及
在所述计算设备上运行所述应用之前将所下载的应用安装在所述计算设备上。
11.一种计算设备，包括：
一个或多个处理器；以及
其上存储有多个指令的计算机可读存储介质，所述多个指令响应于由所述一个或多个处理器执行而促使所述一个或多个处理器执行包括以下的动作：
接收针对由一个或多个处理器执行的应用的数字墨水输入；
向所述应用提供用于所述数字墨水输入的墨水笔画数据；
向数字墨水容器添加用于所述数字墨水输入的所述墨水笔画数据的指示；
向所述数字墨水容器添加表示所述数字墨水输入的上下文的上下文数据，所述上下文数据包括所述应用的统一资源标识符，所述统一资源标识符将所述应用和其他应用区分开；以及
将所述数字墨水容器传送到跨应用数字墨水库，所述跨应用数字墨水库存储所述数字墨水容器，以及多个附加数字墨水容器，每个数字墨水容器都包括针对其他应用中的每个应用的附加数字墨水输入的墨水笔画数据指示。
12.如权利要求11所述的计算设备，其特征在于，所述动作进一步包括：
接收数字墨水搜索准则；
在跨应用数字墨水库中标识满足所述数字墨水搜索准则的数字墨水容器；
显示与所标识的数字墨水容器相关联的所述数字墨水的指示；
接收针对所标识的数字墨水容器之一的用户选择；
在所述计算设备上运行向其输入与用户所选择的数字墨水容器相关联数字墨水的应用。
13.如权利要求11或权利要求12所述的计算设备，其特征在于，所述上下文数字进一步包括：
所述数字墨水被输入到所述应用的日期和/或时间；以及
在所述数字墨水被输入到所述应用时实现所述应用的设备的地理位置。
14.如权利要求11－13中的任一项所述的计算设备，其特征在于，所述墨水笔画数据的所述指示包括所述数字墨水被输入时显示设备的至少部分的屏幕截图。
15.如权利要求11－14中的任一项所述的计算设备，其特征在于，所述数字墨水输入已通过笔的移动被提供，并且所述跨应用数字墨水库包括在所述笔中实现的存储设备。
CN201780004317.4A 2016-01-22 2017-01-14 跨应用数字墨水库 Active CN108292304B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/004,574 2016-01-22
US15/004,574 US10228775B2 (en) 2016-01-22 2016-01-22 Cross application digital ink repository
PCT/US2017/013588 WO2017127320A1 (en) 2016-01-22 2017-01-14 Cross application digital ink repository

Publications (2)

Publication Number Publication Date
CN108292304A true CN108292304A (zh) 2018-07-17
CN108292304B CN108292304B (zh) 2021-11-23

Family

ID=58016802

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780004317.4A Active CN108292304B (zh) 2016-01-22 2017-01-14 跨应用数字墨水库

Country Status (4)

Country Link
US (2) US10228775B2 (zh)
EP (1) EP3405881A1 (zh)
CN (1) CN108292304B (zh)
WO (1) WO2017127320A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170236318A1 (en) * 2016-02-15 2017-08-17 Microsoft Technology Licensing, Llc Animated Digital Ink
US10142380B2 (en) * 2016-04-15 2018-11-27 Microsoft Technology Licensing, Llc Joining executable component to online conference
US10204082B2 (en) 2017-03-31 2019-02-12 Dropbox, Inc. Generating digital document content from a digital image
WO2018233586A1 (en) * 2017-06-20 2018-12-27 Beijing Didi Infinity Technology And Development Co., Ltd. SYSTEMS AND METHODS FOR PROCESSING DATA RELATING TO ONLINE-OFFLINE SERVICE
US10275910B2 (en) 2017-09-25 2019-04-30 Microsoft Technology Licensing, Llc Ink space coordinate system for a digital ink stroke
US10514841B2 (en) * 2018-04-30 2019-12-24 Microsoft Technology Licensing, Llc Multi-layered ink object
US11128735B2 (en) 2018-10-05 2021-09-21 Microsoft Technology Licensing, Llc Remote computing resource allocation
US11435893B1 (en) * 2021-03-16 2022-09-06 Microsoft Technology Licensing, Llc Submitting questions using digital ink
US11361153B1 (en) 2021-03-16 2022-06-14 Microsoft Technology Licensing, Llc Linking digital ink instances using connecting lines
US11372486B1 (en) 2021-03-16 2022-06-28 Microsoft Technology Licensing, Llc Setting digital pen input mode using tilt angle
US11875543B2 (en) 2021-03-16 2024-01-16 Microsoft Technology Licensing, Llc Duplicating and aggregating digital ink instances
US11526659B2 (en) 2021-03-16 2022-12-13 Microsoft Technology Licensing, Llc Converting text to digital ink

Family Cites Families (180)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0773190A (ja) * 1993-04-29 1995-03-17 Matsushita Electric Ind Co Ltd ペンベースコンピューターシステム用絵文字ネーミング
JP3466689B2 (ja) * 1994-01-26 2003-11-17 キヤノン株式会社 手書き文字認識方法及びその装置
JP3416268B2 (ja) * 1994-06-30 2003-06-16 キヤノン株式会社 画像認識装置及びその方法
EP0691623B1 (en) * 1994-07-04 2001-10-04 Hewlett-Packard Company, A Delaware Corporation Scribble matching
US5835667A (en) * 1994-10-14 1998-11-10 Carnegie Mellon University Method and apparatus for creating a searchable digital video library and a system and method of using such a library
US5606674A (en) * 1995-01-03 1997-02-25 Intel Corporation Graphical user interface for transferring data between applications that support different metaphors
US5757959A (en) * 1995-04-05 1998-05-26 Panasonic Technologies, Inc. System and method for handwriting matching using edit distance computation in a systolic array processor
US5895475A (en) * 1996-05-31 1999-04-20 Minnesota Mining And Manufacturing Company Software notes designing
IL119498A (en) * 1996-10-27 2003-02-12 Advanced Recognition Tech Application launching system
US5970455A (en) * 1997-03-20 1999-10-19 Xerox Corporation System for capturing and retrieving audio data and corresponding hand-written notes
US6456749B1 (en) * 1998-02-27 2002-09-24 Carnegie Mellon University Handheld apparatus for recognition of writing, for remote communication, and for user defined input templates
US6233448B1 (en) * 1998-07-22 2001-05-15 Ericsson Inc. System, method and apparatus for automatic feature activation/deactivation based upon positioning
US6625296B2 (en) * 1998-11-03 2003-09-23 Fuji Xerox Co., Ltd. Method and system for freeform digital ink annotation of data traces
US6529215B2 (en) * 1998-12-31 2003-03-04 Fuji Xerox Co., Ltd. Method and apparatus for annotating widgets
US6256009B1 (en) * 1999-02-24 2001-07-03 Microsoft Corporation Method for automatically and intelligently scrolling handwritten input
US6565611B1 (en) * 1999-02-26 2003-05-20 Xerox Corporation Automatic index creation for handwritten digital ink notes
US6687878B1 (en) * 1999-03-15 2004-02-03 Real Time Image Ltd. Synchronizing/updating local client notes with annotations previously made by other clients in a notes database
US6452615B1 (en) * 1999-03-24 2002-09-17 Fuji Xerox Co., Ltd. System and apparatus for notetaking with digital video and ink
US6351259B2 (en) * 1999-05-27 2002-02-26 Wireless Note Systems, Inc. Kit for recording or transmitting information of a note in freehand
US6504956B1 (en) * 1999-10-05 2003-01-07 Ecrio Inc. Method and apparatus for digitally capturing handwritten notes
US7564995B1 (en) * 2000-03-07 2009-07-21 Apple Inc. Method and apparatus for acquiring and organizing ink information in pen-aware computer systems
US6859909B1 (en) * 2000-03-07 2005-02-22 Microsoft Corporation System and method for annotating web-based documents
US6970859B1 (en) * 2000-03-23 2005-11-29 Microsoft Corporation Searching and sorting media clips having associated style and attributes
US7076255B2 (en) * 2000-04-05 2006-07-11 Microsoft Corporation Context-aware and location-aware cellular phones and methods
US7397949B2 (en) * 2000-06-21 2008-07-08 Microsoft Corporation Serial storage of ink and its properties
US6355889B1 (en) * 2000-06-28 2002-03-12 International Business Machines Corporation Method and apparatus for linking electronic ink to electronic personal information systems
US7289110B2 (en) * 2000-07-17 2007-10-30 Human Messaging Ab Method and arrangement for identifying and processing commands in digital images, where the user marks the command, for example by encircling it
US6721921B1 (en) * 2000-07-26 2004-04-13 Itm Associates Method and system for annotating documents using an independent annotation repository
US7627596B2 (en) 2001-02-22 2009-12-01 International Business Machines Corporation Retrieving handwritten documents using multiple document recognizers and techniques allowing both typed and handwritten queries
US6701144B2 (en) * 2001-03-05 2004-03-02 Qualcomm Incorporated System for automatically configuring features on a mobile telephone based on geographic location
US7602379B2 (en) * 2001-06-19 2009-10-13 Hewlett-Packard Development Company, L.P. Digital annotator
AUPR687701A0 (en) * 2001-08-08 2001-08-30 Litster, Gregory John Method of and apparatus for selecting symbols in ideographic languages
JP4261145B2 (ja) * 2001-09-19 2009-04-30 株式会社リコー 情報処理装置、情報処理装置の制御方法、その方法をコンピュータに実行させるためのプログラム
US20030063136A1 (en) * 2001-10-02 2003-04-03 J'maev Jack Ivan Method and software for hybrid electronic note taking
US20030071850A1 (en) * 2001-10-12 2003-04-17 Microsoft Corporation In-place adaptive handwriting input method and system
AUPR824301A0 (en) * 2001-10-15 2001-11-08 Silverbrook Research Pty. Ltd. Methods and systems (npw001)
WO2003036418A2 (en) * 2001-10-22 2003-05-01 Segwave, Inc. Note taking, organizing, and studying software
JP3771831B2 (ja) * 2001-11-01 2006-04-26 インターナショナル・ビジネス・マシーンズ・コーポレーション デジタル・コンテンツに付加されるアノテーション情報を共有するためのコンピュータ・システムおよびプログラム
US7120299B2 (en) * 2001-12-28 2006-10-10 Intel Corporation Recognizing commands written onto a medium
AUPS020302A0 (en) * 2002-01-31 2002-02-21 Silverbrook Research Pty. Ltd. Methods and systems (npw007)
US7243301B2 (en) * 2002-04-10 2007-07-10 Microsoft Corporation Common annotation framework
US7158675B2 (en) * 2002-05-14 2007-01-02 Microsoft Corporation Interfacing with ink
US7199804B2 (en) * 2002-05-14 2007-04-03 Microsoft Corporation Ink information in image files
US7200803B2 (en) * 2002-06-27 2007-04-03 Microsoft Corporation System and method for visually categorizing electronic notes
US7353453B1 (en) * 2002-06-28 2008-04-01 Microsoft Corporation Method and system for categorizing data objects with designation tools
US7079713B2 (en) * 2002-06-28 2006-07-18 Microsoft Corporation Method and system for displaying and linking ink objects with recognized text and objects
US6867786B2 (en) 2002-07-29 2005-03-15 Microsoft Corp. In-situ digital inking for applications
US7284200B2 (en) * 2002-11-10 2007-10-16 Microsoft Corporation Organization of handwritten notes using handwritten titles
US7634729B2 (en) * 2002-11-10 2009-12-15 Microsoft Corporation Handwritten file names
US20040145574A1 (en) * 2003-01-29 2004-07-29 Xin Zhen Li Invoking applications by scribing an indicium on a touch screen
US7620250B2 (en) * 2003-04-03 2009-11-17 Dublin City University Shape matching method for indexing and retrieving multimedia data
US20040196306A1 (en) * 2003-04-04 2004-10-07 Microsoft Corporation Method and system for flagging digital ink note content
US20040201602A1 (en) * 2003-04-14 2004-10-14 Invensys Systems, Inc. Tablet computer system for industrial process design, supervisory control, and data management
US20040240739A1 (en) * 2003-05-30 2004-12-02 Lu Chang Pen gesture-based user interface
US20040257346A1 (en) * 2003-06-20 2004-12-23 Microsoft Corporation Content selection and handling
US7315857B2 (en) * 2004-05-13 2008-01-01 International Business Machines Corporation Method and system for propagating annotations using pattern matching
US20040260714A1 (en) * 2003-06-20 2004-12-23 Avijit Chatterjee Universal annotation management system
US9026901B2 (en) * 2003-06-20 2015-05-05 International Business Machines Corporation Viewing annotations across multiple applications
CA2529037A1 (en) * 2003-08-15 2005-02-24 Silverbrook Research Pty Ltd Natural language recognition using distributed processing
US7725419B2 (en) * 2003-09-05 2010-05-25 Samsung Electronics Co., Ltd Proactive user interface including emotional agent
US7352902B2 (en) * 2003-09-24 2008-04-01 Microsoft Corporation System and method for detecting a hand-drawn object in ink input
US7519900B2 (en) * 2003-10-24 2009-04-14 Microsoft Corporation System and method for processing digital annotations
US20050091578A1 (en) * 2003-10-24 2005-04-28 Microsoft Corporation Electronic sticky notes
US8069194B1 (en) * 2004-03-04 2011-11-29 Ophivain Applications NY L.L.C. Automated annotation of a resource on a computer network using a network address of the resource
US7669117B2 (en) * 2004-03-18 2010-02-23 International Business Machines Corporation Method and system for creation and retrieval of global annotations
US20050283752A1 (en) * 2004-05-17 2005-12-22 Renate Fruchter DiVAS-a cross-media system for ubiquitous gesture-discourse-sketch knowledge capture and reuse
US8020101B2 (en) * 2004-05-20 2011-09-13 International Business Machines Corporation User specified transfer of data between applications
US7284192B2 (en) * 2004-06-24 2007-10-16 Avaya Technology Corp. Architecture for ink annotations on web documents
US20060031755A1 (en) * 2004-06-24 2006-02-09 Avaya Technology Corp. Sharing inking during multi-modal communication
US7515752B2 (en) * 2004-08-27 2009-04-07 Corel Corporation Sketch recognition and enhancement
US7574048B2 (en) * 2004-09-03 2009-08-11 Microsoft Corporation Freeform digital ink annotation recognition
US8880597B1 (en) * 2004-09-07 2014-11-04 Evernote Corporation Electronic note management system and user-interface
US7099798B2 (en) * 2004-10-25 2006-08-29 Microsoft Corporation Event-based system and process for recording and playback of collaborative electronic presentations
US8230326B2 (en) * 2004-12-17 2012-07-24 International Business Machines Corporation Method for associating annotations with document families
US8232979B2 (en) * 2005-05-25 2012-07-31 The Invention Science Fund I, Llc Performing an action with respect to hand-formed expression
US20060262106A1 (en) * 2005-05-20 2006-11-23 Lg Electronics Inc. Pen input device with data storage
US8161415B2 (en) * 2005-06-20 2012-04-17 Hewlett-Packard Development Company, L.P. Method, article, apparatus and computer system for inputting a graphical object
EP1904958A1 (en) * 2005-06-24 2008-04-02 Nokia Corporation Handwriting recognition in electronic devices
JP4741908B2 (ja) * 2005-09-08 2011-08-10 キヤノン株式会社 情報処理装置及び情報処理方法
US20070106931A1 (en) * 2005-11-08 2007-05-10 Nokia Corporation Active notes application
US20070124507A1 (en) * 2005-11-28 2007-05-31 Sap Ag Systems and methods of processing annotations and multimodal user inputs
US7913162B2 (en) * 2005-12-20 2011-03-22 Pitney Bowes Inc. System and method for collaborative annotation using a digital pen
DE602007009926D1 (de) * 2006-01-11 2010-12-02 Gannon Technologies Group Llc Verfahren und vorrichtungen zur erweiterung von dynamischer handschrifterkennung zur erkennung statischer handgeschriebener und maschinell erstellter texte
US8196055B2 (en) * 2006-01-30 2012-06-05 Microsoft Corporation Controlling application windows in an operating system
JP4886312B2 (ja) * 2006-02-09 2012-02-29 キヤノン株式会社 情報処理装置、情報処理装置の制御方法、及びプログラム
US8219920B2 (en) * 2006-08-04 2012-07-10 Apple Inc. Methods and systems for managing to do items or notes or electronic messages
US8978974B2 (en) * 2006-09-26 2015-03-17 B & K Leasing Company, Inc. Signature management system
US8243022B2 (en) * 2006-11-27 2012-08-14 Microsoft Corporation Federated virtual graffiti
US7773811B2 (en) * 2006-12-06 2010-08-10 D & S Consultants, Inc. Method and system for searching a database of graphical data
JP2010512693A (ja) * 2006-12-07 2010-04-22 アダックス，インク． データの付加、記録および通信のためのシステムと方法
TWI399671B (zh) * 2007-01-19 2013-06-21 Lg Electronics Inc 透過觸碰輸入裝置之資訊輸入
US8347206B2 (en) * 2007-03-15 2013-01-01 Microsoft Corporation Interactive image tagging
US7907141B2 (en) * 2007-03-23 2011-03-15 Palo Alto Research Center Incorporated Methods and processes for recognition of electronic ink strokes
US20080244385A1 (en) * 2007-03-30 2008-10-02 Pitney Bowes Inc. Systems and methods for managing multimodal documents
US7693842B2 (en) * 2007-04-09 2010-04-06 Microsoft Corporation In situ search for active note taking
US8024652B2 (en) * 2007-04-10 2011-09-20 Microsoft Corporation Techniques to associate information between application programs
US7975215B2 (en) * 2007-05-14 2011-07-05 Microsoft Corporation Sharing editable ink annotated images with annotation-unaware applications
WO2008150912A1 (en) * 2007-05-29 2008-12-11 Livescribe, Inc. Organization of user generated content captured by a smart pen computing system
US8315482B2 (en) * 2007-06-26 2012-11-20 Microsoft Corporation Integrated platform for user input of digital ink
US8094939B2 (en) * 2007-06-26 2012-01-10 Microsoft Corporation Digital ink-based search
US9058067B2 (en) * 2008-04-03 2015-06-16 Livescribe Digital bookclip
US20090251338A1 (en) 2008-04-03 2009-10-08 Livescribe, Inc. Ink Tags In A Smart Pen Computing System
US20090307607A1 (en) * 2008-06-10 2009-12-10 Microsoft Corporation Digital Notes
JP2010015238A (ja) * 2008-07-01 2010-01-21 Sony Corp 情報処理装置、及び補助情報の表示方法
US20100031202A1 (en) * 2008-08-04 2010-02-04 Microsoft Corporation User-defined gesture set for surface computing
US7966024B2 (en) * 2008-09-30 2011-06-21 Microsoft Corporation Virtual skywriting
EP2371110A4 (en) 2008-12-29 2017-04-19 IDTP Holdings, Inc. Method and device for installing applications on nfc-enabled devices
US8096477B2 (en) * 2009-01-27 2012-01-17 Catch, Inc. Semantic note taking system
JP4752921B2 (ja) * 2009-01-28 2011-08-17 ソニー株式会社 情報処理装置、アニメーション付加方法、及びプログラム
US8350871B2 (en) * 2009-02-04 2013-01-08 Motorola Mobility Llc Method and apparatus for creating virtual graffiti in a mobile virtual and augmented reality system
US20100231598A1 (en) * 2009-03-10 2010-09-16 Google Inc. Serving Font Glyphs
CN101510218A (zh) * 2009-03-26 2009-08-19 阿里巴巴集团控股有限公司 实现图片搜索的方法及网站服务器
KR101559178B1 (ko) * 2009-04-08 2015-10-12 엘지전자 주식회사 명령어 입력 방법 및 이를 적용한 이동 통신 단말기
US8769442B2 (en) * 2009-07-07 2014-07-01 Microsoft Corporation System and method for allocating digital graffiti objects and canvasses
US9087059B2 (en) * 2009-08-07 2015-07-21 Google Inc. User interface for presenting search results for multiple regions of a visual query
US8504624B2 (en) * 2009-09-08 2013-08-06 Ricoh Co., Ltd. Stroke and image aggregation and analytics
US8335989B2 (en) * 2009-10-26 2012-12-18 Nokia Corporation Method and apparatus for presenting polymorphic notes in a graphical user interface
US8185596B2 (en) * 2010-02-22 2012-05-22 Samsung Electronics Co., Ltd. Location-based communication method and system
CA2800893A1 (en) * 2010-05-28 2011-12-01 Adapx, Inc. Methods and systems for automated creation, recognition and display of icons
US8799798B2 (en) * 2010-06-09 2014-08-05 Fujitsu Limited Method and system for handwriting-based launch of an application
US9081412B2 (en) * 2010-07-31 2015-07-14 Hewlett-Packard Development Company, L.P. System and method for using paper as an interface to computer applications
US10089404B2 (en) * 2010-09-08 2018-10-02 Evernote Corporation Site memory processing
US9021402B1 (en) * 2010-09-24 2015-04-28 Google Inc. Operation of mobile device interface using gestures
WO2012075565A1 (en) 2010-12-06 2012-06-14 Smart Technologies Ulc Annotation method and system for conferencing
US8701001B2 (en) * 2011-01-28 2014-04-15 International Business Machines Corporation Screen capture
US20120216152A1 (en) * 2011-02-23 2012-08-23 Google Inc. Touch gestures for remote control operations
US20120221944A1 (en) 2011-02-28 2012-08-30 Bloomfield Richard H System for digital and remote document revision and execution with document escrow
US8553981B2 (en) * 2011-05-17 2013-10-08 Microsoft Corporation Gesture-based visual search
EP2527968B1 (en) * 2011-05-24 2017-07-05 LG Electronics Inc. Mobile terminal
US20130033461A1 (en) * 2011-08-03 2013-02-07 Silverbrook Research Pty Ltd System for notetaking with source document referencing
US20130033429A1 (en) * 2011-08-03 2013-02-07 Silverbrook Research Pty Ltd. Method of notetaking with source document referencing
US8718374B2 (en) * 2011-08-18 2014-05-06 Nokia Corporation Method and apparatus for accessing an electronic resource based upon a hand-drawn indicator
AU2012101185B4 (en) * 2011-08-19 2013-05-02 Apple Inc. Creating and viewing digital note cards
US8478777B2 (en) * 2011-10-25 2013-07-02 Google Inc. Gesture-based search
JP5533837B2 (ja) * 2011-11-02 2014-06-25 コニカミノルタ株式会社 手書き入力装置及び手書き入力制御プログラム
US8935283B2 (en) * 2012-04-11 2015-01-13 Blackberry Limited Systems and methods for searching for analog notations and annotations
JP5395927B2 (ja) * 2012-05-11 2014-01-22 株式会社東芝 電子機器および手書き文書検索方法
JP5270018B1 (ja) 2012-05-11 2013-08-21 株式会社東芝 システム及び手書き文書管理方法
TWI464667B (zh) * 2012-05-23 2014-12-11 Wistron Corp 電子書之筆記共享方法及電子閱讀裝置、電腦可讀取媒體
KR101395480B1 (ko) * 2012-06-01 2014-05-14 주식회사 팬택 필기 입력에 기초하여 어플리케이션을 실행하는 방법 및 그 단말
US9009188B1 (en) * 2012-06-12 2015-04-14 Google Inc. Drawing-based search queries
KR20140027606A (ko) * 2012-08-01 2014-03-07 삼성전자주식회사 필기 인식을 이용한 단말의 제어 방법 및 그 단말
KR102059800B1 (ko) * 2012-08-30 2019-12-27 삼성전자주식회사 사용자 단말에서 사용자 인터페이스 장치 및 이를 지원하는 방법
FR2995704B1 (fr) * 2012-09-19 2015-12-25 Inst Nat De Sciences Appliquees Methode de selection de mode d'interactivite
KR101943320B1 (ko) * 2012-09-21 2019-04-17 엘지전자 주식회사 이동단말기 및 그 제어방법
US20140089865A1 (en) * 2012-09-24 2014-03-27 Co-Operwrite Limited Handwriting recognition server
US20140105503A1 (en) * 2012-10-15 2014-04-17 Kabushiki Kaisha Toshiba Electronic apparatus and handwritten document processing method
JP5567097B2 (ja) * 2012-10-26 2014-08-06 株式会社東芝 電子機器、手書き文書表示方法、及び表示プログラム
US9047508B2 (en) * 2012-11-07 2015-06-02 Xerox Corporation System and method for identifying and acting upon handwritten action items
KR101999749B1 (ko) * 2012-11-09 2019-07-12 삼성전자주식회사 전자장치에서 애플리케이션의 입력과 출력을 매칭시키는 방법 및 장치 그리고 매칭된 애플리케이션을 사용하는 방법 및 장치
US9235768B1 (en) * 2012-11-19 2016-01-12 Evernote Corporation Custom drawings as content access identifiers
US9846494B2 (en) * 2013-01-04 2017-12-19 Uei Corporation Information processing device and information input control program combining stylus and finger input
US9183276B2 (en) * 2013-02-04 2015-11-10 Kabushiki Kaisha Toshiba Electronic device and method for searching handwritten document
US8958644B2 (en) * 2013-02-28 2015-02-17 Ricoh Co., Ltd. Creating tables with handwriting images, symbolic representations and media images from forms
US8943092B2 (en) 2013-03-04 2015-01-27 Microsoft Corporation Digital ink based contextual search
US9558400B2 (en) * 2013-03-07 2017-01-31 Ricoh Company, Ltd. Search by stroke
CN105144198B (zh) * 2013-04-02 2021-09-14 3M创新有限公司 用于便笺识别的系统和方法
US20140337804A1 (en) * 2013-05-10 2014-11-13 Microsoft Corporation Symbol-based digital ink analysis
US9465985B2 (en) * 2013-06-09 2016-10-11 Apple Inc. Managing real-time handwriting recognition
US10108586B2 (en) * 2013-06-15 2018-10-23 Microsoft Technology Licensing, Llc Previews of electronic notes
US9846526B2 (en) * 2013-06-28 2017-12-19 Verizon and Redbox Digital Entertainment Services, LLC Multi-user collaboration tracking methods and systems
US8891862B1 (en) * 2013-07-09 2014-11-18 3M Innovative Properties Company Note recognition and management using color classification
KR20150032101A (ko) * 2013-09-17 2015-03-25 삼성전자주식회사 영상표시장치 및 영상표시방법
US9542004B1 (en) * 2013-09-24 2017-01-10 Amazon Technologies, Inc. Gesture-based flash
EP3058514B1 (en) * 2013-10-16 2020-01-08 3M Innovative Properties Company Adding/deleting digital notes from a group
US9274693B2 (en) * 2013-10-16 2016-03-01 3M Innovative Properties Company Editing digital notes representing physical notes
WO2015057778A1 (en) * 2013-10-16 2015-04-23 3M Innovative Properties Company Note recognition and association based on grouping
US20150116282A1 (en) 2013-10-24 2015-04-30 Livescribe Inc. Organizing Written Notes Using Contextual Data
EP3072039B1 (en) 2013-11-19 2019-08-14 Wacom Co., Ltd. Method and system for ink data generation, ink data rendering, ink data manipulation and ink data communication
US9304612B2 (en) * 2014-03-07 2016-04-05 Lenovo (Singapore) Pte. Ltd. Off-screen input capture for mobile device
US9990059B2 (en) * 2014-05-23 2018-06-05 Microsoft Technology Licensing, Llc Ink modes
CN105373552A (zh) * 2014-08-25 2016-03-02 中兴通讯股份有限公司 基于显示终端的数据处理方法
US11550993B2 (en) * 2015-03-08 2023-01-10 Microsoft Technology Licensing, Llc Ink experience for images
US9950542B2 (en) * 2015-03-12 2018-04-24 Microsoft Technology Licensing, Llc Processing digital ink input subject to monitoring and intervention by an application program
US9710701B2 (en) * 2015-03-26 2017-07-18 Lenovo (Singapore) Pte. Ltd. Handwriting data search
US10437779B2 (en) * 2015-03-27 2019-10-08 International Business Machines Corporation Intelligent interactive screen capture
US20160283083A1 (en) * 2015-03-27 2016-09-29 International Business Machines Corporation Intelligent interactive screen capture
US20160338120A1 (en) * 2015-05-14 2016-11-17 Smart Technologies, Ulc System And Method Of Communicating Between Interactive Systems
US10643067B2 (en) * 2015-10-19 2020-05-05 Myscript System and method of handwriting recognition in diagrams
US9904447B2 (en) * 2016-01-08 2018-02-27 Microsoft Technology Licensing, Llc Universal inking support

Also Published As

Publication number Publication date
US20190163293A1 (en) 2019-05-30
US20170212612A1 (en) 2017-07-27
US10228775B2 (en) 2019-03-12
CN108292304B (zh) 2021-11-23
US10802613B2 (en) 2020-10-13
EP3405881A1 (en) 2018-11-28
WO2017127320A1 (en) 2017-07-27

Similar Documents

Publication Publication Date Title
CN108292304A (zh) 跨应用数字墨水库
JP6419993B2 (ja) 関連コンテンツを先見的に特定し、タッチ感知デバイス上に表面化させるためのシステム及び方法
CN106605410B (zh) 一种由计算设备实现的基于用户的出现控制对内容的访问的方法以及设备
EP3465469B1 (en) Intelligent capture, storage, and retrieval of information for task completion
CN102362251B (zh) 用于提供对应用程序的增强控制的用户界面
CN103049169B (zh) 由一个或多个硬件处理器实现的方法和系统
CN105453612B (zh) 消息服务提供装置以及经由其提供内容的方法
CN107646120A (zh) 用于内容创建的交互式命令行
WO2018045562A1 (zh) 一种关联通知消息的方法、装置及移动终端
US10373080B2 (en) Distributing a user interface for accessing files
CN105917627A (zh) 云服务定制执行环境
CN108885738A (zh) 通过自关联消息的命令和任务完成
US10331480B2 (en) Contextual application organizer framework for user life events
CN107113468A (zh) 基于显示设备的自动主屏确定
CN109844760A (zh) 时间相关墨水
US20140160029A1 (en) Systems and Methods for a Trackpad Within a Keyboard
US11100424B2 (en) Control system for learning and surfacing feature correlations
CN105308563B (zh) 用于系统准备任务的协调的方法和设备
KR101826320B1 (ko) 잠금화면 제어 방법 및 그 방법을 실행하기 위한 프로그램을 기록한 기록매체
US10909138B2 (en) Transforming data to share across applications
US10067670B2 (en) Multi-switch option scanning
US20160034542A1 (en) Integrating various search and relevance providers in transactional search
CN110431548A (zh) 针对图表的上下文规则
US10409453B2 (en) Group selection initiated from a single item
US11373003B2 (en) Mitigating inadvertent user information collection in telemetry data

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant