CN105706037A - 管理以结构化格式的墨水内容 - Google Patents

管理以结构化格式的墨水内容 Download PDF

Info

Publication number
CN105706037A
CN105706037A CN201480033530.4A CN201480033530A CN105706037A CN 105706037 A CN105706037 A CN 105706037A CN 201480033530 A CN201480033530 A CN 201480033530A CN 105706037 A CN105706037 A CN 105706037A
Authority
CN
China
Prior art keywords
content
ink
ink content
computing equipment
application
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480033530.4A
Other languages
English (en)
Other versions
CN105706037B (zh
Inventor
N.J.费希
G.L.考德维尔
O.特鲁特纳
M.N.罗
S.M.富尔克纳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN105706037A publication Critical patent/CN105706037A/zh
Application granted granted Critical
Publication of CN105706037B publication Critical patent/CN105706037B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/171Editing, e.g. inserting or deleting by use of digital ink
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/177Editing, e.g. inserting or deleting of tables; using ruled lines
    • G06F40/18Editing, e.g. inserting or deleting of tables; using ruled lines of spreadsheets
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40Document-oriented image-based pattern recognition
    • G06V30/41Analysis of document content
    • G06V30/412Layout analysis of documents structured with printed lines or input boxes, e.g. business forms or tables

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供了管理计算设备上的以结构化格式的墨水内容。墨水内容可以由计算设备接收。墨水内容然后可以由计算设备识别以对应于与一个或多个应用相关联的内容格式。墨水内容然后可以由计算设备转换成与一个或多个应用相关联的内容。

Description

管理以结构化格式的墨水内容
背景技术
诸如虚拟会议、协作和即时消息传递应用之类的计算机软件应用可以用于使用计算设备显示器上的虚拟“墨水”来录入自由形式的内容(例如手写或手绘图像)。这些应用还可以使得用户能够以其原始自由形式内容来保存虚拟墨水。然而,当出现对于使自由形式内容保存为结构化内容使得其可以利用在一个或多个生产力应用(例如文字处理应用、电子制表应用、演示应用等)中的需要时,存在与当前应用相关联的若干缺陷。例如,利用当前软件应用,手写自由形式内容必须手动再现(例如从所显示的墨水重新键入),或者可替换地,要求用户进入到特殊输入模式(例如“墨水到文本”)模式以将自由形式内容转换成结构化内容。然而,当前软件应用不能够接收自由形式内容(即非结构化墨水)并且将其变成结构化格式使得其可以被原生地识别和操纵。关于这些考虑和其它而做出了本发明的各种实施例。
发明内容
提供本发明内容来以简化的形式引入以下在具体实施方式中进一步描述的概念的选择。本发明内容不意图标识所要求保护的主题的关键特征或必要特征,也不意图帮助确定所要求的保护的主题的范围。
提供用于管理计算设备上的结构化格式的墨水内容的实施例。墨水内容然后可以被计算设备识别以对应于与一个或多个应用相关联的内容格式。墨水内容然后可以被计算设备转换成与一个或多个应用相关联的内容。
这些和其它特征和优点将从以下具体描述的阅读和相关联的附图的回顾显而易见。要理解到的是,前述的一般描述和随后的详细描述二者仅仅是说明性的并且不限制如所要求保护的本发明。
附图说明
图1是图示了依照各种实施例的用于管理以结构化格式的墨水内容的系统架构的框图。
图2是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图3是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图4是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图5是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图6是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图7是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图8是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图9是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图10是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图11是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图12是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图13是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图14是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图15是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面的图;
图16是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的例程的流程图;
图17是利用其可以实践各种实施例的计算设备的简化框图;
图18A是利用其可以实践各种实施例的移动计算设备的简化框图;
图18B是利用其可以实践各种实施例的移动计算设备的简化框图;以及
图19是其中可以实践各种实施例的分布式计算系统的简化框图。
具体实施方式
提供用于管理计算设备上的以结构化格式的墨水内容的实施例。墨水内容然后可以被计算设备识别以对应于与一个或多个应用相关联的内容格式。墨水内容然后可以被计算设备转换成与一个或多个应用相关联的内容。
在以下详细描述中,对形成其部分并且其中通过图示的方式示出具体实施例或示例的附图做出参照。这些实施例可以组合,可以利用其它实施例,并且可以做出结构改变而不脱离于本发明的精神或范围。以下详细描述因而不以限制性含义来考虑,并且本发明的范围由随附权利要求及其等同物来限定。
现在参照附图,其中相同的标号通过若干图来表示相同的元件,将描述本发明的各个方面。图1是图示了依照各种实施例的用于管理以结构化格式的墨水内容的系统架构的框图。系统架构包括与用户2和计算设备10通信的显示器25。应当领会到的是,依照各种实施例,多个用户可以同时或者单独与显示器25通信。依照实施例,显示器25可以是交互式显示器,其与计算设备10组合地包括交互式白板。如本领域技术人员所知的,交互式白板可以包括投影仪(未示出),其将计算机的输出投影到可以安装到墙壁或看台的交互式显示器的表面上。用户可以经由笔、触摸、触笔或其它输入设备或方法控制计算机以执行包括运行加载到所连接的计算机上的软件以及捕获和保存在交互式显示器上可能看起来为墨水的书面笔记的数个功能。然而应当理解是,本文所描述的实施例不限于交互式白板,并且还可以利用具有交互式显示器的其它计算设备,包括但不限于板式或平板计算设备、智能电话、膝上型计算机、与台式或膝上型计算机通信的触摸屏显示器,以及“多合一”触摸屏计算设备。
显示器25可以示出墨水内容20,其可以没有限制地包括从利用以上描述的一个前述输入方法的用户2接收的文本、形状、表格和列表。计算设备10包括墨水应用30和其它应用35。如以下将关于图2-16更加详细地描述的,墨水应用30可以被配置成识别从用户2接收的作为一个或多个结构化格式的墨水内容20并且将墨水内容20转换成与其它应用35中的一个或多个相关联的内容格式(例如文字处理格式、电子制表格式、绘图格式等)。依照实施例,墨水应用30可以包括生产力应用软件内的程序模块,所述生产力应用软件包括但不限于文字处理软件、演示图形软件、电子制表软件、图解软件、工程管理软件、发布软件、个人信息管理软件和协作软件。其它应用35还可以包括前述生产力应用软件中的一个或多个。应当领会到的是,依照实施例,墨水应用30可以合并到以下软件应用中的一个或多个中:来自华盛顿州雷德蒙德的微软公司的WORD文字处理软件、POWERPOINT演示图形软件、EXCEL电子制表软件、VISIO图解软件、PROJECT工程管理软件、PUBLISHER发布软件、OUTLOOK个人信息管理软件和ONENOTE笔记和协作软件。应当领会到的是,前述软件应用可以包括各个应用程序,或者可替换地,可以合并到诸如来自微软公司的OFFICE应用程序套件之类的应用套件中。依照其它实施例,墨水应用30还可以合并到诸如来自华盛顿州雷德蒙德的微软公司的SKYPE通过互联网协议的语音(“VoIP”)服务和软件应用以及LYNC客户端通信平台软件之类的一个或多个通信软件应用中。然而,应当理解到的是,本文所描述的实施例还可以结合其它应用程序来实践并且另外,其不受限于任何特定应用或系统。
图2是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面200的图。可以在显示器25上由墨水应用30生成的用户界面200包括用于促进用户2的墨水输入的用户界面控件220、225、230、235、240、245、250和255。例如,用户界面控件240可以用于在用户界面200中录入墨水内容205、207和210。用户界面200还包括建议用户控件215,其可以在确定特定墨水对象可以包括形状时由墨水应用30生成。例如,墨水应用30可以确定墨水内容205和207看起来是文本而在用户界面200的单独区域中绘制的墨水内容210看起来是形状(即圆形)。作为响应,墨水应用30可以生成建议提示205,其在由用户2选择(例如通过利用手指或触笔敲击)时请求用户2是否想要将墨水内容210从墨水转换成物理对象。如果用户2同意,墨水应用30可以利用与绘图或图解软件程序兼容的绘图对象(即圆形)来取代墨水内容210。另一方面,如果用户2忽略建议(即通过不选择建议用户控件215),则墨水应用30可以停止包括墨水内容210的用户界面2的区域中的形状识别。
图3是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面300的图。可以由显示器25上的墨水应用30生成的用户界面300包括用于促进用户2的墨水输入的用户界面控件320、325、330、335、340、345、350和355。例如,用户界面控件340可以用于在用户界面300中录入墨水内容305和307(示出为文本)以及墨水内容310(示出为形状组)。依照实施例,墨水应用30可以被配置成识别包括墨水内容310的形状并且显示当被用户2选择时显示包括导出选项的菜单315的提示317和319。特别地,提示317和319可以被选择用于与形状相关联的导出选项。依照实施例,菜单315中的导出选项可以包括用于将形状导出到任何数目的其它应用程序中的共享命令317,所述其它应用程序可以包括例如绘图或图解和演示图形软件程序。
图4是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面400的图。可以由显示器25上的其它应用35中的一个生成的用户界面400可包括演示幻灯片405、410、415和420。如可以从图4看到的,已经选择了演示幻灯片420并且因而幻灯片内容425、430和435也在窗口422中示出。应当理解到的是,幻灯片内容425、430和435可以表示在执行以上关于图3所讨论的共享命令之后从墨水应用30导出的形状。例如,幻灯片内容425、430和435可以对应于被图3中的墨水应用30识别为包括形状的墨水内容310。依照实施例,所导出的形状可以表示为接收应用中的图形或绘制对象。
图5是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面500的图。可以由显示器25上的墨水应用30生成的用户界面500包括墨水内容505(示出为表格)和用户控件510。应当理解到的是,依照实施例,形成墨水内容505中的表格的水平和竖直线可以由用户2在显示器25上绘制(例如经由触摸、触笔或其它输入手段),或者可替换地,用户2可以选择用户控件510(例如经由触摸、触笔或其它输入手段),其将会生成用户2可以从其请求在显示器25上再现空白表格的菜单(未示出)。依照实施例,当用户2请求表格时,墨水应用30可以被配置成提供类似于电子制表表格但是针对墨水在功能和大小方面进行优化的表格结构。例如,由墨水应用30生成的表格可以包含较大的单元以促进墨水内容的录入,行和/或列大小可以通过触摸操纵,并且可以对列进行分类和重排序。
图6是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面600的图。可以由显示器25上的墨水应用30生成的用户界面600包括墨水内容605(示出为表格)和用户控件610。依照实施例,墨水应用30可以被配置成生成用户2可以从其在所选表格单元625中插入公式的菜单620。例如,响应于用户2选择表格单元625(例如经由触摸、触笔或其它输入手段),墨水应用30可以生成用户可以从其选择插入公式选项以将加法公式插入到单元625中以便计算出单元622和624中的所识别的数值墨水内容之和的菜单620。
图7是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面700的图。可以由显示器25上的墨水应用30生成的用户界面700包括墨水内容705(示出为表格)和用户控件710。依照实施例,墨水应用30可以被配置成响应于从用户2接收到墨水手势720(示出为图7中的水平线)而在表格单元(例如单元725)中插入公式。因此,例如,用户2经由触摸、触笔或其它输入手段,可以执行划刷手势以在显示器25上的表格的单元725中录入墨水手势720。墨水手势720充当发信号通知墨水应用30用户2希望在单元722和724中添加所识别的数值墨水内容的手段。
图8是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面800的图。可以由显示器25上的墨水应用30生成的用户界面800包括墨水内容805(示出为表格)和用户控件810。依照实施例,并且响应于接收到图7中所示的墨水手势720,墨水应用30可以在单元822和824中的所识别的数值墨水内容上执行加法操作并且在单元825中显示结果。应当理解到的是,单元822、824和825还可以在加法操作之后包括标记(诸如水印)830、835和840。特别地,标记830和835可以表示墨水应用30对单元822和824中的由用户2做出的墨水录入的解释(即识别结果)。如果所显示的标记不对应于用户意图录入到单元中的内容(例如将数字94不正确地解释为数字74),则用户2可以快速地做出适当的修正。
图9是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面900的图。可以由显示器25上的墨水应用30生成的用户界面900包括内容905(示出为表格)和用户控件910。依照实施例,响应于用户控件910的选择,墨水应用30可以被配置成显示包括用于将内容905导出到一个其它应用35(例如电子制表软件程序)的选项的菜单940。
图10是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面1000的图。可以由显示器25上的其它应用35中的一个(例如电子制表软件程序)生成的用户界面1000可以包括电子制表表格1005和公式栏1010。如可以从图10看到的,电子制表表格1005显示响应于以上关于图9讨论的菜单940中的一个选项的选择而从墨水应用30导出的墨水内容。应当理解到的是,所导出的墨水内容可以以与电子制表软件程序相关联的格式而不是墨水而显示在电子制表表格1005中。公式栏1010显示同样从墨水应用30导出的公式。
图11是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面1100的图。可以由显示器25上的墨水应用30生成的用户界面1100包括用户界面控件1120、1125、1130、1135、1140、1145和1150,以用于促进用户2的墨水输入。例如,用户界面控件1135可以用于录入墨水内容1105、1110和1115并且用户界面控件1120可以用于生成空白列表(以下示出墨水内容1110),其中用户2可以录入墨水内容以创建列表(例如墨水内容1115)。应当理解到的是,依照其它实施例(以下描述),墨水应用30还可以通过转换之前录入的由用户2在显示器25上做出的墨水内容来生成列表。
图12是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面1200的图。可以由显示器25上的墨水应用30生成的用户界面1200包括墨水内容1205。如以上关于图11简要描述的,墨水应用30可以被配置成响应于用户2经由触摸、触笔或其它输入手段对墨水内容1205(示出为所选墨水内容1210)的选择而显示菜单1215。例如,用户2可以通过使用手指围绕墨水内容绘制矩形来选择墨水内容1205使得其可以被突显或以其它方式被区分。菜单1215可以包括列表选项1220,其在由用户2选择时可以使墨水应用30将墨水内容1205显示为列表1225。应当理解到的是,依照实施例,列表1225中的墨水内容1205可以转换成列表1225中的文本和项(即苹果,香蕉,桔子,苹果),其可以利用菜单1215中的搜索功能被搜索。
图13是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面1300的图。可以由显示器25上的墨水应用30生成的用户界面1300包括墨水内容的列表1305。如以上关于图12所讨论的,墨水应用30可以从显示器25上所录入的用户墨水内容生成墨水内容的列表。应当领会到的是,墨水应用30还可以被配置成允许列表1305响应于由用户做出的编辑而扩大或缩小。例如,墨水应用30可以响应于接收到墨水内容“苹果酱”而自动扩大列表1305。墨水应用30还可以通过在列表中的最后一项下方包括“幻象”条目行1320来使能对列表1305的附加项目。因此,期望向列表1305添加附加墨水内容的用户2可以将幻象条目行1320用于该目的。用户界面1300还可以包括用户控件1308,其在由用户2选择时显示包括导出选项的菜单1310。依照实施例,菜单1310中的导出选项可以包括用于与其它共享列表1305的共享命令1315,如以下将关于图14更加详细描述的那样。
图14是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面1400的图。可以由显示器25上的墨水应用30生成的用户界面1400包括用于与其它共享列表1405的墨水内容的列表1405和导出窗格1410。导出窗格1410可以响应于从图13(以上讨论)的菜单1310选择共享命令1315而生成。依照实施例,导出窗格1410可以包括邮件应用选项1415、通信应用选项1420、协作应用选项1425和网络储存选项1430,其可以由用户2选择以用于与其它共享列表1405。依照实施例,网络储存1430可以包括诸如由华盛顿州雷德蒙德的微软公司提供的ONEDRIVE文件托管服务之类的文件托管服务。也可以利用其它的文件托管服务。
图15是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的用户界面1500的图。可以由显示器25上的墨水应用30生成的用户界面1500包括用于经由电子邮件消息与其它共享列表1505的邮件窗格1510和墨水内容的列表1505。
图16是图示了依照实施例的用于管理计算设备上的以结构化格式的墨水内容的例程1600的流程图。当阅读本文所呈现的例程的讨论时,应当领会到的是,本发明的各种实施例的逻辑操作实现为(1)运行在计算系统上的程序模块或计算机实现的动作的序列和/或(2)计算系统内的互连的机器逻辑电路或电路模块。实现是取决于实现本发明的计算系统的性能要求的选择问题。相应地,图16中图示的并且构成本文所描述的各种实施例的逻辑操作在本文不同地被称为操作、结构设备、动作或模块。本领域技术人员将认识到,这些操作、结构设备、动作和模块可以软件、硬件、固件、专用数字逻辑及其任何组合实现,而不脱离于如本文所阐述的权利要求内叙述的本发明的精神和范围。
例程1600在操作1605处开始,其中在计算设备10上执行的墨水应用30可以经由显示器25从用户2接收墨水内容20。如以上关于图2-15所讨论的,墨水内容20可以没有限制地包括文本、形状、表格和列表。依照实施例,墨水内容20可以响应于录入对应于预确定的内容格式的墨水内容的请求而被接收。例如并且如以上关于图5所讨论的,用户2可以选择用户控件510(例如经由触摸、触笔或其它输入手段)以生成用户2可以从其请求在显示器25上再现空白表格的菜单。在已经再现表格之后,用户2然后可以将墨水内容20录入到表格单元(即列和行)中。
从操作1605,例程1600继续到操作1610,其中在计算设备10上执行的墨水应用30可以识别在操作1605处接收的墨水内容20。特别地,墨水应用30可以将墨水内容20识别为与文字处理格式(例如文本)、电子制表格式(例如包括数字和文本的行和列)或绘图格式(例如形状)相关联。
从操作1610,例程1600继续到操作1615,其中在计算设备10上执行的墨水应用30可以将墨水内容20转换成与一个或多个应用35相关联的内容格式。例如,墨水内容20可以转换成文字处理格式、电子制表格式或绘图格式。依照实施例,在转换墨水内容20之前,墨水应用30可以生成请求是否将墨水内容20的部分转换成所建议的内容格式的提示。例如,并且如以上关于图2所讨论的,墨水应用30对提示的生成可以至少部分地基于墨水内容20的该部分位于远离墨水内容20的其它部分的距离处的确定。
从操作1615,例程1600继续到操作1620,其中在计算设备10上执行的墨水应用30可以在显示器25上显示经转换的墨水内容。例如,如果墨水内容20包括表格,墨水应用30可以将表格显示为根据已知电子制表格式进行电子制表格式化的。
从操作1620,例程1600继续到操作1625,其中在计算设备10上执行的墨水应用30可以将经转换的墨水内容导出到一个其它应用35中。例如,并且如以上关于图10所讨论的,经转换的墨水内容可以导出到电子制表应用软件中。例如,电子制表应用可以从计算设备10启动以用于在显示器25上查看。经转换的墨水内容然后可以导出到电子制表应用中以用于在显示器25上查看。从操作1625,例程1600然后结束。
图17-19以及相关联的描述提供其中可以实践本发明的实施例的各种操作环境的讨论。然而,关于图17-19所图示和讨论的设备和系统是用于示例和图示的目的,而非对可以用于实践本文所描述的本发明的实施例的大量计算设备配置的限制。
图17是图示了利用其可以实践各种实施例的计算设备1700的示例物理组件的框图。在基本配置中,计算设备1700可以包括至少一个处理单元1702和系统存储器1704。取决于计算设备的配置和类型,系统存储器1704可以包括,但不限于,易失性(例如,随机存取存储器(RAM))、非易失性存储器(例如,只读存储器(ROM))、闪速存储器或任何组合。系统存储器1704可以包括操作系统1705和应用1707。操作系统1705例如可以适合用于控制计算设备1700的操作,并且依照实施例,可以包括来自华盛顿州雷德蒙德的微软公司的WINDOWS操作系统。应用1707例如可以包括用于执行包括例如如以上关于图16的例程1600中的操作所描述地管理以结构化格式的墨水内容的例程的功能性。然而,应当理解到的是,本文所描述的实施例还可以结合其它操作系统和应用程序来实践,并且进一步不限于任何特定应用或系统。
计算设备1700可以具有附加特征或功能性。例如,计算设备1700还可以包括附加数据存储设备(可移除和/或不可移除的),诸如例如磁盘、光盘、固态存储设备(“SSD”)、闪速存储器或磁带。这样的附加存储装置在图17中由可移除存储装置1709和不可移除存储装置1710图示。计算设备1700还可以具有(多个)输入设备1712,诸如键盘、鼠标、笔、声音输入设备(例如麦克风)、用于接收手势的触摸输入设备、加速度计或旋转传感器等。还可以包括诸如显示器、扬声器、打印机等之类的(多个)输出设备1714。前述设备是示例并且可以使用其它设备。计算设备1700可以包括允许与其它计算设备1718的通信的一个或多个通信连接1716。合适的通信连接1716的示例包括但不限于RF发射器、接收器和/或收发器电路;通用串行总线(USB)、并行和/或串行端口。
另外,各种实施例可以在包括分立电子元件的电路中、包含逻辑门的封装或集成电子芯片、利用微处理器的电路、或包含电子元件或微处理器的单个芯片上实践。例如,可以经由片上系统(“SOC”)来实践各种实施例,其中,可以将图17中图示的每个或许多组件集成到单个集成电路上。这样的SOC设备可以包括一个或多个处理单元、图形单元、通信单元、系统虚拟化单元以及各种应用功能性,所有这些都被集成到(或“烧录到”)芯片基板上作为单个集成电路。当经由SOC操作时,本文所描述的功能性可以经由在单个集成电路(芯片)上的集成有计算设备/系统1700的其它组件的专用逻辑来操作。实施例还可以使用能够执行诸如例如AND(与)、OR(或)和NOT(非)之类的逻辑运算的其它技术来实践,包括但不限于机械、光学、流体和量子技术。此外,实施例可以在通用计算机内或任何其它电路或系统中实践。
如本文所使用的术语计算机可读介质可以包括计算机存储介质。计算机存储介质可以包括以用于存储诸如计算机可读指令、数据结构或程序模块之类的信息的任何方法或技术实现的易失性和非易失性、可移除和不可移除介质。系统存储器1704、可移除存储设备1709和不可移除存储设备1710都是计算机存储介质示例(即,存储器存储装置)。计算机存储介质可以包括RAM、ROM、电可擦除只读存储器(EEPROM)、闪速存储或其它存储器技术、CD-ROM、数字通用盘(DVD)或其它光学存储装置、磁盒、磁带、磁盘存储装置或其它磁性存储设备、或者可以用于存储信息并且可以由计算设备1700访问的任何其它的制造品。任何这样的计算机存储介质可以是计算设备1700的部分。计算机存储介质不包括载波或其它传播或调制的数据信号。
通信介质可以由计算机可读指令、数据结构、程序模块或诸如载波或其它输运机制之类的调制数据信号中的其它数据来体现,并且包括任何的信息递送介质。术语“调制的数据信号”可以描述使其一个或多个特性以对信号中的信息进行编码这样的方式设置或改变的信号。作为示例而非限制,通信介质可以包括诸如有线网络或直接连线连接之类的有线介质,以及诸如声学、射频(RF)、红外和其它无线介质之类的无线介质。
图18A和18B图示了可以利用其实践各种实施例的合适的移动计算环境,例如移动计算设备1805,其可以没有限制地包括智能电话、平板个人计算机、膝上型计算机等等。参照图18A,图示了用于实现实施例的示例移动计算设备1850。在基本配置中,移动计算设备1850是具有输入元件和输出元件二者的手持式计算机。输入元件可以包括允许用户将信息录入到移动计算设备1850中的触摸屏显示器1825和输入按钮1810。移动计算设备1850还可以合并允许另外的用户输入的可选侧输入元件1820。可选的侧输入元件1820可以是旋转开关、按钮、或任何其它类型的手动输入元件。在可替换的实施例中,移动计算设备1850可以合并更多或更少的输入元件。在又一可替换的实施例中,移动计算设备是便携式电话系统,诸如具有显示器1825和输入按钮1810的蜂窝电话。移动计算设备1850还可以包括可选的小键盘1805。可选的小键盘1805可以是物理小键盘或者在触摸屏显示器上生成的“软”小键盘。
移动计算设备1850合并输出元件,诸如可以显示图形用户界面(GUI)的显示器1825。其它输出元件包括扬声器1830和LED1880。此外,移动计算设备1850可以合并振动模块(未示出),其使得移动计算设备1850振动以将事件通知给用户。在又一实施例中,移动计算设备1850可以合并耳机插孔(未示出)以用于提供另一手段来提供输出信号。
尽管本文结合移动计算设备1850来进行描述,但是在可替换的实施例中,可以结合任何数目的计算机系统来使用,诸如在台式环境中、膝上型或笔记本计算机系统、多处理器系统、基于微处理器或可编程消费电子产品、网络PC、小型计算机、大型计算机等。各种实施例还可以在分布式计算环境中实践,其中任务由分布式计算环境中的通过通信网络链接的远程处理设备来执行;程序可以位于本地和远程存储器存储设备中。总而言之,具有多个环境传感器、向用户提供通知的多个输出元件和多个通知事件类型的任何计算机系统可以合并本文所描述的各种实施例。
图18B是图示了在一个实施例中使用的诸如图18A中所示的移动计算设备1850之类的移动计算设备的组件的框图。也就是说,移动计算设备1850可以合并系统1802以实现一些实施例。例如,系统1802可以使用在实现可以运行与台式或笔记本计算机的那些应用类似的一个或多个应用的“智能电话”中。在一些实施例中,系统1802作为计算设备而集成,诸如集成的个人数字助理(PDA)和无线电话。
应用1867可以被加载到存储器1862中并且在操作系统1864上或与操作系统1864相关联地运行。系统1802还包括存储器1862内的非易失性存储装置1868。非易失性存储装置1868可以用于存储如果系统1802断电则不应当丢失的持久信息。应用1867可以使用信息并且将信息存储在非易失性存储装置1868中。应用1867还可以包括用于执行包括例如如以上关于图16的例程1600中的操作所描述的管理计算设备上的以结构化格式的墨水内容的例程的功能性。同步应用(未示出)也可以驻留于系统1802上并且被编程为与驻留在主机计算机上的对应同步应用交互以保持非易失性存储装置1868中所存储的信息与主机计算机处存储的对应信息同步。如应当领会到的,其它应用也可以被加载到存储器1862中并且在移动计算设备1850上运行。
系统1802具有可以实现为一个或多个电池的电源1870。电源1870还可能包括外部电力源,诸如补充电池或对电池再充电的AC适配器或加电对接托架。
系统1802还可以包括执行发射和接收射频通信的功能的无线电1872(即无线电接口层)。无线电1872促进经由通信载体或服务供应者的系统1802与“外部世界”之间的无线连接性。来往无线电1872的传输在OS1864的控制下进行。换言之,由无线电1872接收的通信可以经由OS1864传播到应用1867,并且反之亦然。
无线电1872允许系统1802诸如通过网络与其它计算设备通信。无线电1872是通信介质的一个示例。系统1802的实施例利用两种类型的通知输出设备来示出:可以用于提供视觉通知的LED1880和可以与扬声器1830一起使用以提供音频通知的音频接口1874。这些设备可以直接耦合到电源1870使得当被激活时,它们在由通知机制规定的持续时间内保持接通,即使处理器1860和其它组件可能为了存留电池电力而关断。LED1880可以编程为无限地保持接通直到用户采取行动以指示设备的通电状态。音频接口1874用于向用户提供可听信号并且从用户接收可听信号。例如,除了耦合到扬声器1830之外,音频接口1874还可以耦合到麦克风(未示出)以接收可听(例如语音)输入,诸如以促进电话对话。依照实施例,麦克风还可以充当音频传感器以促进通知的控制。系统1802还可以包括使得能够实现板上相机1840的操作以记录静止图像、视频流等的视频接口1876。
实现系统1802的移动计算设备可以具有附加特征或功能性。例如,设备还可以包括附加数据存储设备(可移除的/或不可移除的),诸如磁盘、光盘或磁带。这样的附加存储装置在图18B中由存储装置1868图示。
由移动计算设备1850生成或捕获并且经由系统1802存储的数据/信息可以如以上所描述地那样本地存储在移动计算设备1850上,或者数据可以存储在可以由设备经由无线电1872或经由移动计算设备1850和与移动计算设备1850相关联的单独的计算设备之间的有线连接访问的任何数目的存储介质上,该单独的计算设备例如是诸如因特网之类的分布式计算网络中的服务器计算机。如应当领会到的,这样的数据/信息可以经由移动计算设备1850、经由无线电1872或经由分布式计算网络来被访问。类似地,这样的数据/信息可以根据公知的数据/信息传送和存储手段来容易地在计算设备之间传送以供存储和使用,该手段包括电子邮件和协作数据/信息共享系统。
图19是其中可以实践各种实施例的分布式计算系统的简化框图。分布式计算系统可以包括数个客户端设备,诸如计算设备1903、平板计算设备1905和移动计算设备1910。客户端设备1903、1905和1910可以与分布式计算网络1915(例如因特网)通信。服务器1920通过网络1915与客户端设备1903、1905和1910通信。服务器1920可以存储应用1900,其可以执行包括如以上关于图16的例程1600中的操作所描述的例如管理计算设备上的以结构化格式的墨水内容的例程。与应用1900相关联地开发、交互或编辑的内容可以存储在不同的通信信道或其它存储类型中。例如,可以使用目录服务1922、web门户1924、邮箱服务1926、即时消息传递储存1928或社交联网站点1930来存储各种文档。
应用1900可以使用这些类型的系统等中的任何一个以用于使得能够实现数据利用,如本文所描述的那样。服务器1920可以向客户端提供应用1900。作为一个示例,服务器1920可以是通过web提供应用1900的web服务器。服务器1920可以通过网络1915在web之上向客户端提供应用1900。作为示例,计算设备10可以实现为计算设备1903并且嵌入在个人计算机、平板计算设备1905和/或移动计算设备1910(例如智能电话)中。计算设备1903,1905和1910的这些实施例中的任一个可以从储存1916获得内容。
以上参照方法、系统和计算机程序产品的框图和/或操作说明描述了各种实施例。框中所指出的功能/动作可以脱离于如任何流程图所示的次序而发生。例如,取决于所涉及的功能性/动作,接连示出的两个框事实上可以基本上同时执行,或者框有时可以以相反的次序来执行。
本申请中所提供的一个或多个实施例的描述和说明不意图以任何方式限制或约束如所要求的保护的发明的范围。在本申请中提供的实施例、示例和细节被视为足以传达所有权并且使得其他人能够做出和使用所要求保护的发明的最佳模式。所要求保护的发明不应当解释为限于本申请中所提供的任何实施例、示例或细节。不论是组合还是单独地示出和描述,各种特征(结构和方法学二者)都意图被选择性地包括或省略以产生具有特定特征集的实施例。在提供有本申请的描述和说明的情况下,本领域技术人员可以设想到不脱离于所要求保护的发明的较宽范围的落在本申请中所体现的一般发明概念的较宽方面的精神内的变型、修改和可替换的实施例。

Claims (10)

1.一种管理以结构化格式的墨水内容的方法,包括:
通过计算设备接收墨水内容;
通过计算设备识别墨水内容;以及
通过计算设备将墨水内容转换成与一个或多个应用相关联的内容格式。
2.如权利要求1所述的方法,还包括显示经转换的墨水内容。
3.如权利要求1所述的方法,还包括将经转换的墨水内容导出到所述一个或多个应用中。
4.如权利要求1所述的方法,其中通过计算设备接收墨水内容包括接收录入对应于预确定的内容格式的墨水内容的请求。
5.一种计算设备,包括:
用于存储可执行程序代码的存储器;以及
功能上耦合到存储器的处理器,处理器响应于包含在程序代码中的计算机可执行指令并且操作成:
接收墨水内容;
识别墨水内容;
将墨水内容转换成与一个或多个应用相关联的内容格式;以及
显示经转换的墨水内容。
6.如权利要求5所述的计算设备,其中处理器还操作成将经转换的墨水内容导出到所述一个或多个应用中。
7.如权利要求5所述的计算设备,其中处理器在接收墨水内容中操作成接收录入对应于预确定的内容格式的墨水内容的请求。
8.如权利要求5所述的计算设备,其中处理器在将墨水内容转换成与一个或多个应用相关联的内容格式中操作成生成请求是否将墨水内容的部分转换成多个内容格式中的所建议的一个的提示。
9.一种存储计算机可执行指令的计算机可读存储介质,所述指令当在计算设备上执行时,将使计算设备执行管理以结构化格式的墨水内容的方法,所述方法包括:
接收录入对应于预确定的内容格式的墨水内容的请求,墨水内容是文本、形状、表格和列表中的一个或多个;
通过计算设备识别墨水内容;
通过计算设备将墨水内容转换成与一个或多个应用相关联的内容格式,其中转换墨水内容包括生成请求是否将墨水内容的部分转换成多个内容格式中的所建议的一个的提示,该多个内容格式包括文字处理格式、电子制表格式和绘图格式;
显示经转换的墨水内容;
将经转换的墨水内容导出到所述一个或多个应用中。
10.如权利要求9所述的计算机可读存储介质,其中所述提示响应于墨水内容的部分位于远离墨水内容的其它部分的距离处的确定而生成。
CN201480033530.4A 2013-06-11 2014-05-30 管理以结构化格式的墨水内容 Active CN105706037B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/914,917 US9696810B2 (en) 2013-06-11 2013-06-11 Managing ink content in structured formats
US13/914917 2013-06-11
PCT/US2014/040144 WO2014200713A1 (en) 2013-06-11 2014-05-30 Managing ink content in structured formats

Publications (2)

Publication Number Publication Date
CN105706037A true CN105706037A (zh) 2016-06-22
CN105706037B CN105706037B (zh) 2019-02-12

Family

ID=51134286

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480033530.4A Active CN105706037B (zh) 2013-06-11 2014-05-30 管理以结构化格式的墨水内容

Country Status (4)

Country Link
US (1) US9696810B2 (zh)
EP (1) EP3008574A1 (zh)
CN (1) CN105706037B (zh)
WO (1) WO2014200713A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110073350A (zh) * 2016-10-26 2019-07-30 迈思慧公司 用于管理数字墨水排版的系统和方法

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150194187A1 (en) * 2014-01-09 2015-07-09 Microsoft Corporation Telestrator system
JP6269227B2 (ja) * 2014-03-25 2018-01-31 セイコーエプソン株式会社 表示装置、プロジェクター、および表示制御方法
US20170024031A1 (en) * 2014-04-18 2017-01-26 Seiko Epson Corporation Display system, display device, and display control method
JP6456203B2 (ja) * 2015-03-20 2019-01-23 シャープ株式会社 情報処理装置、情報処理プログラムおよび情報処理方法
US10318613B2 (en) 2015-08-25 2019-06-11 Myscript System and method of digital note taking
US10248226B2 (en) * 2017-02-10 2019-04-02 Microsoft Technology Licensing, Llc Configuring digital pens for use across different applications
US10684758B2 (en) * 2017-02-20 2020-06-16 Microsoft Technology Licensing, Llc Unified system for bimanual interactions
US10558341B2 (en) * 2017-02-20 2020-02-11 Microsoft Technology Licensing, Llc Unified system for bimanual interactions on flexible representations of content
JP6691597B2 (ja) * 2018-12-17 2020-04-28 シャープ株式会社 情報処理装置、情報処理プログラムおよび情報処理方法
US11875543B2 (en) * 2021-03-16 2024-01-16 Microsoft Technology Licensing, Llc Duplicating and aggregating digital ink instances

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040196313A1 (en) * 2003-02-26 2004-10-07 Microsoft Corporation Ink repurposing
US6952803B1 (en) * 1998-12-29 2005-10-04 Xerox Corporation Method and system for transcribing and editing using a structured freeform editor
CN101536012A (zh) * 2005-07-01 2009-09-16 微软公司 用于标准化和美化/墨水美化的墨水扭曲
US20100171754A1 (en) * 2009-01-07 2010-07-08 Microsoft Corporation Converting digital ink to shapes and text
CN101981583A (zh) * 2008-03-28 2011-02-23 智能技术Ulc公司 用于识别手绘表格的方法和工具
US8315482B2 (en) * 2007-06-26 2012-11-20 Microsoft Corporation Integrated platform for user input of digital ink

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6108444A (en) * 1997-09-29 2000-08-22 Xerox Corporation Method of grouping handwritten word segments in handwritten document images
US7039234B2 (en) 2001-07-19 2006-05-02 Microsoft Corporation Electronic ink as a software object
US7120872B2 (en) 2002-03-25 2006-10-10 Microsoft Corporation Organizing, editing, and rendering digital ink
US7925987B2 (en) 2002-05-14 2011-04-12 Microsoft Corporation Entry and editing of electronic ink
US8166388B2 (en) 2002-05-14 2012-04-24 Microsoft Corporation Overlaying electronic ink
US7062090B2 (en) 2002-06-28 2006-06-13 Microsoft Corporation Writing guide for a free-form document editor
US7739588B2 (en) * 2003-06-27 2010-06-15 Microsoft Corporation Leveraging markup language data for semantically labeling text strings and data and for providing actions based on semantically labeled text strings and data
US7961943B1 (en) 2005-06-02 2011-06-14 Zeevi Eli I Integrated document editor
JP4147255B2 (ja) * 2006-06-23 2008-09-10 キヤノン株式会社 画像処理装置及び画像処理の制御方法及びプログラム及び記憶媒体
US9003298B2 (en) * 2010-09-21 2015-04-07 Microsoft Corporation Web page application controls
US9229568B2 (en) * 2011-09-30 2016-01-05 Oracle International Corporation Touch device gestures
JP5270018B1 (ja) * 2012-05-11 2013-08-21 株式会社東芝 システム及び手書き文書管理方法
US8606011B1 (en) * 2012-06-07 2013-12-10 Amazon Technologies, Inc. Adaptive thresholding for image recognition
US10397162B2 (en) * 2012-12-14 2019-08-27 Facebook, Inc. Sending notifications to members of social group in a social networking system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6952803B1 (en) * 1998-12-29 2005-10-04 Xerox Corporation Method and system for transcribing and editing using a structured freeform editor
US20040196313A1 (en) * 2003-02-26 2004-10-07 Microsoft Corporation Ink repurposing
CN101536012A (zh) * 2005-07-01 2009-09-16 微软公司 用于标准化和美化/墨水美化的墨水扭曲
US8315482B2 (en) * 2007-06-26 2012-11-20 Microsoft Corporation Integrated platform for user input of digital ink
CN101981583A (zh) * 2008-03-28 2011-02-23 智能技术Ulc公司 用于识别手绘表格的方法和工具
US20100171754A1 (en) * 2009-01-07 2010-07-08 Microsoft Corporation Converting digital ink to shapes and text

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110073350A (zh) * 2016-10-26 2019-07-30 迈思慧公司 用于管理数字墨水排版的系统和方法
CN110073350B (zh) * 2016-10-26 2024-02-23 迈思慧公司 用于管理数字墨水排版的系统和方法

Also Published As

Publication number Publication date
US20140365978A1 (en) 2014-12-11
US9696810B2 (en) 2017-07-04
CN105706037B (zh) 2019-02-12
EP3008574A1 (en) 2016-04-20
WO2014200713A1 (en) 2014-12-18

Similar Documents

Publication Publication Date Title
CN105706037A (zh) 管理以结构化格式的墨水内容
US10482637B2 (en) Modifying and formatting a chart using pictorially provided chart elements
CN109219824B (zh) 利用用户访问权限来自动共享文档
US10684769B2 (en) Inset dynamic content preview pane
KR102122104B1 (ko) 웹 애플리케이션에서의 협업 통신 기법
US9626068B2 (en) Automated system for organizing presentation slides
EP2872982B1 (en) Location-dependent drag and drop ui
US20150277726A1 (en) Sliding surface
US9697627B2 (en) Data point calculations on a chart
TW201346596A (zh) 使用文件註解來追蹤共同編輯之衝突
TW201537355A (zh) 在電子通訊工作流程之外產生內容項目
CN105531694A (zh) 在电子表格中显示多个作者的在场
CN103412703A (zh) 利用功能区来访问应用用户界面
CN104813312A (zh) 使用基本文本框来对丰富内容进行有状态编辑
US20150135054A1 (en) Comments on Named Objects
US11727194B2 (en) Encoded associations with external content items
CN105765530A (zh) 编写应用扩展激活

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant