CN104956378A - 电子设备和手写文档处理方法 - Google Patents

Abstract

本发明提供一种电子设备和手写文档处理方法。电子设备包括：显示处理单元，发送单元，接收单元。所述显示处理单元将包含通过手写而被记载的多个笔画手写文档显示于画面上。所述发送单元将所述画面上的选择范围所指定的手写部分发送到系统。所述接收单元从所述系统接收通过对所述手写部分进行整形而得到的整形结果，所述显示处理单元将所述整形结果与所述手写部分相互关联地显示于所述画面上。

Description

电子设备和手写文档处理方法

技术领域

本发明的实施方式涉及处理手写文档的技术。

背景技术

近年来，开发了书写板、PDA、智能手机等各种电子设备。多数这种电子设备具有方便用户输入操作的触摸屏显示器。

用户可通过以手指等触摸在触摸屏显示器上显示的菜单或目标，来指示电子设备执行与这些菜单或目标关联的功能。

但是，多数具有触摸屏显示器的现有的电子设备为，追求对图像、音乐、其他各种媒体数据的操作性的面向消费者的产品，有时并不必然适用于会议、商谈、产品开发等商业用途。因此，在商业上，现在仍然广泛使用纸质的笔记本。

近来，正开发用于对手写数据进行文字识别的技术。

现有技术文献

专利文献

专利文献1：特开2012－93866号公报

发明内容

发明所要解决的问题

但是，现状是以往没有考虑到怎样容易地对手写文档内的所希望的部分进行整形的技术。

本发明的一实施方式的目的在于提供能够容易地对手写文档内的所希望的部分进行整形的电子设备和手写文档处理方法。

解决技术问题的手段

根据本发明的实施方式的电子设备，其设备包括：显示处理单元，发送单元，接收单元。所述显示处理单元将包含通过手写而被记载的多个笔画手写文档显示于画面上。所述发送单元将所述画面上的选择范围所指定的手写部分发送到系统。所述接收单元从所述系统接收通过对所述手写部分进行整形而得到的整形结果，所述显示处理单元将所述整形结果与所述手写部分相互关联地显示于所述画面上。

附图说明

图1是显示实施方式的电子设备的外观的立体图。

图2是显示同一实施方式的电子设备与手写文档转换系统协作动作的图。

图3是显示同一实施方式的电子设备的触摸屏显示器上手写的手写文档的实例的图。

图4是用于说明由同一实施方式的电子设备在存储介质中保存的与图3的手写文档对应的时序信息的图。

图5是显示同一实施方式的电子设备的系统构成的框图。

图6是显示同一实施方式的电子设备显示的桌面／下拉画面的图。

图7是显示同一实施方式的电子设备显示的桌面画面的图。

图8是显示同一实施方式的电子设备显示的笔记查看画面的图。

图9是显示同一实施方式的电子设备执行的数字笔记本应用程序的功能构成的框图。

图10是用于说明同一实施方式的电子设备执行的范围选择动作的图。

图11是用于说明同一实施方式的电子设备显示的、用于执行整形功能的用户界面的图。

图12是显示同一实施方式的电子设备执行的代替手写部分显示整形结果的图。

图13是用于说明显示在同一实施方式的电子设备的画面的、将整形结果返回到手写部分的用户界面的图。

图14是显示同一实施方式的电子设备执行的代替整形结果显示的手写部分的图。

图15是显示同一实施方式的电子设备执行的在手写部分上重叠显示的整形结果的图。

图16是显示同一实施方式的电子设备执行的、在删除了手写文字的手写部分上重叠显示的整形结果的图。

图17是用于说明同一实施方式的电子设备执行的手写文档处理的顺序的流程图。

具体实施方式

下面，参考附图对实施方式进行说明。图1是显示一实施方式的电子设备的外观的立体图。该电子设备为，例如，通过书写笔或手指实现手写输入的书写笔式的便携式电子设备。该电子设备可实现为平板电脑、笔记本型个人计算机、智能手机、PDA等。以下，设想该电子设备实现为平板电脑10。平板电脑10为也称为书写板或直板式计算机的便携式电子设备，如图1所示，具有本体11和触摸屏显示器17。触摸屏显示器17安装为与本体11的上表面重合。

本体11具有薄的箱形筐体。触摸屏显示器17中装有，平板显示器、和用于检测平板显示器的画面上的书写笔或手指的接触位置而构成的传感器。平板显示器例如，可以是液晶显示装置（LCD）。传感器可以采用例如，静电容式的触摸面板、电磁感应式的数字转换器等。下面，设想将数字转换器和触摸面板两种传感器都组装到触摸屏显示器17的情况。

该触摸屏显示器17不仅可以检测使用手指对画面进行的触摸操作，也可以检测采用书写笔100对画面进行的触摸操作。书写笔100可以是例如电磁感应书写笔。用户可利用外部目标（书写笔100或手指）在触摸屏显示器17上进行手写输入操作。手写输入操作中，画面上的外部目标（书写笔100或手指）的移动轨迹，即通过手写输入操作手写的笔画（手写笔画轨迹）被实时描画，由此通过手写输入的多个笔画被显示于画面上。在外部目标接触画面期间外部目标的移动轨迹相当于一个笔画。与手写的文字、手写的图形、手写的表等对应的多个笔画的集合构成手写文档。

本实施方式中，该手写文档不是作为图像数据、而是作为各笔画轨迹的坐标列和表示笔画间的顺序关系的时序信息（手写文档数据）存储在存储介质中。该时序信息的详细情况参考图4后述，该时序信息表示多个笔画的手写顺序，且包括与多个笔画分别对应的多个笔画数据。换言之，该时序信息表示分别对应多个笔画的时序的笔画数据的集合。各笔画数据对应于某一个笔画，包括与该笔画轨迹上的点分别对应的坐标数据系列（时序坐标）。这些笔画数据的排列顺序相当于各笔画手写的顺序。

平板电脑10可以从存储介质读取已有的任意的时序信息，并将与该时序信息对应的手写文档，即该时序信息表示的多个笔画显示于画面上。时序信息所表示的多个笔画也是手写输入的多个笔画。

进一步的，平板电脑10具有编辑功能。该编辑功能可以根据采用「橡皮」工具、范围选择工具、和其他各种工具等的用户的编辑操作，来删除或移动由范围选择工具选择的显示中的手写文档内的任意的部分（手写文字、手写标记、手写图形、手写表等）。进一步的，该编辑功能可对属于选择范围内的手写部分执行各种功能，例如，图整形功能、表整形功能、手写文字整形功能等。这些整形功能可通过云服务器系统执行。

本实施方式中，手写文档作为一个或多个页面被管理。此时，可以通过对时序信息（手写文档数据）以包含于一个画面的面积单位区分，将包含于一个画面的时序信息总体地作为一个页面记录。或者，页面的尺寸也可设为可变。此时，由于页面的尺寸可扩大为大于一个画面的尺寸，对于面积比画面的尺寸大的手写文档也可作为一个页面处理。当无法将一个页面整体同时显示于显示器时，可缩小该页面，也可通过纵横滚动来移动页面内的显示对象部分。又，作为应当显示于平板电脑10的手写文档，可使用包括手写记载的多个笔画（手写笔画）的任意手写文档。

图2显示平板电脑10和手写文档转换系统2的协作动作的实例。平板电脑10可与手写文档转换系统2协作。即，平板电脑10具有无线LAN等的无线通信设备，进行与互联网上的手写文档转换系统2的通信。手写文档转换系统2可由执行各种云计算服务的一个以上的服务器构成。

手写文档转换系统2可进行将从平板电脑10接收的手写文档31（多个笔画数据）通过现有的Word处理器软件或现有的演示软件等转换为可阅览·可编辑文件格式的电子文档的服务。该转换服务中，分别对手写文档31内的手写文字、手写图形、手写表等进行整形。手写文字列的整形中，该手写文字列通过文字识别转换为几个文字代码。手写图形的整形中，该手写图形通过现有的Word处理器软件或现有的演示软件等转换为可阅览·可编辑目标数据。例如，手写的圈转换为圈形的图形目标。手写表的整形中，该手写表被转换为包括与该手写的表的单元数相同单元数的表目标。进一步的，包含于手写的表的各单元的手写文字列转换为几个文字代码。

平板电脑10将构成手写文档31的多个笔画数据发送到手写文档转换系统2（上传），可向手写文档转换系统2要求手写文档31的整形（转换）。接着，平板电脑10可从手写文档转换系统2接收作为手写文档31的整形结果的电子文档32（下载）。又，平板电脑10也可以仅将手写文档31内的任意的手写部分发送到文件转换系统2（上传），向手写文档转换系统2要求该手写部分的整形（转换）。

此处，对平板电脑10和手写文档转换系统2协作动作的实例进行说明。平板电脑10访问手写文档转换系统2，通过手写文档转换系统2的接口20将作为转换的对象的手写文档31发送到手写文档转换系统2。此时，平板电脑10也可向手写文档转换系统2指示手写文档31的转换后的文档格式（PDF、图像数据、矢量数据、微软公司的Word（注册商标）、微软公司的Excel（注册商标）、微软公司的PowerPoint（注册商标）等）。手写文档31被存储于手写文档转换系统2的存储单元21。文本／图表整形单元22从存储单元21接收手写文档31，对手写文档31内的手写文字列、手写的图形、手写的表进行识别并对这些手写文字列、手写的图形、手写的表进行整形。电子文档转换单元23从文本／图表整形单元22接收整形结果。接着，电子文档转换单元23将该整形结果转换为平板电脑10指定的文件格式的电子文档32，该电子文档32保存于存储单元21。平板电脑10可通过接口20阅览电子文档32，也可通过接口20从手写文档转换系统2接收该电子文档32（下载）。

又，如上所述平板电脑10将手写文档31内的任意的手写部分发送到文件转换系统2，该手写部分对应的整形结果也可从手写文档转换系统2接收。该整形结果对应的目标数据可以是各种软件能够处理的矢量数据，或图像数据。

接着，参照图3和图4，对用户手写的笔画（文字、图形、表等）和时序信息的关系进行说明。图3显示使用书写笔100等在触摸屏显示器17上手写的手写文档（手写文字列）的实例。

手写文档中，手写输入的文字或图形等上还有别的文字或图形等手写输入的情况很多。图3中，假定「ABC」的手写文字列以「A」、「B」、「C」的顺序手写输入，之后，手写的箭头在手写文字「A」附近被手写输入。

手写文字「A」由用书写笔100等手写的两个笔画（「∧」形状的轨迹、「－」形状的轨迹），即两个轨迹表现。最初手写的「∧」形状的书写笔100的轨迹被以例如等时间间隔实时采样，由此得到「∧」形状的笔画的时序坐标SD11、SD12、…SD1n。同样的，接着写下的「－」形状的书写笔100的轨迹也以等时间间隔实时采样，由此获得「－」形状的笔画的时序坐标SD21、SD22、…SD2n。

手写文字「B」为使用书写笔100等手写的两个笔画，即通过两个轨迹表现。手写文字「C」为以采用书写笔100等手写的一个笔画，即一个轨迹表现。手写的「箭头」由用书写笔100等手写的两个笔画，即由两个轨迹体现。

图4显示与图3的手写文档对应的时序信息200。时序信息包括多个笔画数据SDl、SD2、…SD7。时序信息200中，这些笔画数据SDl、SD2、…、SD7以书写笔画的顺序按时序排列。

时序信息200中，最先的两个笔画数据SDl、SD2分别表示手写文字「A」的两个笔画。第三和第四个笔画数据SD3、SD4分别表示构成手写文字「B」的两个笔画。第五个笔画数据SD5表示构成手写文字「C」的一个笔画。第六和第七个笔画数据SD6、SD7分别表示构成手写「箭头」的两个笔画。

各笔画数据包括与一个笔画对应的坐标数据系列（时序坐标），即包括与一个笔画轨迹上的多个点对应的多个坐标。各笔画数据中，多个坐标按照书写笔画的顺序时序排列。例如，对于手写文字「A」来说，笔画数据SDl包括与手写文字「A」的「∧」形状的笔画轨迹上的点分别对应的坐标数据系列（时序坐标），即包括n个坐标数据SD11、SD12、…SD1n。笔画数据SD2包括与手写文字「A」的「－」形状的笔画轨迹上的点分别对应的坐标数据系列，即包括n个坐标数据SD21、SD22、…SD2n。又，坐标数据的个数随笔画数据不同而不同。

各坐标数据表示对应的轨迹内的某一点的X坐标和Y坐标。例如，坐标数据SD11表示「∧」形状的笔画的起点的X坐标（X11）和Y坐标（Y11）。SD1n表示「∧」形状的笔画的终点的X坐标（X1n）和Y坐标（Y1n）。

进一步的，各坐标数据也可以包括与该坐标对应的点被手写的时刻对应的时间戳记信息T。手写的时刻可以是绝对时间（例如，年月日时分秒）或以某个时刻为基准的相对时间中的任一个。例如，可以在各笔画数据上附加笔画开始书写的绝对时间（例如，年月日时分秒）作为时间戳记信息，并且进一步的，在笔画数据内的各坐标数据上附加表示与绝对时间的差分的相对时间作为时间戳记信息T。

如此，通过采用对各坐标数据追加时间戳记信息T的时序信息，可更高精度地表示笔画间的时间关系。

进一步的，也可对各坐标数据追加显示笔压的信息（Z）。

具有图4说明的构造的时序信息200，不仅表示各笔画的笔记，还体现笔画间的时间关系。因此，通过使用该时序信息200，如图3所示，即使例如手写「箭头」的顶端部书写为重合于手写文字「A」或与手写文字「A」接近，也能够将手写文字「A」和手写「箭头」的顶端部作为不同的文字或图形进行处理。

进一步的，本实施方式中，如上所述手写文档数据不是图像或文字识别结果，而是作为由时序的笔画数据的集合构成的时序信息200进行存储，因此可以不依赖手写文字的语言地对手写文字进行处理。这样，本实施方式的时序信息200的构造，可在使用语言不同的世界中各国通用。

图5是显示平板电脑10的系统构成的图。平板电脑10如图5所示，包括CPU101、系统控制器102、主存储器103、图形控制器104、BlOS－ROM105、非挥发性存储器106、无线通信设备107、嵌入式控制器（EC）108等。

CPU101为控制平板电脑10内的各种模块的动作的处理器。CPU101执行从作为存储器设备的非挥发性存储器106载入主存储器103的各种软件。这些软件中包括操作系统（OS）201、和各种应用程序。应用程序中包括手写笔记应用程序202。该手写笔记应用程序202包括制作和显示上述的手写文档的功能、与文件转换系统2一起对手写文档进行整形的功能等。

又，CPU101执行存储在BlOS－ROMl05的基本输入输出系统（B10S）。B10S是用于进行硬件控制的程序。

系统控制器102为连接CPU101的本地总线和各种元件的设备。系统控制器102中也内置有进行主存储器103的访问控制的存储器控制器。又，系统控制器102通过PCI EXPRESS规格的串行总线等进行与图形控制器104的通信。

图形控制器104为作为平板电脑10的显示控制使用的控制LCD17A的显示控制器。该图形控制器104生成的显示信号被送往LCD17A。LCD17A基于显示信号显示画面图像。该LCD17A上配置有触摸面板17B和数字转换器17C。触摸面板17B为用于在LCD17A的画面上进行输入的静电容式的指向装置。触摸面板17B检测手指接触的画面上的接触位置和接触位置的移动。数字转换器17C为用于在LCD17A的画面上进行输入的电磁感应式的指向装置。书写笔100接触的画面上的接触位置和接触位置的移动等由数字转换器17C检测。

无线通信设备107是为执行无线LAN或3G移动通信等无线通信而构成的设备。EC108为包括用于电力管理的嵌入式控制器的单片机式计算机。EC108具有根据用户对于启动按钮的操作使平板电脑10的电源打开或电源关闭的功能。

接着，说明通过手写笔记应用程序202向用户提示的几个代表性画面的实例。

图6显示通过手写笔记应用程序202显示的桌面／下拉画面。桌面／下拉画面为处理多个手写文档数据的基本画面。以下，手写文档数据称为手写笔记。

桌面／下拉画面包括桌面画面区域70和下拉画面区域71。桌面画面区域70为与显示作业中的多个手写笔记对应的多个笔记图标801～805的临时区域。各笔记图标801～805显示对应的手写笔记内某页面的缩略图。桌面画面区域70进一步的显示书写笔图标771、日历图标772、剪贴笔记图标773、标签图标774。

书写笔图标771为用于将显示画面从桌面／下拉画面切换到图8所后述的笔记查看画面的图形用户界面（GUI）。日历图标772为显示当前日期的图标。该日历图标772为用于将显示画面从桌面／下拉画面切换到与当前的日期关联的时线笔记画面的GUI。剪贴笔记图标773为用于制作或阅览剪贴数据的GUI。作成的剪贴数据登记于剪贴簿（剪贴笔记）。剪贴笔记图标773显示登记于剪贴簿的各剪贴数据的缩略图。从文件转换系统2接收的电子文档（手写文档的整形结果）可作为剪贴数据登记于剪贴簿。用户可将剪贴簿内的任意的剪贴数据输入到作成／编辑中的手写笔记。标签图标774为用于将便签纸（标签）贴付在任意的手写笔记内的任意的页面的GUI。

下拉画面区域71为用于阅览存储器区域的显示区域，存储器区域用于存储制作完成的所有手写笔记。下拉画面区域71显示所有的手写笔记内的与若干手写笔记对应的笔记图标80A，80B，80C。各笔记图标80A，80B，80C显示对应的手写笔记内的某个页面的缩略图。手写笔记应用程序202可利用外部目标检测用户在下拉画面区域71上做出的手势（例如轻扫手势等）。响应于该手势（例如轻扫手势等）的检出，手写笔记应用程序202使下拉画面区域71上的画面图像向左或向右滚动。由此，下拉画面区域71可显示与任意的手写笔记分别对应的笔记图标。

进一步的，手写笔记应用程序202可使用外部目标检测由用户在下拉画面区域71的笔记图标上做出的手势（例如轻击手势等）。响应于下拉画面区域71上的某个笔记图标上的手势（例如轻击手势等）的检测，手写笔记应用程序202将该笔记图标向桌面画面区域70的中央部移动。接着，手写笔记应用程序202选择与该笔记图标对应的手写笔记，接着，代替桌面／下拉画面，显示图7所示的桌面画面。图7的桌面画面是能够阅览所选择的手写笔记内的任意页面的画面。

进一步的，手写笔记应用程序202可采用外部目标检测用户在桌面画面区域70上做出的手势（例如轻击手势等）。响应位于桌面画面区域70的中央部的笔记图标上的手势（例如轻击手势等），手写笔记应用程序202选择与位于中央部的笔记图标对应的手写笔记，接着，代替桌面／下拉画面，显示图7所示的桌面画面。

如上所述图7的桌面画面为能够阅览所选择的手写笔记内的任意的页面的画面。此处，设想选择了与笔记图标801对应的手写笔记。此时，手写笔记应用程序202以各个页面901，902，903，904，905的至少一部分可见，且这些页面901，902，903，904，905重叠的状态来显示包含于该手写笔记的多个页面901，902，903，904，905。

桌面画面进一步的，显示上述的书写笔图标771、日历图标772、剪贴笔记图标773、标签图标774。

手写笔记应用程序202可检出用户在桌面画面上做出的各种手势。例如，响应于某个手势的检测，手写笔记应用程序202将应当显示在最上的页面变更为任意的页面（页面翻过、页面返回）。又，响应于在最上的页面上做出的某个手势（例如轻击手势）的检测，或响应于书写笔图标771上做出的某个手势（例如轻击手势）的检测，手写笔记应用程序202选择最上面的页面，然后代替桌面画面，显示图8所示的笔记查看画面。

图8的笔记查看画面为能够生成新页面（手写页面）、和能够阅览和编辑已有页面的画面。选择图7的桌面画面上的页面901时，如图8所示，笔记查看画面显示页面901的内容。

笔记查看画面进一步的显示黑色书写笔按钮501、红色书写笔按钮502、标记按钮503、选择按钮504、和橡皮按钮505。

例如，用户通过轻击手势选择黑色书写笔按钮501的状态下，利用书写笔100的手写输入操作在笔记查看画面上进行时，手写笔记应用程序202配合书写笔100的移动在笔记查看画面上显示黑色的笔画（轨迹）。选择按钮504为用于启动用来选择笔记查看画面上的任意的范围的范围选择工具的按钮。在通过用户的轻击手势选择了选择按钮504的状态下，利用书写笔100的手写输入操作在笔记查看画面上进行时，手写笔记应用程序202根据书写笔100的拖动操作，在笔记查看画面中描画矩形框或自由框。该矩形框或自由框围出的部分作为选择范围来使用。

图9显示手写笔记应用程序202的功能构成。手写笔记应用程序202为能够处理手写数据的WYSIWYG应用程序，包括书写笔轨迹显示处理部301、时序信息生成部302、页面保存处理部304、页面取得处理部305、手写文档显示处理部306、范围选择部307、发送部308、接收部309、和整形结果显示处理部310等。

手写笔记应用程序202通过使用以触摸屏显示器17输入的笔画数据，进行手写文档的作成、显示、编辑等。触摸屏显示器17构成为能够检测「触摸」、「移动（滑动）」、「释放」等事项的发生。「触摸」为表示外部目标接触到画面上的事项。「移动（滑动）」为表示外部目标与画面接触期间接触位置移动的情况的事项。「释放」为表示外部目标离开画面的事项。

书写笔轨迹显示处理部301和时序信息生成部302接收在触摸屏显示器17处发生的「触摸」或「移动（滑动）」的事项，由此检测手写输入操作。「触摸」事项中包含接触位置的坐标。「移动（滑动）」事项中也包括移动目的地的接触位置的坐标。因此，书写笔轨迹显示处理部301和时序信息生成部302可从触摸屏显示器17接收与接触位置的移动轨迹对应的坐标列。

书写笔轨迹显示处理部301将手写输入的多个笔画显示到触摸屏显示器17内的LCD17A的画面上。更具体地说，书写笔轨迹显示处理部301从触摸屏显示器17接收坐标列，基于该坐标列，将利用书写笔100等的手写输入操作所写下的手写目标所对应的各笔画显示于触摸屏显示器17内的LCD17A的画面上。通过该书写笔轨迹显示处理部301，书写笔100接触画面期间的书写笔100的轨迹，即各笔画轨迹被显示于LCD17A的画面上。

时序信息生成部302接收从触摸屏显示器17输出上述的坐标列，基于该坐标列，生成具有图4所示构成的上述的时序信息（笔画数据的集合）。此时，时序信息，即对应于笔画的各点的坐标和时间戳记信息也可暂时保存于作业存储器401。

页面保存处理部304将生成的时序信息作为手写文档（手写页面）保存在存储介质402中。存储介质402可以是平板电脑10内的存储器设备、系统2内的存储器设备中任一个。

页面取得处理部305从存储介质402读出已经保存的任意的时序信息。读出的时序信息被发送到手写文档显示处理部306。手写文档显示处理部306分析时序信息，基于该分析结果，将由时序信息表示的各笔画（手写输入的各笔画）作为手写页面显示于画面上。

范围选择部307从手写页面选择由笔记查看画面上的选择范围指定的手写部分。该手写部分的选择根据用户做出的范围选择操作来执行。范围选择操作为用于选择笔记查看画面上的手写页面内的任意的部分，即任意的手写部分的操作。用户通过使用例如「范围选择」工具，通过书写笔100的操作将画面上的任意的部分以矩形框等框住。范围选择部307可将属于矩形框围住的选择范围内的手写部分，即属于选择范围内的多个笔画选作为应当执行上述的整形等的功能的处理对象手写部分。

发送部308构成为将范围选择部307选择的手写部分发送到手写文档转换系统2。更具体地说，发送部308将范围选择部307选择的手写部分（多个笔画）所对应的多个笔画数据发送到手写文档转换系统2。接收部309从手写文档转换系统2接收通过对上述的手写部分（多个笔画）进行整形得到的整形结果（一个以上的目标数据）。整形结果显示处理部310将整形结果显示在笔记查看画面上。由此，用户可将手写页面内的选择范围以外的手写部分各自维持在手写的状态，仅对手写页面内的与选择范围对应的手写部分整形。

整形结果显示于笔记查看画面上的处理中，整形结果显示处理部310将整形结果和上述的手写部分相互关联地显示于笔记查看画面上，使得用户容易比较整形结果和上述手写部分。如此，通过关联显示整形结果和上述手写部分，即使在仅对手写页面内的一部分进行整形的情况下，也可方便提示用户整形结果与手写页面内的哪一手写部分对应。

图10显示范围选择部307执行的范围选择动作的实例。图10的笔记查看画面500中，设想为显示包括多个手写文字列和手写的表601的手写页面，该手写的表601被由范围选择工具描画的矩形框550围住。范围选择部307从手写页面选择通过矩形框550示出的选择范围所指定的手写的表601。

手写笔记应用程序202如图11所示，在笔记查看画面500上显示整形按钮610。该整形按钮610被用户的手指或书写笔100轻击时，发送部308将与范围选择部307选择的手写部分（此处，为手写的表601）对应的多个笔画数据发送到手写文档转换系统2。接收部309从手写文档转换系统2接收手写的表601的整形结果。接着，整形结果显示处理部310基于笔记查看画面上的手写部分的显示位置将手写的表601和手写的表601的整形结果相互关联地显示在笔记查看画面上。

作为将手写的表601和整形结果相互关联地显示于笔记查看画面上的显示形态，可使用用户能够比较整形前的手写部分（手写的表601）和整形结果的任意的显示形态。

例如，整形结果显示处理部310将手写页面的显示形态在第一显示形态和第二显示形态之间切换，第一显示形态为代替手写的表601将整形结果显示于手写的表601的显示位置的显示形态、第二显示形态为代替整形结果将手写的表601显示于上述的显示位置的显示形态。

此时，整形结果显示处理部310首先如图12所示，基于手写部分（手写的表601）的显示位置，将整形结果602代替手写的表601显示于该手写的表601的显示位置。即，整形结果显示处理部310将手写页面内的手写的表601替换为整形结果602。

整形结果显示处理部310可检测出在图12的整形结果602上做出的手势（例如，用户的手指做出的轻击手势）。对图12的整形结果602上做出的手势的检测进行响应，整形结果显示处理部310如图13所示，将显示切换按钮621显示在整形结果602的附近。显示切换按钮621为将手写页面的显示形态在上述的第一显示形态和上述第二显示形态之间切换的用户界面。

显示切换按钮621被书写笔100或手指轻击时，整形结果显示处理部310如图14所示，基于手写部分（手写的表601）的显示位置，代替整形结果602在原来的显示位置显示手写的表601。在手写的表601的附近显示切换按钮621被显示。显示切换按钮621再次被书写笔100或手指轻击时，整形结果显示处理部310如图13所示，基于手写部分的显示位置，在该手写的表601的显示位置再次显示整形结果602来代替手写的表601。

如此，本实施方式中，根据用户的操作，可将手写页面的显示形态在手写页面内的选择范围内的显示内容替换为整形结果的图12或图13的显示形态以及选择范围内的显示内容返回原先的手写部分的图14的显示形态之间切换。由此，即使在笔记查看画面的尺寸有限的情况下，用户也可容易地比较转换前的手写部分的内容和整形结果的内容确认整形结果是否正确。整形结果不正确时，用户通过轻击例如图未示的撤销按钮等，使笔记查看画面返回到执行范围选择操作前的状态。接着，用户根据需要，也可再度进行范围选择操作、和整形按钮610的轻击操作。

作为用户可比较整形前的手写部分（手写的表601）和整形结果的任意的显示形态，如图15所示，也可使用整形结果602的显示区域和手写的表601的显示区域至少一部分重叠显示的显示形态。此时，整形结果显示处理部310也可使整形结果602的显示区域重叠于手写的表601的显示区域的至少一部分。进一步的，为了防止整形结果显示处理部310通过使得整形结果602内的多个文字列和多条线与手写部分（手写的表601）内的多个手写文字和手写的线重合导致整形结果602难以观察，也可如图15所示，改变包含于手写部分（手写的表601）的多个笔画的线种（粗细、实线／虚线等）或颜色。作为改变各笔画的颜色的方法，可使用可淡淡地显示各笔画的任意方法。例如，也可改变各笔画的当前的颜色的灰度等级。或者，各笔画的当前的颜色也可改变为预先确定的特定的较淡的颜色。

又，作为改变多个笔画的线种（线宽度、实线／虚线等）的方法，可使用能够淡淡地显示各笔画的任意方法。例如，（1）可使多个笔画的线宽度变细，或（2）使这些多个笔画为虚线。

接着，整形结果显示处理部310基于手写部分的显示位置将整形结果602如图15所示，重叠于手写的表601上显示。此时，不需要一定使整形结果602的显示区域整体重叠于手写的表601的显示区域上，为使整形结果602的显示区域部分重叠在手写的表601的显示区域上，也可将整形结果602的显示区域的显示位置相对手写的表601的显示区域的显示位置向上下方向或左右方向偏移。进一步的，整形结果显示处理部310在与手写的表601的显示区域重叠的整形结果602的显示区域，使手写的表601的至少一部分透过整形结果602的显示区域能看见地进行显示。例如，整形结果显示处理部310也可设定整形结果602的背景（整形结果602的显示区域）的透明度，使得位于整形结果602的背面的手写的表601可透过整形结果602的背景（整形结果602的显示区域）被显示。此时，整形结果602的背景也可为透明。

进一步的，整形结果显示处理部310也可在笔记查看画面上显示「OK」按钮611、「取消」按钮612。「OK」按钮611由用户操作（例如轻击操作）时，整形结果显示处理部310将手写的表601替换为整形结果602。此时，手写的表601从笔记查看画面消去，根据需要整形结果602的显示位置可移动，使得整形结果602在原先手写的表601的显示位置显示。另一方面，「取消」按钮612被用户操作（例如轻击操作）时，整形结果显示处理部310从笔记查看画面消除整形结果602，包含于手写的表601的多个笔画的线种（粗细、实线／虚线等）或颜色返回原来的状态。

又，为了防止由于整形结果602内的多个文字列和多条线与手写的表601内的多个手写文字和手写的线重合导致整形结果602难以被观察，如图16所示，整形结果显示处理部310也可将手写的表601内的与各手写文字对应的一个以上的笔画轨迹从笔记查看画面消除。此时，仅显示手写的表601的与多个格式线对应的多个笔画，手写的表601的与各单元的手写文字对应的多个笔画不显示。通过删除各单元的手写文字对应的多个笔画，可提高整形结果602的可视性。又，即使消除与各单元的手写文字对应的多个笔画，用户也可比较手写的表601的多个格式线和整形结果602的多个格式线，因此可确认整形结果602的纵横的要素（单元）数是否与手写的表601的纵横的要素（单元）数是否相同。

进一步的，整形结果显示处理部310也可改变与手写的表601的多个格式线对应的多个笔画的线种（粗细、实线／虚线等）或颜色。由此，整形结果602的可视性可进一步提高。

接着，整形结果显示处理部310使得消除了与手写文字对应的多个笔画的手写的表601的显示区域和整形结果602的显示区域至少一部分重叠地被显示。整形结果显示处理部310也可例如，使得与手写的表601的显示区域的至少一部分重叠地显示整形结果602的显示区域。此时，为使得整形结果602的背面的手写的表601通过整形结果602的背景也可透视，而将整形结果602的背景例如设定为透明。

图16的笔记查看画面上的「OK」按钮611被用户操作（例如轻击操作）时，整形结果显示处理部310将手写的表601替换为整形结果602。此时，手写的表601从笔记查看画面消去，然后为使整形结果602在原先手写的表601的显示位置显示，根据需要移动整形结果602的显示位置。另一方面，「取消」按钮612被用户操作（例如轻击操作）时，整形结果显示处理部310将整形结果602从笔记查看画面消去，包含于手写的表601的多个笔画的线种（粗细、实线／虚线等）或颜色返回原先的状态。进一步的，整形结果显示处理部310在手写的表601内的各单元上再度显示被删除了的手写文字的笔画。

图17的流程图表示手写笔记应用程序202执行的手写文档处理的顺序。手写笔记应用程序202显示笔记查看画面（步骤S11）。接着，手写笔记应用程序202将包含手写记载的多个笔画的手写文档显示于笔记查看画面上（步骤S12）。步骤S12中，构成手写文档的多个笔画显示在笔记查看画面上。这些笔画的显示也可例如，基于从存储介质402读出的手写页面数据进行，也可根据笔记查看画面上的手写输入操作进行。手写笔记应用程序202从手写文档中选择由笔记查看画面上的选择范围指定的手写部分（多个笔画）（步骤S13）。

如果用户要求进行整形功能的执行（步骤S14的是），手写笔记应用程序202将被选择的手写部分发送到文件转换系统2（步骤S15）。步骤S15中，与包含于被选择的手写部分的多个笔画相对应的多个笔画数据被发送到文件转换系统2。

接着，手写笔记应用程序202从文件转换系统2接收通过对手写部分进行整形得到的整形结果（目标数据）（步骤S16）。手写笔记应用程序202基于手写部分的显示位置（显示区域）将整形结果（目标数据对应的目标）与手写部分相互关联地在笔记查看画面上显示（步骤S17）。

步骤S17中，如图12、图13所说明的，手写笔记应用程序202基于手写部分的显示位置，代替手写部分将整形结果显示在手写部分的显示位置。由此，手写文档内的选择范围的显示内容由整形结果替代。接着，如图13、图14所说明的，手写笔记应用程序202基于用户的操作，将应在手写文档内的选择范围显示的内容在整形结果和原先的手写部分间相互切换。

或者，也可如图15、图16所示的，手写笔记应用程序202改变包含于手写部分的多个笔画的线种或颜色，然后基于手写部分的显示位置，使手写部分的显示区域和整形结果的显示区域至少一部分重叠地显示。

如以上说明的，本实施方式中，画面上的选择范围指定的手写部分从平板电脑10被发送到手写文档转换系统2。接着，手写部分和从手写文档转换系统2接收的整形结果相互关联地在画面上显示。因此，手写文档内的所希望的部分可容易地进行整形，而且整形结果以用户能够观察比较整形前的手写部分和整形结果的形态提示给用户。

对于本实施方式的手写文档进行的各种处理可通过计算机程序实现，因此只要通过存储该计算机程序的计算机可读存储介质将该计算机程序安装到通常的计算机并执行，即可实现与本实施方式相同的效果。

虽然说明了本发明的几个实施方式，但这些实施方式只是作为实例被提出，并不是用于限定发明的范围。这些实施方式能够以其它各种各样的形态来实施，在不脱离发明的要旨的范围内，可以进行各种省略、替换、变更。这些实施方式及其变形包含于发明的范围、主旨内，同样也包含于记载于专利权利要求书的发明及其同等范围内。

Claims (10)

1.一种电子设备，其特征在于，包括：

显示处理单元，其将包含通过手写而被记载的多个笔画的手写文档显示于画面上；

发送单元，其将所述画面上的选择范围所指定的手写部分发送到系统；以及，

接收单元，其从所述系统接收通过对所述手写部分进行整形而得到的整形结果，

所述显示处理单元将所述整形结果与所述手写部分相互关联地显示于所述画面上。

2.如权利要求1所述的电子设备，其特征在于，所述显示处理单元构成为，能够在第一显示形态和第二显示形态之间切换，所述第一显示形态为所述整形结果代替所述手写部分被显示于所述手写部分的显示位置的显示形态，所述第二显示形态为所述手写部分代替所述整形结果被显示于所述显示位置的显示形态。

3.如权利要求1所述的电子设备，其特征在于，所述显示处理单元使所述整形结果的显示区域和所述手写部分的显示区域至少一部分重叠地显示。

4.如权利要求3所述的电子设备，其特征在于，所述显示处理单元在与所述手写部分的显示区域重叠的所述整形结果的显示区域使所述手写部分的至少一部分透过所述整形结果的显示区域能被看到地进行显示。

5.如权利要求1所述的电子设备，其特征在于，所述显示处理单元改变包含于所述手写部分的多个笔画的线种或颜色，且使所述整形结果在所述手写部分上重叠显示。

6.如权利要求1所述的电子设备，其特征在于，当所述手写部分包含与手写文字对应的一个以上的笔画和手写文字以外的一个以上的笔画时，所述显示处理单元从所述画面消去与所述手写文字对应的所述一个以上的笔画的轨迹，使所述整形结果的显示区域和所述手写部分的显示区域至少一部分重叠地显示。

7.如权利要求1所述的电子设备，其特征在于，当所述手写部分包含与手写文字对应的一个以上的笔画和手写文字以外的一个以上的笔画时，所述显示处理单元从所述画面消去与所述手写文字对应的所述一个以上的笔画的轨迹，改变所述手写文字以外的所述一个以上的笔画的线种或颜色，并使所述整形结果的显示区域和所述手写部分的显示区域一部分重叠地显示。

8.如权利要求1所述的电子设备，其特征在于，所述发送单元将与包含于所述手写部分的多个笔画相对应的多个笔画数据发送到所述系统。

9.一种手写文档处理方法，其特征在于，

在画面上显示包含通过手写而被记载的多个笔画的手写文档，

将与所述画面上的选择范围对应的手写部分发送到系统，

从所述系统接收通过对所述手写部分进行整形得到的整形结果，

使所述整形结果与所述手写部分相互关联地在所述画面上显示。

10.一种计算机执行的程序，其特征在于，使计算机执行如下步骤：

在画面上显示包含通过手写而被记载的多个笔画的手写文档的步骤，

将由所述画面上的选择范围所指定的手写部分发送到系统的步骤，

从所述系统接收通过对所述手写部分进行整形得到的整形结果的步骤，

使所述整形结果与所述手写部分相互关联地在所述画面上显示的步骤。