CN104035691A - 手写输入系统和方法 - Google Patents

Abstract

本公开提供了一种手写输入系统，包括：输入模块，配置为接收用户输入；手写识别模块，配置为基于所述用户输入识别文本字符；属性处理模块，配置为基于所述用户输入提取与所述文本字符有关的对象属性；以及显示模块，配置为基于所述对象属性和所述文本字符输出显示数据，以便在交互式显示设备上基于所述对象属性来显示所述文本字符。本公开还提供了一种手写输入方法。

Description

手写输入系统和方法

技术领域

本公开涉及手写输入领域，更具体地涉及一种手写输入系统和方法。利用所述手写输入系统和方法，用户可以通过输入设备或手指来输入要在交互显示设备上显示的文本。

背景技术

手写输入技术在交互显示领域中扮演着重要角色。例如，通过手写笔等输入设备或手指，用户可以在例如交互式白板或便携装置的触摸屏等交互显示设备上输入文本。但是，当前的手写输入技术存在一些缺点，影响了用户便利度并制约了手写技术的进一步普及和应用。例如，在现有手写输入技术中，用户输入以图片的形式在屏幕上显示，而不能作为文本对象被编辑。此外，仅能将用户输入识别为文本，而丢失了与用户输入有关的其他属性，例如颜色、尺寸、灰度、位置、取向、字体等。例如，图5示出了一种典型的交互显示设备的显示屏幕500，其中用户在输入区501进行输入，用户输入被转换为文本字符并在指定的文本框502中显示。用户输入在输入区501中以图片的形式显示，用户不能对该图片进行编辑，例如改变其外观等。此外，不论用户输入的外观如何，在文本框中均以特定的颜色、字体和字号进行显示。专利文献CN102736830A公开了一种手写输入法和终端设备，其中采集用户输入的运动轨迹，并在采集结束后保存所述运动轨迹，对保存的运动轨迹进行识别、生成对应的识别结果。该专利文献也未能解决现有技术中的上述问题。

发明内容

为解决现有技术中的一个或多个问题而提出本公开。

根据本公开的一个方面提供了一种手写输入系统，包括：输入模块，配置为接收用户输入；手写识别模块，配置为基于所述用户输入识别文本字符；属性处理模块，配置为基于所述用户输入提取与所述文本字符有关的对象属性；以及显示模块，配置为基于所述对象属性和所述文本字符输出显示数据，以便在交互式显示设备上基于所述对象属性来显示所述文本字符。

可选地，所述手写输入系统还包括：识别对象选择模块，配置为基于所述用户输入确定所述用户输入中的需要识别的手写对象，其中：所述手写识别模块配置为基于所述手写对象识别所述文本字符；并且所述属性处理模块配置为基于所述手写对象提取所述对象属性。

可选地，所述对象属性包括用户输入的文本的颜色、尺寸、灰度、位置、取向和字体中的一个或多个。

可选地，所述属性处理模块包括以下中的一个或多个：颜色提取模块、尺寸提取模块、灰度提取模块、位置提取模块、取向提取模块以及字体提取模块。

可选地，所述字体提取模块将用户输入与和所述用户输入具有相同尺寸的字库中相应文本字符的各种字体的字符图案进行比较，选择相似度最高的字体作为用户输入的字体。

可选地，所述输入模块从交互显示设备接收所述用户输入；并且所述显示模块向所述交互显示设备提供显示数据。

可选地，针对不同的文本字符提取不同的对象属性。

根据本公开的另一方面提供了一种手写输入方法，包括：接收用户输入；基于所述用户输入识别文本字符；基于所述用户输入提取与所述文本字符有关的对象属性；以及基于所述对象属性显示所述文本字符。

可选地，所述手写输入方法还包括：基于所述用户输入确定所述用户输入中的需要识别的手写对象，其中：基于所述手写对象识别所述文本字符；以及基于所述手写对象提取所述对象属性。

可选地，所述对象属性包括用户输入的文本的颜色、尺寸、灰度、位置、取向和字体中的一个或多个。

可选地，将用户输入与和所述用户输入具有相同尺寸的字库中相应文本字符的各种字体的字符图案进行比较，选择相似度最高的字体作为用户输入的字体。

可选地，针对不同的文本字符提取不同的对象属性。

根据本公开提供了一种用于交互显示设备的“所写即所见”手写输入系统和方法。利用根据本公开，不仅能够在交互式显示设备上显示用户输入的文本字符，而且能够以与用户输入相同或相近的颜色、尺寸、灰度、位置、取向和/或字体等显示所述文本字符，从而实现“所写即所见”的手写输入系统和方法。

除此之外，根据本公开，还可以将交互显示设备的用户输入识别为可编辑文本字符，所述文本字符可被存储和/或输出到例如Word等文字处理软件或其他应用程序。此外，可以提取用户输入的例如颜色、尺寸、灰度、位置和/或取向等对象属性以供文字处理软件或其他应用程序使用。

附图说明

根据结合附图对于示例性实施例的以下描述，本公开的以上和/或其他方面将变得清楚明白并且更加易于理解，其中：

图1示意性示出了根据本公开实施例的手写输入系统的示例性应用环境；

图2A示意性示出了根据本公开实施例的手写输入系统的框图；

图2B示意性示出了根据本公开实施例的属性处理模块的框图；

图3示意性示出了根据本发明实施例的手写输入方法的流程图；

图4A和图4B示出了根据本发明实施例在交互式显示设备上显示的手写输入图像的示意图；以及

图5示出了一种现有技术的交互显示设备的显示屏幕。

具体实施方式

下面将详细描述本发明的具体实施例，应当注意，这里描述的实施例只用于举例说明，并不用于限制本发明。在以下描述中，为了提供对本发明的透彻理解，阐述了大量特定细节。然而，对于本领域普通技术人员显而易见的是：不必采用这些特定细节来实行本发明。在其他实例中，为了避免混淆本发明，未具体描述公知的电路、材料或方法。

在整个说明书中，对“一个实施例”、“实施例”、“一个示例”或“示例”的提及意味着：结合该实施例或示例描述的特定特征、结构或特性被包含在本发明至少一个实施例中。因此，在整个说明书的各个地方出现的短语“在一个实施例中”、“在实施例中”、“一个示例”或“示例”不一定都指同一实施例或示例。此外，可以以任何适当的组合和/或子组合将特定的特征、结构或特性组合在一个或多个实施例或示例中。此外，本领域普通技术人员应当理解，这里使用的术语“和/或”包括一个或多个相关列出的项目的任何和所有组合。

图1示意性示出了根据本公开实施例的手写输入系统101的示例性应用环境。如图1所示，手写输入系统101连接到交互显示设备102。交互显示设备102可以实现为例如交互式白板、触摸屏等。用户通过手写笔等输入设备103或手指在交互显示设备102上进行输入。手写输入系统101从交互显示设备102接收用户输入，并向交互显示设备102提供显示数据以供显示。手写输入系统101可以作为软件在通用计算机上实现，也可以实现为专门的硬件模块等。这里为了简便起见使用集成了触摸输入和显示设备的交互式显示设备102例示本公开的实施例。但是本领域技术人员可以理解，也可以使用分离的触摸输入设备和显示设备来实现本公开。

图2A示意性示出了根据本公开实施例的手写输入系统101的框图。如图2A所示，手写输入系统101包括输入模块201、识别对象选择模块202、手写识别模块203、属性处理模块204、和显示模块205。

输入模块201配置用于从例如图1所示的交互显示设备102接收用户利用如手写笔等输入设备103或手指进行的用户输入，并将用户输入发送到显示模块205。显示模块205基于用户输入在交互式显示设备102上实时显示与用户输入的轨迹相对应的图像，如图4A所示。

识别对象选择模块202基于用户输入确定需要识别的手写对象。例如图4A所示，识别对象选择模块检测到用户在“上海”、“南京”、“北京”周围分别输入了封闭曲线，因此将被封闭曲线包围的用户输入确定为需要识别的手写对象401、402、403。本领域技术人员可以理解，识别对象检测模块可以以其他方式确定需要识别的手写对象，例如用户在交互显示设备102的包含需要识别的手写对象的区域上涂抹，或使用近似封闭的曲线(例如曲线的相邻端点之间的距离小于预定值)等来圈定需要识别的手写对象。

手写识别模块203对所述需要识别的手写对象执行识别操作，将所述需要识别的手写对象转换为文本字符，并将转换得到的文本字符发送到显示模块205以供显示。可选地，手写识别模块203可以存储所述文本字符或将其发送到例如Word等文字处理软件或其他应用程序。

属性处理模块204分析所述需要识别的手写对象，并提取对象属性，例如颜色、尺寸、灰度、位置、取向和字体中的一个或多个。例如，手写对象401的对象属性可以包括蓝色、初号、灰度100％等。手写对象402的对象属性可以包括紫色、二号、在交互显示设备的屏幕上的坐标(800，600)、与水平方向呈30度角等。手写对象403的对象属性可以包括黄色、灰度60％、宋体等。可以根据具体需要，针对不同手写对象提取不同的对象属性。所述对象属性还可以包括除以上列举之外的其他属性。属性处理模块204将提取的对象属性发送到显示模块205。可选地，属性处理模块204也可以存储提取的对象属性，或将提取的对象属性发送给文字处理软件或其他应用程序。例如，其他应用程序可以基于提取的对象属性执行统计处理、分类处理等。根据本发明的实施例，其他应用程序例如可以统计蓝色的用户输入字符数，或者将所有尺寸为二号的字符作为一类字符进行处理。本领域技术人员可以设计其他方式来使用提取的对象属性。

显示模块205基于所述对象属性和所述文本字符输出显示数据，以便在交互显示设备102上基于对象属性显示文本字符，如图4B所示。手写对象401、402、403分别被显示为具有与其属性相对应的颜色、尺寸、灰度、位置和/或取向的文本字符411、412、413。例如，文本字符411可以是以蓝色、初号、灰度100％显示的文本字符“上海”，文本字符412可以是以紫色、二号、在交互显示设备的屏幕上的坐标为(800，600)、与水平方向呈30度角显示的文本字符“北京”，文本字符413可以是以黄色、灰度60％、宋体显示的文本字符“南京”。

根据本公开的实施例，手写输入系统101可以不包括识别对象选择模块。在此情况下，可以对所有用户输入执行识别和属性提取操作。

图2B示出了根据本公开实施例的属性处理模块204的配置。如图2B所示，属性处理模块204可以包括颜色提取模块2041、尺寸提取模块2042、灰度提取模块2043、位置提取模块2044、取向提取模块2045、字体提取模块2046，并可选地包括其他属性提取模块2047。

颜色提取模块2041可以提取用户输入的颜色。所述颜色可以是用户选择的或系统默认的。

尺寸提取模块2042可以提取用户输入的尺寸。例如，尺寸提取模块2042可以基于交互显示设备中与用户输入相关联的像素在平行于用户输入和垂直于用户输入方向上的相应最大个数来确定用户输入的尺寸。

灰度提取模块2043可以提取用户输入的灰度。所述灰度可以是用户选择的或系统默认的。

位置提取模块2044可以提取用户输入的位置。例如，位置提取模块可以基于交互显示设备中与用户输入相关联的像素在显示屏幕平面上的坐标来确定用户输入的位置。

取向提取模块2045可以提取用户输入的取向。例如，取向提取模块可以将与用户输入平行的方向与水平方向的夹角作为用户输入的取向。

字体提取模块2046可以提取用户输入的字体。例如，字体提取模块可以将用户输入与和所述用户输入具有相同尺寸的字库中相应文本字符的各种字体的字符图案进行比较，选择相似度最高的字体作为用户输入的字体。

可选地，属性处理模块还可以包括其他属性提取模块，用于提取所需其他对象属性。

颜色提取模块2041、尺寸提取模块2042、灰度提取模块2043、位置提取模块2044、取向提取模块2045、字体提取模块2046，以及可选的其他属性提取模块2047可以将提取的相应属性输出到显示模块205或发送给文字处理软件或其他应用程序。

根据本公开实施例的手写输入系统101能够以与用户输入相同的颜色、尺寸、灰度、位置和/或取向等显示所述文本字符，从而实现“所写即所见”的手写输入系统。此外，用户输入和用户输入的对象属性可以被转换成文本字符存储或供例如Word等文字处理软件或其他应用程序。

图3示意性示出了根据本发明实施例的手写输入方法的流程图。手写输入方法从步骤301开始。

在步骤302，接收用户输入。用户可以利用如手写笔等输入设备103或手指在交互显示设备102上进行输入。可选地，如图4A所示，在交互显示设备102上实时显示与用户输入的轨迹相对应的图像401、402、403。所述图像401、402、403分别显示为具有相应的对象属性。例如，手写对象401的对象属性可以包括蓝色、初号、灰度100％等。手写对象402的对象属性可以包括紫色、二号、在交互显示设备的屏幕上的坐标(800，600)、与水平方向呈30度角等。手写对象403的对象属性可以包括黄色、灰度60％、宋体等。颜色、灰度等对象属性可以是用户在进行输入之前设定的。

在步骤303，基于用户输入确定需要识别的手写对象。例如，如图4A所示，当检测到用户在“上海”、“南京”、“北京”周围分别输入了封闭曲线时，将被封闭曲线包围的用户输入确定为需要识别的手写对象401、402、403。本领域技术人员可以理解，可以以其他方式确定需要识别的手写对象，例如用户在交互显示设备102的包含需要识别的手写对象的区域上涂抹，或使用近似封闭的曲线(例如曲线的相邻端点之间的距离小于预定值)等来圈定需要识别的手写对象。

在步骤304，将在步骤303确定的需要识别的手写对象转换为文本字符。可选地，可以存储所述文本字符或将其发送到例如Word等文字处理软件以供处理。

在步骤305，从在步骤303确定的需要识别的手写对象提取相应的对象属性，例如颜色、尺寸、灰度、位置、取向和字体中的一个或多个。例如，图4所示的手写对象401的对象属性可以包括蓝色、初号、灰度100％等。手写对象402的对象属性可以包括紫色、二号、在交互显示设备的屏幕上的坐标(800，600)、与水平方向呈30度角等。手写对象403的对象属性可以包括黄色、灰度60％、宋体等。可以根据具体需要，针对不同手写对象提取不同的对象属性。所述对象属性还可以包括除以上列举之外的其他属性。可选地，属性处理模块204也可以存储提取的对象属性，或将提取的对象属性发送给文字处理软件或其他应用程序。例如，文字处理软件可以基于对象属性来呈现文本字符。其他应用程序可以基于提取的对象属性执行统计处理、分类处理等。根据本发明的实施例，其他应用程序例如可以统计蓝色的用户输入字符数，或者将所有尺寸为二号的字符作为一类字符进行处理。本领域技术人员可以设计其他方式来使用提取的对象属性。

根据本发明的实施例，可以根据用户选择的或系统默认的颜色信息来提取用户输入的颜色。可以基于交互显示设备中与用户输入相关联的像素在平行于用户输入和垂直于用户输入方向上的相应最大个数来确定用户输入的尺寸。可以根据用户选择的或系统默认的灰度信息来提取用户输入的灰度。可以基于交互显示设备中与用户输入相关联的像素在显示屏幕平面上的坐标来确定用户输入的位置。可以将与用户输入平行的方向与水平方向的夹角作为用户输入的取向。可以将用户输入与和所述用户输入具有相同尺寸的字库中相应文本字符的各种字体的字符图案进行比较，选择相似度最高的字体作为用户输入的字体。可选地，还可以提取所需其他对象属性。

在步骤306，基于在步骤305提取的对象属性，显示在步骤304得到的文本字符。如图4B所示，手写对象401、402、403分别被显示为具有与其属性相对应的颜色、尺寸、灰度、位置和/或取向的文本字符411、412、413。例如，文本字符411可以是以蓝色、初号、灰度100％显示的文本字符“上海”，文本字符412可以是以紫色、二号、在交互显示设备的屏幕上的坐标为(800，600)、与水平方向呈30度角显示的文本字符“北京”，文本字符413可以是以黄色、灰度60％、宋体显示的文本字符“南京”。

根据本公开实施例的手写输入方法能够以与用户输入相同的颜色、尺寸、灰度、位置和/或取向等显示所述文本字符，从而实现“所写即所见”的手写输入方式。此外，用户输入可以被转换成文本字符存储或供例如Word等文字处理软件或其他应用程序使用。

根据本公开的手写输入系统和方法解决了现有技术不能以“所写即所见”的方式以文本字符的形式显示用户输入的问题。根据本公开的实施例，用户输入被识别为字符，并且从用户输入提取相应的对象属性，可以在与用户输入的位置相同的位置、以相同的颜色、尺寸和取向以及相近的字体来显示文本字符，并且文本字符和对象属性可以被存储和供其他应用程序使用。根据本公开的实施例提高了用户便利度、改进了用户体验，并且为开发手写输入的各种其他应用提供了可能性。

通过阅读本公开文件，其他变化或修改对于技术人员来说是显而易见的。这样的变化或修改可以包括在本领域已知的等同的和其他特征和用于代替或补充这里已经描述的特征的等同的和其他特征。

虽然附加的权利要求涉及特征的特定组合，但是应当理解，本公开的范围也包括任何新颖的特征或这里明示或暗示地公开的特征的任何新颖的组合。

单独实施例的上下文中描述的特征也可以以组合的形式在单一实施例中提供。相反，为了简要起见而在单一实施例的上下文中描述的各种特征，也可以被单独提供或以任何合适的子组合的形式提供。

以上的详细描述通过使用方框图、流程图和/或示例，已经阐述了手写输入系统和方法的众多实施例。在这种方框图、流程图和/或示例包含一个或多个功能和/或操作的情况下，本领域技术人员应理解，这种方框图、流程图或示例中的每一功能和/或操作可以通过各种硬件、软件、固件或实质上它们的任意组合来单独和/或共同实现。在一个实施例中，本公开的实施例所述主题的若干部分可以通过专用集成电路(ASIC)、现场可编程门阵列(FPGA)、数字信号处理器(DSP)、或其他集成格式来实现。然而，本领域技术人员应认识到，这里所公开的实施例的一些方面在整体上或部分地可以等同地实现在集成电路中，实现为在一台或多台计算机上运行的一个或多个计算机程序(例如，实现为在一台或多台计算机系统上运行的一个或多个程序)，实现为在一个或多个处理器上运行的一个或多个程序(例如，实现为在一个或多个微处理器上运行的一个或多个程序)，实现为固件，或者实质上实现为上述方式的任意组合，并且本领域技术人员根据本公开，将具备设计电路和/或写入软件和/或固件代码的能力。此外，本领域技术人员将认识到，本公开所述主题的机制能够作为多种形式的程序产品进行分发，并且无论实际用来执行分发的信号承载介质的具体类型如何，本公开所述主题的示例性实施例均适用。信号承载介质的示例包括但不限于：可记录型介质，如软盘、硬盘驱动器、紧致盘(CD)、数字通用盘(DVD)、数字磁带、计算机存储器等；以及传输型介质，如数字和/或模拟通信介质(例如，光纤光缆、波导、有线通信链路、无线通信链路等)。

虽然已参照几个典型实施例描述了本公开，但应当理解，所用的术语是说明和示例性、而非限制性的术语。由于本公开能够以多种形式具体实施而不脱离公开的精神或实质，所以应当理解，上述实施例不限于任何前述的细节，而应在随附权利要求所限定的精神和范围内广泛地解释，因此落入权利要求或其等效范围内的全部变化和改型都应为随附权利要求所涵盖。

Claims (12)

1.一种手写输入系统，包括：

输入模块，配置为接收用户输入；

手写识别模块，配置为基于所述用户输入识别文本字符；

属性处理模块，配置为基于所述用户输入提取与所述文本字符有关的对象属性；以及

显示模块，配置为基于所述对象属性和所述文本字符输出显示数据，以便在交互式显示设备上基于所述对象属性来显示所述文本字符。

2.根据权利要求1所述的手写输入系统，还包括：

识别对象选择模块，配置为基于所述用户输入确定所述用户输入中的需要识别的手写对象，其中：

所述手写识别模块配置为基于所述手写对象识别所述文本字符；并且

所述属性处理模块配置为基于所述手写对象提取所述对象属性。

3.根据权利要求1或2所述的手写输入系统，其中，所述对象属性包括用户输入的文本的颜色、尺寸、灰度、位置、取向和字体中的一个或多个。

4.根据权利要求1所述的手写输入系统，其中，所述属性处理模块包括以下中的一个或多个：颜色提取模块、尺寸提取模块、灰度提取模块、位置提取模块、取向提取模块以及字体提取模块。

5.根据权利要求4所述的手写输入系统，其中，所述字体提取模块将用户输入与和所述用户输入具有相同尺寸的字库中相应文本字符的各种字体的字符图案进行比较，选择相似度最高的字体作为用户输入的字体。

6.根据权利要求1或2所述的手写输入系统，其中：

所述输入模块从交互显示设备接收所述用户输入；并且

所述显示模块向所述交互显示设备提供显示数据。

7.根据权利要求1或2所述的手写输入系统，其中，针对不同的文本字符提取不同的对象属性。

8.一种手写输入方法，包括：

接收用户输入；

基于所述用户输入识别文本字符；

基于所述用户输入提取与所述文本字符有关的对象属性；以及

基于所述对象属性显示所述文本字符。

9.根据权利要求8所述的手写输入方法，还包括：

基于所述用户输入确定所述用户输入中的需要识别的手写对象，其中：

基于所述手写对象识别所述文本字符；以及

基于所述手写对象提取所述对象属性。

10.根据权利要求8或9所述的手写输入方法，其中，所述对象属性包括用户输入的文本的颜色、尺寸、灰度、位置、取向和字体中的一个或多个。

11.根据权利要求10所述的手写输入方法，其中，将用户输入与和所述用户输入具有相同尺寸的字库中相应文本字符的各种字体的字符图案进行比较，选择相似度最高的字体作为用户输入的字体。

12.根据权利要求8或9所述的手写输入方法，其中针对不同的文本字符提取不同的对象属性。