CN108121987B - 一种信息处理方法和电子设备 - Google Patents

Abstract

本公开提供了一种信息处理方法和电子设备，其中所述方法包括：获得图像信息；识别所述图像信息，并且如果所述图像信息满足预定识别条件，获得对应所述图像信息的字符信息；关联的存储所述图像信息和所述字符信息。本公开具有更好的用户体验。

Description

一种信息处理方法和电子设备

技术领域

本申请的实施例涉及手写设备领域，特别涉及一种信息处理方法和电子设备。

背景技术

当前的手写软件，一般是对手写输入的信息进行识别，从而生成对应的文字文本，而用户无法查询到输入上述文本信息的原笔迹。例如，对于记事本来讲，现有的记事本只可以实现对应输入文字的识别，但是不能查看书写的源文件，而如果能够查看到原笔迹可以帮助用户回忆书写信息时的心情或者其他的相关记录，用户体验会更好。

发明内容

本申请实施例提供了一种用户体验更好的手写信息的处理方法和电子设备。

本申请实施例提供了一种信息处理方法，包括：

获得图像信息；

识别所述图像信息，并且如果所述图像信息满足预定识别条件，获得对应所述图像信息的字符信息；

关联的存储所述图像信息和所述字符信息。

在一优选实施例中，所述方法还包括：

在输入模式下获取所述图像信息，并且基于输入操作过程中获取的图像信息生成第一文件，以及基于所述图像信息识别的字符信息生成第二文件；

其中，所述第一文件的中图像信息对应的内容多于所述第二文件的字符信息对应的内容；

其中，所述第一文件由所述输入操作过程中获取的多个图像信息构成，或者由所述输入操作完成时获取的单个图像信息构成，并且该单个图像信息包括多个子图像信息。

在一优选实施例中，所述基于所述图像信息识别的字符信息生成第二文件包括：

按照预设格式对识别出的所述字符信息排版，生成所述第二文件；

并且，在关联的存储所述图像信息和所述字符信息之前还包括：按照所述第二文件中的字符信息的排版方式对所述第一文件中的图像信息进行预处理，使得所述第二文件中的字符信息与所述第一文件中对应的图像信息的排版相同；

其中，所述预处理包括图像分割、图像组合或者图像尺寸调节中的至少一个。

在一优选实施例中，所述方法还包括：

在所述第二文件被查看的状态下，获取一检索信息，所述检索信息为所述第二文件中的部分字符信息；

基于所述检索信息，触发打开所述第一文件并在所述第一文件中标识显示与所述检索信息对应的内容。

在一优选实施例中，所述基于所述检索信息，触发打开所述第一文件并在所述第一文件中标识显示与所述检索信息对应的内容包括：

检测所述第二文件中的字符信息的排版方式与第一文件中对应的图像信息的排版方式是否相同；

在两者不同时，按照所述第二文件中的字符信息的排版方式将第一文件中对应的图像信息进行预处理，使得所述第二文件中的字符信息与所述第一文件中对应的图像信息的排版相同；

基于所述检索信息，触发打开排版后的第一文件，并在其中标识显示与所述检索信息对应的内容；

其中，所述预处理包括图像分割、图像组合或者图像尺寸调节中的至少一个。

在一优选实施例中，所述方法还包括:

获得字符信息集合；

依据匹配模型，获得与所述字符信息集合中各第一字符信息匹配的第一图像信息；

基于获得的第一图像信息，输出匹配所述字符信息集合的图像信息集合。

在一优选实施例中，还包括建立所述匹配模型，其包括：

将关联的所述字符信息和图像信息作为第一数据样本，利用预设算法训练学习所述第一数据样本，以建立所述匹配模型；

或者，

将关联存储的所述图像信息和字符信息，以及所述字符信息对应的字体信息作为第二数据样本，并利用预设算法训练学习所述第二数据样本，以建立所述匹配模型。

在一优选实施例中，所述获得图像信息包括：

识别在输入界面上的输入轨迹；

基于该笔记动作生成所述图像信息；或者

在判断为输入操作完成时，捕获输入界面上的图像信息。

在一优选实施例中，关联的存储所述图像信息和所述字符信息包括：

关联所述第一文件和第二文件的存储地址，或者

在接收到对所述第一文件和第二文件中的任一的第一操作指令时，同时对所述第一信息和第二信息执行与所述第一操作指令对应的操作，其中所述第一操作指令包括打开指令或关闭指令；或者

所述第一文件中包括所述第二文件的链接，以及所述第二文件中包括所述第一文件的链接。

另外，本申请实施例还提供了一种电子设备，其包括：

存储器；

处理器，其配置为识别获得的图像信息，并且如果所述图像信息满足预定识别条件，则获得对应所述图像信息的字符信息，并通过存储器关联的存储所述图像信息和所述字符信息。

在一优选实施例中，所述处理器进一步配置为在输入模式下获取所述图像信息，并且基于输入操作过程中获取的图像信息生成第一文件，以及基于所述图像信息识别的字符信息生成第二文件；

其中，所述第一文件的中图像信息对应的内容多于所述第二文件的字符信息对应的内容；

其中，所述第一文件由所述输入操作过程中获取的多个图像信息构成，或者由所述输入操作完成时获取的单个图像信息构成，该单个图像信息包括多个子图像信息。

在一优选实施例中，所述处理器进一步配置为按照预设格式对识别出的所述字符信息排版，生成所述第二文件；

并且，在关联的存储所述图像信息和所述字符信息之前还包括：按照所述第二文件中的字符信息的排版方式对所述第一文件中的图像信息进行预处理，使得所述第二文件中的字符信息与所述第一文件中对应的图像信息的排版相同；

其中，所述预处理包括图像分割、图像组合或者图像尺寸调节中的至少一种。

在一优选实施例中，所述处理器进一步配置为在所述第二文件被查看的状态下，获取一检索信息，所述检索信息为所述第二文件中的部分字符信息；基于所述检索信息，触发打开所述第一文件并在所述第一文件中标识显示与所述检索信息对应的内容。

在一优选实施例中，所述处理器进一步配置为检测所述第二文件中的字符信息的排版方式与第一文件中对应的图像信息的排版方式是否相同；

在两者不同时，按照所述第二文件中的字符信息的排版方式将第一文件中对应的图像信息进行预处理，使得所述第二文件中的字符信息与所述第一文件中对应的图像信息的排版相同；

基于所述检索信息，触发打开排版后的第一文件，并在其中标识显示与所述检索信息对应的内容；

其中，所述预处理包括图像分割、图像组合或者图像尺寸调节中的至少一种。

在一优选实施例中，所述处理器进一步配置为获得字符信息集合，并依据匹配模型，获得与所述字符信息集合中各第一字符信息匹配的第一图像信息；并基于获得的第一图像信息，输出匹配所述字符信息集合的图像信息集合。

在一优选实施例中，其中，所述处理器还配置为将关联的所述字符信息和图像信息作为第一数据样本，利用预设算法训练学习所述第一数据样本，以建立所述匹配模型；或者，

将关联存储的所述图像信息和字符信息，以及所述字符信息对应的字体信息作为第二数据样本，并利用预设算法训练学习所述第二数据样本，以建立所述匹配模型。

在一优选实施例中，所述处理器进一步配置为识别在输入界面上的输入轨迹；基于该笔记动作生成所述图像信息；或者

在判断为输入操作完成时，捕获输入界面上的图像信息。

在一优选实施例中，所述处理器关联的存储所述图像信息和所述字符信息包括：关联所述第一文件和第二文件的存储地址，或者在接收到对所述第一文件和第二文件中的任一的第一操作指令时，同时对所述第一信息和第二信息执行与所述第一操作指令对应的操作，其中所述第一操作指令包括打开指令或关闭指令；或者所述第一文件中包括所述第二文件的链接，以及所述第二文件中包括所述第一文件的链接。

基于上述公开，可以获知：

本申请可以同时生成手写文本的识别文件以及真实笔迹对应的图像文件，并可以将两者关联的存储，使得用户可以同时查看该两个文件，用户体验更好。

附图说明

图1为本申请实施例中的一种信息处理方法的原理流程图；

图2为本申请实施例中对第二文件进行检索的原理流程图；

图3为本申请另一实施例中的信息处理方法的原理流程图；

图4为本申请实施例中的一种电子设备的原理流程图。

具体实施方式

下面，结合附图对本申请的具体实施例进行详细的描述，但不作为本申请的限定。

应理解的是，可以对此处公开的实施例做出各种修改。因此，上述说明书不应该视为限制，而仅是作为实施例的范例。本领域的技术人员将想到在本公开的范围和精神内的其他修改。

包含在说明书中并构成说明书的一部分的附图示出了本公开的实施例，并且与上面给出的对本公开的大致描述以及下面给出的对实施例的详细描述一起用于解释本公开的原理。

通过下面参照附图对给定为非限制性实例的实施例的优选形式的描述，本申请的这些和其它特性将会变得显而易见。

还应当理解，尽管已经参照一些具体实例对本申请进行了描述，但本领域技术人员能够确定地实现本申请的很多其它等效形式，它们具有如权利要求所述的特征并因此都位于借此所限定的保护范围内。

当结合附图时，鉴于以下详细说明，本公开的上述和其他方面、特征和优势将变得更为显而易见。

此后参照附图描述本公开的具体实施例；然而，应当理解，所公开的实施例仅仅是本公开的实例，其可采用多种方式实施。熟知和/或重复的功能和结构并未详细描述以避免不必要或多余的细节使得本公开模糊不清。因此，本文所公开的具体的结构性和功能性细节并非意在限定，而是仅仅作为权利要求的基础和代表性基础用于教导本领域技术人员以实质上任意合适的详细结构多样地使用本公开。

本说明书可使用词组“在一种实施例中”、“在另一个实施例中”、“在又一实施例中”或“在其他实施例中”，其均可指代根据本公开的相同或不同实施例中的一个或多个。

下面，结合附图详细的说明本申请实施例，

如图1所示，为本申请实施例中的一种信息处理方法的原理流程图，其中，本申请实施例中的方法可以包括：

获得图像信息；

识别所述图像信息，并且如果所述图像信息满足预定识别条件，获得对应所述图像信息的字符信息；

关联的存储所述图像信息和所述字符信息。

本实施例中，上述方法可以应用在电子设备中，该电子设备可以为支持手写操作的电子设备，如手写板、手机、PAD或者计算机设备等，或者也可以是具有图像识别功能、文本识别功能的电子设备。

本实施例可以获取图像信息，该图像信息中包括手写输入的输入轨迹，通过该图像信息可以识别出其中的文字、数字、标点、字母等字符信息。本实施例可以实现将识别出的字符与对应的包括输入轨迹的图像关联，从而一方面能够整理所手写输入的信息中的文本文档，方便用户清晰的查看，另一方面能够保留包括对应笔记的图像，从而可以帮助用户保留与该笔记相关的标注、修订或者图形甚至是手写输入时的涂鸦，另外还两者还能够相互关联的查看，具有较好的用户体验。

其中所述获取图像信息的方式可以包括：通过摄像模块拍摄图像、通过通信模块接收其他电子设备或者用户传输的图像、从存储的图像中选择图像、或者在输入模式下，获取手写操作所对应的输入轨迹的图像，该输入轨迹可以为手写操作的笔迹。上述手写操作可以是通过触控笔进行书写操作的输入操作，或者也可以用户通过触控操作执行的手写操作。另外，上述图像信息中可以包括能够被识别出的文本信息或者也可以包括其他不能被识别的图形、表格或者标记等内容。另外，上述获取手写操作所对应的输入轨迹的图像可以包括：识别在输入界面上的输入轨迹；基于该笔记动作生成所述图像信息；或者在判断为输入操作完成时，捕获输入界面上的图像信息。

下面举例说明本申请的实施例，上述获取的图像信息可以为会议纪要，如用户在参加会议时在电子设备上书写的会议记录，或者也可以是在笔记本上记录的手写文本，在获取图像信息时，可以通过电子设备直接捕获在其上所手写输入的会议记录的图像，或者也可以通过摄像设备拍摄笔记本上的记录内容的图像。或者也可以是从其他的电子设备或者用户接收的关于会议记录的图像信息。上述仅为本申请的一个实施例，其中获取的图像信息也可以是关于课堂笔记的图像，也可以是关于用户的日记信息的图像，或者也可以是其他包括文本信息的图像，即用户在日常生活或者工作中所能获取的包括文本信息的图像都可以作为本申请的实施例，在此不进行一一说明。

在获取上述图像信息后，可以对获取的图像信息进行文字识别(或者文本识别)，例如可以通过电子设备内配置的识别模块进行上述字符信息的识别，在上述图像信息中包括能够被识别模块识别的字符信息时，即可以对图像信息中的字符信息进行识别，并获取识别出的字符信息。也即，所述图像信息满足预定识别条件包括：所述图像信息中至少包括能够被识别的字符信息。

在识别出字符信息后，可以将识别出的字符信息和对应的图像信息关联的存储。这里需要说明的是，获取的图像信息可以为单个字符的图像，即没书写一个字符就可以获取该字符的图像，也可以为包括多个字符的图像，即可以在书写多个字符时，同时获取包括该多个字符的图像。在将字符信息和对应的图像信息进行关联时，可以将单个字符的图像和该单个字符进行一一关联，也可以将所有单个字符的图像与所有的字符进行整体关联，或者也可以将包括多个字符的图像与该多个字符进行关联。

这里关联的存储可以包括：将对应的字符信息和图像信息存储到一个文件夹下，或者存储到一个文档下分别显示，或者存储字符信息的第一地址和存储图像信息的第二地址可以相互链接等等，只要能够实现通过字符信息可以对应的查找或者显示出对应的图像信息，即可以作为本申请的实施例。

通过上述配置，即可以实现获取的图像信息和对应字符信息的关联，从而可以在用户查看其中一个信息时，可以方便的关联的查看对应的关联信息，同时由于图像信息中可以包括所对应的字符信息之外的一些图形、标记、表格等信息，可以帮助用户补充记忆相关的内容，用户体验更好。上述实施例不仅可以应用在笔记或者其他记录的场景下，用户在对某一图片上的内容或者文字感兴趣时，也可以通过上述方法将获取的图片中的字符信息识别出来，并将识别出的字符与图像进行关联的存储，不仅可以保留对应的文本信息，还可以保留图像信息，用户体验更好。

另外，本申请的实施例还可以应用在手写输入的过程中，即获取用户输入的输入轨迹的图像，并对应的识别相应的字符信息，还可以将两种信息分别的添加到对应的文件中，以形成相互关联的第一文件和第二文件。

例如，本实施例还可以包括：在输入模式下获取所述图像信息，并且基于输入操作过程中获取的图像信息生成第一文件，以及基于所述图像信息识别的字符信息生成第二文件；其中，所述第一文件的中图像信息对应的内容多于所述第二文件的字符信息对应的内容；其中，所述第一文件由所述输入操作过程中获取的多个图像信息构成，或者由所述输入操作完成时获取的单个图像信息构成，并且该单个图像信息包括多个子图像信息。

如上所述，本申请实施例中的图像信息可以为在电子设备的输入模式下所获取的图像，如在手写输入模式下所获取的图像信息。其中，还可以包括输入模式的检测的步骤，在检测到当前为输入模式时，才执行获取关于输入操作的图像，以及对图像的识别的操作。其中，在检测到手写输入指令时，确定为执行该输入模式，其中，在检测到手写操作程序被启动、文本输入程序被启动或者在手写操作界面上有触控信息输入时，判断为检测到所述输入指令。

同时，在执行上述输入模式，并获取关于输入轨迹的图像信息后还可以实时的识别出对应于该图像信息的字符信息，或者在获取整体的图像信息后对应的识别字符信息，并在获取图像信息后可以利用获取的图像信息构成第一文件，同时在识别出对应的字符信息后可以利用识别的字符信息构成第二文件。

也即，第一文件中可以包括上述手写操作的输入轨迹的图像信息，第二文件中可以包括与图像信息对应的字符信息。这里，所获取的图像可以为手写输入的单个字符的输入轨迹图像，也可以是输入的一段话、一个词组或者整片文档的输入轨迹的整体图像，即第一文件可以由输入操作过程中获取的多个图像信息构成，或者也可以由输入操作完成时获取的单个图像信息构成，并且该单个图像信息中可以包括多个子图像信息，即其中可以是至少由输入操作过程中所输入的多个字符信息构成的图像。

由于在输入操作过程中所输入的图像中不仅可以包括文字、数字或者标点这些能够被识别的字符信息，其还可以包括图形、表格、格式标记、批注等不能被识别的信息，因此，图像信息中包括的信息内容要多于能够被识别出的字符信息，即在形成第一文件和第二文件后，第一文件中的图像信息所对应的内容也对应的多余第二文件中所识别出的字符信息的内容。

另外，关联的存储图像信息和字符信息也可以包括关联的存储第一文件和第二文件，或者关联的存储第一文件中的图像信息和第二文件中的字符信息，或者可以包括在接收到对第一文件和第二文件中的任一的第一操作指令时，同时对所述第一文件和第二文件执行与第一操作指令对应的操作，其中第一操作指令包括打开指令或关闭指令；或者可以包括所述第一信息中包括有所述第二信息的链接，以及所述第二信息中包括有所述第一信息的链接。

其中，第一文件和第二文件可以为文档文件，如txt格式、word格式或者其他可编辑格式，其中图像信息可以存储在第一文件中。另外，第一文件也可以仅为图片格式。

另外，本实施例中的关联的存储图像信息和字符信息还可以包括关联的存储第一文件和第二文件，或者对应的关联存储所述第一文件中的图像信息和第二文件中的字符信息。即，一方面可以实现两个文件的关联存储，如存储到同一文件夹下、同一存储目录下、或者两者可以同时关联的打开、关闭或者相互存储有另一文件的链接等等。或者，另一方面也可以实现第一文件中的图像信息和第二文件中的字符信息的对应关联，例如，在第一文件中可以对应的显示其中的图像信息对应的第二文件中字符信息，或者也可以在第二文件中对应的显示与其中的字符信息对应的第一文件中的图像信息等等。

基于上述配置可以进一步的实现将识别出的字符信息所形成的文件和包括输入轨迹的图像的第二文件关联起来，从而可以方便的实现对于两种文件的编辑、查看、检索等操作。

例如，在本实施例中可以执行对于第一文件和第二文件的对应检索的操作。如图2所示，为本申请实施例中对第二文件进行检索的原理流程图。其中，所述方法可以包括：

在第二文件被查看的状态下，获取一检索信息，所述检索信息为所述第二文件中的部分字符信息；

基于所述检索信息，触发打开所述第一文件并在所述第一文件中标识显示与所述检索信息对应的内容。

如上所述，在用户打开并查看第二文件时，可以针对第二文件中的字符信息进行检索操作，即可以获取一检索信息，该检索信息为针对第二文件中的部分字符信息的检索指令，如针对一词组、汉字、数字、一段话等等的检索操作。在获取该检索信息后，可以执行对于第二文件中相应的字符信息的检索操作。此时，可以触发打开第一文件，由于第一文件中的图像信息与该二文件中的字符信息存在关联的关系，从而可以在第一文件和第二文件中标识出与检索信息中的字符信息对应关联的图像信息的内容，从而方便用户比对和查看。

进一步的，在形成第一文件和第二文件时，第一文件中的所包括的图像信息的排版以及第二文件中的字符信息的排版方式可能不同，如用户在执行输入操作或者手写记录时，其获取的图像的排版可以依据其笔记本的大小、或者手写界面的大小或者书写字体的大小来确定，而第二文件中的识别出的字符信息的排版是由当前的第一文件的预设格式或者识别模型的预设格式来设定，其识别格式相对更加规范整洁。因此，第一文件中的图像信息和第二文件中的字符信息的排版可能相同也可能不同。

为了方便用户的对比查看，本申请实施例可以控制使得第二文件的排版与第一文件的排版相对应。该过程可以在对第一文件和第二文件进行关联存储之前，也可以在接受到检索信息之后。

具体的，本实施例中基于所述图像信息识别的字符信息生成第二文件包括：

按照预设格式对识别出的所述字符信息排版，生成所述第二文件；这里预设格式可以为第二文件的预设格式，也可以为识别模型设置的预设格式。

并且，在关联的存储所述图像信息和所述字符信息之前还包括：按照所述第二文件中的字符信息的排版方式对所述第一文件中的图像信息进行预处理，使得所述第二文件中的字符信息与所述第一文件中对应的图像信息的排版相同；其中，所述预处理包括图像分割、图像组合或者图像尺寸调节中的至少一个。

也即，由于第二文件中的字符信息是按照预设格式进行排版的，因此每行的字数或者行间距以及段落格式都是按照该预设格式进行设定的。在对第一文件进行预处理时，可以针对第二文件中每行的第一字符信息查询第一文件中与其对应的第一图像信息，将查询到的第一图像信息排版在该行中，以此类推，完成第二文件中每行图像信息与第一文件中字符信息的排版对应过程。

同时由于查询到的第一图像信息中可能对应于多个字符信息，即除了包括第一字符信息之外还包括第二字符信息，此时可以按照识别出的第一字符信息对该第一图像进行分割，即将分割出的对应于第一字符信息的子图像排版到对应行中，剩余的包括第二字符信息的子图像可以按照对应的第二字符信息的排版格式进行排版设置。或者，在另一实施例中，在对应的查询到与检索信息相关联的图像信息后，将图像信息布置在第一文件时，由于页面的限制，可能每一行所能布置的图像信息会多于或者少于对应的每行所能布置的识别信息，此时可以对应的调节图像信息的尺寸，使得每行的图像信息和识别信息完全对应，从而方便用户查询和查看。另外，在其他的实施例中，也可以通过图像组合的方式来执行上述预处理的排版过程，或者也可以是其他的图像处理方式，在此不再一一说明。通过上述过程，即可以实现第二文件的字符信息与对应的图像信息的相同排版。

另外，如上所述，对第二文件的排版也可以在基于检索信息执行检索过程之前执行。例如，所述基于所述检索信息，触发打开所述第一文件并在所述第一文件中标识显示与所述检索信息对应的内容可以包括：

检测所述第二文件中的字符信息的排版方式与第一文件中对应的图像信息的排版方式是否相同；如相同，则直接根据检索信息在第一文件中标识出与其对应的图像信息；而在两者不同时，则按照所述第二文件中的字符信息的排版方式将第一文件中对应的图像信息进行预处理，使得所述第二文件中的字符信息与所述第一文件中对应的图像信息的排版相同。其中具体的图像预处理过程与上述实施例的说明相同，在此不再赘述。在完成第一文件的排版之后，则可以基于所述检索信息，触发打开排版后的第一文件，并在其中标识显示与所述检索信息对应的内容；其中，所述预处理包括图像分割、图像组合或者图像尺寸调节中的至少一个。

另外，上述基于检索信息在第一文件和第二文件中标识显示对应的内容可以包括：以突出显示的方式显示对应的内容(如标黄、高亮、加粗或者改变字体格式的方式中的至少一种)，或者闪烁显示对应内容等等。

基于上述配置，即可以实现第一文件中的图像信息和对应的第二文件中的字符信息的排版相同的布置，可以方便用户查找相关的内容，同时也可以方便用户比对相关的信息，提高了用户体验。

另外，在本实施例中，还可以基于输入的图像信息和识别的字符信息之间的关联关系，在执行文档编辑操作，输入相关的文字或者其他字符时，能够同时获得与输入的文档相对应的输入轨迹的图像信息。

例如，如图3所示，为本申请另一实施例中的信息处理方法的原理流程图，其中可以包括：

获得字符信息集合；

依据匹配模型，获得与所述字符信息集合中各第一字符信息匹配的第一图像信息；

基于获得的第一图像信息，输出匹配所述字符信息集合的图像信息集合。

其中，获得字符信息集合可以包括：在编辑模式下，获取输入的字符信息集合，或者获取传输的或者存储的字符信息集合，该字符信息集合可以包括至少一个字符信息。上述字符信息为在word文档或者其他可编辑文档中通过键盘等方式输入的文本信息。

在获得字符信息集合之后，可以根据匹配模型，对应的获取与字符信息集合中各第一字符信息对应的第一图像信息，并根据获得的第一图像信息输出匹配的图像信息集合。

其中，上述匹配模型是基于关联存储的图像信息和字符信息训练而成的，具体的，本实施例中建立匹配模型可以包括：

将关联的所述字符信息和图像信息作为第一数据样本，利用预设算法训练学习所述第一数据样本，以建立所述匹配模型。

也就是说，本实施例中，可以通过用户获取的图像信息以及识别出的字符信息对匹配模型进行训练，如利用神经网络算法对上述数据进行训练，由于图像信息中包括与用户的书写习惯相符的输入轨迹(如笔迹)，从而在经过大量的数据的学习和训练之后能够实现匹配模型利用输入的字符信息学习出与用户的笔迹相符的图像信息。也即，可以实现在进行文本编辑时，还能够对应的生成与该文本对应的用户的笔迹文本，即图像信息。从而可以实现，基于获得的第一图像信息，输出匹配所述字符信息集合的图像信息集合。

另外，在一优选实施例中，匹配模型还可以利用与图像信息对应的字体，并结合上述图像信息和字符信息进行训练，从而能够形成对应字体的图像信息。即，本实施例还可以将关联存储的所述图像信息和字符信息，以及所述字符信息对应的字体信息作为第二数据样本，并利用预设算法训练学习所述第二数据样本，以建立所述匹配模型。

也就是说，在执行图像信息和字符信息的关联存储时，还可以进一步获取图像信息对应的字体信息，从而在对匹配模型进行训练时，还可以进一步结合该字体信息对匹配模型进行训练，继而可以实现，在执行编辑操作时，可以基于输入的字符信息的字体信息对应的利用匹配模型生成与该字体信息和字符信息对应的图像信息，继而形成于该字体信息对应的图像信息集合。

通过上述配置，即可以实现在编辑文本时，同时能够生成与该文本对应的笔迹图像信息，并且，还可以优选的生成预设字体的图像信息，增加用户体验，同时也不需要用户通过手写来获取上述笔迹图像，大大减少了用户的工作量，也提高了效率。

综上所述，本申请的实施例可以同时生成手写文本的识别文件以及真实笔迹对应的图像文件，使得用户可以同时查看该两个文件，用户体验更好；本申请的实施例还可以实现对于图像信息和字符信息的对应排版，从而方便用户查看对应的内容；本申请的施例还可以实现基于在编辑操作时输入的字符信息，对应的生成相关的图像信息，从而无需用户手写操作，即可以获取对应的笔迹文本，减小了用户的工作量，且提高了效率，用户体验更好。

另外，本申请实施例还提供了一种电子设备，该电子设备可以应用如上述实施例所述的电子设备，该电子设备可以为支持手写操作的电子设备，如手写板、手机、PAD或者计算机设备等，或者也可以是具有图像识别功能、文本识别功能的电子设备。

如图4所示，为本申请实施例中的一种电子设备的原理流程图，其中该电子设备可以包括：存储器1和处理器2。

其中，处理器2可以获取图像信息，并识别该图像信息，并且如果所述图像信息满足预定识别条件，则获得对应所述图像信息的字符信息，并通过存储器1关联的存储所述图像信息和所述字符信息。

处理器2可以获取图像信息，该图像信息中包括手写输入的输入轨迹，通过该图像信息可以识别出其中的文字、数字、标点、字母等字符信息。并且处理器2还可以实现将识别出的字符与对应的包括输入轨迹的图像关联，从而一方面能够整理所手写输入的信息中的文本文档，方便用户清晰的查看，另一方面能够保留包括对应笔记的图像，从而可以帮助用户保留与该笔记相关的标注、修订或者图形甚至是手写输入时的涂鸦，另外还两者还能够相互关联的查看，具有较好的用户体验。

其中处理器2获取图像信息的方式可以包括：通过摄像模块3拍摄图像、通过通信模块4接收其他电子设备或者用户传输的图像、从存储器1存储的图像中选择图像、或者在输入模式下，获取在手写输入界面上的手写操作所对应的输入轨迹的图像，该输入轨迹可以为手写操作的笔迹。上述手写操作可以是通过触控笔进行书写操作的输入操作，或者也可以用户通过触控操作执行的手写操作。另外，上述图像信息中可以包括能够被识别出的文本信息或者也可以包括其他不能被识别的图形、表格或者标记等内容。另外，上述获取手写操作所对应的输入轨迹的图像可以包括：识别在手写输入界面上的手写操作的输入轨迹，如可以利用图像渲染的方式获取该轨迹，并基于该笔记动作生成所述图像信息；或者在判断为输入操作完成时，捕获输入界面上的图像信息。上述输入操作完成可以包括预设时间内未识别或者检测到手写输入信息，或者接受到点击操作完成的输入指令等等。其中，通信模块可以包括通过有线传输方式进行数据传输的有线通信单元，也可以包括通过无线通信方式执行数据传输的无线通信单元，如蓝牙模块、WiFi模块等。同时摄像模块可以包括摄像头或者照相机等模组。

下面举例说明本申请实施例，上述获取的图像信息可以为会议纪要，如用户在参加会议时在电子设备上书写的会议记录，或者也可以是在笔记本上记录的手写文本，在获取图像信息时，可以通过电子设备直接捕获在其上所手写输入的会议记录的图像，或者也可以通过摄像设备拍摄笔记本上的记录内容的图像。或者也可以是从其他的电子设备或者用户接收的关于会议记录的图像信息。上述仅为本申请的一个实施例，其中在其他实施例中图像信息也可以是关于课堂笔记的图像，也可以是关于用户的日记信息的图像，或者也可以是其他包括文本信息的图像，即用户在日常生活或者工作中所能获取的包括文本信息的图像都可以作为本申请的实施例，在此不进行一一说明。

处理器2在获取上述图像信息后，可以对获取的图像信息进行文字识别 (或者文本识别)，例如可以通过电子设备内配置的识别模块5进行上述字符信息的识别，在上述图像信息中包括能够被识别模块识别的字符信息时，即可以对图像信息中的字符信息进行识别，并获取识别出的字符信息。也即，所述图像信息满足预定识别条件包括：所述图像信息中至少包括能够被识别的字符信息。

在识别出字符信息后，处理器2可以将识别出的字符信息和对应的图像信息关联的存储。这里需要说明的是，获取的图像信息可以为单个字符的图像，即没书写一个字符就可以获取该字符的图像，也可以为包括多个字符的图像，即可以在书写多个字符时，同时获取包括该多个字符的图像。在将字符信息和对应的图像信息进行关联时，可以将单个字符的图像和该单个字符进行一一关联，也可以将所有单个字符的图像与所有的字符进行整体关联，或者也可以将包括多个字符的图像与该多个字符进行关联。

这里关联的存储可以包括：将对应的字符信息和图像信息存储到一个文件夹下，或者存储到一个文档下分别显示，或者存储字符信息的第一地址和存储图像信息的第二地址可以相互链接等等，只要能够实现通过字符信息可以对应的查找或者显示出对应的图像信息，即可以作为本申请的实施例。

通过上述配置，即可以实现获取的图像信息和对应字符信息的关联，从而可以在用户查看其中一个信息时，可以方便的关联的查看对应的关联信息，同时由于图像信息中可以包括所对应的字符信息之外的一些图形、标记、表格等信息，可以帮助用户补充记忆相关的内容，用户体验更好。上述实施例不仅可以应用在笔记或者其他记录的场景下，用户在对某一图片上的内容或者文字感兴趣时，也可以通过上述方法将获取的图片中的字符信息识别出来，并将识别出的字符与图像进行关联的存储，不仅可以保留对应的文本信息，还可以保留图像信息，用户体验更好。

另外，本实施例还可以应用在手写输入的过程中，即获取用户输入的输入轨迹的图像，并对应的识别相应的字符信息，还可以将两种信息分别的添加到对应的文件中，以形成相互关联的第一文件和第二文件。

例如，本实施例还可以包括：处理器2在输入模式下获取所述图像信息，并且基于输入操作过程中获取的图像信息生成第一文件，以及基于所述图像信息识别的字符信息生成第二文件；其中，所述第一文件的中图像信息对应的内容多于所述第二文件的字符信息对应的内容；其中，所述第一文件由所述输入操作过程中获取的多个图像信息构成，或者由所述输入操作完成时获取的单个图像信息构成，并且该单个图像信息包括多个子图像信息。

如上所述，本实施例中的图像信息可以为在电子设备的输入模式下所获取的图像，如在手写输入模式下所获取的图像信息。其中，还可以包括输入模式的检测的步骤，在检测到当前为输入模式时，才执行获取关于输入操作的图像，以及对图像的识别的操作。其中，在检测到手写输入指令时，确定为执行该输入模式，其中，在检测到手写操作程序被启动、文本输入程序被启动或者在手写操作界面上有触控信息输入时，判断为检测到所述输入指令。

同时，在执行上述输入模式，并获取关于输入轨迹的图像信息后，处理器2还可以实时的通过识别模块5识别出对应于该图像信息的字符信息，或者在获取整体的图像信息后对应的通过识别模块5识别字符信息，并在获取图像信息后可以利用获取的图像信息构成第一文件，同时在识别出对应的字符信息后可以利用识别的字符信息构成第二文件。

也即，第一文件中可以包括上述手写操作的输入轨迹的图像信息，第二文件中可以包括与图像信息对应的字符信息。这里，所获取的图像可以为手写输入的单个字符的输入轨迹图像，也可以是输入的一段话、一个词组或者整片文档的输入轨迹的整体图像，即第一文件可以由输入操作过程中获取的多个图像信息构成，或者也可以由输入操作完成时获取的单个图像信息构成，并且该单个图像信息中可以包括多个子图像信息，即其中可以是至少由输入操作过程中所输入的多个字符信息构成的图像。

由于在输入操作过程中所输入的图像中不仅可以包括文字、数字或者标点这些能够被识别的字符信息，其还可以包括图形、表格、格式标记、批注等不能被识别的信息，因此，图像信息中包括的信息内容要多于能够被识别出的字符信息，即在形成第一文件和第二文件后，第一文件中的图像信息所对应的内容也对应的多余第二文件中所识别出的字符信息的内容。

另外，关联的存储图像信息和字符信息也可以包括通过存储器1关联的存储第一文件和第二文件，或者关联的存储第一文件中的图像信息和第二文件中的字符信息，或者可以包括在接收到对第一文件和第二文件中的任一的第一操作指令时，同时对所述第一文件和第二文件执行与第一操作指令对应的操作，其中第一操作指令包括打开指令或关闭指令；或者可以包括所述第一信息中包括有所述第二信息的链接，以及所述第二信息中包括有所述第一信息的链接。

其中，第一文件和第二文件可以为文档文件，如txt格式、word格式或者其他可编辑格式，其中图像信息可以存储在第一文件中。另外，第一文件也可以仅为图片格式。

另外，本实施例中的关联的存储图像信息和字符信息还可以包括关联的存储第一文件和第二文件，或者对应的关联存储所述第一文件中的图像信息和第二文件中的字符信息。即，一方面可以实现两个文件的关联存储，如存储到同一文件夹下、同一存储目录下、或者两者可以同时关联的打开、关闭或者相互存储有另一文件的链接等等。或者，另一方面也可以实现第一文件中的图像信息和第二文件中的字符信息的对应关联，例如，在第一文件中可以对应的显示其中的图像信息对应的第二文件中字符信息，或者也可以在第二文件中对应的显示与其中的字符信息对应的第一文件中的图像信息等等。

基于上述配置可以进一步的实现将识别出的字符信息所形成的文件和包括输入轨迹的图像的第二文件关联起来，从而可以方便的实现对于两种文件的编辑、查看、检索等操作。

例如，在本实施例中可以执行对于第一文件和第二文件的对应检索的操作。本实施例中，在第二文件被查看的状态下，处理器2可以获取一检索信息，可以基于所述检索信息，触发打开所述第一文件并在所述第一文件中标识显示与所述检索信息对应的内容，其中所述检索信息为所述第二文件中的部分字符信息。

如上所述，在用户打开并查看第二文件时，可以针对第二文件中的字符信息进行检索操作，即可以获取一检索信息，该检索信息为针对第二文件中的部分字符信息的检索指令，如针对一词组、汉字、数字、一段话等等的检索操作。在获取该检索信息后，可以执行对于第二文件中相应的字符信息的检索操作。此时，可以触发打开第一文件，由于第一文件中的图像信息与该二文件中的字符信息存在关联的关系，从而可以在第一文件和第二文件中标识出与检索信息中的字符信息对应关联的图像信息的内容，从而方便用户比对和查看。

进一步的，在形成第一文件和第二文件时，第一文件中的所包括的图像信息的排版以及第二文件中的字符信息的排版方式可能不同，如用户在执行输入操作或者手写记录时，其获取的图像的排版可以依据其笔记本的大小、或者手写界面的大小或者书写字体的大小来确定，而第二文件中的识别出的字符信息的排版是由当前的第一文件的预设格式或者识别模型的预设格式来设定，其识别格式相对更加规范整洁。因此，第一文件中的图像信息和第二文件中的字符信息的排版可能相同也可能不同。

为了方便用户的对比查看，本实施例可以控制使得第二文件的排版与第一文件的排版相对应。该过程可以在对第一文件和第二文件进行关联存储之前，也可以在接受到检索信息之后。

具体的，本实施例中处理器2基于所述图像信息识别的字符信息生成第二文件包括：按照预设格式对识别出的所述字符信息排版，生成所述第二文件；这里预设格式可以为第二文件的预设格式，也可以为识别模型设置的预设格式。并且，在关联的存储所述图像信息和所述字符信息之前还包括：按照所述第二文件中的字符信息的排版方式对所述第一文件中的图像信息进行预处理，使得所述第二文件中的字符信息与所述第一文件中对应的图像信息的排版相同；其中，所述预处理包括图像分割、图像组合或者图像尺寸调节中的至少一个。

也即，由于第二文件中的字符信息是按照预设格式进行排版的，因此每行的字数或者行间距以及段落格式都是按照该预设格式进行设定的。在对第一文件进行预处理时，可以针对第二文件中每行的第一字符信息查询第一文件中与其对应的第一图像信息，将查询到的第一图像信息排版在该行中，以此类推，完成第二文件中每行图像信息与第一文件中字符信息的排版对应过程。

同时由于查询到的第一图像信息中可能对应于多个字符信息，即除了包括第一字符信息之外还包括第二字符信息，此时可以按照识别出的第一字符信息对该第一图像进行分割，即将分割出的对应于第一字符信息的子图像排版到对应行中，剩余的包括第二字符信息的子图像可以按照对应的第二字符信息的排版格式进行排版设置。或者，在另一实施例中，在对应的查询到与检索信息相关联的图像信息后，将图像信息布置在第一文件时，由于页面的限制，可能每一行所能布置的图像信息会多于或者少于对应的每行所能布置的识别信息，此时可以对应的调节图像信息的尺寸，使得每行的图像信息和识别信息完全对应，从而方便用户查询和查看。另外，在其他的实施例中，也可以通过图像组合的方式来执行上述预处理的排版过程，或者也可以是其他的图像处理方式，在此不再一一说明。通过上述过程，即可以实现第二文件的字符信息与对应的图像信息的相同排版。

另外，如上所述，对第二文件的排版也可以在基于检索信息执行检索过程之前执行。例如，处理器2基于所述检索信息，触发打开所述第一文件并在所述第一文件中标识显示与所述检索信息对应的内容也可以包括：检测所述第二文件中的字符信息的排版方式与第一文件中对应的图像信息的排版方式是否相同；如相同，则直接根据检索信息在第一文件中标识出与其对应的图像信息；而在两者不同时，则按照所述第二文件中的字符信息的排版方式将第一文件中对应的图像信息进行预处理，使得所述第二文件中的字符信息与所述第一文件中对应的图像信息的排版相同。其中具体的图像预处理过程与上述实施例的说明相同，在此不再赘述。在完成第一文件的排版之后，则可以基于所述检索信息，触发打开排版后的第一文件，并在其中标识显示与所述检索信息对应的内容；其中，所述预处理包括图像分割、图像组合或者图像尺寸调节中的至少一个。

另外，上述基于检索信息在第一文件和第二文件中标识显示对应的内容可以包括：以突出显示的方式显示对应的内容(如标黄、高亮、加粗或者改变字体格式的方式中的至少一种)，或者闪烁显示对应内容等等。

基于上述配置，即可以实现第一文件中的图像信息和对应的第二文件中的字符信息的排版相同的布置，可以方便用户查找相关的内容，同时也可以方便用户比对相关的信息，提高了用户体验。

另外，在本实施例中，还可以基于输入的图像信息和识别的字符信息之间的关联关系，在执行文档编辑操作，输入相关的文字或者其他字符时，能够同时获得与输入的文档相对应的输入轨迹的图像信息。

例如，在另一实施例中，处理器2还可以获得字符信息集合，并依据匹配模型，获得与所述字符信息集合中各第一字符信息匹配的第一图像信息，以及基于获得的第一图像信息，输出匹配所述字符信息集合的图像信息集合。

其中，获得字符信息集合可以包括：在编辑模式下，获取输入的字符信息集合，或者获取传输的或者存储的字符信息集合，该字符信息集合可以包括至少一个字符信息。上述字符信息为在word文档或者其他可编辑文档中通过键盘等方式输入的文本信息。

在获得字符信息集合之后，可以根据匹配模型，对应的获取与字符信息集合中各第一字符信息对应的第一图像信息，并根据获得的第一图像信息输出匹配的图像信息集合。

其中，上述匹配模型是基于关联存储的图像信息和字符信息训练而成的，具体的，本实施例中建立匹配模型可以包括：

将关联的所述字符信息和图像信息作为第一数据样本，利用预设算法训练学习所述第一数据样本，以建立所述匹配模型。

也就是说，本实施例中，处理器2可以通过用户获取的图像信息以及识别出的字符信息对匹配模型进行训练，如利用神经网络算法对上述数据进行训练，由于图像信息中包括与用户的书写习惯相符的输入轨迹(如笔迹)，从而在经过大量的数据的学习和训练之后能够实现匹配模型利用输入的字符信息学习出与用户的笔迹相符的图像信息。也即，可以实现在进行文本编辑时，还能够对应的生成与该文本对应的用户的笔迹文本，即图像信息。从而可以实现，基于获得的第一图像信息，输出匹配所述字符信息集合的图像信息集合。

另外，在一优选实施例中，匹配模型还可以利用与图像信息对应的字体，并结合上述图像信息和字符信息进行训练，从而能够形成对应字体的图像信息。即，本实施例处理器2还可以将关联存储的所述图像信息和字符信息，以及所述字符信息对应的字体信息作为第二数据样本，并利用预设算法训练学习所述第二数据样本，以建立所述匹配模型。

也就是说，在执行图像信息和字符信息的关联存储时，处理器2还可以进一步获取图像信息对应的字体信息，从而在对匹配模型进行训练时，还可以进一步结合该字体信息对匹配模型进行训练，继而可以实现，在执行编辑操作时，可以基于输入的字符信息的字体信息对应的利用匹配模型生成与该字体信息和字符信息对应的图像信息，继而形成于该字体信息对应的图像信息集合。

通过上述配置，即可以实现在编辑文本时，同时能够生成与该文本对应的笔迹图像信息，并且，还可以优选的生成预设字体的图像信息，增加用户体验，同时也不需要用户通过手写来获取上述笔迹图像，大大减少了用户的工作量，也提高了效率。

综上所述，本申请的实施例可以同时生成手写文本的识别文件以及真实笔迹对应的图像文件，使得用户可以同时查看该两个文件，用户体验更好；本申请实施例还可以实现对于图像信息和字符信息的对应排版，从而方便用户查看对应的内容；本申请的实施例还可以实现基于在编辑操作时输入的字符信息，对应的生成相关的图像信息，从而无需用户手写操作，即可以获取对应的笔迹文本，减小了用户的工作量，且提高了效率，用户体验更好。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的数据处理方法所应用于的电子设备，可以参考前述产品实施例中的对应描述，在此不再赘述。

以上实施例仅为本申请的示例性实施例，不用于限制本申请，本申请的保护范围由权利要求书限定。本领域技术人员可以在本申请的实质和保护范围内，对本申请做出各种修改或等同替换，这种修改或等同替换也应视为落在本申请的保护范围内。

Claims (10)

1.一种信息处理方法，包括：

获得手写输入设备提供的、包括手写输入轨迹的图像信息；

识别所述图像信息，并且如果所述图像信息满足预定识别条件，获得对应所述图像信息的字符信息；

关联的存储所述图像信息和所述字符信息。

2.根据权利要求1所述的方法，其中，所述方法还包括：

在输入模式下获取所述图像信息，并且基于输入操作过程中获取的图像信息生成第一文件，以及基于所述图像信息识别的字符信息生成第二文件；

其中，所述第一文件的中图像信息对应的内容多于所述第二文件的字符信息对应的内容；

其中，所述第一文件由所述输入操作过程中获取的多个图像信息构成，或者由所述输入操作完成时获取的单个图像信息构成，并且该单个图像信息包括多个子图像信息。

3.根据权利要求2所述的方法，其中，所述基于所述图像信息识别的字符信息生成第二文件包括：

按照预设格式对识别出的所述字符信息排版，生成所述第二文件；

并且，在关联的存储所述图像信息和所述字符信息之前还包括：按照所述第二文件中的字符信息的排版方式对所述第一文件中的图像信息进行预处理，使得所述第二文件中的字符信息与所述第一文件中对应的图像信息的排版相同；

其中，所述预处理包括图像分割、图像组合或者图像尺寸调节中的至少一个。

4.根据权利要求2所述的方法，其中，所述方法还包括：

在所述第二文件被查看的状态下，获取一检索信息，所述检索信息为所述第二文件中的部分字符信息；

基于所述检索信息，触发打开所述第一文件并在所述第一文件中标识显示与所述检索信息对应的内容。

5.根据权利要求4所述的方法，其中，所述基于所述检索信息，触发打开所述第一文件并在所述第一文件中标识显示与所述检索信息对应的内容包括：

检测所述第二文件中的字符信息的排版方式与第一文件中对应的图像信息的排版方式是否相同；

在两者不同时，按照所述第二文件中的字符信息的排版方式将第一文件中对应的图像信息进行预处理，使得所述第二文件中的字符信息与所述第一文件中对应的图像信息的排版相同；

基于所述检索信息，触发打开排版后的第一文件，并在其中标识显示与所述检索信息对应的内容；

其中，所述预处理包括图像分割、图像组合或者图像尺寸调节中的至少一个。

6.根据权利要求1所述的方法，其中，所述方法还包括:

获得字符信息集合；

依据匹配模型，获得与所述字符信息集合中各第一字符信息匹配的第一图像信息；

基于获得的第一图像信息，输出匹配所述字符信息集合的图像信息集合。

7.根据权利要求6所述的方法，其中，还包括建立所述匹配模型，其包括：

将关联的所述字符信息和图像信息作为第一数据样本，利用预设算法训练学习所述第一数据样本，以建立所述匹配模型；

或者，

将关联存储的所述图像信息和字符信息，以及所述字符信息对应的字体信息作为第二数据样本，并利用预设算法训练学习所述第二数据样本，以建立所述匹配模型。

8.根据权利要求1所述的方法，其中，所述获得图像信息包括：

识别在输入界面上的输入轨迹；

基于该笔记动作生成所述图像信息；或者

在判断为输入操作完成时，捕获输入界面上的图像信息。

9.根据权利要求2所述的方法，其中，关联的存储所述图像信息和所述字符信息包括：

关联所述第一文件和第二文件的存储地址，或者

在接收到对所述第一文件和第二文件中的任一的第一操作指令时，同时对所述第一信息和第二信息执行与所述第一操作指令对应的操作，其中所述第一操作指令包括打开指令或关闭指令；或者

所述第一文件中包括所述第二文件的链接，以及所述第二文件中包括所述第一文件的链接。

10.一种电子设备，其包括：

存储器；

处理器，其配置为识别获得的手写输入设备提供的、包括手写输入轨迹的图像信息，并且如果所述图像信息满足预定识别条件，则获得对应所述图像信息的字符信息，并通过存储器关联的存储所述图像信息和所述字符信息。

Images