CN114092945B

CN114092945B - 一种基于墨水屏的手写输入方法及装置

Info

Publication number: CN114092945B
Application number: CN202210070105.9A
Authority: CN
Inventors: 潘峥韵; 朱增
Original assignee: ONYX INTERNATIONAL Inc
Current assignee: ONYX INTERNATIONAL Inc
Priority date: 2022-01-21
Filing date: 2022-01-21
Publication date: 2022-04-19
Anticipated expiration: 2042-01-21
Also published as: CN114092945A

Abstract

本申请实施例公开了一种基于墨水屏的手写输入方法及装置。本申请实施例提供的技术方案，通过识别输入法是否处于激活状态；当识别到输入法处于激活状态时，通过OCR图像识别输入法显示区域，判断当前输入法是否为手写输入法；当判断当前输入法为手写输入法时，通过优化组件获取笔迹参数和轨迹点数据，拟合生成对应的第一轨迹，并显示在显示屏上。本申请实施例提供的技术方案，能够解决墨水屏手写输入显示速度较慢问题，提升显示速度。

Description

一种基于墨水屏的手写输入方法及装置

技术领域

本申请实施例涉及墨水屏技术领域，尤其涉及一种基于墨水屏的手写输入方法及装置。

背景技术

电子墨水屏技术最早可以追溯到 1996 年，它基于美国麻省理工学院媒体实验室（MIT Media Lab）的一项研究，利用电泳技术（EPD）实现显示，这类屏幕的显示效果十分接近传统纸张，因此也被成为“电子纸”。

电子墨水与印刷使用的墨水很相似，都是用颜料所制，这也是为什么我们看到电子墨水屏和传统纸张显示效果相似的原因。电子墨水通常会制成薄膜，由大量微囊组成，这些微囊只有人类头发的直径大小。微囊中的黑白小球是带不同电荷的色素颗粒，初始状态下，色素颗粒悬浮在微囊中，当施加一定方向的电场后，相应的色素颗粒被推到顶部，微囊就会显示不同的颜色，而不同颜色的微囊组成了各种文字和图案。

随着当前搭载电子墨水屏幕的设备增多，越来越多人开始使用这些设备。而又因为电子墨水的技术特性，用户会大量地在这类型的设备上使用手写输入作为主要的文字输入模式。但同样地，由于电子墨水屏的技术特性，对比普通液晶屏幕在显示更新速度上的劣势，用户使用手写输入法进行交互会有比较明显的迟滞感，而大量的手写输入法均基于普通液晶屏幕进行开发，同时亦由于通用性的问题，针对电子墨水屏幕做特殊优化乃至制作专版软件的难度较大，成本也相对较高。而针对这一问题，电子墨水屏的系统厂商也引入了多种刷新模式，希望解决这种手写输入和画面不同步的问题，但不同的刷新模式均有各自局限的问题，只通过使用刷新模式的改变，无法同时保持用户在使用手写输入时，获得良好的显示效果以及快速的响应速度。

发明内容

本申请实施例提供一种基于墨水屏的手写输入方法及装置，能够解决墨水屏手写输入显示速度较慢问题，提升显示速度。

在第一方面，本申请实施例提供了一种基于墨水屏的手写输入方法，包括：

识别输入法是否处于激活状态；

当识别到输入法处于激活状态时，通过OCR图像识别输入法显示区域，判断当前输入法是否为手写输入法；

当判断当前输入法为手写输入法时，通过优化组件获取笔迹参数和轨迹点数据，拟合生成对应的第一轨迹，并显示在显示屏上。

进一步的，所述识别输入法是否处于激活状态，具体为：

接收到用户端输入的进入第三方输入法软件指令时，则为处于激活状态。

进一步的，所述当识别到输入法处于激活状态时，通过OCR图像识别输入法显示区域，判断当前输入法是否为手写输入法，具体为：

当接收到用户端输入的进入第三方输入法软件指令时处于激活状态；

通过OCR图像识别输入法显示区域是否存在手写输入法标识信息；

若存在手写输入法标识信息，则判断当前输入法为手写输入法。

进一步的，所述笔迹参数包括笔宽数据、笔类型数据、颜色数据和压感数据，所述通过优化组件获取笔迹参数和轨迹点数据，拟合生成对应的第一轨迹，并显示在显示屏上，具体为：

通过优化组件获取落笔到抬笔的轨迹点数据；

根据笔迹参数和轨迹点数据进行轨迹的拟合，得到第一轨迹，并传输给显示层进行显示。

进一步的，在拟合生成对应的第一轨迹，并显示在显示屏上之后，还包括：

通过第三方输入法软件根据笔迹参数和轨迹点数据，拟合生成对应的第二轨迹；

当接收到输入结束指令后，将第一轨迹和第二轨迹进行像素重合对比，根据对比结果对显示层的第一轨迹进行调整，生成与第二轨迹相同的轨迹进行显示。

在第二方面，本申请实施例提供了一种基于墨水屏的手写输入装置，包括：

激活状态识别单元，用于识别输入法是否处于激活状态；

图像识别单元，用于当识别到输入法处于激活状态时，通过OCR图像识别输入法显示区域，判断当前输入法是否为手写输入法；

显示单元，用于当判断当前输入法为手写输入法时，通过优化组件获取笔迹参数和轨迹点数据，拟合生成对应的第一轨迹，并显示在显示屏上。

进一步的，所述激活状态识别单元，还用于接收到用户端输入的进入第三方输入法软件指令时，则为处于激活状态。

进一步的，所述图像识别单元，还用于当接收到用户端输入的进入第三方输入法软件指令时处于激活状态；

进一步的，所述笔迹参数包括笔宽数据、笔类型数据、颜色数据和压感数据，所述显示单元，还用于通过优化组件获取落笔到抬笔的轨迹点数据；

进一步的，所述显示单元，还用于通过第三方输入法软件根据笔迹参数和轨迹点数据，拟合生成对应的第二轨迹；

在第三方面，本申请实施例提供了一种电子设备，包括：

存储器以及一个或多个处理器；

所述存储器，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如第一方面所述的基于墨水屏的手写输入方法。

在第四方面，本申请实施例提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如第一方面所述的基于墨水屏的手写输入方法。

本申请通过在识别输入法处于激活状态时，通过OCR图像识别输入法显示区域，判断当前输入法是否为手写输入法，当判断当前输入法为手写输入法时，通过优化组件获取笔迹参数和轨迹点数据，拟合生成对应的第一轨迹并显示在显示屏上。采用上述技术手段，在确定输入法处于激活状态时，通过OCR图像识别预设输入法区域判断当前输入法是否为手写输入法，当识别到当前输入法为手写输入法时则进行后续优化操作，相比于传统的通过第三方输入法软件确定当前输入法为手写输入法后再通知系统后台，本申请实施例通过OCR图像识别预设输入法区域能够更加快速地确定输入法的种类，识别效率更高，提高后台感知第三方输入法软件的当前输入法种类的速度。此外，通过OCR图像识别预设输入法区域确定当前输入为手写输入法时，则通过优化组件获取笔迹参数和轨迹点数据，拟合生成对应的第一轨迹并显示在显示屏上，优先显示初步的拟合轨迹，提高了显示的速度，避免等第三方输入法软件发送拟合轨迹到显示屏进行显示而导致的显示延迟。

附图说明

图1是本申请实施例一提供的一种基于墨水屏的手写输入方法的流程图；

图2是本申请实施例一中输入法输入法显示区域的示意图；

图3是本申请实施例一中的第一拟合轨迹的示意图；

图4是本申请实施例一中的第二拟合轨迹和最终显示轨迹的示意；

图5是本申请实施例二提供的一种基于墨水屏的手写输入装置的结构示意图；

图6是本申请实施例三提供的一种电子设备的结构示意图。

具体实施方式

为了使本申请的目的、技术方案和优点更加清楚，下面结合附图对本申请具体实施例作进一步的详细描述。可以理解的是，此处所描述的具体实施例仅仅用于解释本申请，而非对本申请的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本申请相关的部分而非全部内容。在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作（或步骤）描述成顺序的处理，但是其中的许多操作可以被并行地、并发地或者同时实施。此外，各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。

本申请提供的基于墨水屏的手写输入方法及装置，旨在墨水屏手写输入时，在输入法处于激活状态时，通过OCR图像识别输入法显示区域确定当前输入法为手写输入法，则通过优化组件获取笔迹参数和轨迹点数据，拟合生成第一轨迹进行显示，以提高响应速度和提高显示速度。相对于传统的墨水屏手写输入法显示方式，其通常需要第三方输入法软件进行输入法种类判断，之后再通过第三方输入法进行对应的轨迹拟合之后再输送给显示层进行显示，导致显示速度较慢。基于此，提供本申请实施例的基于墨水屏的手写输入方法，以解决现有墨水屏手写输入法显示速度较慢问题。

实施例一：

图1给出了本申请实施例一提供的一种基于墨水屏的手写输入方法的流程图，本实施例中提供的基于墨水屏的手写输入方法可以由基于墨水屏的手写输入设备执行，该基于墨水屏的手写输入设备可以通过软件和/或硬件的方式实现，该基于墨水屏的手写输入设备可以是两个或多个物理实体构成，也可以是一个物理实体构成。一般而言，该基于墨水屏的手写输入设备可以是终端设备，如电脑、平板或手机等。

下述以手机为执行基于墨水屏的手写输入方法的主体为例，进行描述。参照图1，该基于墨水屏的手写输入方法具体包括：

S101、识别输入法是否处于激活状态。

具体的，定时检测接收用户端的输入指令，当接收到用户端输入的进入第三方输入法软件指令时，则为处于激活状态，则进行后续的输入法种类的检测和判断。当检测不到用户端输入进入第三方输入法软件指令时，则不处于激活状态，不需要进行后续的手写输入法的检测。

S102、当识别到输入法处于激活状态时，通过OCR图像识别输入法显示区域，判断当前输入法是否为手写输入法。

具体的，当接收到用户端输入的进入第三方输入法软件指令时处于激活状态，系统获取到第三方输入法软件提供的输入法显示区域的区域参数，得到输入法显示区域遮挡的位置区域，所述输入法显示区域遮挡的位置区域为输入法显示区域。所述输入法显示区域并不是固定位置的区域，其位置和大小由第三方输入法软件提供的输入法显示区域的区域参数所决定。根据第三方输入法软件提供的输入法显示区域的区域参数，判断输入法显示区域的位置和大小，得到所述输入法显示区域。通过OCR图像识别输入法显示区域是否存在手写输入法标识信息，若存在手写输入法标识信息，则判断当前输入法为手写输入法。现有技术中系统只提供与第三方输入法软件的接口，让第三方软件通过特定方式输入字符，对于第三方输入法软件中选择什么方式提供字符，系统并不会记录。因此现有技术中，系统中并不会记录第三方输入法软件中通过语音转文字还是拼音输入还是手写输入的方式提供最终的字符，系统仅接收第三方输入法软件提供的最终字符信息，从用户端输入的进入第三方输入法软件指令到第三方输入法软件输出字符信息存在一定的时间差，导致墨水屏的刷新输入的字符信息速度较慢。因此需要在用户端输入的进入第三方输入法软件指令确定处于输入法激活状态时，通过OCR图像识别输入法显示区域的输入法种类进行识别，根据识别到的输入法种类进行对应字符的获取优化，能够加快输入字符的显示速度，提高墨水屏的显示效果。

示例性的，参照图2，当接收到用户端输入的进入第三方输入法软件指令时处于激活状态，则通过OCR图像识别输入法显示区域的输入法标识信息，所述输入法显示区域为例如图2中的区域1和区域2所示的区域。假设当前输入法为拼音输入法，则当前输入法区域1的标识信息为英文字母表格，假设当前输入法为手写输入法，则当前输入法区域2的标识信息为空白页面3加正方形线边框4。所述标识信息包括但不限于虚拟按键键盘或手写区辅助线等元素，可根据实际情况进行设定，在本实施例中不作限制。通过OCR图像识别输入法显示区域是否存在手写输入法标识信息，例如手写区辅助线，若存在手写输入法标识信息，则判断当前输入法为手写输入法。若不存在手写输入法标识，则当前输入法则为非手写输入法，则不进行后续的优化处理，按照传统的第三方输入法软件的常规输入显示。

示例性的，在进行屏幕画面显示之前会将待显示画面帧存储在缓冲区中，通过OCR图像识别缓冲区中的待显示画面帧的图像，对待显示画面帧的图像中的输入法显示区域进行识别输入法标识信息，当识别到手写输入法标识信息时，则判定下一帧显示画面为手写输入法显示画面帧，则判定输入法为手写输入法，并启动优化组件开始进行后续的笔迹参数和轨迹点数据的获取操作。

S103、当判断当前输入法为手写输入法时，通过优化组件获取笔迹参数和轨迹点数据，拟合生成对应的第一轨迹，并显示在显示屏上。

具体的，所述笔迹参数包括笔宽数据、笔类型数据、颜色数据和压感数据，通过优化组件获取落笔到抬笔的轨迹点数据；根据笔迹参数和轨迹点数据进行轨迹的拟合，得到第一轨迹，并传输给显示层进行显示。

参照图3，通过OCR图像识别输入法显示区域确定存在手写输入法标识信息，判定当前输入法为手写输入法时，则通过优化组件获取笔迹参数和轨迹点数据，获取从落笔到抬笔的所有轨迹点数据，结合笔迹参数，拟合生成与笔迹参数和轨迹点数据相符合的第一轨迹，并在显示屏中进行显示。例如，当前手写输入法的笔迹参数为笔宽0.3毫米、笔类型为铅笔类型、颜色为黑色，获取获取从落笔到抬笔的所有轨迹点数据和压感数据，拟合生成第一轨迹A。本申请实施例通过OCR图像识别预设输入法区域确定当前输入为手写输入法时，通过优化组件直接获取笔迹参数和轨迹点数据，拟合生成对应的第一轨迹并显示在显示屏上，优先显示初步的拟合轨迹，提高了显示的速度，避免等第三方输入法软件发送拟合轨迹到显示屏进行显示而导致的显示延迟。

进一步的，参照图4，在根据笔迹参数和轨迹点数据进行轨迹的拟合，得到第一轨迹，并传输给显示层进行显示进行显示之后，通过第三方输入法软件根据笔迹参数和轨迹点数据，拟合生成对应的第二轨迹；当接收到输入结束指令后，将第一轨迹和第二轨迹进行像素重合对比，根据对比结果对显示层的第一轨迹进行调整，生成与第二轨迹相同的轨迹进行显示。

所述通过第三方输入法软件根据笔迹参数和轨迹点数据，拟合生成对应的第二轨迹为传统的通过第三方输入法软件进行拟合生成的轨迹，基于优化组件的拟合算法和第三方输入法软件的拟合算法不相同，因此拟合出来的第一轨迹和第二轨迹不相同。因此需要对第一轨迹和第二轨迹进行像素重合对比，根据对比结果对显示层的第一轨迹进行调整，生成与第二轨迹相同的轨迹进行显示。

参照图4，根据优化组件拟合生成的生成第一轨迹A和通过第三方输入法软件的拟合第二轨迹A’进行像素重合对比，保留重合部分，去除第一轨迹A非重合的多余部分，并且把第二轨迹A’非重合的多余部分调补到第一轨迹A中，以显示与第二轨迹相同的轨迹A”。通过像素重合对比生成与第二轨迹相同的轨迹A”进行显示，而并非直接显示第二轨迹A’，能够在原本优先显示的第一轨迹A的基础上进行调整，使得在保持轨迹显示的基础上，进行显示效果的优化，保障显示画面输出的情况下，提高显示效果。

上述，通过在识别输入法处于激活状态时，通过OCR图像识别输入法显示区域，判断当前输入法是否为手写输入法，当判断当前输入法为手写输入法时，通过优化组件获取笔迹参数和轨迹点数据，拟合生成对应的第一轨迹并显示在显示屏上。采用上述技术手段，在确定输入法处于激活状态时，通过OCR图像识别预设输入法区域判断当前输入法是否为手写输入法，当识别到当前输入法为手写输入法时则进行后续优化操作，相比于传统的通过第三方输入法软件确定当前输入法为手写输入法后再通知系统后台，本申请实施例通过OCR图像识别预设输入法区域能够更加快速地确定输入法的种类，识别效率更高，提高后台感知第三方输入法软件的当前输入法种类的速度。此外，通过OCR图像识别预设输入法区域确定当前输入为手写输入法时，则通过优化组件获取笔迹参数和轨迹点数据，拟合生成对应的第一轨迹并显示在显示屏上，优先显示初步的拟合轨迹，提高了显示的速度，避免等第三方输入法软件发送拟合轨迹到显示屏进行显示而导致的显示延迟。

实施例二：

在上述实施例的基础上，图5为本申请实施例二提供的一种基于墨水屏的手写输入装置的结构示意图。参考图5，本实施例提供的基于墨水屏的手写输入装置具体包括：激活状态识别单元21、图像识别单元22和显示单元23。

其中，激活状态识别单元21，用于识别输入法是否处于激活状态；

图像识别单元22，用于当识别到输入法处于激活状态时，通过OCR图像识别输入法显示区域，判断当前输入法是否为手写输入法；

显示单元23，用于当判断当前输入法为手写输入法时，通过优化组件获取笔迹参数和轨迹点数据，拟合生成对应的第一轨迹，并显示在显示屏上。

进一步的，所述激活状态识别单元21，还用于接收到用户端输入的进入第三方输入法软件指令时，则为处于激活状态。

进一步的，所述图像识别单元22，还用于当接收到用户端输入的进入第三方输入法软件指令时处于激活状态；

进一步的，所述笔迹参数包括笔宽数据、笔类型数据、颜色数据和压感数据，所述显示单元23，还用于通过优化组件获取落笔到抬笔的轨迹点数据；

进一步的，所述显示单元23，还用于通过第三方输入法软件根据笔迹参数和轨迹点数据，拟合生成对应的第二轨迹；

本申请实施例二提供的基于墨水屏的手写输入装置可以用于执行上述实施例一提供的基于墨水屏的手写输入方法，具备相应的功能和有益效果。

实施例三：

本申请实施例三提供了一种电子设备，参照图6，该电子设备包括：处理器31、存储器32、通信模块33、输入装置34及输出装置35。该电子设备中处理器的数量可以是一个或者多个，该电子设备中的存储器的数量可以是一个或者多个。该电子设备的处理器、存储器、通信模块、输入装置及输出装置可以通过总线或者其他方式连接。

存储器32作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本申请任意实施例所述的基于墨水屏的手写输入方法对应的程序指令/模块（例如，基于墨水屏的手写输入装置中的激活状态识别单元、图像识别单元和显示单元）。存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据设备的使用所创建的数据等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器可进一步包括相对于处理器远程设置的存储器，这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

通信模块33用于进行数据传输。

处理器31通过运行存储在存储器中的软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述的基于墨水屏的手写输入方法。

输入装置34可用于接收输入的数字或字符信息，以及产生与设备的用户设置以及功能控制有关的键信号输入。输出装置35可包括显示屏等显示设备。

上述提供的电子设备可用于执行上述实施例一提供的基于墨水屏的手写输入方法，具备相应的功能和有益效果。

实施例四：

本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种基于墨水屏的手写输入方法，该基于墨水屏的手写输入方法包括：识别输入法是否处于激活状态；当识别到输入法处于激活状态时，通过OCR图像识别输入法显示区域，判断当前输入法是否为手写输入法；当判断当前输入法为手写输入法时，通过优化组件获取笔迹参数和轨迹点数据，拟合生成对应的第一轨迹，并显示在显示屏上。

存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括：安装介质，例如CD-ROM、软盘或磁带装置；计算机系统存储器或随机存取存储器，诸如DRAM、DDR RAM、SRAM、EDO RAM，兰巴斯(Rambus)RAM等；非易失性存储器，诸如闪存、磁介质(例如硬盘或光存储)；寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外，存储介质可以位于程序在其中被执行的第一计算机系统中，或者可以位于不同的第二计算机系统中，第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。

当然，本申请实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的基于墨水屏的手写输入方法，还可以执行本申请任意实施例所提供的基于墨水屏的手写输入方法中的相关操作。

上述实施例中提供的基于墨水屏的手写输入装置、存储介质及电子设备可执行本申请任意实施例所提供的基于墨水屏的手写输入方法，未在上述实施例中详尽描述的技术细节，可参见本申请任意实施例所提供的基于墨水屏的手写输入方法。

上述仅为本申请的较佳实施例及所运用的技术原理。本申请不限于这里所述的特定实施例，对本领域技术人员来说能够进行的各种明显变化、重新调整及替代均不会脱离本申请的保护范围。因此，虽然通过以上实施例对本申请进行了较为详细的说明，但是本申请不仅仅限于以上实施例，在不脱离本申请构思的情况下，还可以包括更多其他等效实施例，而本申请的范围由权利要求的范围决定。

Claims

1.一种基于墨水屏的手写输入方法，其特征在于，包括：

识别输入法是否处于激活状态；

2.根据权利要求1所述的基于墨水屏的手写输入方法，其特征在于，所述识别输入法是否处于激活状态，具体为：

3.根据权利要求1所述的基于墨水屏的手写输入方法，其特征在于，所述当识别到输入法处于激活状态时，通过OCR图像识别输入法显示区域，判断当前输入法是否为手写输入法，具体为：

4.根据权利要求1所述的基于墨水屏的手写输入方法，其特征在于，所述笔迹参数包括笔宽数据、笔类型数据、颜色数据和压感数据，所述通过优化组件获取笔迹参数和轨迹点数据，拟合生成对应的第一轨迹，并显示在显示屏上，具体为：

通过优化组件获取落笔到抬笔的轨迹点数据；

5.根据权利要求4所述的基于墨水屏的手写输入方法，其特征在于，在拟合生成对应的第一轨迹，并显示在显示屏上之后，还包括：

6.一种基于墨水屏的手写输入装置，其特征在于，包括：

激活状态识别单元，用于识别输入法是否处于激活状态；

7.根据权利要求6所述的基于墨水屏的手写输入装置，其特征在于，所述激活状态识别单元，还用于接收到用户端输入的进入第三方输入法软件指令时，则为处于激活状态。

8.根据权利要求6所述的基于墨水屏的手写输入装置，其特征在于，所述图像识别单元，还用于当接收到用户端输入的进入第三方输入法软件指令时处于激活状态；

9.一种电子设备，其特征在于，包括：

存储器以及一个或多个处理器；

所述存储器，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-5任一所述的方法。

10.一种包含计算机可执行指令的存储介质，其特征在于，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-5任一所述的方法。