CN113821146B - 一种全局批注方法、装置、终端设备及存储介质 - Google Patents

Abstract

本发明实施例公开了一种全局批注方法、装置、终端设备及存储介质，当用户在第一显示页面上进行批注后，在第一显示页面上确定出目标页面内容并得到页面批注信息，用户需要在当前所显示的第二显示页面上显示批注时，获取当前第二显示页面的第二页面信息，根据与第二页面信息在数据库中进行检索，确定是否存在对应的页面批注信息，若是，则根据第二页面信息以及对应的页面批注信息，得到调整批注信息，根据调整批注信息在屏幕上绘制批注，从而使得之前绘制的批注可以根据当前所显示的显示页面进行调整显示，提高了全局批注的效率，解决了现有的全局批注方案的批注无法根据当前所显示的页面内容重新进行调整，导致全局批注的效率低下的技术问题。

Description

一种全局批注方法、装置、终端设备及存储介质

技术领域

本申请实施例涉及文件批注领域，尤其涉及一种全局批注方法、装置、终端设备及存储介质。

背景技术

目前，随着科技以及经济的发展，人们的生活质量不断提升，越来越多的人开始使用墨水屏电子书阅读器进行阅读以及学习。现有墨水屏电子书阅读器上系统自带的阅读软件和笔记软件是支持手写批注的，但是其他阅读软件很多都没有手写批注的功能，当用户在使用其他阅读软件进行阅读时，无法对当前页面进行批注，需要用户手动截图后对图片进行手写批注，批注效率低，且用户体验较差。

现有技术中，提出了一种基于图片相似度比较的电子书全局批注方案，该方案在批注展示的时候，通过图像比对算法，计算当前绘制内容与批注时缓存绘制内容的相似度，当相似度在用户配置的阈值范围内时，展示批注。然而，上述技术当图片的相似度不在阈值范围内时，批注无法进行展示，并且批注也无法根据当前所显示的页面内容重新进行调整，批注显示效率低下，严重降低了用户体验。

综上所述，现有的全局批注方案的批注无法根据当前所显示的页面内容重新进行调整，导致全局批注的效率低下。

发明内容

本发明实施例提供了一种全局批注方法、装置、终端设备及存储介质，解决了现有的全局批注方案的批注无法根据当前所显示的页面内容重新进行调整，导致全局批注的效率低下的技术问题。

第一方面，本发明实施例提供了一种全局批注方法，包括以下步骤：

当监听到批注起始事件时，获取批注信息，根据所述批注信息在屏幕绘制批注；

获取当前所显示的第一显示页面的第一页面信息，根据所述批注信息以及所述第一页面信息，确定目标页面内容，根据所述目标页面内容从所述第一页面信息中获取目标页面信息；

将所述批注信息、所述目标页面内容以及所述目标页面信息作为页面批注信息储存至数据库中；

当监听到批注完成事件时，清除所述屏幕上绘制的批注；

当监听到批注显示事件时，获取当前所显示的第二显示页面的第二页面信息，根据所述第二页面信息判断所述数据库中是否存在对应的页面批注信息；

若是，根据所述第二页面信息以及所述对应的页面批注信息，得到调整批注信息，根据所述调整批注信息在所述屏幕绘制批注。

优选的，所述批注信息包括笔画类型、笔画颜色、笔画宽度、批注路径点以及按压力度。

优选的，所述获取当前所显示的第一显示页面的第一页面信息的具体过程为:

获取与当前所显示的第一显示页面相对应的第一进程包名，根据所述第一进程包名获取所述第一显示页面的第一页面内容以及所述第一页面内容的第一位置坐标，根据所述第一页面内容、所述第一位置坐标以及所述第一进程包名得到所述第一页面信息；所述第一页面内容包括多个第一子页面内容，所述第一位置坐标包括多个第一子位置坐标，每个所述第一子页面内容对应一个所述第一子位置坐标。

优选的，所述根据所述批注信息以及所述第一页面信息，确定目标页面内容，根据所述目标页面内容从所述第一页面信息中获取目标页面信息的具体过程为：

根据所述批注信息以及所述第一位置坐标，在所述第一子页面内容中确定目标页面内容，从所述第一位置坐标中获取所述目标页面内容的第一子位置坐标，将所述目标页面内容的第一子位置坐标以及所述第一进程包名作为目标页面信息。

优选的，所述根据所述批注信息以及所述第一位置坐标，在所述第一页面内容中确定目标页面内容的具体过程为：

根据每个所述第一子页面内容的第一子位置坐标，计算出与所述批注路径点距离最短的第一子页面内容，将该第一子页面内容作为目标页面内容。

优选的，所述第二页面信息包括第二页面内容、所述第二页面内容的第二位置坐标以及与所述第二显示页面相对应的第二进程包名，所述第二页面内容包括多个第二子页面内容，所述第二位置坐标包括多个第二子位置坐标，每个所述第二子页面内容对应一个所述第二子位置坐标；

相应的，所述根据所述第二页面信息判断所述数据库中是否存在对应的页面批注信息的具体过程为：

遍历每一个所述第二子页面内容，根据所述第二进程包名以及当前所遍历的第二子页面内容，判断所述数据库中是否存在有相同子页面内容以及相同进程包名的页面批注信息。

优选的，所述根据所述第二页面信息以及所述对应的页面批注信息，得到调整批注信息的具体过程为：

从所述第二页面信息中获取与当前所遍历的第二子页面内容对应的第二子位置坐标，从所述对应的页面批注信息中获取对应的第一子位置坐标，计算所述对应的第一子位置坐标和所述对应的第二子位置坐标的坐标偏移量，根据所述坐标偏移量对所述对应的页面批注信息中的批注路径点进行调整，得到调整批注信息。

第二方面，本发明实施例提供了一种全局批注装置，包括批注绘制模块，页面信息获取模块、信息储存模块、批注清除模块、判断模块以及批注调整模块；

所述批注绘制模块用于当监听到批注起始事件时，获取批注信息，根据所述批注信息在屏幕绘制批注；

所述页面信息获取模块用于获取当前所显示的第一显示页面的第一页面信息，根据所述批注信息以及所述第一页面信息，确定目标页面内容，根据所述目标页面内容从所述第一页面信息中获取目标页面信息；

所述信息储存模块用于将所述批注信息、所述目标页面内容以及所述目标页面信息作为页面批注信息储存至数据库中；

所述批注清除模块用于当监听到批注完成事件时，清除所述屏幕上绘制的批注；

所述判断模块用于当监听到批注显示事件时，获取当前所显示的第二显示页面的第二页面信息，根据所述第二页面信息判断所述数据库中是否存在对应的页面批注信息；

所述批注调整模块用于若存在对应的页面批注信息，根据所述第二页面信息以及所述对应的页面批注信息，得到调整批注信息，根据所述调整批注信息在所述屏幕绘制批注。

第三方面，本发明实施例提供了一种终端设备，所述终端设备包括处理器以及存储器；

所述存储器用于存储计算机程序，并将所述计算机程序传输给所述处理器；

所述处理器用于根据所述计算机程序中的指令执行如第一方面所述的一种全局批注方法。

第四方面，本发明实施例提供了一种存储计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如第一方面所述的一种全局批注方法。

本发明实施例当用户在第一显示页面上进行批注后，会在第一显示页面上确定出目标页面内容并得到页面批注信息，后续用户需要在当前所显示的第二显示页面上显示批注时，会获取当前第二显示页面的第二页面信息，根据与第二页面信息在数据库中进行检索，确定是否存在对应的页面批注信息，若是，则根据第二页面信息以及对应的页面批注信息，得到调整批注信息，根据调整批注信息在屏幕上绘制批注，从而使得之前绘制的批注可以根据当前所显示的显示页面进行调整显示，提高了全局批注的效率，实现在任意软件，任意时刻都能实现全局批注的目的，进一步提高了用户体验，解决了现有的全局批注方案的批注无法根据当前所显示的页面内容重新进行调整，导致全局批注的效率低下的技术问题。

附图说明

图1为本发明实施例提供的一种全局批注方法的方法流程图；

图2为本发明实施例提供的各个第一子页面内容与批注的距离示意图；

图3为本发明实施例提供的一种全局批注装置的结构示意图；

图4为本发明实施例提供的一种终端设备的结构示意图。

具体实施方式

以下描述和附图充分地示出本申请的具体实施方案，以使本领域的技术人员能够实践它们。实施例仅代表可能的变化。除非明确要求，否则单独的部件和功能是可选的，并且操作的顺序可以变化。一些实施方案的部分和特征可以被包括在或替换其他实施方案的部分和特征。本申请的实施方案的范围包括权利要求书的整个范围，以及权利要求书的所有可获得的等同物。在本文中，各实施方案可以被单独地或总地用术语“发明”来表示，这仅仅是为了方便，并且如果事实上公开了超过一个的发明，不是要自动地限制该应用的范围为任何单个发明或发明构思。本文中，诸如第一和第二等之类的关系术语仅仅用于将一个实体或者操作与另一个实体或操作区分开来，而不要求或者暗示这些实体或操作之间存在任何实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素。本文中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的结构、产品等而言，由于其与实施例公开的部分相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

实施例一

如图1所示，图1为本发明实施例提供的一种全局批注方法的流程图。本发明实施例提供的全局批注方法可以由全局批注设备执行，该全局批注设备可以通过软件和/或硬件的方式实现，该全局批注设备可以是两个或多个物理实体构成，也可以由一个物理实体构成。例如全局批注设备可以是电脑、平板、手机、墨水屏电子书阅读器等阅读设备，本实施例中以墨水屏电子书阅读器为全局批注设备为例，方法包括以下步骤：

步骤101、当监听到批注起始事件时，获取批注信息，根据批注信息在屏幕绘制批注。

当监听到批注起始事件时，说明此时用户开始在屏幕上进行批注，获取屏幕的批注信息，将批注信息写入屏幕缓冲区中，从而无需借助额外的图层进行辅助，之后根据屏幕缓冲区中的批注信息，在屏幕上绘制批注。其中，需要进一步说明的是，在本实施例中，预先在墨水屏电子书阅读器的系统上安装批注动作监听器，利用批注动作监听器对批注起始事件进行监听。

在一个实施例中，批注信息包括笔画类型、笔画颜色、笔画宽度、批注路径点以及按压力度等。墨水屏电子书阅读器的系统在获取到批注信息后，即可根据批注信息，在屏幕上绘制出相对应的批注信息。需要进一步说明的是，对于批注路径点以及按压力度，可通过在墨水屏电子书阅读器的系统中设置输入设备监听器，利用输入设备监听器获取批注路径点以及按压力度。可理解，对于批注信息中的笔画类型、笔画颜色以及笔画宽度等，用户可预先根据需要进行设置，在本实施例中不进行具体限定。

步骤102、获取当前所显示的第一显示页面的第一页面信息，根据批注信息以及第一页面信息，确定目标页面内容，根据目标页面内容从第一页面信息中获取目标页面信息。

在屏幕上绘制出批注后，墨水屏电子书阅读器的系统获取当前所显示的第一显示页面的第一页面信息，之后，根据批注信息以及第一页面信息，在第一显示页面所显示的页面内容中确定出目标页面内容，在确定了目标页面内容后，从第一页面信息中获取与目标页面内容相对应的目标页面信息。

在一个实施例中，步骤102中获取当前所显示的第一显示页面的第一页面信息的具体过程为:

获取与当前所显示的第一显示页面相对应的第一进程包名，根据第一进程包名获取第一显示页面的第一页面内容以及第一页面内容的第一位置坐标，根据第一页面内容、第一位置坐标以及第一进程包名得到第一页面信息；第一页面内容包括多个第一子页面内容，第一位置坐标包括多个第一子位置坐标，每个第一子页面内容对应一个第一子位置坐标。

在本实施例中，墨水屏电子书阅读器的系统中设置有进程监听器，当系统在屏幕上绘制出批注后，系统从进程监听器中读取当前位于屏幕顶层的第一进程包名，即与当前所显示的第一显示页面向对应的第一进程包名，根据第一进程包名，获取第一显示页面的第一页面内容以及第一页面内容的第一位置坐标，

其中第一页面内容包括多个第一子页面内容，第一子页面内容包括但不限于文本段落、输入框、搜索框、标题栏、图片、页码以及页面进度信息中的任意一种；第一位置坐标包括多个第一子位置坐标，每个第一子页面内容对应一个第一子位置坐标，第一子位置坐标反应了每个第一子页面内容在屏幕上的坐标位置。例如，对于输入框，其对应的第一子位置坐标为（56,78）；对于搜索框，其对应的第一子位置坐标为（102,74）。

在获取到第一页面内容、第一位置坐标以及第一进程包名后，得到第一显示页面相对应的第一页面信息。

需要进一步说明的是，在本实施例中，获取当前所显示的第一显示页面的第一页面内容和第一位置坐标的方式有三种，分别为通过安卓无障碍服务的方式、通过安卓窗口管理器的方式以及通过图像识别的方式，用户可以选择任意一种方式，也可以选择多种方式的组合。在一个实施例中用户还可以为三种获取方式设置优先级顺序，若当前所执行的方式无法获取到第一页面内容和第一位置坐标时，则根据优先级顺序，选择下一种方式继续获取。

对于通过安卓无障碍服务的方式，其具体过程为：

通过安卓无障碍服务(AccessibilityService)获取到与第一进程包名相对应的第一页面信息的第一视图，分析第一视图，获取第一视图内的第一页面内容以及第一位置坐标，记录第一页面内容以及第一位置坐标。

对于通过安卓窗口管理器的方式，其具体过程为：

通过安卓窗口管理器来获取到与第一进程包名相对应的第一页面信息的第一视图，分析第一视图，获取第一视图内的第一页面内容以及第一位置坐标，记录第一页面内容以及第一位置坐标。

对于通过图像识别的方式，其具体过程为：

从进程监听器读取第一进程包名相对应的内容图像，对内容图像进行图像识别处理，得到第一页面内容，获取第一页面内容的第一位置坐标，记录第一页面内容以及第一位置坐标。

在上述实施例的基础上，步骤102中根据批注信息以及第一页面信息，确定目标页面内容，根据目标页面内容从第一页面信息中获取目标页面信息的具体过程为：

根据批注信息以及第一位置坐标，在第一子页面内容中确定目标页面内容，从第一位置坐标中获取目标页面内容的第一子位置坐标，将目标页面内容的第一子位置坐标以及第一进程包名作为目标页面信息。

本实施例中，在获取到批注信息以及第一页面内容的第一位置坐标后，即可根据批注信息中的批注路径点以及第一位置坐标，在第一页面内容的第一子页面内容中确定出与批注信息相对应的目标页面内容，目标页面内容表示用户所批注的目标对象，即用户是针对目标页面内容所进行的批注。在确定了目标页面内容后，从第一页面信息中获取与目标页面内容相对应的第一子位置坐标以及第一进程包名，将目标页面内容的第一子位置坐标以及第一进程包名作为目标页面信息。

在上述实施例的基础上，根据批注信息以及第一位置坐标，在第一页面内容中确定目标页面内容的具体过程为：

根据每个第一子页面内容的第一子位置坐标，计算出与批注路径点距离最短的第一子页面内容，将该第一子页面内容作为目标页面内容。

在本实施例中，从第一页面信息中，获取每个第一子页面内容的第一子位置坐标，并根据批注信息中的批注路径点以及每个第一子页面内容的第一子位置坐标，计算每个第一子页面内容与批注路径点之间的距离，确定出与批注路径点之间的距离最短的第一子页面内容，并将该第一子页面内容作为目标页面内容，之后，再获取与目标页面内容相对应的第一子位置坐标作为目标页面信息。示例性的，如图2所示，在图2中，第一显示页面的第一页面内容中包括有三个第一子页面内容，分别为第一子页面内容1、第一子页面内容2以及第一子页面内容3，用户所绘制的批注为ABC。此时，分别计算出三个第一子页面内容到批注的距离为D1、D2以及D3，由于D2的距离最短，因此将第一子页面内容2作为目标页面内容。

步骤103、将批注信息、目标页面内容以及目标页面信息作为页面批注信息储存至数据库中。

在确定了目标页面内容以及获取到目标页面信息后，对批注信息、目标页面内容以及目标页面信息进行关联绑定，将批注信息、目标页面内容以及目标页面信息作为页面批注信息储存至数据库中。

步骤104、当监听到批注完成事件时，清除屏幕上绘制的批注。

当批注动作监听器监听到批注完成事件时，即用户批注完成，此时，重新刷新屏幕显示板，清除屏幕上绘制的批注。

步骤105、当监听到批注显示事件时，获取当前所显示的第二显示页面的第二页面信息，根据第二页面信息判断数据库中是否存在对应的页面批注信息。

在本实施例中，在批注完成后，用户后续可以重新选择显示之前绘制的批注，或者是用户后续重新打开显示页面后，可选择显示之前绘制的批注，即向系统发送批注显示事件，当批注动作监听器监听到批注显示事件后，获取当前所显示的第二显示页面的第二页面信息，并根据获取到的第二页面信息，判断数据库中是否存在相对应的页面批注信息。

在上述实施例的基础上，第二页面信息包括第二页面内容、第二页面内容的第二位置坐标以及与第二显示页面相对应的第二进程包名，第二页面内容包括多个第二子页面内容，第二位置坐标包括多个第二子位置坐标，每个第二子页面内容对应一个第二子位置坐标。

可理解，在本实施例中，获取第二页面信息的方式与获取第一页面信息的方式相同，同样通过第二进程包名来获取第二页面内容以及第二位置坐标，将第二进程包名、第二页面内容以及第二位置坐标作为第二显示页面的第二页面信息，获取第二页面内容以及第二位置坐标的方式同样是通过安卓无障碍服务的方式、安卓窗口管理器的方式和/或图像识别的方式进行获取，具体过程可参考上述获取第一页面信息的过程，在此不再进行赘述。

相应的，根据第二页面信息判断数据库中是否存在对应的页面批注信息的具体过程为：

遍历每一个第二子页面内容，根据第二进程包名以及当前所遍历的第二子页面内容，判断数据库中是否存在有相同子页面内容以及相同进程包名的页面批注信息。

在本实施例中，获取到第二页面信息后，即可获取到当前所显示的第二页面内容中的每一个第二子页面内容，以及获取到与每个第二子页面内容相对应的第二子坐标。之后，逐个遍历第二页面信息中的每一个第二页面子内容，根据当前遍历的第二页面字内容以及第二进程包名，在数据库中进行检索，判断数据库中是否存在包含有相同子页面内容以及相同进程包名的页面批注信息。示例性的，在一个实施例中，数据库中储存的第一页面批注信息中的第一子页面内容为第一输入框，第一进程包名为A。第二页面内容中包括的一个第二子页面内容也为第一输入框，且第二进程包名同样为A。当遍历到的第二子页面内容为第一输入框时，在数据库中进行检索，由于数据库中存在包括有页面内容同样为第一数据框以及第一进程包名同样为A的第一页面批注信息，因此，可以判断数据库中该第一页面批注信息和该第二页面子内容相对应。

步骤106、若是，根据第二页面信息以及对应的页面批注信息，得到调整批注信息，根据所述调整批注信息在屏幕绘制批注。

如果在数据库中检索到对应的页面批注信息，则根据第二页面信息中获取当前遍历的第二子页面内容的第二子位置坐标以及在对应的页面批注信息中获取第一子位置坐标，根据第二子位置坐标以及第一子位置坐标，对页面批注信息中的批注路径点进行调整，得到调整批注信息，最后再根据调整批注信息，在屏幕上重新绘制批注，从而实现批注的全局显示。

在上述实施例的基础上，根据第二页面信息以及对应的页面批注信息，得到调整批注信息的具体过程为：

从第二页面信息中获取与当前所遍历的第二子页面内容对应的第二子位置坐标，从对应的页面批注信息中获取对应的第一子位置坐标，计算对应的第一子位置坐标和对应的第二子位置坐标的坐标偏移量，根据坐标偏移量对对应的页面批注信息中的批注路径点进行调整，得到调整批注信息。

在一个实施例中，若当前遍历的第二子页面内容在数据库中检索到对应的页面批注信息，则从第二显示页面的第二页面信息中，获取和当前遍历的第二子页面内容相对应的第二子位置坐标，从对应的页面批注信息中获取对应的第一子位置坐标，计算第二子位置坐标和第一子位置坐标的的坐标偏移量。之后，根据计算出的坐标偏移量对对应的页面批注信息中的批注路径点进行调整，得到调整批注信息。示例性的，在一个实施例中，当前遍历的第二子页面内容为文字段落，文字段落的第二子位置坐标为(x2,y2)，在对应的页面批注信息中，文字段落的第一子位置坐标为(x1,y1)，之后，计算第二子位置坐标和第一子位置坐标的坐标偏移量为：(x2-x1,y2-y1)，根据坐标偏移量，对对应的页面批注信息中的批注路径点进行调整，即将批注路径点按照坐标偏移量平移(x2-x1,y2-y1)，得到调整批注信息，再根据调整批注信息重新绘制批注即可，从而保持批注和文字段落之间的相对坐标位置保持不变，实现批注跟随第二子页面内容的第二子位置坐标进行变化。并且，在本实施例中批注不与当前应用所显示的显示页面整体关联，而是将批注和距离最近的子页面内容进行关联，从而使得当前的显示页面发生滚动或其他变化时，只要子页面内容还显示在屏幕中，批注仍然可以跟随子页面内容变化而显示，优化了全局批注的阅读体验。

需要进一步说明的是，在本实施例中，第二子位置坐标受到很多因素的影响。例如，字体大小变化，字体变化，页面间距样式，页面滚动，输入框高度变化，横竖屏旋转等等。

需要进一步说明的是，本实施例所提出的全局批注方法还能够跨设备进行使用。示例性的，在一个实施例中，将数据库与云端服务器相连接，数据库可通过云端服务器进行备份和恢复，用户在设备A进行了对第一显示页面A1进行了批注后，设备A会生成根据用户的批注得到A1的页面批注信息，并将页面批注信息储存至数据库中，当后续用户在使用设备B打开第一显示页面A1时，可以根据需要从云端服务器将A1的页面批注信息恢复到设备B中，使得用户通过设备B打开第一显示页面A1时，设备B能够根据A1的页面批注信息以及第一显示页面A1在设备B中的第二位置坐标，对A1的页面批注信息中的批注路径点进行调整，得到调整批注信息，之后设备B即可根据调整批注信息，在屏幕上重新绘制批注。

步骤107、若否，等待下一个批注显示事件的到来。

当用户对当前的第二显示页面进行滚动时或调整使得当前的第二显示页面的第二页面内容发生变动时，会重新触发批注显示事件，从而使得系统重新执行步骤105。

上述，本发明实施例提供的一种全局批注方法，包括以下步骤：当监听到批注起始事件时，获取批注信息，根据批注信息在屏幕绘制批注；获取当前所显示的第一显示页面的第一页面信息，根据批注信息以及第一页面信息，确定目标页面内容，根据目标页面内容从第一页面信息中获取目标页面信息；将批注信息、目标页面内容以及目标页面信息作为页面批注信息储存至数据库中；当监听到批注完成事件时，清除屏幕上绘制的批注；当监听到批注显示事件时，获取当前所显示的第二显示页面的第二页面信息，根据第二页面信息判断数据库中是否存在对应的页面批注信息；若是，根据第二页面信息以及对应的页面批注信息，得到调整批注信息，根据调整批注信息在屏幕绘制批注。

本发明实施例当用户在第一显示页面上进行批注后，会在第一显示页面上确定出目标页面内容并得到页面批注信息，后续用户需要在当前所显示的第二显示页面上显示批注时，会获取当前第二显示页面的第二页面信息，根据与第二页面信息在数据库中进行检索，确定是否存在对应的页面批注信息，若是，则根据第二页面信息以及对应的页面批注信息，得到调整批注信息，根据调整批注信息在屏幕上绘制批注，从而使得之前绘制的批注可以根据当前所显示的显示页面进行调整显示，提高了全局批注的效率，实现在任意软件，任意时刻都能实现全局批注的目的，进一步提高了用户体验，解决了现有的全局批注方案的批注无法根据当前所显示的页面内容重新进行调整，导致全局批注的效率低下的技术问题。

实施例二

如图3所示，图3为本发明实施例提供的一种全局批注装置的结构示意图，包括批注绘制模块201，页面信息获取模块202、信息储存模块203、批注清除模块204、判断模块205以及批注调整模块206；

批注绘制模块201用于当监听到批注起始事件时，获取批注信息，根据批注信息在屏幕绘制批注；

页面信息获取模块202用于获取当前所显示的第一显示页面的第一页面信息，根据批注信息以及第一页面信息，确定目标页面内容，根据目标页面内容从第一页面信息中获取目标页面信息；

信息储存模块203用于将批注信息、目标页面内容以及目标页面信息作为页面批注信息储存至数据库中；

批注清除模块204用于当监听到批注完成事件时，清除屏幕上绘制的批注；

判断模块205用于当监听到批注显示事件时，获取当前所显示的第二显示页面的第二页面信息，根据第二页面信息判断数据库中是否存在对应的页面批注信息；

批注调整模块206用于若存在对应的页面批注信息，根据第二页面信息以及对应的页面批注信息，得到调整批注信息，根据调整批注信息在屏幕绘制批注。

在上述实施例的基础上，批注信息包括笔画类型、笔画颜色、笔画宽度、批注路径点以及按压力度。

在上述实施例的基础上，页面信息获取模块202用于获取当前所显示的第一显示页面的第一页面信息具体为:

用于获取与当前所显示的第一显示页面相对应的第一进程包名，根据第一进程包名获取第一显示页面的第一页面内容以及第一页面内容的第一位置坐标，根据第一页面内容、第一位置坐标以及第一进程包名得到第一页面信息；第一页面内容包括多个第一子页面内容，第一位置坐标包括多个第一子位置坐标，每个第一子页面内容对应一个第一子位置坐标。

在上述实施例的基础上，页面信息获取模块202用于根据批注信息以及第一页面信息，确定目标页面内容，根据目标页面内容从第一页面信息中获取目标页面信息的具体为：

用于根据批注信息以及第一位置坐标，在第一子页面内容中确定目标页面内容，从第一位置坐标中获取目标页面内容的第一子位置坐标，将目标页面内容的第一子位置坐标以及第一进程包名作为目标页面信息。

在上述实施例的基础上，页面信息获取模块202用于根据批注信息以及第一位置坐标，在第一页面内容中确定目标页面内容具体为：

用于根据每个第一子页面内容的第一子位置坐标，计算出与批注路径点距离最短的第一子页面内容，将该第一子页面内容作为目标页面内容。

在上述实施例的基础上，第二页面信息包括第二页面内容、第二页面内容的第二位置坐标以及与第二显示页面相对应的第二进程包名，第二页面内容包括多个第二子页面内容，第二位置坐标包括多个第二子位置坐标，每个第二子页面内容对应一个第二子位置坐标；

相应的，判断模块205用于根据第二页面信息判断数据库中是否存在对应的页面批注信息具体为：

用于遍历每一个第二子页面内容，根据第二进程包名以及当前所遍历的第二子页面内容，判断数据库中是否存在有相同子页面内容以及相同进程包名的页面批注信息。

在上述实施例的基础上，批注调整模块206用于根据第二页面信息以及对应的页面批注信息，得到调整批注信息具体为：

用于从第二页面信息中获取与当前所遍历的第二子页面内容对应的第二子位置坐标，从对应的页面批注信息中获取对应的第一子位置坐标，计算对应的第一子位置坐标和对应的第二子位置坐标的坐标偏移量，根据坐标偏移量对对应的页面批注信息中的批注路径点进行调整，得到调整批注信息。

实施例三

本实施例还提供了一种终端设备，如图4所示，一种终端设备30，所述终端设备包括处理器300以及存储器301；

所述存储器301用于存储计算机程序302，并将所述计算机程序302传输给所述处理器；

所述处理器300用于根据所述计算机程序302中的指令执行上述的一种全局批注方法实施例中的步骤。

示例性的，所述计算机程序302可以被分割成一个或多个模块/单元，所述一个或者多个模块/单元被存储在所述存储器301中，并由所述处理器300执行，以完成本申请。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序302在所述终端设备30中的执行过程。

所述终端设备30可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述终端设备30可包括，但不仅限于，处理器300、存储器301。本领域技术人员可以理解，图4仅仅是终端设备30的示例，并不构成对终端设备30的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述终端设备30还可以包括输入输出设备、网络接入设备、总线等。

所称处理器300可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器 (Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列 (Field-Programmable Gate Array，FPGA) 或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

所述存储器301可以是所述终端设备30的内部存储单元，例如终端设备30的硬盘或内存。所述存储器301也可以是所述终端设备30的外部存储终端设备，例如所述终端设备30上配备的插接式硬盘，智能存储卡（Smart Media Card, SMC），安全数字（SecureDigital, SD）卡，闪存卡（Flash Card）等。进一步地，所述存储器301还可以既包括所述终端设备30的内部存储单元也包括外部存储设备。所述存储器301用于存储所述计算机程序以及所述终端设备30所需的其他程序和数据。所述存储器301还可以用于暂时地存储已经输出或者将要输出的数据。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器（ROM，Read-OnlyMemory）、随机存取存储器（RAM，Random Access Memory）、磁碟或者光盘等各种可以存储计算机程序的介质。

实施例四

本发明实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种全局批注方法，该方法包括以下步骤：

当监听到批注起始事件时，获取批注信息，根据批注信息在屏幕绘制批注；

获取当前所显示的第一显示页面的第一页面信息，根据批注信息以及第一页面信息，确定目标页面内容，根据目标页面内容从第一页面信息中获取目标页面信息；

将批注信息、目标页面内容以及目标页面信息作为页面批注信息储存至数据库中；

当监听到批注完成事件时，清除屏幕上绘制的批注；

当监听到批注显示事件时，获取当前所显示的第二显示页面的第二页面信息，根据第二页面信息判断数据库中是否存在对应的页面批注信息；

若是，根据第二页面信息以及对应的页面批注信息，得到调整批注信息，根据调整批注信息在屏幕绘制批注。

注意，上述仅为本发明实施例的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明实施例不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明实施例的保护范围。因此，虽然通过以上实施例对本发明实施例进行了较为详细的说明，但是本发明实施例不仅仅限于以上实施例，在不脱离本发明实施例构思的情况下，还可以包括更多其他等效实施例，而本发明实施例的范围由所附的权利要求范围决定。

Claims (8)

1.一种全局批注方法，其特征在于，包括以下步骤：

当监听到批注起始事件时，获取批注信息，根据所述批注信息在屏幕绘制批注；其中，所述批注信息包括笔画类型、笔画颜色、笔画宽度、批注路径点以及按压力度；

获取当前所显示的第一显示页面的第一页面信息，根据所述批注信息以及所述第一页面信息，确定目标页面内容，根据所述目标页面内容从所述第一页面信息中获取目标页面信息；

将所述批注信息、所述目标页面内容以及所述目标页面信息作为页面批注信息储存至数据库中；

当监听到批注完成事件时，清除所述屏幕上绘制的批注；

当监听到批注显示事件时，获取当前所显示的第二显示页面的第二页面信息，根据所述第二页面信息判断所述数据库中是否存在对应的页面批注信息；

若是，根据所述第二页面信息以及所述对应的页面批注信息，得到调整批注信息，根据所述调整批注信息在所述屏幕绘制批注；

其中，所述获取当前所显示的第一显示页面的第一页面信息的具体过程为:

获取与当前所显示的第一显示页面相对应的第一进程包名，根据所述第一进程包名获取所述第一显示页面的第一页面内容以及所述第一页面内容的第一位置坐标，根据所述第一页面内容、所述第一位置坐标以及所述第一进程包名得到所述第一页面信息；所述第一页面内容包括多个第一子页面内容，所述第一位置坐标包括多个第一子位置坐标，每个所述第一子页面内容对应一个所述第一子位置坐标。

2.根据权利要求1所述的一种全局批注方法，其特征在于，所述根据所述批注信息以及所述第一页面信息，确定目标页面内容，根据所述目标页面内容从所述第一页面信息中获取目标页面信息的具体过程为：

根据所述批注信息以及所述第一位置坐标，在所述第一子页面内容中确定目标页面内容，从所述第一位置坐标中获取所述目标页面内容的第一子位置坐标，将所述目标页面内容的第一子位置坐标以及所述第一进程包名作为目标页面信息。

3.根据权利要求2所述的一种全局批注方法，其特征在于，所述根据所述批注信息以及所述第一位置坐标，在所述第一页面内容中确定目标页面内容的具体过程为：

根据每个所述第一子页面内容的第一子位置坐标，计算出与所述批注路径点距离最短的第一子页面内容，将该第一子页面内容作为目标页面内容。

4.根据权利要求2所述的一种全局批注方法，其特征在于，所述第二页面信息包括第二页面内容、所述第二页面内容的第二位置坐标以及与所述第二显示页面相对应的第二进程包名，所述第二页面内容包括多个第二子页面内容，所述第二位置坐标包括多个第二子位置坐标，每个所述第二子页面内容对应一个所述第二子位置坐标；

相应的，所述根据所述第二页面信息判断所述数据库中是否存在对应的页面批注信息的具体过程为：

遍历每一个所述第二子页面内容，根据所述第二进程包名以及当前所遍历的第二子页面内容，判断所述数据库中是否存在有相同子页面内容以及相同进程包名的页面批注信息。

5.根据权利要求4所述的一种全局批注方法，其特征在于，所述根据所述第二页面信息以及所述对应的页面批注信息，得到调整批注信息的具体过程为：

从所述第二页面信息中获取与当前所遍历的第二子页面内容对应的第二子位置坐标，从所述对应的页面批注信息中获取对应的第一子位置坐标，计算所述对应的第一子位置坐标和所述对应的第二子位置坐标的坐标偏移量，根据所述坐标偏移量对所述对应的页面批注信息中的批注路径点进行调整，得到调整批注信息。

6.一种全局批注装置，其特征在于，包括批注绘制模块，页面信息获取模块、信息储存模块、批注清除模块、判断模块以及批注调整模块；

所述批注绘制模块用于当监听到批注起始事件时，获取批注信息，根据所述批注信息在屏幕绘制批注；其中，所述批注信息包括笔画类型、笔画颜色、笔画宽度、批注路径点以及按压力度；

所述页面信息获取模块用于获取当前所显示的第一显示页面的第一页面信息，根据所述批注信息以及所述第一页面信息，确定目标页面内容，根据所述目标页面内容从所述第一页面信息中获取目标页面信息；

所述信息储存模块用于将所述批注信息、所述目标页面内容以及所述目标页面信息作为页面批注信息储存至数据库中；

所述批注清除模块用于当监听到批注完成事件时，清除所述屏幕上绘制的批注；

所述判断模块用于当监听到批注显示事件时，获取当前所显示的第二显示页面的第二页面信息，根据所述第二页面信息判断所述数据库中是否存在对应的页面批注信息；

所述批注调整模块用于若存在对应的页面批注信息，根据所述第二页面信息以及所述对应的页面批注信息，得到调整批注信息，根据所述调整批注信息在所述屏幕绘制批注；

其中，所述页面信息获取模块用于获取当前所显示的第一显示页面的第一页面信息具体为：

用于获取与当前所显示的第一显示页面相对应的第一进程包名，根据所述第一进程包名获取所述第一显示页面的第一页面内容以及所述第一页面内容的第一位置坐标，根据所述第一页面内容、所述第一位置坐标以及所述第一进程包名得到所述第一页面信息；所述第一页面内容包括多个第一子页面内容，所述第一位置坐标包括多个第一子位置坐标，每个所述第一子页面内容对应一个所述第一子位置坐标。

7.一种终端设备，其特征在于，所述终端设备包括处理器以及存储器；

所述存储器用于存储计算机程序，并将所述计算机程序传输给所述处理器；

所述处理器用于根据所述计算机程序中的指令执行如权利要求1-5中任一项所述的一种全局批注方法。

8.一种存储计算机可执行指令的存储介质，其特征在于，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-5中任一项所述的一种全局批注方法。

Images