CN113836464A - 页面数据处理方法、装置、计算机设备和存储介质 - Google Patents
页面数据处理方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN113836464A CN113836464A CN202111087526.4A CN202111087526A CN113836464A CN 113836464 A CN113836464 A CN 113836464A CN 202111087526 A CN202111087526 A CN 202111087526A CN 113836464 A CN113836464 A CN 113836464A
- Authority
- CN
- China
- Prior art keywords
- data
- page
- processed
- node
- page data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 21
- 238000012545 processing Methods 0.000 claims abstract description 64
- 238000000034 method Methods 0.000 claims abstract description 55
- 238000012544 monitoring process Methods 0.000 claims abstract description 14
- 238000006243 chemical reaction Methods 0.000 claims description 18
- 238000004590 computer program Methods 0.000 claims description 16
- 238000011084 recovery Methods 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 238000012795 verification Methods 0.000 description 7
- 230000006399 behavior Effects 0.000 description 4
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/957—Browsing optimisation, e.g. caching or content distillation
- G06F16/9577—Optimising the visualization of content, e.g. distillation of HTML documents
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请涉及一种页面数据处理方法、装置、计算机设备和存储介质。所述方法包括：在检测到开启页面之后，监听页面的各页面节点；当各页面节点产生变化，且各页面节点对应的变化量符合上报条件时，获取各页面节点对应的待处理页面数据；确定各待处理页面数据的数据类型，根据各数据类型，处理各待处理页面数据，得到各处理后页面数据；上报各处理后页面数据。采用本申请实施例的方法，能够针对性地处理各类型的页面数据，提高上报性能，提高页面数据的处理效率，并使得还原业务操作过程时更准确。
Description
技术领域
本申请涉及通信技术领域，特别是涉及一种页面数据处理方法、装置、计算机设备和存储介质。
背景技术
随着通信技术的不断发展，用户可以通过终端进行一系列业务处理。例如，用户可以通过终端的浏览器页面或者应用程序页面，购买保险、基金和证券。在保险、基金和证券等高风险、强监管的金融领域，用户在投资过程中的操作行为数据需要被记录，以应对后期的监管审查，司法举证等过程。
目前，可以通过截屏或录屏的方式记录用户的操作行为数据，然而，截屏无法完整的回溯用户操作行为轨迹，对于页面的外部链接，在录屏回放时容易引入链接文件，而且，录屏可能无法兼容显示各类文件，使得录屏无法回放，从而导致用户的操作行为数据无法被记录，页面数据的处理效率不高。
发明内容
基于此，有必要针对上述技术问题，提供一种能够提高页面数据的处理效率的页面数据处理方法、装置、计算机设备和存储介质。
一种页面数据处理方法，所述方法包括：
在检测到开启页面之后，监听所述页面的各页面节点；
当各所述页面节点产生变化，且各所述页面节点对应的变化量符合上报条件时，获取各所述页面节点对应的待处理页面数据；
确定各所述待处理页面数据的数据类型，根据各所述数据类型，处理各所述待处理页面数据，得到各处理后页面数据；
上报各所述处理后页面数据。
在其中一个实施例中，在所述监听所述页面的各页面节点之前，还包括：
获取各所述页面节点的初始节点数据；
将各所述初始节点数据进行格式转化，得到格式转化后初始节点数据，并上报所述格式转化后初始节点数据。
在其中一个实施例中，各所述页面节点对应的变化量，包括：各所述页面节点的节点变化次数和各所述页面节点的节点数据变化量中的至少一种；
确定各所述页面节点对应的变化量符合上报条件的方式，包括：
在满足各所述页面节点的节点变化次数大于预设次数，以及满足各所述页面节点的节点数据变化量大于预设数据变化量中的至少一种时，确定各所述页面节点对应的变化量符合上报条件。
在其中一个实施例中，各所述待处理页面数据的数据类型，包括：本地数据、外链数据和文档数据中至少一种；
所述根据各所述数据类型，处理各所述待处理页面数据，得到各处理后页面数据，包括：
在所述待处理页面数据为本地数据时，将所述本地数据进行所述格式转化，得到处理后本地数据。
所述根据各所述数据类型，处理各所述待处理页面数据，得到各处理后页面数据，包括：
在所述待处理页面数据为外链数据时，获取所述外链数据的数据地址；
根据所述数据地址提取所述外链数据的数据内容，将提取的所述数据内容进行所述格式转化，得到处理后外链数据。
所述根据各所述数据类型，处理各所述待处理页面数据，得到各处理后页面数据，包括：
在所述待处理页面数据为文档数据时，将所述文档数据转化为图像数据，得到处理后文档数据。
在其中一个实施例中，在所述根据各所述数据类型，处理各所述待处理页面数据，得到各处理后页面数据之后，在所述上报各所述处理后页面数据之前，还包括：
将各所述处理后页面数据进行加密和压缩处理。
在其中一个实施例中，在所述上报各所述处理后页面数据之后，还包括：
当各所述处理后页面数据上报失败时，按照备用上报方式，上报各所述处理后页面数据；
在按照所述备用上报方式，各所述处理后页面数据上报失败时，存储各所述处理后页面数据。
在其中一个实施例中，在所述上报各所述处理后页面数据之后，还包括：
将所述页面对应的页面流程标识，与各所述处理后页面数据对应的页面数据标识进行绑定。
一种页面数据处理装置，所述装置包括：
页面节点监听模块，用于在检测到开启页面之后，监听所述页面的各页面节点；
页面数据获取模块，用于当各所述页面节点产生变化，且各所述页面节点对应的变化量符合上报条件时，获取各所述页面节点对应的待处理页面数据；
页面数据处理模块，用于确定各所述待处理页面数据的数据类型，根据各所述数据类型，处理各所述待处理页面数据，得到各处理后页面数据；
页面数据上报模块，用于上报各所述处理后页面数据。
一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述的页面数据处理方法的步骤。
一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述的页面数据处理方法的步骤。
上述页面数据处理方法、装置、计算机设备和存储介质，通过在检测到开启页面之后，监听页面的各页面节点；当各页面节点产生变化，且各页面节点对应的变化量符合上报条件时，获取各页面节点对应的待处理页面数据；确定各待处理页面数据的数据类型，根据各数据类型，处理各待处理页面数据，得到各处理后页面数据；上报各处理后页面数据。采用上述实施例的方法，在检测到开启页面之后就会实时监听页面的各页面节点，能够提高存储的用户的业务操作过程的完整性，在各页面节点对应的变化量符合上报条件，并对页面数据进行与数据类型相对应的数据处理之后再上报，能够针对性地处理各类型的页面数据，提高上报性能，提高页面数据的处理效率，并使得还原业务操作过程时更准确。
附图说明
图1为一个实施例中页面数据处理方法的应用环境图；
图2为一个实施例中页面数据处理方法的流程示意图；
图3为一个具体实施例中页面数据处理的示意图；
图4为一个实施例中页面数据处理装置的结构框图；
图5为一个实施例中计算机设备的内部结构图；
图6为另一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
在其中一个实施例中，本申请提供的页面数据处理方法，应用环境可以同时涉及终端102和服务器104，如图1所示。其中，终端102通过网络或协议等方式与服务器104进行通信。具体地，页面可以是终端102的页面，在检测到开启页面之后，服务器104监听终端102的页面的各页面节点；当各页面节点产生变化，且各页面节点对应的变化量符合上报条件时，获取各页面节点对应的待处理页面数据；确定各待处理页面数据的数据类型，根据各数据类型，处理各待处理页面数据，得到各处理后页面数据；上报各处理后页面数据。
在其中一个实施例中，本申请提供的页面数据处理方法，应用环境可以只涉及终端102或服务器104。具体地，页面可以是终端102或服务器104的页面，在检测到开启页面之后，终端102或服务器104的后台监听页面的各页面节点；当各页面节点产生变化，且各页面节点对应的变化量符合上报条件时，获取各页面节点对应的待处理页面数据；确定各待处理页面数据的数据类型，根据各数据类型，处理各待处理页面数据，得到各处理后页面数据；上报各处理后页面数据。
其中，终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备，服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在其中一个实施例中，如图2所示，提供了一种页面数据处理方法，以该方法应用于图1中的终端102和/或服务器104为例进行说明，包括：
步骤S202，在检测到开启页面之后，监听页面的各页面节点。
在其中一个实施例，页面是指用户通过终端进行业务处理的界面，包括终端的浏览器页面或者应用程序页面等，用户可以通过页面完成购买保险、基金和证券等业务。页面节点是指页面中显示的页面内容，例如，用户信息的输入节点、验证信息的输入节点和各种图像的显示节点等。
在其中一个实施例中，本申请的实施例可以基于JavaScript编程语言的软件开发工具包(JavaScript Software-Development-Kit，JS-SDK)实现。其中，在页面中预先加载了软件开发工具包，在检测到用户通过终端开启页面之后，页面的软件开发工具包开始运行，并监听页面的各页面节点。具体地，可以通过JavaScript的MutationObserver网页接口技术监听页面节点的变化。其中，MutationObserver是可以检测节点变化的网页接口，用于监听新增或者删除节点、属性更改、文本节点内容更改等。
步骤S204，当各页面节点产生变化，且各页面节点对应的变化量符合上报条件时，获取各页面节点对应的待处理页面数据。
在其中一个实施例中，在页面中显示的各页面内容产生更新时，则确定页面节点产生变化。例如，在用户输入了用户信息、输入了验证信息或通过刷新页面的方式更新了显示的图像时，则确定页面节点产生变化。其中，各页面节点对应的变化量，包括：各页面节点的节点变化次数和各页面节点的节点数据变化量中的至少一种。具体地，节点变化次数是指各页面节点的变化次数之和，节点数据变化量是指各页面节点的数据变化量之和，同一个页面节点可以产生多次变化。例如，用户第一次输入用户信息，则确定用户信息的输入节点产生第一次变化，用户第一次输入验证信息，则确定验证信息的输入节点产生第一次变化，当用户第一次输入的验证信息为错误，用户第二次输入验证信息时，则确定验证信息的输入节点产生第二次变化，也就是，确定上述的各页面节点对应的节点变化次数为三次，节点数据变化量为用户输入的用户信息与验证信息的数据量之和。
在其中一个实施例中，为了优化上报性能，在各页面节点对应的变化量符合上报条件时，获取各页面节点对应的待处理页面数据。其中，确定各页面节点对应的变化量符合上报条件的方式，包括：在满足各页面节点的节点变化次数大于预设次数，以及满足各页面节点的节点数据变化量大于预设数据变化量中的至少一种时，确定各页面节点对应的变化量符合上报条件。具体地，预设次数和预设数据变化量可以根据具体业务的要求、终端或服务器的规模或网络上传速度设置。预设次数可以设置为20次，预设数据变化量可以设置为300-800千字节(KB)，具体可以设置为500KB。
步骤S206，确定各待处理页面数据的数据类型，根据各数据类型，处理各待处理页面数据，得到各处理后页面数据。
在其中一个实施例，为了优化上报性能，对待处理页面数据进行数据处理之后再进行上报。其中，确定各待处理页面数据的数据类型，进行与数据类型相匹配的数据处理。各待处理页面数据的数据类型，包括：本地数据、外链数据和文档数据中至少一种。具体地，本地数据包括本地存储HTML数据，外链数据包括CSS样式外链数据，文档数据包括可携带文档PDF数据，针对其他类型的文档数据，例如Word、TXT等可以转化为本地存储HTML数据进行显示的，其数据处理方式与本地存储HTML数据的数据处理方式相同。
在其中一个实施例，各待处理页面数据的数据类型的确定方式，包括：基于JavaScript的数据类型判断方法确定，或根据各待处理页面数据的数据信息确定。其中，数据类型判断方法可以是typeof操作符，数据信息可以包括数据对应的地址、文件扩展名、文件头等。
在其中一个实施例中，根据各数据类型，处理各待处理页面数据，得到各处理后页面数据，包括：在待处理页面数据为本地数据时，将本地数据进行格式转化，得到处理后本地数据。其中，格式转化包括转化为JSON格式。具体地，将本地数据转化为JSON格式，得到处理后本地数据。
在其中一个实施例中，根据各数据类型，处理各待处理页面数据，得到各处理后页面数据，包括：在待处理页面数据为外链数据时，获取外链数据的数据地址，根据数据地址提取外链数据的数据内容，将提取的数据内容进行格式转化，得到处理后外链数据。其中，格式转化包括转化为JSON格式，外链数据的数据内容的提取方式可以是抓取。具体地，将抓取到的外链数据的数据内容转化为JSON格式，得到处理后外链数据。
在其中一个实施例中，根据各数据类型，处理各待处理页面数据，得到各处理后页面数据，包括：在待处理页面数据为文档数据时，将文档数据转化为图像数据，得到处理后文档数据。其中，图像数据的格式可以是任意一种常见的格式。具体地，采用基于JavaScript的脚本，将文档数据转化为图像数据，得到处理后图像数据，具体可以是采用Canvas脚本。
步骤S208，上报各处理后页面数据。
在其中一个实施例中，为了优化上报性能，并保证上报的安全性，将各处理后的页面数据以数据包的形式进行上传。在根据各数据类型，处理各待处理页面数据，得到各处理后页面数据之后，在上报各处理后页面数据之前，还包括：将各处理后页面数据进行加密和压缩处理。具体地，可以采用对称加密的方式对各处理后页面数据进行加密处理。对称加密也称为单密钥加密，是一种用单钥密码系统的加密方法，同一个密钥可以同时用作信息的加密和解密。具体地，可以采用压缩处理工具对各处理后页面数据进行压缩处理。在经过压缩处理之后，使得各处理后页面数据的数据包大小可以压缩至原始的数据包大小的60％左右。其中，在将各处理后页面数据进行加密和压缩处理之后，将各处理后页面数据转化为字节流格式，以兼顾上传的数据包的大小。
在其中一个实施例，调用存储服务器的接口地址和上报路径，将各处理后页面数据上报至存储服务器，存储服务器可以用于存储各处理后页面数据，后续还可以从存储服务器中调用和查询各处理后页面数据。其中，若在上报时网络连接失败，则会导致上报失败。当各处理后页面数据上报失败时，按照备用上报方式，上报各处理后页面数据。具体地，备用上报方式为，调用备用服务器的接口地址和上报路径，将各处理后页面数据上报至备用服务器。若仍然上报失败，也就是，在按照备用上报方式，各处理后页面数据上报失败时，存储各处理后页面数据。具体地，将各处理后页面数据存储在内存中，可以采取IndexedDB缓存技术进行存储。其中，由于内存是有限的，在将各处理后页面数据存储在内存中之前，还包括：对各处理后页面数据进行压缩处理，以免超出内存限制。在网络连接成功后，重新上报存储的各处理后页面数据，并在上报成功后，删除存储的各处理后页面数据，以释放内存空间。
在其中一个实施例中，在上报各处理后页面数据之后，还包括：将页面对应的页面流程标识，与各处理后页面数据对应的页面数据标识进行绑定，以实现后续查询和调用各处理后页面数据。具体地，可以通过调用软件开发工具包中的绑定(bind)方法进行绑定。其中，页面流程标识是证明用户进行了业务处理的唯一标识，可以根据具体的业务进行设置。例如，用户可以通过页面完成购买保险、基金和证券等业务，则页面标识可以是完成购买保险、基金和证券的订单号、保单号等。页面数据标识是各处理后页面数据对应的唯一标识，例如流水号等。
在其中一个实施例，当需要调用各处理后页面数据时，通过已知的页面流程标识，在存储服务器中查询各处理后页面数据，若需要用户的完整的业务操作过程，可以按照时间顺序，依次组装各处理后页面数据，以达到还原业务操作过程的目的。具体地，可以通过HTML、CSS以及JavaScript等技术实现。
上述页面数据处理方法中，通过在检测到开启页面之后，监听页面的各页面节点；当各页面节点产生变化，且各页面节点对应的变化量符合上报条件时，获取各页面节点对应的待处理页面数据；确定各待处理页面数据的数据类型，根据各数据类型，处理各待处理页面数据，得到各处理后页面数据；上报各处理后页面数据。采用上述实施例的方法，在检测到开启页面之后就会实时监听页面的各页面节点，能够提高存储的用户的业务操作过程的完整性，在各页面节点对应的变化量符合上报条件，并对页面数据进行与数据类型相对应的数据处理之后再上报，能够针对性地处理各类型的页面数据，提高上报性能，提高页面数据的处理效率，并使得还原业务操作过程时更准确。
在其中一个实施例中，在监听页面的各页面节点之前，还包括：
步骤S302，获取各页面节点的初始节点数据。
在其中一个实施例中，各页面节点的初始节点数据是指在检测到开启页面之后，页面的首屏数据。首屏数据包含页面的HTML节点、CSS样式、脚本文件和各种图像中的至少一种，首屏数据的数据格式是JSON格式，后续在将首屏数据上报至服务器时，会将JSON数据压缩成字节流进行上报，以使数据量更小，上报更安全。
步骤S304，将各初始节点数据进行格式转化，得到格式转化后初始节点数据，并上报格式转化后初始节点数据。
在其中一个实施例中，格式转化包括转化为JSON格式。具体地，将各初始节点数据转化为JSON格式，得到格式转化后初始节点数据，并上报格式转化后初始节点数据。
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及其中一个具体实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
如图3所示为一个具体实施例中页面数据处理方法的示意图，在具体实施例中涉及的设备包括：用户的终端和存储服务器，终端与存储服务器之间通过网络进行通信，用户通过终端的浏览器页面进行购买保险的业务处理，具体步骤如下：
在终端的浏览器页面中预先加载了软件开发工具包，用户在开启终端的浏览器页面之后，软件开发工具包JS-SDK开始运行，并通过JavaScript的MutationObserver网页接口技术监听页面节点的变化，并将浏览器页面的首屏数据上报至存储服务器；
当用户通过终端的浏览器页面进行购买保险的业务处理时，例如，用户输入用户信息、验证信息时，各页面节点会产生变化，在各页面节点的节点变化次数大于20次，或各页面节点的节点数据变化量大于500KB时，获取各页面节点对应的待处理页面数据，准备进行数据上报；
基于JavaScript的typeof操作符确定各待处理页面数据的数据类型，在待处理页面数据为HTML数据时，将HTML数据转化为JSON格式，得到处理后HTML数据；在待处理页面数据为CSS样式外链数据时，获取CSS样式外链数据的数据地址，根据数据地址抓取CSS样式外链数据的数据内容，并将抓取到的数据内容转化为JSON格式，得到处理后CSS样式外链数据；在待处理页面数据为可携带文档PDF数据时，通过Canvas脚本将可携带文档PDF数据转化为图像数据，得到处理后可携带文档PDF数据；
将上述的处理后页面数据进行对称加密和压缩处理，将各处理后页面数据转化为字节流格式，调用存储服务器的接口地址和上报路径，将各处理后页面数据上报至存储服务器，并将用户购买保险的保单号与各处理后页面数据对应的流水号进行绑定；
若上报失败，则调用备用服务器的接口地址和上报路径，将各处理后页面数据上报至备用服务器；
若仍然上报失败，则对各处理后页面数据进行压缩处理，采取IndexedDB缓存技术将各处理后页面数据存储在内存中，在网络连接成功后，重新上报存储的各处理后页面数据，并在上报成功后，删除存储的各处理后页面数据；
若需要用户的完整的业务操作过程，则通过保单号，查询存储服务器中的各处理后页面数据，按照时间顺序，依次组装各处理后页面数据，以还原业务操作过程。
应该理解的是，虽然图2的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图2中的至少一部分步骤可以包括多个步骤或者多个阶段，这些步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在其中一个实施例中，如图4所示，提供了一种页面数据处理装置，包括：页面节点监听模块410、页面数据获取模块420、页面数据处理模块430和页面数据上报模块440，其中：
页面节点监听模块410，用于在检测到开启页面之后，监听所述页面的各页面节点；
页面数据获取模块420，用于当各所述页面节点产生变化，且各所述页面节点对应的变化量符合上报条件时，获取各所述页面节点对应的待处理页面数据；
页面数据处理模块430，用于确定各所述待处理页面数据的数据类型，根据各所述数据类型，处理各所述待处理页面数据，得到各处理后页面数据；
页面数据上报模块440，用于上报各所述处理后页面数据。
在其中一个实施例，页面数据处理装置还包括：
初始节点数据获取单元，用于获取各所述页面节点的初始节点数据；
初始节点数据上报单元，用于将各所述初始节点数据进行格式转化，得到格式转化后初始节点数据，并上报所述格式转化后初始节点数据。
在其中一个实施例，页面数据获取模块420包括以下单元：
变化量确定单元，用于确定各所述页面节点对应的变化量，包括：各所述页面节点的节点变化次数和各所述页面节点的节点数据变化量中的至少一种；
上报条件确定单元，用于去确定在满足各所述页面节点的节点变化次数大于预设次数，以及满足各所述页面节点的节点数据变化量大于预设数据变化量中的至少一种时，确定各所述页面节点对应的变化量符合上报条件。
在其中一个实施例中，页面数据处理模块430包括以下单元：
数据类型确定单元，用于确定各所述待处理页面数据的数据类型，包括：本地数据、外链数据和文档数据中至少一种；
本地数据处理单元，用于在所述待处理页面数据为本地数据时，将所述本地数据进行所述格式转化，得到处理后本地数据。
外链数据处理单元，用于在所述待处理页面数据为外链数据时，获取所述外链数据的数据地址；根据所述数据地址提取所述外链数据的数据内容，将提取的所述数据内容进行所述格式转化，得到处理后外链数据。
文档数据处理单元，用于在所述待处理页面数据为文档数据时，将所述文档数据转化为图像数据，得到处理后文档数据。
在其中一个实施例，页面数据处理装置还包括：
加密和压缩处理单元，用于将各所述处理后页面数据进行加密和压缩处理。
备用上报单元，用于当各所述处理后页面数据上报失败时，按照备用上报方式，上报各所述处理后页面数据；
页面数据存储单元，用于在按照所述备用上报方式，各所述处理后页面数据上报失败时，存储各所述处理后页面数据。
标识绑定单元，用于将所述页面对应的页面流程标识，与各所述处理后页面数据对应的页面数据标识进行绑定。
关于页面数据处理装置的具体限定可以参见上文中对于页面数据处理方法的限定，在此不再赘述。上述页面数据处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
在其中一个实施例中，提供了一种计算机设备，该计算机设备可以是服务器，其内部结构图可以如图5所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储页面数据处理数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种页面数据处理方法。
在其中一个实施例中，提供了一种计算机设备，该计算机设备可以是终端，其内部结构图可以如图6所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信，无线方式可通过WIFI、运营商网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种页面数据处理方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解，图5和图6中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在其中一个实施例中，提供了一种计算机设备，包括存储器和处理器，存储器中存储有计算机程序，该处理器执行计算机程序时实现上述的页面数据处理方法的步骤。
在其中一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述的页面数据处理方法的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory，ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory，RAM)或外部高速缓冲存储器。作为说明而非局限，RAM可以是多种形式，比如静态随机存取存储器(Static Random Access Memory，SRAM)或动态随机存取存储器(Dynamic Random Access Memory，DRAM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种页面数据处理方法，所述方法包括：
在检测到开启页面之后，监听所述页面的各页面节点；
当各所述页面节点产生变化，且各所述页面节点对应的变化量符合上报条件时，获取各所述页面节点对应的待处理页面数据；
确定各所述待处理页面数据的数据类型，根据各所述数据类型，处理各所述待处理页面数据，得到各处理后页面数据；
上报各所述处理后页面数据。
2.根据权利要求1所述的页面数据处理方法，其特征在于，在所述监听所述页面的各页面节点之前，还包括：
获取各所述页面节点的初始节点数据；
将各所述初始节点数据进行格式转化，得到格式转化后初始节点数据，并上报所述格式转化后初始节点数据。
3.根据权利要求1所述的页面数据处理方法，其特征在于，各所述页面节点对应的变化量，包括：各所述页面节点的节点变化次数和各所述页面节点的节点数据变化量中的至少一种；
确定各所述页面节点对应的变化量符合上报条件的方式，包括：
在满足各所述页面节点的节点变化次数大于预设次数，以及满足各所述页面节点的节点数据变化量大于预设数据变化量中的至少一种时，确定各所述页面节点对应的变化量符合上报条件。
4.根据权利要求2所述的页面数据处理方法，其特征在于，各所述待处理页面数据的数据类型，包括：本地数据、外链数据和文档数据中至少一种；
所述根据各所述数据类型，处理各所述待处理页面数据，得到各处理后页面数据，包括以下至少一项：
第一项：
在所述待处理页面数据为本地数据时，将所述本地数据进行所述格式转化，得到处理后本地数据；
第二项：
在所述待处理页面数据为外链数据时，获取所述外链数据的数据地址；
根据所述数据地址提取所述外链数据的数据内容，将提取的所述数据内容进行所述格式转化，得到处理后外链数据；
第三项：
在所述待处理页面数据为文档数据时，将所述文档数据转化为图像数据，得到处理后文档数据。
5.根据权利要求4所述的页面数据处理方法，其特征在于，在所述根据各所述数据类型，处理各所述待处理页面数据，得到各处理后页面数据之后，在所述上报各所述处理后页面数据之前，还包括：
将各所述处理后页面数据进行加密和压缩处理。
6.根据权利要求1所述的页面数据处理方法，其特征在于，在所述上报各所述处理后页面数据之后，还包括：
当各所述处理后页面数据上报失败时，按照备用上报方式，上报各所述处理后页面数据；
在按照所述备用上报方式，各所述处理后页面数据上报失败时，存储各所述处理后页面数据。
7.根据权利要求1所述的页面数据处理方法，其特征在于，在所述上报各所述处理后页面数据之后，还包括：
将所述页面对应的页面流程标识，与各所述处理后页面数据对应的页面数据标识进行绑定。
8.一种页面数据处理装置，其特征在于，所述装置包括：
页面节点监听模块，用于在检测到开启页面之后，监听所述页面的各页面节点；
页面数据获取模块，用于当各所述页面节点产生变化，且各所述页面节点对应的变化量符合上报条件时，获取各所述页面节点对应的待处理页面数据；
页面数据处理模块，用于确定各所述待处理页面数据的数据类型，根据各所述数据类型，处理各所述待处理页面数据，得到各处理后页面数据；
页面数据上报模块，用于上报各所述处理后页面数据。
9.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的页面数据处理方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的页面数据处理方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111087526.4A CN113836464A (zh) | 2021-09-16 | 2021-09-16 | 页面数据处理方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111087526.4A CN113836464A (zh) | 2021-09-16 | 2021-09-16 | 页面数据处理方法、装置、计算机设备和存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113836464A true CN113836464A (zh) | 2021-12-24 |
Family
ID=78959524
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111087526.4A Pending CN113836464A (zh) | 2021-09-16 | 2021-09-16 | 页面数据处理方法、装置、计算机设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113836464A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114861103A (zh) * | 2022-03-23 | 2022-08-05 | 易保网络技术(上海)有限公司 | 页面回溯方法及其装置、介质和电子设备 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112000541A (zh) * | 2020-07-23 | 2020-11-27 | 招联消费金融有限公司 | 埋点数据上报方法、装置、计算机设备和存储介质 |
| CN112364267A (zh) * | 2020-10-21 | 2021-02-12 | 杭州大搜车汽车服务有限公司 | 前端数据的采集方法及装置 |
| CN112445757A (zh) * | 2020-09-08 | 2021-03-05 | 微民保险代理有限公司 | 可视化日志存储和回溯方法、装置和计算机设备 |
| CN112905935A (zh) * | 2021-02-10 | 2021-06-04 | 微民保险代理有限公司 | 页面录制方法、页面录制动画生成方法、设备和存储介质 |
-
2021
- 2021-09-16 CN CN202111087526.4A patent/CN113836464A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112000541A (zh) * | 2020-07-23 | 2020-11-27 | 招联消费金融有限公司 | 埋点数据上报方法、装置、计算机设备和存储介质 |
| CN112445757A (zh) * | 2020-09-08 | 2021-03-05 | 微民保险代理有限公司 | 可视化日志存储和回溯方法、装置和计算机设备 |
| CN112364267A (zh) * | 2020-10-21 | 2021-02-12 | 杭州大搜车汽车服务有限公司 | 前端数据的采集方法及装置 |
| CN112905935A (zh) * | 2021-02-10 | 2021-06-04 | 微民保险代理有限公司 | 页面录制方法、页面录制动画生成方法、设备和存储介质 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114861103A (zh) * | 2022-03-23 | 2022-08-05 | 易保网络技术(上海)有限公司 | 页面回溯方法及其装置、介质和电子设备 |
| CN114861103B (zh) * | 2022-03-23 | 2023-11-10 | 易保网络技术(上海)有限公司 | 页面回溯方法及其装置、介质和电子设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11588922B2 (en) | Capturing and replaying application sessions using resource files | |
| US8127000B2 (en) | Method and apparatus for monitoring and synchronizing user interface events with network data | |
| CN110688598B (zh) | 业务参数采集方法、装置、计算机设备和存储介质 | |
| CN110688662A (zh) | 一种敏感数据脱敏及逆脱敏方法、电子设备 | |
| CN109787974B (zh) | 报文数据流生成方法、装置、计算机设备和存储介质 | |
| CN112788270B (zh) | 视频回溯方法、装置、计算机设备及存储介质 | |
| CN112148518A (zh) | 日志文件处理方法、装置、计算机设备和存储介质 | |
| CN112445757A (zh) | 可视化日志存储和回溯方法、装置和计算机设备 | |
| CN111475376A (zh) | 处理测试数据的方法、装置、计算机设备和存储介质 | |
| CN110932918A (zh) | 日志数据采集方法、装置及存储介质 | |
| CN112241298A (zh) | 页面显示方法及装置、存储介质、电子装置 | |
| CN113448817A (zh) | 一种页面录屏方法、装置以及存储介质 | |
| CN113726770A (zh) | 数据拦截方法、装置、计算机设备及存储介质 | |
| CN113469866A (zh) | 数据处理方法、装置和服务器 | |
| CN113836464A (zh) | 页面数据处理方法、装置、计算机设备和存储介质 | |
| CN112286815A (zh) | 一种接口测试脚本的生成方法及其相关设备 | |
| CN105184559A (zh) | 一种支付系统及方法 | |
| CN112905935A (zh) | 页面录制方法、页面录制动画生成方法、设备和存储介质 | |
| CN112905936A (zh) | 页面录制动画生成、页面操作日志查询方法和计算机设备 | |
| CN109788019A (zh) | 一种数据处理方法及代理服务器 | |
| CN108848165A (zh) | 业务请求处理方法、装置、计算机设备和存储介质 | |
| CN114448722A (zh) | 跨浏览器登录方法、装置、计算机设备和存储介质 | |
| CN109002710A (zh) | 一种检测方法、装置及计算机可读存储介质 | |
| CN113312134A (zh) | 操作重现方法及设备 | |
| CN114004456B (zh) | 数据标签的计算方法、装置、计算机设备和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |