CN115374331A - 一种数据处理方法、装置、电子设备及存储介质 - Google Patents
一种数据处理方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN115374331A CN115374331A CN202211006606.7A CN202211006606A CN115374331A CN 115374331 A CN115374331 A CN 115374331A CN 202211006606 A CN202211006606 A CN 202211006606A CN 115374331 A CN115374331 A CN 115374331A
- Authority
- CN
- China
- Prior art keywords
- script file
- data
- electronic device
- data processing
- preset
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/602—Providing cryptographic facilities or services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/546—Message passing systems or structures, e.g. queues
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- General Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Health & Medical Sciences (AREA)
- Bioethics (AREA)
- Data Mining & Analysis (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本公开关于一种数据处理方法、装置、电子设备及存储介质,涉及互联网技术领域。该方法包括:当目标网页的第一脚本文件中包括预设解密方法时,对该第一脚本文件进行预设处理,生成第二脚本文件;执行该第二脚本文件,以将该解密数据添加至目标队列。本公开中,电子设备可以基于生成并执行第二脚本文件的方式将解密数据添加至目标队列,如此下游设备(即需要获取该解密数据的设备)可以方便、快捷地获取到该解密数据,能够提高数据获取的有效性。
Description
技术领域
本公开涉及互联网技术领域,尤其涉及一种数据处理方法、装置、电子设备及存储介质。
背景技术
目前,服务器可以基于某一浏览器插件监控并获取网页中的数据。
但是,上述方法中,服务器可能仅能获取到该网页中的用户界面(userinterface,UI)层数据(例如某一账户的账户名称),无法获取到该网页中的非UI层数据(例如该账户的账户标识),影响了数据获取的有效性。
发明内容
本公开提供一种数据处理方法、装置、电子设备及存储介质,解决了相关技术中服务器仅能获取到网页中UI层数据,而无法获取到非UI层数据的问题。
本公开实施例的技术方案如下:
根据本公开实施例的第一方面,提供一种数据处理方法。该方法可以包括:当目标网页的第一脚本文件中包括预设解密方法时,对该第一脚本文件进行预设处理,生成第二脚本文件,该预设解密方法用于对加密数据进行解密处理得到解密数据;执行该第二脚本文件,以将该解密数据添加至目标队列。
可选地,上述对该第一脚本文件进行预设处理之前,上述数据处理方法还包括:响应于预设操作,向服务器发送脚本文件获取请求,该脚本文件获取请求包括该第一脚本文件的统一资源定位符,该脚本文件获取请求用于请求获取该第一脚本文件;接收该服务器发送的脚本文件获取响应,该脚本文件获取响应中包括该第一脚本文件。
可选地,上述对该第一脚本文件进行预设处理,具体包括:在该第一脚本文件中添加监听方法,该监听方法用于监听该解密数据。
可选地,上述数据处理方法还包括:在该目标网页的预设对象中注入该监听方法,以使得该电子设备调用该监听方法。
可选地,上述数据处理方法还包括:当预设应用程序的窗体引擎具有显示功能时,将该窗体引擎替换为嵌入式引擎,该嵌入式引擎用于禁止显示该目标网页的窗口,该预设应用程序为执行该第二脚本文件的应用程序。
根据本公开实施例的第二方面,提供一种数据处理装置。该装置可以包括:处理模块;该处理模块,被配置为当目标网页的第一脚本文件中包括预设解密方法时,对该第一脚本文件进行预设处理,生成第二脚本文件,该预设解密方法用于对加密数据进行解密处理得到解密数据;该处理模块,还被配置为执行该第二脚本文件,以将该解密数据添加至目标队列。
可选地,该数据处理装置还包括发送模块和接收模块;该发送模块,被配置为响应于预设操作,向服务器发送脚本文件获取请求,该脚本文件获取请求包括该第一脚本文件的统一资源定位符,该脚本文件获取请求用于请求获取该第一脚本文件;该接收模块,被配置为接收该服务器发送的脚本文件获取响应,该脚本文件获取响应中包括该第一脚本文件。
可选地,该处理模块,具体被配置为在该第一脚本文件中添加监听方法,该监听方法用于监听该解密数据。
可选地,该处理模块,还被配置为在该目标网页的预设对象中注入该监听方法,以使得该电子设备调用该监听方法。
可选地,该处理模块,还被配置为当预设应用程序的窗体引擎具有显示功能时,将该窗体引擎替换为嵌入式引擎,该嵌入式引擎用于禁止显示该目标网页的窗口,该预设应用程序为执行该第二脚本文件的应用程序。
根据本公开实施例的第三方面,提供一种电子设备,可以包括:处理器和被配置为存储处理器可执行指令的存储器;其中,处理器被配置为执行所述指令,以实现上述第一方面中任一种可选地数据处理方法。
根据本公开实施例的第四方面,提供一种计算机可读存储介质,计算机可读存储介质上存储有指令,当该计算机可读存储介质中的指令由电子设备的处理器执行时,使得该电子设备能够执行上述第一方面中任一种可选地数据处理方法。
根据本公开实施例的第五方面,提供一种计算机程序产品,该计算机程序产品包括计算机指令,当该计算机指令在电子设备的处理器上运行时,使得该电子设备执行如第一方面中任一种可选地数据处理方法。
本公开的实施例提供的技术方案至少带来以下有益效果:
基于上述任一方面,本公开中,当目标网页的第一脚本文件中包括预设解密方法时,电子设备可以对第一脚本文件进行预设处理,生成第二脚本文件,然后该电子设备可以执行该第二脚本文件时,以将解密数据添加至目标队列。本公开实施例中,电子设备可以基于生成并执行第二脚本文件的方式将解密数据添加至目标队列,如此下游设备(即需要获取该解密数据的设备)可以方便、快捷地获取到该解密数据,能够提高数据获取的有效性。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理,并不构成对本公开的不当限定。
图1示出了本公开实施例提供的一种数据处理系统示意图;
图2示出了本公开实施例提供的一种数据处理方法的流程示意图;
图3示出了本公开实施例提供的又一种数据处理方法的流程示意图;
图4示出了本公开实施例提供的又一种数据处理方法的流程示意图;
图5示出了本公开实施例提供的又一种数据处理方法的流程示意图;
图6示出了本公开实施例提供的又一种数据处理方法的流程示意图;
图7示出了本公开实施例提供的又一种数据处理方法的流程示意图;
图8示出了本公开实施例提供的一种数据处理装置的结构示意图;
图9示出了本公开实施例提供的又一种数据处理装置的结构示意图。
具体实施方式
为了使本领域普通人员更好地理解本公开的技术方案,下面将结合附图,对本公开实施例中的技术方案进行清楚、完整地描述。
需要说明的是,本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
还应当理解的是,术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其他特征、整体、步骤、操作、元素和/或组件的存在或添加。
需要说明的是,本公开所涉及的用户信息(包括但不限于用户设备信息、用户个人信息、用户行为信息等)和数据(包括但不限于脚本),均为经用户授权或者经过各方充分授权的信息和数据。
相关技术中,服务器可以基于某一浏览器插件监控并获取网页中的数据。但是,该服务器可能仅能获取到该网页中的UI层数据(例如某一账户的账户名称),无法获取到该网页中的非UI层数据(例如该账户的账户标识),影响了数据获取的有效性。
基于此,本公开实施例提供一种数据处理方法,当目标网页的第一脚本文件中包括预设解密方法时,电子设备可以对第一脚本文件进行预设处理,生成第二脚本文件,由于第一脚本文件中包括预设解密方法,因此服务器执行第二脚本文件时可以得到解密数据。本公开实施例中,电子设备可以基于生成并执行第二脚本文件的方式将解密数据添加至目标队列,如此下游设备(即需要获取该解密数据的设备)可以方便、快捷地获取到该解密数据,能够提高数据获取的有效性。
本公开实施例提供的数据处理方法、装置、电子设备及存储介质,应用于数据获取场景中。当目标网页的第一脚本文件中包括预设解密方法时,电子设备可以依据本公开实施例提供的方法,对第一脚本文件进行预设处理,生成第二脚本文件,并且执行该第二脚本文件,以将解密数据添加至目标队列。进而,下游设备(即需要获取该解密数据的设备)可以基于该目标队列获取到该解密数据。
以下结合附图对本公开实施例提供的数据处理方法进行示例性说明:
图1为本公开实施例提供的一种数据处理系统示意图,如图1所示,该数据处理系统中可以包括电子设备101和服务器102,电子设备101可以通过有线网络或无线网络与服务器102之间建立连接。
其中,电子设备101可以是手机、平板电脑、桌面型、膝上型、手持计算机、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本,以及蜂窝电话、个人数字助理(personal digital assistant,PDA)、增强现实(augmented reality,AR)\虚拟现实(virtual reality,VR)设备,本公开对电子设备101的具体形态不作特殊限制。其可以与用户通过键盘、触摸板、触摸屏、遥控器、语音交互或手写设备等一种或多种方式进行人机交互。
服务器102可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、网络加速服务(content delivery network,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器。
本公开实施例中,电子设备101可以向服务器102发送脚本文件获取请求,服务器102在接收到该脚本文件获取请求之后,可以基于该脚本文件获取请求中包括的统一资源定位符,确定第一脚本文件,并且向电子设备101发送脚本文件获取响应,该脚本文件获取响应中包括该第一脚本文件。
如图2所示,当本公开实施例提供的数据处理方法应用于上述电子设备101时,该数据处理方法可以包括S101-S102。
S101、当目标网页的第一脚本文件中包括预设解密方法时,电子设备对第一脚本文件进行预设处理,生成第二脚本文件。
其中,该预设解密方法用于对加密数据进行解密处理得到解密数据。
应理解,电子设备可以获取该第一脚本文件,并且对该第一脚本文件进行解析处理,得到至少一个方法(具体可以为该至少一个方法的名称),然后,电子设备可以确定该至少一个方法的名称中是否包括上述预设解密方法的名称。当该至少一个方法的名称中包括该预设解密方法的名称时,说明该至少一个方法中包括该预设解密方法,电子设备可以确定该第一脚本文件中包括该预设解密方法。
可以理解的是,一个网页(例如目标网页)中可以包括多个脚本文件,该多个脚本文件可以用于实现不同的功能,例如上述第一脚本文件可以用于实现加密数据的解密功能。具体的,电子设备执行该第一脚本文件即为基于该预设解密方法对该加密数据进行解密处理,以得到上述解密数据。
本公开实施例中,一个脚本文件(例如第一脚本文件)可以是js文件,该js文件为以“.js”为扩展名的文本文件。
可选地,本公开实施例中的一个方法(例如上述预设解密方法)可以是一个文本信息,该文本信息可以由一行或多行代码组成。
本公开实施例中,上述解密数据为该目标网页中的数据。该目标网页中的数据可以包括图片、数字、文本等。
可选地,该解密数据可以以文本文件的形式存在,例如该文本文件可以为json文本。
应理解,上述预设处理具体可以为修改处理或替换处理。具体的,电子设备对该第一脚本文件进行修改处理,可以理解为修改该第一脚本文件中包括的内容,以生成上述第二脚本文件;电子设备对该第一脚本文件进行替换处理,可以理解为将该第一脚本文件中包括的内容替换为其他内容,以生成第二脚本文件,或者直接将该第一脚本文件替换为其他脚本文件(即第二脚本文件)。
S102、电子设备执行第二脚本文件,以将解密数据添加至目标队列。
应理解,电子设备将该解密数据添加至该目标队列之后,需要获取该解密数据的设备(以下简称下游设备)可以基于该目标队列监控并获取该解密数据。
在一种可选的实现方式中,下游设备可以将上述解密数据转化为短消息,并且以短消息的形式通知目标网页的关注者;或者下游设备也可以将该解密数据转化成数据分析报告,并且向分析员展示该数据分析报告;或者下游设备还可以基于该解密数据生成动态数据监控图表,并且在相应的监控面板中显示该动态数据监控图表等。
可选地,上述目标队列可以为kafka消息队列,也可以为rocketMQ队列。
上述实施例提供的技术方案至少能够带来以下有益效果:由S101-S102可知,当目标网页的第一脚本文件中包括预设解密方法时,电子设备可以对第一脚本文件进行预设处理,生成第二脚本文件,然后该电子设备可以执行该第二脚本文件时,以将解密数据添加至目标队列。本公开实施例中,电子设备可以基于生成并执行第二脚本文件的方式将解密数据添加至目标队列,如此下游设备(即需要获取该解密数据的设备)可以方便、快捷地获取到该解密数据,能够提高数据获取的有效性。
结合图2,如图3所示,在上述电子设备对第一脚本文件进行预设处理之前,本公开实施例提供的数据处理方法还包括S103-S104。
S103、电子设备响应于预设操作,向服务器发送脚本文件获取请求。
其中,该脚本文件获取请求包括该第一脚本文件的统一资源定位符,该脚本文件获取请求用于请求获取该第一脚本文件。
应理解,上述预设操作可以为对目标网页中包括的对象的点击操作,也可以为对该目标网页的页面刷新操作。具体的,电子设备响应于用户账户对该对象的点击操作(或者对该目标网页的页面刷新操作),可以向服务器发送该脚本文件获取请求。
可以理解的是,电子设备响应于上述预设操作,可以向服务器发送多种类型的获取请求,该多种类型的获取请求可以包括上述脚本获取请求。该多种类型的获取请求中还可以包括用于请求获取图片(或视频)的获取请求。
本公开实施例中,服务器在接收到该脚本文件获取请求之后,可以基于该脚本文件获取请求中包括的第一脚本文件的统一资源定位符(uniform resource locator,URL)确定并获取该第一脚本文件,然后该服务器可以向该电子设备发送包括有该第一脚本文件的脚本文件获取响应。
S104、电子设备接收服务器发送的脚本文件获取响应。
其中,该脚本文件获取响应中包括上述第一脚本文件。
本公开实施例中,电子设备接收该服务器发送的脚本文件获取响应,即为获取到该第一脚本文件。
上述实施例提供的技术方案至少能够带来以下有益效果:由S103-S104可知,电子设备响应于预设操作,可以向服务器发送脚本文件获取请求,由于该脚本文件获取请求中包括第一脚本文件的统一资源定位符,因此服务器在接收到该脚本文件获取请求后可以根据该第一脚本文件的统一资源定位符确定并该第一脚本文件;然后该服务器可以将脚本文件获取响应发送至该电子设备,该脚本文件获取响应中包括该第一脚本文件。本公开实施例中,电子设备可以通过向服务器发送脚本文件获取请求的方式从该服务器中获取第一脚本文件,能够提升第一脚本文件的获取效率,进而可以提升第二脚本文件的生成效率。
结合图2,如图4所示,在本公开实施例的一种实现方式中,上述电子设备对脚本文件进行预设处理,具体可以包括S1011。
S1011、电子设备在第一脚本文件中添加监听方法。
其中,该监听方法用于监听上述解密数据。
本公开实施例中,上述监听方法也可以理解为一个文本信息(或一行代码)。电子设备可以在该第一脚本文件中添加该文本信息(或代码)以监听该解密数据,如此电子设备在执行上述第二脚本文件的情况下,可以将该解密数据添加至上述目标队列。
可选地,电子设备可以在该第一脚本文件的预设解密方法之前添加该监听方法;该电子设备还可以在该预设解密方法之后添加该监听方法。
在一种可选的实现方式中,上述第一脚本文件中还可以包括上述加密数据和解密数据,该加密数据可以理解为输入参数,该解密数据可以理解为输出参数。本公开实施例中,电子设备将解密数据添加至上述目标队列,也可以理解为将该输出参数添加至该目标队列。进而下游设备可以监控并获取该输出参数。
上述实施例提供的技术方案至少能够带来以下有益效果:由S1011可知,电子设备可以在第一脚本文件中添加监听方法。由于该监听方法用于监听解密数据,因此电子设备在该第一脚本文件中添加该监听方法生成的第二脚本文件可以监听该解密数据,可以准确有效地对第一脚本文件进行处理,提升了数据处理的有效性。进而电子设备执行该第二脚本文件,可以将该解密数据添加至目标队列,以使得下游设备可以监听并获取到该解密数据,能够提高数据获取的效率。
结合图4,如图5所示,本公开实施例提供的数据处理方法还包括S105。
S105、电子设备在目标网页的预设对象中注入监听方法,以使得电子设备调用监听方法。
需要说明的是,该目标网页中可以包括多个对象,该多个对象可以分为有公共对象和隐藏对象。该公共对象可以理解为电子设备能够直接使用的对象。
本公开实施例中,上述预设对象可以为该目标网页的window对象。
本公开实施例中,电子设备将上述监听方法注入到该预设对象中,以使得该电子设备可以在上述第一脚本文件中添加该监听方法。
可以理解的是,电子设备单纯的基于(或执行)上述第一脚本文件可能无法使得下游设备获取到上述解密数据。本公开实施例中,电子设备可以通过Javafx框架自带的jsbridge扩展能力将在上述预设对象中注入该监听方法,具体可以理解为将js代码桥接到java层上,如此该监听方法即可以将该解密数据传到该java层,该java层在接收到该解密数据之后,可以将该解密数据添加至目标队列,并且基于该目标队列将该解密数据传输到下游设备。
上述实施例提供的技术方案至少能够带来以下有益效果:由S105可知,电子设备可以在目标网页的预设对象中注入监听方法,以使得该电子设备调用该监听方法。本公开实施例中,电子设备在调用该监听方法之后可以在第一脚本文件中添加该监听方法,能够准确地对第一脚本文件进行处理,可以提升数据处理的效率。
结合图2,如图6所示,本公开实施例提供的数据处理方法还包括S106。
S106、当预设应用程序的窗体引擎具有显示功能时,电子设备将窗体引擎替换为嵌入式引擎。
其中,该嵌入式引擎用于禁止显示该目标网页的窗口,该预设应用程序为执行上述第二脚本文件的应用程序。
本公开实施例中,该预设应用程序可以包括图形引擎、窗体引擎、媒体引擎以及web引擎。具体的,该图形引擎用于展示该目标网页的图形(或控件)等;该窗体引擎用于显示该目标网页的窗口;该媒体引擎用于播放图片和视频等;该web引擎用于解析该目标网页中的代码,执行脚本文件等。
应理解,当该窗体引擎具有显示功能时,说明该目标网页的数据(例如上述解密数据)需要显示在电子设备的显示器(或显示界面)上,电子设备将该窗体引擎替换为该嵌入式引擎,即将该窗体引擎替换为不具有显示功能的窗体引擎。当该窗体引擎不具有显示功能(例如电子设备将窗体引擎替换为嵌入式引擎之后)时,电子设备可以隐藏目标网页的窗口,以使得该预设应用程序可以运行在纯后台环境中,即该目标网页的数据无需显示在该电子设备的显示器上,或者该目标网页的数据可以存储在没有显示器的电子设备中。
可选地,上述具有显示功能的窗体引擎可以为glass引擎,该嵌入式引擎可以为monocel引擎)。电子设备将该glass引擎替换为该monocel引擎可以使电子设备运行在互联网数据中心(internet data center,IDC)机房中,进而当电子设备中的预设应用程序执行该第二脚本文件时,可以该IDC机房中监听并获取该目标网页的数据(或数据变化)。
上述实施例提供的技术方案至少能够带来以下有益效果:由S106可知:当预设应用程序的窗体引擎具有显示功能时,电子设备可以将该窗体引擎替换为嵌入式引擎,由于该嵌入式引擎禁止显示该目标网页的窗口,因此电子设备无需在该电子设备中系那是该目标网页的窗口。本公开实施例中,电子设备可以将具有显示功能的窗体引擎替换为嵌入式引擎(即禁止显示目标网页的窗口的窗体引擎),如此电子设备无需依赖显示器显示目标网页的数据,可以IDC机房中监听并获取该目标网页的数据,能够减少电子设备的使用成本。
以下以一个示例,说明本公开实施例提供的数据处理方法。
示例性的,如图7所示,URLLoader.java网络层核心类为java语言中的一个浏览器控件,可以代理发送浏览器(即预设应用程序)发送的请求和响应(例如上述脚本文件获取请求和脚本获取响应)。javafx为java语言自带的一款图形用户界面(graphical userinterface,GUI)编程框架,用于开发窗体应用,其内置了一个基于webkit浏览器内核的webview(网页视图)控制,可以使其向普通浏览器一样打开任意网页;该javafx的webview控件中包含webkit内核以及jfx库,该jfx库为javafx的一个工具库,可以打开一个窗口并传递数据。
继续如图7所示,该S201、启动;具体的,电子设备可以开始执行本公开实施例提供的数据处理方法。S202、使用javassist向网络层类注入扩展方法;具体的,javassist为java语言自带的一款字节码修改器,可动态修改程序的字节码,实现对java程序中基础库的扩展修改。本公开实施例中,电子设备采用java编程语言,通过javassist字节码修改库,对网络层核心类URLLoader.java中网络发送与响应部分进行修改,可以理解为上述基于第一脚本文件生成第二脚本文件的过程。
具体的,上述S202包括S2021-S2027:S2021、发起网络请求;即电子设备可以向服务器发送网络请求。S2022、是否为js文件;该js文件可以理解为上述第一脚本文件;具体的,电子设备可以确定该网络请求是否用于请求获取该js文件。S2023、是否要替换;具体的,当该网络请求用于请求获取该js文件时,电子设备可以确定是否要将该js文件(具体为第一脚本文件)替换为(即生成)第二脚本文件。S2024、替换后的js文件局部代码://需要监听的目标方法var r=target_fun(p1,p2);//调用jsbridge将监听数据//通过kafka发送出去send_kafka(r,p1,p2)。具体的,电子设备可以对该js文件进行局部替换,具体为在目标方法(即上述预设解密方法)后增加发送kafka的方法,该发送kafka的方法即为上述监听方法。其中,var r用于表征上述解密数据,target_fun用于表征该预设解密方法,p1以及p2用于表征上述加密数据。S2025、kafka消息队列;该kafka消息队列可以理解为上述目标队列。具体的,电子设备可以将上述解密数据添加至该kafka消息队列。S2026、原网络请求;具体为当上述网络请求不是用于请求获取js文件的请求或者不需要对该js文件进行替换(即上述第一脚本文件中未包括该预设解密方法)时,不对该网络请求进行任何处理,该原网络请求即为该网络请求。S2027、返回响应体(即网络响应,例如上述脚本文件获取响应)给webkit内核。具体的,电子设备可以将第一脚本文件或者第二脚本文件返回给weblit内核。
S203、使用jsbridge方式,为webkit增加send_kafka方法。具体的,jsbridge可以为浏览器提供扩展能力,将一个语言调节到其他语言,本公开实施例中,jsbridge用于将js语言调节为java语言。S204、openjfx-monocel窗体虚拟化技术,使程序可以运行在headless模式下。具体的,headless为没有UI的浏览器(也可以理解为无头浏览器),运行在后台,不需要显示器也能正常使用,即电子设备可以将上述窗体引擎替换为嵌入式引擎。S205、启动javafx程序,加载目标网页,监控正式运行。具体的,电子设备启动该javafx程序即为开始监听并该目标网页的数据。在一种可选的实现方式中,当该目标网页的数据发生变化时,电子设备(具体为该javafx程度)调用jsbridge以将上述解密数据添加至kafka消息队列。S206、下游的各种消费者进行舆情分析,或者产生新消息提醒;具体的,该下游的各种消费者即为上述下游设备。该舆情分析可以理解为该电子设备对该解密数据进行分析并生成一定的分析策略(或分析报告);该新消息提醒可以用于提示账户该解密数据的变化情况。
可以理解的,在实际实施时,本公开实施例所述的电子设备/服务器可以包含有用于实现前述对应数据处理方法的一个或多个硬件结构和/或软件模块,这些执行硬件结构和/或软件模块可以构成一个电子设备/服务器。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的算法步骤,本公开能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本公开的范围。
基于这样的理解,本公开实施例还对应提供一种数据处理装置,图8示出了本公开实施例提供的数据处理装置的结构示意图。如图8所示,该数据处理装置20可以包括:处理模块201。
处理模块201,被配置为当目标网页的第一脚本文件中包括预设解密方法时,对该第一脚本文件进行预设处理,生成第二脚本文件,该预设解密方法用于对加密数据进行解密处理得到解密数据;该处理模块,还被配置为执行该第二脚本文件,以将该解密数据添加至目标队列。
可选地,该数据处理装置20还包括发送模块202和接收模块203;该发送模块,被配置为响应于预设操作,向服务器发送脚本文件获取请求,该脚本文件获取请求包括该第一脚本文件的统一资源定位符,该脚本文件获取请求用于请求获取该第一脚本文件;该接收模块,被配置为接收该服务器发送的脚本文件获取响应,该脚本文件获取响应中包括该第一脚本文件。
可选地,该处理模块201,具体被配置为在该第一脚本文件中添加监听方法,该监听方法用于监听该解密数据。
可选地,该处理模块201,还被配置为在该目标网页的预设对象中注入该监听方法,以使得该电子设备调用该监听方法。
可选地,该处理模块201,还被配置为当预设应用程序的窗体引擎具有显示功能时,将该窗体引擎替换为嵌入式引擎,该嵌入式引擎用于禁止显示该目标网页的窗口,该预设应用程序为执行该第二脚本文件的应用程序。
如上该,本公开实施例可以根据上述方法示例对数据处理装置进行功能模块的划分。其中,上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。另外,还需要说明的是,本公开实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。
关于上述实施例中的数据处理装置,其中各个模块执行操作的具体方式、以及具备的有益效果,均已经在前述方法实施例中进行了详细描述,此处不再赘述。
图9是本公开提供的另一种数据处理装置的结构示意图。如图9,该数据处理装置30可以包括至少一个处理器301以及用于存储处理器可执行指令的存储器303。其中,处理器301被配置为执行存储器303中的指令,以实现上述实施例中的数据处理方法。
另外,数据处理装置30还可以包括通信总线302以及至少一个通信接口304。
处理器301可以是一个处理器(central processing units,CPU),微处理单元,ASIC,或一个或多个用于控制本公开方案程序执行的集成电路。
通信总线302可包括一通路,在上述组件之间传送信息。
通信接口304,使用任何收发器一类的装置,用于与其他设备或通信网络通信,如以太网,无线接入网(radio access network,RAN),无线局域网(wireless local areanetworks,WLAN)等。
存储器303可以是只读存储器(read-only memory,ROM)或可存储静态信息和指令的其他类型的静态存储设备,随机存取存储器(random access memory,RAM)或者可存储信息和指令的其他类型的动态存储设备,也可以是电可擦可编程只读存储器(electricallyerasable programmable read-only memory,EEPROM)、只读光盘(compact disc read-only memory,CD-ROM)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。存储器可以是独立存在,通过总线与处理单元相连接。存储器也可以和处理单元集成在一起。
其中,存储器303用于存储执行本公开方案的指令,并由处理器301来控制执行。处理器301用于执行存储器303中存储的指令,从而实现本公开方法中的功能。
在具体实现中,作为一种实施例,处理器301可以包括一个或多个CPU,例如图9中的CPU0和CPU1。
在具体实现中,作为一种实施例,数据处理装置30可以包括多个处理器,例如图9中的处理器301和处理器307。这些处理器中的每一个可以是一个单核(single-CPU)处理器,也可以是一个多核(multi-CPU)处理器。这里的处理器可以指一个或多个设备、电路、和/或用于处理数据(例如计算机程序指令)的处理核。
在具体实现中,作为一种实施例,数据处理装置30还可以包括输出设备305和输入设备306。输出设备305和处理器301通信,可以以多种方式来显示信息。例如,输出设备305可以是液晶显示器(liquid crystal display,LCD),发光二级管(light emitting diode,LED)显示设备,阴极射线管(cathode ray tube,CRT)显示设备,或投影仪(projector)等。输入设备306和处理器301通信,可以以多种方式接受用户的输入。例如,输入设备306可以是鼠标、键盘、触摸屏设备或传感设备等。
本领域技术人员可以理解,图9中示出的结构并不构成对数据处理装置30的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
另外,本公开还提供一种计算机可读存储介质,包括指令,当指令由电子设备的处理器执行时,使得电子设备执行如上述实施例所提供的数据处理方法。
另外,本公开还提供一种计算机程序产品,包括指令,当指令由电子设备的处理器执行时,使得电子设备执行如上述实施例所提供的数据处理方法。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。
Claims (10)
1.一种数据处理方法,应用于电子设备,其特征在于,所述方法包括:
当目标网页的第一脚本文件中包括预设解密方法时,对所述第一脚本文件进行预设处理,生成第二脚本文件,所述预设解密方法用于对加密数据进行解密处理得到解密数据;
执行所述第二脚本文件,以将所述解密数据添加至目标队列。
2.根据权利要求1所述的数据处理方法,其特征在于,在所述对所述第一脚本文件进行预设处理之前,所述方法还包括:
响应于预设操作,向服务器发送脚本文件获取请求,所述脚本文件获取请求包括所述第一脚本文件的统一资源定位符,所述脚本文件获取请求用于请求获取所述第一脚本文件;
接收所述服务器发送的脚本文件获取响应,所述脚本文件获取响应中包括所述第一脚本文件。
3.根据权利要求1所述的数据处理方法,其特征在于,所述对所述第一脚本文件进行预设处理,包括:
在所述第一脚本文件中添加监听方法,所述监听方法用于监听所述解密数据。
4.根据权利要求3所述的数据处理方法,其特征在于,所述方法还包括:
在所述目标网页的预设对象中注入所述监听方法,以使得所述电子设备调用所述监听方法。
5.根据权利要求1-4中任一项所述的数据处理方法,其特征在于,所述方法还包括:
当预设应用程序的窗体引擎具有显示功能时,将所述窗体引擎替换为嵌入式引擎,所述嵌入式引擎用于禁止显示所述目标网页的窗口,所述预设应用程序为执行所述第二脚本文件的应用程序。
6.一种数据处理装置,其特征在于,包括:处理模块;
所述处理模块,被配置为当目标网页的第一脚本文件中包括预设解密方法时,对所述第一脚本文件进行预设处理,生成第二脚本文件,所述预设解密方法用于对加密数据进行解密处理得到解密数据;
所述处理模块,还被配置为执行所述第二脚本文件,以将所述解密数据添加至目标队列。
7.根据权利要求6所述的数据处理装置,其特征在于,所述数据处理装置还包括获取模块和接收模块;
所述获取模块,被配置为响应于预设操作,向服务器发送脚本文件获取请求,所述脚本文件获取请求包括所述第一脚本文件的统一资源定位符,所述脚本文件获取请求用于请求获取所述第一脚本文件;
所述接收模块,被配置为接收所述服务器发送的脚本文件获取响应,所述脚本文件获取响应中包括所述第一脚本文件。
8.一种电子设备,其特征在于,所述电子设备包括:
处理器;
被配置为存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如权利要求1-5中任一项所述的数据处理方法。
9.一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,其特征在于,当所述计算机可读存储介质中的指令由电子设备的处理器执行时,使得所述电子设备能够执行如权利要求1-5中任一项所述的数据处理方法。
10.一种计算机程序产品,其特征在于,所述计算机程序产品包括计算机指令,当所述计算机指令在电子设备的处理器上运行时,使得所述电子设备执行如权利要求1-5中任一项所述的数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211006606.7A CN115374331A (zh) | 2022-08-22 | 2022-08-22 | 一种数据处理方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211006606.7A CN115374331A (zh) | 2022-08-22 | 2022-08-22 | 一种数据处理方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115374331A true CN115374331A (zh) | 2022-11-22 |
Family
ID=84066762
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211006606.7A Pending CN115374331A (zh) | 2022-08-22 | 2022-08-22 | 一种数据处理方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115374331A (zh) |
-
2022
- 2022-08-22 CN CN202211006606.7A patent/CN115374331A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111159614B (zh) | 网页资源获取方法以及装置 | |
KR102270749B1 (ko) | 커스텀 디지털 컴포넌트 | |
CN109992406B (zh) | 图片请求方法、响应图片请求的方法及客户端 | |
JP6404816B2 (ja) | ウェブページアクセス要求に対する応答の方法および装置 | |
CN105718313A (zh) | 应用操作方法和装置 | |
CN108449187B (zh) | 一种令牌刷新的方法及装置 | |
CN106656920A (zh) | Http服务的处理方法及装置 | |
CN112653670A (zh) | 业务逻辑漏洞检测方法、装置、存储介质以及终端 | |
WO2020073374A1 (zh) | 一种广告防屏蔽的方法和装置 | |
CN111079048A (zh) | 一种页面加载方法及装置 | |
CN113434241A (zh) | 页面跳转方法及装置 | |
CN115357761A (zh) | 链路追踪方法、装置、电子设备及存储介质 | |
CN108334322B (zh) | 一种mvc框架的数据请求方法及系统 | |
US20230080601A1 (en) | Webpage integrity monitoring | |
CN113010174A (zh) | 业务监控的方法和装置 | |
CN115374331A (zh) | 一种数据处理方法、装置、电子设备及存储介质 | |
CN113472785B (zh) | 数据处理方法、装置、电子设备及可读存储介质 | |
CN114936151A (zh) | 调试页面的显示方法、装置、设备、存储介质及通信系统 | |
US9959195B2 (en) | Dynamic instrumentation of WSGI applications | |
CN114302207A (zh) | 一种弹幕显示方法、装置、系统、设备及存储介质 | |
CN114756833A (zh) | 代码混淆方法、装置、设备、介质以及程序产品 | |
CN112347382A (zh) | 产品页面分享方法、装置及电子设备 | |
CN113722115A (zh) | 调用接口的方法、装置、设备和计算机可读介质 | |
CN110851754A (zh) | 网页访问方法及系统、计算机系统和计算机可读存储介质 | |
CN113347250B (zh) | 数据访问方法、数据访问装置、电子设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |