CN112416311A - 数据处理方法和装置、存储介质及处理器 - Google Patents
数据处理方法和装置、存储介质及处理器 Download PDFInfo
- Publication number
- CN112416311A CN112416311A CN201910780084.8A CN201910780084A CN112416311A CN 112416311 A CN112416311 A CN 112416311A CN 201910780084 A CN201910780084 A CN 201910780084A CN 112416311 A CN112416311 A CN 112416311A
- Authority
- CN
- China
- Prior art keywords
- script file
- filtering
- data
- filtering condition
- script
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 16
- 238000001914 filtration Methods 0.000 claims abstract description 92
- 238000012545 processing Methods 0.000 claims abstract description 29
- 238000000034 method Methods 0.000 claims abstract description 23
- 238000004458 analytical method Methods 0.000 claims description 6
- 230000004044 response Effects 0.000 abstract description 10
- 238000005516 engineering process Methods 0.000 abstract description 4
- 230000006870 function Effects 0.000 description 19
- 238000010586 diagram Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 7
- 238000004590 computer program Methods 0.000 description 6
- 238000012423 maintenance Methods 0.000 description 4
- 238000011161 development Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Stored Programmes (AREA)
Abstract
本发明公开了一种数据处理方法和装置、存储介质及处理器。其中,该方法包括:获取原始数据和过滤条件对应的脚本文件;对脚本文件进行解析,得到过滤条件;利用过滤条件对原始数据进行处理,得到过滤结果。本发明解决了相关技术中数据处理方案的成本较高,响应速度较慢的技术问题。
Description
技术领域
本发明涉及工业互联网平台领域,具体而言,涉及一种数据处理方法和装置、存储介质及处理器。
背景技术
工业互联网平台在很多方面需要进行数据过滤。目前相关技术中常用方案是为每个过滤需求单独开发功能,例如,需求是过滤年龄大于20岁的人员列表,需要开发一个功能,从一批数据中挑选20岁以上的数据,过了一段时间,又有一个需求是过滤性别为男的人员列表,这时又需要开发一个功能来挑选性别为男的数据。
但是,上述方案存在如下问题:针对每个需求开发一个功能,成本过高;功能太多,不好维护;开发新的功能,响应需求的响应速度较慢。
针对相关技术中数据处理方案的成本较高,响应速度较慢的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种数据处理方法和装置、存储介质及处理器,以至少解决相关技术中数据处理方案的成本较高,响应速度较慢的技术问题。
根据本发明实施例的一个方面,提供了一种数据处理方法,包括:获取原始数据和过滤条件对应的脚本文件;对脚本文件进行解析,得到过滤条件;利用过滤条件对原始数据进行处理,得到过滤结果。
进一步地,对脚本文件进行解析,得到过滤条件包括:利用脚本引擎对脚本文件进行解析,得到过滤条件。
进一步地,获取过滤条件对应的脚本文件包括:获取输入框输入的脚本文件。
进一步地,在过滤条件为多个的情况下,获取输入框输入的脚本文件包括:获取多个输入框输入的脚本文件,输入框的数量与过滤条件的数量相同。
进一步地,脚本文件为JavaScript脚本文件。
根据本发明实施例的另一方面,还提供了一种数据处理装置,包括:获取模块,用于获取原始数据和过滤条件对应的脚本文件;解析模块,用于对脚本文件进行解析,得到过滤条件;处理模块,用于利用过滤条件对原始数据进行处理,得到过滤结果。
进一步地,解析模块用于利用脚本引擎对脚本文件进行解析,得到过滤条件。
进一步地,获取模块用于获取输入框输入的脚本文件。
进一步地,在过滤条件为多个的情况下,获取模块用于获取多个输入框输入的脚本文件,输入框的数量与过滤条件的数量相同。
进一步地,脚本文件为JavaScript脚本文件。
根据本发明实施例的另一方面,还提供了一种存储介质,存储介质包括存储的程序,其中,在程序运行时控制存储介质所在设备执行上述的数据处理方法。
根据本发明实施例的另一方面,还提供了一种处理器,处理器用于运行程序,其中,程序运行时执行上述的数据处理方法。
在本发明实施例中,在需要进行数据过滤时,可以获取原始数据和过滤条件对应的脚本文件,通过对脚本文件进行解析,得到过滤条件,并利用过滤条件对原始数据进行处理,得到过滤结果,从而实现工业互联网平台的数据过滤需求。与相关技术相比,针对工业互联网平台的各种数据过滤需求,仅开发一个功能,通过编写JS脚本即可实现针对不同过滤需求对数据进行过滤的目的,从而达到了降低开发成本,方便功能维护,提高响应速度的技术效果,进而解决了相关技术中数据处理方案的成本较高,响应速度较慢的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种数据处理方法的流程图;
图2是根据本发明实施例的一种数据处理装置的示意图;
图3是根据本发明实施例的一种设备的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本发明实施例,提供了一种数据处理方法,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种数据处理方法的流程图,如图1所示,该方法包括如下步骤:
步骤S102,获取原始数据和过滤条件对应的脚本文件。
可选地,上述的脚本文件可以是JavaScript脚本文件。
本实施例中,原始数据是需要进行数据过滤的一批数据,例如,可以是数据库中的数据,但不仅限于此。JavaScript脚本(JS脚本)是一种客户端语言,可以解决服务器终端语言遗留的速度问题,JS脚本可以使用一种特定的描述性语言,依据一定的格式编写。JS脚本文件中是针对过滤需求,编写的JS代码,不同过滤条件对应的JS代码不同。
步骤S104,对脚本文件进行解析,得到过滤条件。
为了使计算机能够按照脚本文件对原始数据进行处理,需要对JS代码进行解析,将JS代码解析为本地机器码,得到相应的过滤条件。
步骤S106,利用过滤条件对原始数据进行处理,得到过滤结果。
在一种可选的实施例中,工业互联网平台有各种数据过滤的需求现状,而且很多服务端语言能够执行JS代码,在此基础上,可以只开发一个获取JS脚本的功能,在面对数据过滤需求时,只需要提供JS脚本文件,该功能在获取到JS代码之后,可以通过执行JS代码,按照相应的过滤条件对原始数据进行过滤,得到最终的过滤结果。
通过本发明上述实施例,在需要进行数据过滤时,可以获取原始数据和过滤条件对应的脚本文件,通过对脚本文件进行解析,得到过滤条件,并利用过滤条件对原始数据进行处理,得到过滤结果,从而实现工业互联网平台的数据过滤需求。与相关技术相比,针对工业互联网平台的各种数据过滤需求,仅开发一个功能,通过编写JS脚本即可实现针对不同过滤需求对数据进行过滤的目的,从而达到了降低开发成本,方便功能维护,提高响应速度的技术效果,进而解决了相关技术中数据处理方案的成本较高,响应速度较慢的技术问题。
可选地,本发明上述实施例中,对脚本文件进行解析,得到过滤条件包括:利用脚本引擎对脚本文件进行解析,得到过滤条件。
基于多服务端语言都内置有JS执行引擎的技术基础,本实施例中,针对JS脚本,可以通过服务端调用内置的JS执行引擎进行解析执行,接收原始数据,得到过滤条件,进一步得到最终的过滤结果。
可选地,本发明上述实施例中,获取过滤条件对应的脚本文件包括:获取输入框输入的脚本文件。
为了能够获取到JS脚本文件,可以实现一个能够输入JS脚本的功能,也即实现一个输入框功能,当需要进行过滤时,可以添加一条数据,并在输入框中输入过滤条件对应的JS代码。
可选地,本发明上述实施例中,在过滤条件为多个的情况下,获取输入框输入的脚本文件包括:获取多个输入框输入的脚本文件,输入框的数量与过滤条件的数量相同。
针对多个数据过滤需求,可以为每个数据过滤需求添加一条数据,也即针对每个数据过滤需求添加一个输入框,在每个输入框内输入一个数据过滤需求对应的JS代码,进一步通过内置的JS执行引擎进行解析,产生最终的过滤结果。
根据本发明实施例,还提供了一种数据处理装置。图2是根据本发明实施例的一种数据处理装置的示意图,如图2所示,该装置包括:获取模块22、解析模块24和处理模块26。
其中,获取模块22用于获取原始数据和过滤条件对应的脚本文件;解析模块24用于对脚本文件进行解析,得到过滤条件;处理模块26用于利用过滤条件对原始数据进行处理,得到过滤结果。
通过本发明上述实施例,在需要进行数据过滤时,可以通过获取模块获取原始数据和过滤条件对应的脚本文件,通过解析模块对脚本文件进行解析,得到过滤条件,并通过处理模块利用过滤条件对原始数据进行处理,得到过滤结果,从而实现工业互联网平台的数据过滤需求。与相关技术相比,针对工业互联网平台的各种数据过滤需求,仅开发一个功能,通过编写JS脚本即可实现针对不同过滤需求对数据进行过滤的目的,从而达到了降低开发成本,方便功能维护,提高响应速度的技术效果,进而解决了相关技术中数据处理方案的成本较高,响应速度较慢的技术问题。
可选地,本发明上述实施例中,解析模块用于利用脚本引擎对脚本文件进行解析,得到过滤条件。
可选地,本发明上述实施例中,获取模块用于获取输入框输入的脚本文件。
可选地,本发明上述实施例中,在过滤条件为多个的情况下,获取模块用于获取多个输入框输入的脚本文件,输入框的数量与过滤条件的数量相同。
所述数据处理装置包括处理器和存储器,上述获取模块、解析模块和处理模块等均作为程序单元存储在存储器中,由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
处理器中包含内核,由内核去存储器中调取相应的程序单元。内核可以设置一个或以上,通过调整内核参数来实现仅开发一个功能即可针对不同过滤需求对数据进行过滤。
本发明实施例提供了一种存储介质,其上存储有程序,该程序被处理器执行时实现所述数据处理方法。
本发明实施例提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行所述数据处理方法。
本发明实施例提供了一种设备,设备包括至少一个处理器、以及与处理器连接的至少一个存储器、总线;其中,处理器、存储器通过总线完成相互间的通信;处理器用于调用存储器中的程序指令,以执行上述的数据处理方法。本文中的设备可以是服务器、PC、PAD、手机等。
本申请还提供了一种计算机程序产品,当在数据处理设备上执行时,适于执行初始化有如下方法步骤的程序:
获取原始数据和过滤条件对应的脚本文件;
对脚本文件进行解析,得到过滤条件;
利用过滤条件对原始数据进行处理,得到过滤结果。
利用脚本引擎对脚本文件进行解析,得到过滤条件。
获取输入框输入的脚本文件。
在过滤条件为多个的情况下,获取多个输入框输入的脚本文件,输入框的数量与过滤条件的数量相同。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
在一个典型的配置中,如图3所示,设备30包括一个或多个处理器301(CPU)、存储器302和总线303。设备还可以包括输入/输出接口、网络接口等。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM),存储器包括至少一个存储芯片。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
以上仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。
Claims (10)
1.一种数据处理方法,其特征在于,包括:
获取原始数据和过滤条件对应的脚本文件;
对所述脚本文件进行解析,得到所述过滤条件;
利用所述过滤条件对所述原始数据进行处理,得到过滤结果。
2.根据权利要求1所述的方法,其特征在于,对所述脚本文件进行解析,得到所述过滤条件包括:
利用脚本引擎对所述脚本文件进行解析,得到所述过滤条件。
3.根据权利要求1所述的方法,其特征在于,获取过滤条件对应的脚本文件包括:
获取输入框输入的所述脚本文件。
4.根据权利要求3所述的方法,其特征在于,在所述过滤条件为多个的情况下,获取输入框输入的所述脚本文件包括:
获取多个输入框输入的所述脚本文件,所述输入框的数量与所述过滤条件的数量相同。
5.根据权利要求1所述的方法,其特征在于,所述脚本文件为JavaScript脚本文件。
6.一种数据处理装置,其特征在于,包括:
获取模块,用于获取原始数据和过滤条件对应的脚本文件;
解析模块,用于对所述脚本文件进行解析,得到所述过滤条件;
处理模块,用于利用所述过滤条件对所述原始数据进行处理,得到过滤结果。
7.根据权利要求6所述的装置,其特征在于,所述解析模块用于利用脚本引擎对所述脚本文件进行解析,得到所述过滤条件。
8.根据权利要求6所述的装置,其特征在于,所述获取模块用于获取输入框输入的所述脚本文件。
9.一种存储介质,其特征在于,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行权利要求1至5中任意一项所述的数据处理方法。
10.一种处理器,其特征在于,所述处理器用于运行程序,其中,所述程序运行时执行权利要求1至5中任意一项所述的数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910780084.8A CN112416311A (zh) | 2019-08-22 | 2019-08-22 | 数据处理方法和装置、存储介质及处理器 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910780084.8A CN112416311A (zh) | 2019-08-22 | 2019-08-22 | 数据处理方法和装置、存储介质及处理器 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112416311A true CN112416311A (zh) | 2021-02-26 |
Family
ID=74779034
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910780084.8A Pending CN112416311A (zh) | 2019-08-22 | 2019-08-22 | 数据处理方法和装置、存储介质及处理器 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112416311A (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017124952A1 (zh) * | 2016-01-21 | 2017-07-27 | 阿里巴巴集团控股有限公司 | 一种网页脚本加载方法和装置 |
CN108459852A (zh) * | 2018-01-30 | 2018-08-28 | 美通云动(北京)科技有限公司 | 脚本处理方法及装置、存储介质、电子设备 |
CN110019497A (zh) * | 2017-08-07 | 2019-07-16 | 北京国双科技有限公司 | 一种数据读取方法及装置 |
-
2019
- 2019-08-22 CN CN201910780084.8A patent/CN112416311A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017124952A1 (zh) * | 2016-01-21 | 2017-07-27 | 阿里巴巴集团控股有限公司 | 一种网页脚本加载方法和装置 |
CN110019497A (zh) * | 2017-08-07 | 2019-07-16 | 北京国双科技有限公司 | 一种数据读取方法及装置 |
CN108459852A (zh) * | 2018-01-30 | 2018-08-28 | 美通云动(北京)科技有限公司 | 脚本处理方法及装置、存储介质、电子设备 |
Non-Patent Citations (1)
Title |
---|
有人把我昵称抢了: "Java工具类-Java动态执行JS脚本(ScriptEngine)", pages 1 - 3, Retrieved from the Internet <URL:https://blog.csdn.net/u011909918/article/details/90294371> * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109918296B (zh) | 软件自动化测试方法及装置 | |
CN107066519B (zh) | 一种任务检测方法及装置 | |
CN106933887B (zh) | 一种数据可视化方法及装置 | |
CN110569428A (zh) | 一种推荐模型的构建方法、装置及设备 | |
CN109284115A (zh) | 一种生成追踪器脚本的方法及装置 | |
CN112162915A (zh) | 一种测试数据生成方法、装置、设备及存储介质 | |
CN107015986B (zh) | 一种爬虫爬取网页的方法及装置 | |
CN115544304A (zh) | 文件解析方法、装置、可读存储介质及文件解析设备 | |
CN108874379B (zh) | 页面的处理方法及装置 | |
CN110020343B (zh) | 网页编码格式的确定方法和装置 | |
CN112416311A (zh) | 数据处理方法和装置、存储介质及处理器 | |
CN110968810A (zh) | 网页数据处理方法和装置 | |
CN110968500A (zh) | 一种测试用例的执行方法及装置 | |
CN110968555A (zh) | 维度数据处理方法和装置 | |
CN114968028A (zh) | 基于用户行为分析动态改变菜单布局的方法、设备及介质 | |
CN114860362A (zh) | 界面的更新方法及装置 | |
CN110019198B (zh) | 数据查询方法和装置 | |
CN111124399B (zh) | 弹窗组件的处理方法及装置、存储介质及处理器 | |
CN112860456A (zh) | 日志处理方法和装置 | |
CN106776652B (zh) | 数据处理方法及装置 | |
CN112748947A (zh) | 系统的配置方法、装置、存储介质及电子设备 | |
CN110020268B (zh) | 页面返回方法及装置 | |
CN112965737A (zh) | 一种业务功能调用方法及装置 | |
CN106997353B (zh) | 网页改版的监控方法及装置 | |
CN110968781B (zh) | 视频页面剧目确定方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |