CN113342553A - 一种数据的获取方法、装置、电子设备及存储介质 - Google Patents
一种数据的获取方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN113342553A CN113342553A CN202110761412.7A CN202110761412A CN113342553A CN 113342553 A CN113342553 A CN 113342553A CN 202110761412 A CN202110761412 A CN 202110761412A CN 113342553 A CN113342553 A CN 113342553A
- Authority
- CN
- China
- Prior art keywords
- data
- processing
- processed
- program
- calling
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 66
- 238000012545 processing Methods 0.000 claims abstract description 438
- 238000004590 computer program Methods 0.000 claims description 6
- 230000008569 process Effects 0.000 abstract description 23
- 238000010586 diagram Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 238000012550 audit Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000004148 unit process Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/547—Remote procedure calls [RPC]; Web services
Abstract
本申请提供了一种数据的获取方法、装置、电子设备及存储介质,所述获取方法包括:获取待处理数据;调用第一处理程序中的第一预设处理规则对所述待处理数据进行数据处理,得到第一处理数据;检测所述第一处理数据是否满足数据处理需求,若第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据;基于第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据。这样,当无法通过第一处理程序对数据进行处理时,则利用调用接口调用第二处理程序对数据进行处理,实现了利用调用接口分布式调用数据处理程序快速实现对待处理数据进行处理,提高数据处理的准确率以及效率。
Description
技术领域
本申请涉及数据的获取技术领域,尤其是涉及一种数据的获取方法、装置、电子设备及存储介质。
背景技术
审计日志数据处理功能大多依赖于计算机编程语言(java)软件和解释器(python)脚本,基本采用流式处理模式,从最开始的数据接收,到数据处理,再到数据存储。Java程序和python脚本的处理模式缺点是在横向部署的时候配置文件和处理规则的统一和更新麻烦,且该多段处理模式需要在开源流处理平台(kafka)内暂存大于1次,多段处理流程程序出问题的几率也会增加,任何一个阶段的异常都导致最终数据异常。在数据处理中,因涉及到多个功能点和处理步骤,由多个多段处理程序进行分部进行处理,直到达到数据格式和内容要求后进入下一阶段。
但是,现阶段中在数据处理过程中采用流程性处理步骤,当流程处理步骤中任一处理步骤发生错误时,则会导致整个数据处理过程出现错误,无法进行下一步的处理步骤,因为如何减少流程步骤保证数据处理流程的流畅度是亟待解决的技术问题。
发明内容
有鉴于此,本申请的目的在于提供一种数据的获取方法、装置、电子设备及存储介质,这样,通过第一处理程序和第二处理程序对待处理数据共同处理,当无法通过第一处理程序对数据进行处理时,则利用调用接口调用第二处理程序对数据进行处理,实现了利用调用接口分布式调用数据处理程序,在保证满足数据处理需求的同时,快速实现对待处理数据进行处理,有助于提高数据处理的准确率以及效率。
本申请实施例提供了一种数据的获取方法,所述获取方法包括:
获取待处理数据;
调用第一处理程序中的第一预设处理规则对所述待处理数据进行数据处理,得到第一处理数据;
检测所述第一处理数据是否满足数据处理需求,若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据;
基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据。
进一步的,所述若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据,包括:
将所述待处理数据基于所述调用接口传输至所述第二处理程序中,调用第二处理程序中的第二预设处理规则对所述待处理数据进行数据处理,得到第二处理数据。
进一步的,所述基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据,包括:
控制第一处理程序将所述第一处理数据以及所述第二处理数据进行数据拼接处理,获得所述目标处理数据。
进一步的,所述获取方法还包括:
将所述目标处理数据与对应的数据处理需求进行关联设置,并将所述目标处理数据以及对应的数据处理需求进行存储。
进一步的,所述获取方法还包括:
响应于对所述数据处理需求进行更新的请求,基于所述调用接口调用所述第二处理程序,将所述第二处理程序中的与其相对应的第二预设处理规则进行更新,获取所述第二处理程序中更新后的更新处理规则;
基于所述第一处理程序中的第一预设处理规则和所述第二处理程序中的更新后的更新处理规则对所述待处理数据进行更新处理,获得更新后的目标数据结果。
本申请实施例还提供了一种数据的获取装置,所述获取装置包括:
获取模块,用于获取待处理数据;
处理模块,用于调用第一处理程序中的第一预设处理规则对所述待处理数据进行数据处理,得到第一处理数据;
判断模块,用于检测所述第一处理数据是否满足数据处理需求,若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据;
输出模块,用于基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据。
进一步的,所述判断模块在用于所述若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据时,所述判断模块还用于:
将所述待处理数据基于所述调用接口传输至所述第二处理程序中,调用第二处理程序中的第二预设处理规则对所述待处理数据进行数据处理,得到第二处理数据。
进一步的,所述输出模块在用于所述基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据时,所述输出模块还用于:
控制第一处理程序将所述第一处理数据以及所述第二处理数据进行数据拼接处理,获得所述目标处理数据。
本申请实施例还提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如上述的一种数据的获取方法的步骤。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如上述的一种数据的获取方法的步骤。
本申请提供了一种数据的获取方法、装置、电子设备及存储介质,所述获取方法包括:获取待处理数据;调用第一处理程序中的第一预设处理规则对所述待处理数据进行数据处理,得到第一处理数据;检测所述第一处理数据是否满足数据处理需求,若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据;基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据。
这样,通过第一处理程序和第二处理程序对待处理数据共同处理,当无法通过第一处理程序对数据进行处理时,则利用调用接口调用第二处理程序对数据进行处理,实现了利用调用接口分布式调用数据处理程序,快速对待处理数据进行处理的优点。
为使本申请的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本申请实施例所提供的一种数据的获取方法的流程图;
图2为本申请实施例所提供的另一种数据的获取方法的流程图;
图3为本申请实施例所提供的一种数据的获取方法的数据处理过程流程图;
图4为本申请实施例所提供的一种数据的获取装置的结构示意图之一;
图5为本申请实施例所提供的一种数据的获取装置的结构示意图之二;
图6为本申请实施例所提供的一种电子设备的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,应当理解,本申请中的附图仅起到说明和描述的目的,并不用于限定本申请的保护范围。另外,应当理解,示意性的附图并未按实物比例绘制。本申请中使用的流程图示出了根据本申请的一些实施例实现的操作。应当理解,流程图的操作可以不按顺序实现,没有逻辑的上下文关系的步骤可以反转顺序或者同时实施。此外,本领域技术人员在本申请内容的指引下,可以向流程图添加一个或多个其他操作,也可以从流程图中移除一个或多个操作。
另外,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的全部其他实施例,都属于本申请保护的范围。
为了使得本领域技术人员能够使用本申请内容,结合特定应用场景“数据的获取”,给出以下实施方式,对于本领域技术人员来说,在不脱离本申请的精神和范围的情况下,可以将这里定义的一般原理应用于其他实施例和应用场景。
本申请实施例下述方法、装置、电子设备或计算机可读存储介质可以应用于任何需要进行数据的获取的场景,本申请实施例并不对具体的应用场景作限制,任何使用本申请实施例提供的一种数据的获取方法及装置的方案均在本申请保护范围内。
经研究发现,现阶段中在数据处理过程中采用流程性处理步骤,当流程处理步骤中任一处理步骤发生错误时,则会导致整个数据处理过程出现错误,无法进行下一步的处理步骤,因为如何减少流程步骤保证数据处理流程的流畅度是亟待解决的技术问题。
基于此,本申请提供了一种数据的获取方法,获取待处理数据;调用第一处理程序中的第一预设处理规则对所述待处理数据进行数据处理,得到第一处理数据;检测所述第一处理数据是否满足数据处理需求,若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据;基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据。
这样,通过第一处理程序和第二处理程序对待处理数据共同处理,当无法通过第一处理程序对数据进行处理时,则利用调用接口调用第二处理程序对数据进行处理,实现了利用调用接口分布式调用数据处理程序,在保证满足数据处理需求的同时,快速实现对待处理数据进行处理,有助于提高数据处理的准确率以及效率。
为便于对本申请进行理解,下面结合具体实施例对本申请提供的技术方案进行详细说明。
请参阅图1,图1为本申请实施例所提供的一种数据的获取方法的流程图。如图1中所示,本申请实施例提供的获取方法,包括:
S101:获取待处理数据。
该步骤中,根据用户的数据处理需求获取待处理数据。
这里,待处理数据可以为日志类型数据、文本数据或其他类型数据。
其中,在数据源或者数据库中存放着大量待处理数据,根据用户的请求在数据源或者数据库中获取大量待处理数据。
S102:调用第一处理程序中的第一预设处理规则对所述待处理数据进行数据处理,得到第一处理数据。
该步骤中,当获取到大量待处理数据后,调用第一处理程序中的第一预设处理规则,利用第一预设处理规则对待处理数据进行数据处理,在完成数据处理后获得第一处理数据。
这里,第一处理程序中的第一预设处理规则时用户事先设置好的,在第一预设处理规则设置完成后,在第一处理程序中对待处理数据进行数据处理。其中,预设的处理规则可以为对手机号码的正规匹配分拣,在处理规则预设的方面此部分不做限定,现有技术中任一一种预设的处理规则均在本申请的保护范围之中。
这里,第一处理程序用于对待处理数据进行数据处理,第一处理程序可以为语言处理程序,其中,语言处理程序是将用程序设计语言编写的源程序转换成机器语言的形式,以便计算机能够运行,这一转换是由翻译程序来完成的。翻译程序除了要完成语言间的转换外,还要进行语法、语义等方面的检查,翻译程序统称为语言处理程序,共有三种:汇编程序、编译程序和解释程序,第一处理程序还可以为其他现有技术中的处理程序,此部分不做限定。
这里,第一处理数据是待处理数据根据第一处理程序中的第一预设处理规则进行数据处理获得的结果信息,如,利用预设的第一处理规则-对手机号码的正规匹配分拣:在一段待处理文本内判断是否还有手机号码,并将手机号码分拣出来,形成“手机号码数量XX,手机号码是XXXXXXXXXXX”的结果。
S103:检测所述第一处理数据是否满足数据处理需求,若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据。
该步骤中,当第一处理程序中依据第一处理规则对待处理数据进行数据处理的第一处理数据,判断第一处理数据是否满足用户的数据处理需求,当第一处理数据不满足数据处理需求,则调用接口调用第二处理程序对待处理数据进行数据处理,获得第二处理数据。
这里,数据处理需求为用户所要查询的数据的要求,如用户请求查询XX人的电话号码的信息,或者是用户请求在一段文本中查询出携带敏感信息的文字位置,此部位不做限定。
这里,调用接口用于调用其他处理程序,其中,调用接口可以采用HTTP接口。
其中,第二处理程序可以为python程序,用于对待处理数据进行从数据处理。
这里,第二处理数据时利用第二处理程序中的处理规则对待处理数据进行数据处理,获得第二处理数据,其中,此过程中的待处理数据可以为步骤S102中的第一处理程序处理不了的待处理数据。
该步骤中,所述若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据,包括:
将所述待处理数据基于所述调用接口传输至所述第二处理程序中,调用第二处理程序中的第二预设处理规则对所述待处理数据进行数据处理,得到第二处理数据。
这里,将所述待处理数据通过调用接口输入至第二处理程序中,在第二处理程序中存储着预先设置好的第二预设处理规则,利用第二预设处理规则对待处理数据进行数据处理,获得第二处理数据。
其中,输入至第二处理程序中的待处理数据可以为在第一处理程序中无法依据第一预设处理规则进行数据处理的待处理数据,也可以为在第一处理程序中因获得的第一处理数据不符合数据处理需求,在第二处理程序中对待处理数据进行下一步的处理。
S104:基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据。
该步骤中,将第一处理数据和第二处理数据组合,得到满足数据处理需求的目标处理数据。
这里,可以将第一处理数据的内容与第二处理数据的内容相融合,获得目标处理数据,此部分中将第一处理数据和第二处理数据如何让进行组合的方式不做限定,现有技术中任一数据组合的方式都在本申请保护的范围之内。
其中,目标处理数据为用户的数据处理需求的结果数据。
该步骤中,所述基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据,包括:
控制第一处理程序将所述第一处理数据以及所述第二处理数据进行数据拼接处理,获得所述目标处理数据。
这里,控制第一处理程序将第一处理数据以及第二处理数据进行数据拼接处理,获得目标处理数据,其中,拼接处理可以依据将第一处理数据的字符内容和第二处理数据的字符内容相拼接。
将所述目标处理数据与对应的数据处理需求进行关联设置,并将所述目标处理数据以及对应的数据处理需求进行存储。
这里,将目标处理数据和数据处理需求进行关联设置,可以采用将目标处理数据的标签与数据处理需求的标签相匹配,然后将目标处理数据以及对应的数据处理需求进行存储。当用户想再一次获取该数据处理需求对应的目标处理数据时,可以直接在存储单元输入该数据处理需求的标签信息则会获得相对应的目标处理数据,无需进行再一次数据处理。
本申请提供了一种数据的获取方法,获取待处理数据;调用第一处理程序中的第一预设处理规则对所述待处理数据进行数据处理,得到第一处理数据;检测所述第一处理数据是否满足数据处理需求,若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据;基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据。
这样,通过第一处理程序和第二处理程序对待处理数据共同处理,当无法通过第一处理程序对数据进行处理时,则利用调用接口调用第二处理程序对数据进行处理,实现了利用调用接口分布式调用数据处理程序,在保证满足数据处理需求的同时,快速实现对待处理数据进行处理,有助于提高数据处理的准确率以及效率。
请参阅图2,图2为本申请实施例所提供的另一种数据的获取方法的流程图。如图2中所示,本申请实施例提供的获取方法,包括:
S201:获取待处理数据。
S202:调用第一处理程序中的第一预设处理规则对所述待处理数据进行数据处理,得到第一处理数据。
S203:检测所述第一处理数据是否满足数据处理需求,若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据。
S204:基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据。
其中,S201至S204的描述可以参照S101至S104的描述,并且能达到相同的技术效果,对此不做赘述。
S205:响应于对所述数据处理需求进行更新的请求,基于所述调用接口调用所述第二处理程序,将所述第二处理程序中的与其相对应的第二预设处理规则进行更新,获取所述第二处理程序中更新后的更新处理规则。
该步骤中,响应于对数据处理需求进行更新的请求,利用调用接口调用第二处理程序,将第二处理程序中的与其相对应的第二预设处理规则进行更新,获取第二处理程序中更新后的更新处理规则。
这里,更新的请求为根据用户的要求将数据处理需求进行更改,对数据处理需求进行更改导致第二处理程序中预先设置好的第二预设处理规则也相应的进行更改。
其中,更新处理规则为依据数据处理需求进行更新,将第二预设处理规则进行更新,举例来讲,若更新前的数据处理需求为从数据中寻找出手机号码和身份证号码,则更新前的第二预设处理规则为对手机号码和身份证号码进行查询,当数据处理需求更新为从数据中寻找出携带敏感信息的数据,则将第二预设处理规则更新为确定出敏感信息的数据。
S206:基于所述第一处理程序中的第一预设处理规则和所述第二处理程序中的更新后的更新处理规则对所述待处理数据进行更新处理,获得更新后的目标数据结果。
该步骤中,依据第一处理程序中的第一预设处理规则和第二处理程序中的更新后的更新处理规则对待处理数据进行更新处理,获得更新后的目标数据结果。
这里,预设处理规则的更新在调用接口的后端完成,无需修改和重启数据第一数据处理程序,且对与第二处理程序中第二预设处理规则的修改点比较集中减少了维护难度。
这里,更新后的目标数据结果为更新后的数据处理需求相对应的计过信息,依据第一处理程序中的第一预设处理规则和第二处理程序中的更新后的更新处理规则对待处理数据进行更新处理的过程与上述步骤中对处理数据进行数据处理的过程相一致,此过程不再赘述。
在具体实施例中,请参阅图3为本申请实施例所提供的一种数据的获取方法的数据处理过程流程图,如图3所示,一方面,首先从数据源中获取待处理数据,将待处理数据输入到数据处理程序中,数据处理程序根据预设的处理规则对待处理数据进行处理,获得处理结果,将处理结果进行数据存储。另一方面,首先从数据源中获取待处理数据,将待处理数据输入到数据处理程序中,数据处理程序根据预设的处理规则对待处理数据进行处理当判断出有部分待处理数据不能被数据处理程序进行数据处理时,则中途调用HTTP接口,基于HTTP接口调用PYTHON处理单元,PYTHON处理单元根据与其相对应的预设处理规则对部分待处理的数据进行数据处理获得处理结果,并利用HTTP接口将PYTHON处理单元输出的处理结果传输至数据处理程序中,数据处理程序将自身的处理结果和PYTHON处理单元输出的处理结果想拼接获得最终处理结果,输出最终处理结果将处理结果进行数据存储。
本申请提供了一种数据的获取方法,获取待处理数据;调用第一处理程序中的第一预设处理规则对所述待处理数据进行数据处理,得到第一处理数据;检测所述第一处理数据是否满足数据处理需求,若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据;基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据。响应于对所述数据处理需求进行更新的请求,基于所述调用接口调用所述第二处理程序,将所述第二处理程序中的与其相对应的第二预设处理规则进行更新,获取所述第二处理程序中更新后的更新处理规则;基于所述第一处理程序中的第一预设处理规则和所述第二处理程序中的更新后的更新处理规则对所述待处理数据进行更新处理,获得更新后的目标数据结果。
这样,通过第一处理程序和第二处理程序对待处理数据共同处理,当无法通过第一处理程序对数据进行处理时,则利用调用接口调用第二处理程序对数据进行处理,实现了利用调用接口分布式调用数据处理程序,在保证满足数据处理需求的同时,快速实现对待处理数据进行处理,有助于提高数据处理的准确率以及效率。
请参阅图4、图5,图4为本申请实施例所提供的一种数据的获取装置的结构示意图之一;图5为本申请实施例所提供的一种数据的获取装置的结构示意图之二。如图4中所示,所述获取装置400包括:
获取模块410,用于获取待处理数据;
处理模块420,用于调用第一处理程序中的第一预设处理规则对所述待处理数据进行数据处理,得到第一处理数据;
判断模块430,用于检测所述第一处理数据是否满足数据处理需求,若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据;
输出模块440,用于基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据。
进一步的,如图4所示,所述判断模块430在用于所述若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据时,所述判断模块430还用于:
将所述待处理数据基于所述调用接口传输至所述第二处理程序中,调用第二处理程序中的第二预设处理规则对所述待处理数据进行数据处理,得到第二处理数据。
进一步的,如图4所示,所述输出模块440在用于所述基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据时,所述输出模块440还用于:
控制第一处理程序将所述第一处理数据以及所述第二处理数据进行数据拼接处理,获得所述目标处理数据。
进一步的,如图4所示,所述输出模块440,用于将所述目标处理数据与对应的数据处理需求进行关联设置,并将所述目标处理数据以及对应的数据处理需求进行存储。
进一步的,如图5所示,所述获取装置400还包括更新模块450,更新模块450用于:
响应于对所述数据处理需求进行更新的请求,基于所述调用接口调用所述第二处理程序,将所述第二处理程序中的与其相对应的第二预设处理规则进行更新,获取所述第二处理程序中更新后的更新处理规则;
基于所述第一处理程序中的第一预设处理规则和所述第二处理程序中的更新后的更新处理规则对所述待处理数据进行更新处理,获得更新后的目标数据结果。
本申请提供了一种数据的获取方法装置,获取模块,用于获取待处理数据;处理模块,用于调用第一处理程序中的第一预设处理规则对所述待处理数据进行数据处理,得到第一处理数据;判断模块,用于检测所述第一处理数据是否满足数据处理需求,若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据;输出模块,用于基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据。
这样,通过第一处理程序和第二处理程序对待处理数据共同处理,当无法通过第一处理程序对数据进行处理时,则利用调用接口调用第二处理程序对数据进行处理,实现了利用调用接口分布式调用数据处理程序,在保证满足数据处理需求的同时,快速实现对待处理数据进行处理,有助于提高数据处理的准确率以及效率。
请参阅图6,图6为本申请实施例所提供的一种电子设备的结构示意图。如图6中所示,所述电子设备600包括处理器610、存储器620和总线630。
所述存储器620存储有所述处理器610可执行的机器可读指令,当电子设备600运行时,所述处理器610与所述存储器620之间通过总线630通信,所述机器可读指令被所述处理器610执行时,可以执行如上述图1以及图2所示方法实施例中的一种数据的获取方法的步骤,具体实现方式可参见方法实施例,在此不再赘述。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时可以执行如上述图1以及图2所示方法实施例中的一种数据的获取方法的步骤,具体实现方式可参见方法实施例,在此不再赘述。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本申请的具体实施方式,用以说明本申请的技术方案,而非对其限制,本申请的保护范围并不局限于此,尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本申请实施例技术方案的精神和范围,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种数据的获取方法,其特征在于,所述获取方法包括:
获取待处理数据;
调用第一处理程序中的第一预设处理规则对所述待处理数据进行数据处理,得到第一处理数据;
检测所述第一处理数据是否满足数据处理需求,若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据;
基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据。
2.根据权利要求1所述的获取方法,其特征在于,所述若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据,包括:
将所述待处理数据基于所述调用接口传输至所述第二处理程序中,调用第二处理程序中的第二预设处理规则对所述待处理数据进行数据处理,得到第二处理数据。
3.根据权利要求1所述的获取方法,其特征在于,所述基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据,包括:
控制第一处理程序将所述第一处理数据以及所述第二处理数据进行数据拼接处理,获得所述目标处理数据。
4.根据权利要求3所述的获取方法,其特征在于,所述获取方法还包括:
将所述目标处理数据与对应的数据处理需求进行关联设置,并将所述目标处理数据以及对应的数据处理需求进行存储。
5.根据权利要求1所述的获取方法,其特征在于,所述获取方法还包括:
响应于对所述数据处理需求进行更新的请求,基于所述调用接口调用所述第二处理程序,将所述第二处理程序中的与其相对应的第二预设处理规则进行更新,获取所述第二处理程序中更新后的更新处理规则;
基于所述第一处理程序中的第一预设处理规则和所述第二处理程序中的更新后的更新处理规则对所述待处理数据进行更新处理,获得更新后的目标数据结果。
6.一种数据的获取装置,其特征在于,所述获取装置包括:
获取模块,用于获取待处理数据;
处理模块,用于调用第一处理程序中的第一预设处理规则对所述待处理数据进行数据处理,得到第一处理数据;
判断模块,用于检测所述第一处理数据是否满足数据处理需求,若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据;
输出模块,用于基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据。
7.根据权利要求6所述的获取装置,其特征在于,所述判断模块在用于所述若所述第一处理数据不满足所述数据处理需求,基于调用接口调用第二处理程序对所述待处理数据进行数据处理,得到第二处理数据时,所述判断模块还用于:
将所述待处理数据基于所述调用接口传输至所述第二处理程序中,调用第二处理程序中的第二预设处理规则对所述待处理数据进行数据处理,得到第二处理数据。
8.根据权利要求6所述的获取装置,其特征在于,所述输出模块在用于所述基于所述第一处理数据以及所述第二处理数据,得到满足数据处理需求的目标处理数据时,所述输出模块还用于:
控制第一处理程序将所述第一处理数据以及所述第二处理数据进行数据拼接处理,获得所述目标处理数据。
9.一种电子设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过所述总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至5中任一所述的一种数据的获取方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行如权利要求1至5中任一所述的一种数据的获取方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110761412.7A CN113342553A (zh) | 2021-07-06 | 2021-07-06 | 一种数据的获取方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110761412.7A CN113342553A (zh) | 2021-07-06 | 2021-07-06 | 一种数据的获取方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113342553A true CN113342553A (zh) | 2021-09-03 |
Family
ID=77482835
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110761412.7A Pending CN113342553A (zh) | 2021-07-06 | 2021-07-06 | 一种数据的获取方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113342553A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114416092A (zh) * | 2022-03-29 | 2022-04-29 | 北京锐融天下科技股份有限公司 | 一种数据处理的方法、装置、电子设备及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020116530A1 (en) * | 2001-02-16 | 2002-08-22 | Microsoft Corporation | System and method for providing a unified messaging scheme in a mobile device |
CN101389069A (zh) * | 2007-09-10 | 2009-03-18 | 华为技术有限公司 | 业务处理方法和通信终端 |
CN110489356A (zh) * | 2019-08-06 | 2019-11-22 | 上海商汤智能科技有限公司 | 信息处理方法、装置、电子设备及存储介质 |
CN110569653A (zh) * | 2019-08-28 | 2019-12-13 | 华为技术有限公司 | 数据处理方法、相关设备及计算机存储介质 |
-
2021
- 2021-07-06 CN CN202110761412.7A patent/CN113342553A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020116530A1 (en) * | 2001-02-16 | 2002-08-22 | Microsoft Corporation | System and method for providing a unified messaging scheme in a mobile device |
CN101389069A (zh) * | 2007-09-10 | 2009-03-18 | 华为技术有限公司 | 业务处理方法和通信终端 |
CN110489356A (zh) * | 2019-08-06 | 2019-11-22 | 上海商汤智能科技有限公司 | 信息处理方法、装置、电子设备及存储介质 |
CN110569653A (zh) * | 2019-08-28 | 2019-12-13 | 华为技术有限公司 | 数据处理方法、相关设备及计算机存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114416092A (zh) * | 2022-03-29 | 2022-04-29 | 北京锐融天下科技股份有限公司 | 一种数据处理的方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9990209B2 (en) | Digital assistance device for facilitating multi-stage setup | |
WO2016177341A1 (zh) | 接口调用方法、装置及终端 | |
CN109684008A (zh) | 卡片渲染方法、装置、终端及计算机可读存储介质 | |
CN111638983A (zh) | 接口调用方法、接口调用装置及终端设备 | |
CN107908679B (zh) | 脚本语句转换方法、装置及计算机可读存储介质 | |
CN109634569B (zh) | 基于注解的流程实现方法、装置、设备及可读存储介质 | |
US10282216B2 (en) | Automatic import of third party analytics | |
CN113138768B (zh) | 应用程序包生成方法、装置、电子设备以及可读存储介质 | |
CN113342553A (zh) | 一种数据的获取方法、装置、电子设备及存储介质 | |
KR101689984B1 (ko) | 프로그래머블 컨트롤러, 프로그래머블 컨트롤러 시스템 및 실행 에러 정보 작성 방법 | |
CN113760274A (zh) | 一种前端组件逻辑注入方法和装置 | |
CN112261072A (zh) | 一种服务调用方法、装置、设备和存储介质 | |
CN111151008A (zh) | 游戏运营数据的校验方法、装置、配置后台及介质 | |
CN113656050A (zh) | 用于生成版本号的方法和装置 | |
CN113760631A (zh) | 页面加载时长确定方法、装置、设备和存储介质 | |
CN111026466A (zh) | 文件处理方法、装置、计算机可读存储介质及电子设备 | |
CN111124627A (zh) | 应用程序的调起者确定方法、装置、终端及存储介质 | |
CN110874252A (zh) | 一种焦点控制方法、装置及设备 | |
CN113641544B (zh) | 用于检测应用状态的方法、装置、设备、介质和产品 | |
CN113805889B (zh) | 一种智能合约调用执行方法、装置、设备及可读存储介质 | |
CN116431108B (zh) | 对象类型的处理方法、装置、电子设备及存储介质 | |
CN109376023B (zh) | 用于生成调用信息、发布返回码组的方法和设备 | |
CN113268417B (zh) | 一种任务执行方法和装置 | |
CN114253520B (zh) | 接口代码生成方法和装置 | |
CN111209225B (zh) | 获取实际地址的方法、装置、介质和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210903 |
|
RJ01 | Rejection of invention patent application after publication |