CN111291091A - 一种数据处理方法、装置与数据处理系统 - Google Patents
一种数据处理方法、装置与数据处理系统 Download PDFInfo
- Publication number
- CN111291091A CN111291091A CN202010082816.9A CN202010082816A CN111291091A CN 111291091 A CN111291091 A CN 111291091A CN 202010082816 A CN202010082816 A CN 202010082816A CN 111291091 A CN111291091 A CN 111291091A
- Authority
- CN
- China
- Prior art keywords
- data processing
- server
- service
- target server
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 194
- 238000003672 processing method Methods 0.000 title claims abstract description 20
- 238000000034 method Methods 0.000 claims abstract description 30
- 230000008569 process Effects 0.000 claims description 11
- 230000000007 visual effect Effects 0.000 claims description 8
- 230000002159 abnormal effect Effects 0.000 claims description 7
- 238000004590 computer program Methods 0.000 claims description 6
- 238000012800 visualization Methods 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000000725 suspension Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2465—Query processing support for facilitating data mining operations in structured databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/26—Visual data mining; Browsing structured data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Computing Systems (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- Mathematical Physics (AREA)
- Fuzzy Systems (AREA)
- Probability & Statistics with Applications (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明公开一种数据处理方法、装置与数据处理系统。本发明的方法应用于与多个协作平台服务器连接的中心服务器，中心服务器上预先创建有数据处理界面，该数据处理方法包括：获取待执行的业务；根据业务内容，从多个协作平台服务器中确定执行业务的目标服务器；从中心服务器上存储的协作逻辑关系列表中确定目标服务器对应的协作逻辑关系；根据目标服务器对应的协作逻辑关系，在数据处理界面上生成处理流程；在数据处理界面上执行处理流程，得到可视化的处理结果。本发明可以在中心服务器上借助数据处理界面直观的观察到每个流程分支的进行和结果，一旦出现问题即可直观的通过流程运行进度定位到出错流程，基于运行结果准确地分析问题所在。
Description
技术领域
本发明涉及数据处理领域，尤其涉及一种数据处理方法、装置与数据处理系统。
背景技术
随着智能终端设备的飞速发展，网络技术的持续升级，产生的数据越来越多，将有更多的企业需要大数据技术，大数据技术逐渐地演变成一种应用广泛的平民架构。
在上述背景下，一些企业获取的数据逐步增长，达到了一个新的量级。基于之前的积累，企业在数据清洗、分类等环节已经具备了相应的能力，但仍不能让数据实现最大化的价值。为了让处理人员能更专注于数据的理解以及后续分析处理，将长期业务进行固化处理，把它开发成一个产品，以解放出一部分人力去完成更多的任务，挖掘出更多数据间的隐性关联。但是在设计这个产品的时候，由于受限原始网络结构、通信策略、防火墙布局等种种限制，很多需要相互协作的平台所对应的部署机器是无法相互间通信的。
如图1所示，现有方法进行服务器间流程的协作信息传递过程为：服务器1组到了指定运行时间，运行程序后，在共享挂载服务器指定位置放入一个标识，服务器2组、服务器3组会根据标识进行不同的操作，之后会把不同的运行结果返回到共享挂载服务器的指定位置，然后各服务器会继续根据不同的标识进行不同的操作，直到流程分支结束。
在此方法中，如果一个流程分支出现了问题，很难快速定位问题出现的环节，且脚本分散、日志分散，相互传送标识时也有可能会暴露敏感信息。另外其他服务器有可能也可以共享挂载服务器访问，如高权限用户，若高权限用户出现误操作，会影响整体流程，且极难发现问题出现的起因。
发明内容
本发明的目的在于提供了一种数据处理方法、装置与数据处理系统，以解决跨服务通信中难以快速定位出现问题环节的技术问题。
第一方面，本发明实施例提供了一种数据处理方法，应用于与多个协作平台服务器连接的中心服务器，所述中心服务器上预先创建有数据处理界面，所述方法包括：
获取待执行的业务；
根据所述业务内容，从所述多个协作平台服务器中确定执行所述业务的多个目标服务器；
从所述中心服务器上存储的协作逻辑关系列表中确定所述目标服务器对应的协作逻辑关系；
根据所述目标服务器对应的协作逻辑关系，在所述数据处理界面上生成处理流程；
在所述数据处理界面上执行所述处理流程，得到可视化的处理结果。
第二方面，本发明实施例提供了一种数据处理装置，应用于与多个协作平台服务器连接的中心服务器，所述中心服务器上预先创建有数据处理界面，所述装置包括：
业务获取单元，用于获取待执行的业务；
业务获取单元，用于获取待执行的业务；
目标服务器确定单元，用于根据所述业务内容，从所述多个协作平台服务器中确定执行所述业务的目标服务；
协作关系确定单元，用于从所述中心服务器上存储的协作逻辑关系列表中确定所述目标服务器对应的协作逻辑关系；
处理流程生成单元，用于根据所述目标服务器对应的协作逻辑关系，在所述数据处理界面上生成处理流程；
数据处理与可视化单元，用于在所述数据处理界面上执行所述处理流程，得到可视化的处理结果。
第三方面，本发明实施例提供了一种数据处理系统，包括：存储器和处理器；存储器，存储计算机可执行指令；处理器，计算机可执行指令在被执行时使处理器执行数据处理方法。
第四方面，本发明实施例提供了一种计算机可读存储介质，计算机可读存储介质上存储有一个或多个计算机程序，一个或多个计算机程序被执行时实现数据处理方法。
本发明至少取得以下技术效果：通过在中心服务器上创建数据处理界面，根据待处理业务所涉及的多个目标服务器和各个目标服务器之间的协作逻辑关系在数据处理界面上生成可视化的处理流程，通过执行该处理流程，即可在中心服务器上得到每个目标服务器执行业务后所返回的处理结果，由此可以在数据处理界面上直观的观察到每个流程分支的处理进度和处理结果，一旦出现问题即可直观的定位到出错流程，基于运行结果准确地分析问题所在。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍。应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定。对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1为现有技术中的一种跨服务器通信方法示意图；
图2为本发明实施例示出的数据处理方法流程图；
图3为本发明实施例示出的数据处理界面示意图；
图4为本发明实施例示出的数据处理装置的结构框图；
图5为本发明实施例示出的数据处理系统的结构框图。
具体实施方式
现在将参照附图来详细描述本发明的各种示例性实施例。应注意到：除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本发明的范围。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的，决不作为对本发明及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论，但在适当情况下，技术、方法和设备应当被视为说明书的一部分。
在这里示出和讨论的所有例子中，任何具体值应被解释为仅仅是示例性的，而不是作为限制。因此，示例性实施例的其它例子可以具有不同的值。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步讨论。
<实施例一>
图2为本发明实施例示出的数据处理方法流程图，本实施例的数据处理方法应用于与多个协作平台服务器连接的中心服务器，中心服务器上预先创建有数据处理界面。
如图2所示，本实施例的方法包括：
S2100，获取待执行的业务。
本实施例可以在系统中创造业务数据库，通过该业务数据库存储待执行的业务，每个业务具有唯一标识。
中心服务器通过轮询该业务数据库，判断当下是否有待执行的业务，在判断有待执行的业务时，从业务数据库中获取该业务。
S2200，根据业务内容，从多个协作平台服务器中确定执行业务的目标服务器。
其中，一些业务可以能涉及一个以上的目标服务器，例如工单处理业务，可能涉及用户资料服务器，通过用户资料服务器处理工单对应的用户资料；数据发送业务，可能涉及数据源服务器和目的服务器，通过数据源服务器将待发送数据通过中心服务器发送给目的服务器。
S2300，从中心服务器上存储的协作逻辑关系列表中确定目标服务器对应的协作逻辑关系。
中心服务器在初始化过程中，可以获取到每个协作平台服务器所包括的协作逻辑关系，以及各个协作平台服务器之间的协作逻辑关系，将获得协作逻辑关系存储到中心服务器中。这样，在确定目标服务器之后，即可在该协作逻辑关系列表中确定目标服务器对应的协作逻辑关系。
S2400，根据目标服务器对应的协作逻辑关系，在数据处理界面上生成处理流程。
其中，数据处理界面为可视化的、可编辑的网页界面。
S2500，在数据处理界面上执行处理流程，得到可视化的处理结果。
本实施例通过在中心服务器上创建数据处理界面，根据待处理业务所涉及的多个目标服务器和各个目标服务器之间的协作逻辑关系在数据处理界面上生成可视化的处理流程，通过执行该处理流程，即可在中心服务器上得到每个目标服务器执行业务后所返回的处理结果，由此可以在数据处理界面上直观的观察到每个流程分支的处理进度和处理结果，一旦出现问题即可直观的定位到出错流程，基于运行结果准确地分析问题所在。
在一些实施例中，可以通过下述方法在中心服务器上创建数据处理界面：
在数据处理界面上创建存储区域，存储区域用于存储系统中每个协作平台服务器的对象标识和用于驱动每个协作平台服务器执行所属该协作平台服务器的业务脚本；在数据处理界面上创建可编辑区域，可编辑区域用于生成处理流程。
假设该系统包括一个中心服务器、三个与中心服务器连接的协作平台服务器，分别为协作平台服务器A、协作平台服务器B与协作平台服务器C，三个协作平台服务器之间无法直接通信，但可以借助中心服务器实现三个协作平台服务器之间的间接通信。如图3所示，中心服务器上创建有数据处理界面，图3示例性示出该数据处理界面为一个可视化的、可编辑的网页界面，该网页界面中包括存储区域和可编辑区域，存储区域中存储有协作平台服务器A、协作平台服务器B与协作平台服务器C的对象标识，三个协作平台服务器的对象标识可以通过鼠标拖拽的方式，或通过触摸屏拖拽操作移动到可编辑区域。
存储区域中还包括用于驱动每个协作平台服务器执行相应业务的业务脚本，在协作平台服务器的对象标识移动到可编辑区域时，该业务脚本可以关联到该对象标识。
在一些实施例中，上述步骤S2400，根据目标服务器对应的协作逻辑关系，在数据处理界面上生成处理流程，进一步包括：
S2410，在数据处理界面上的存储区域选择目标服务器的对象标识，并将对象标识生成在可编辑区域中。
假设该系统包括一个中心服务器、三个与中心服务器连接的协作平台服务器，分别为协作平台服务器A、协作平台服务器B与协作平台服务器C，以协作平台服务器A访问协作平台服务器B的访问业务为例，此时该访问业务对应有两个目标服务器，分别为协作平台服务器A与协作平台服务器B，此时从存储区域选择协作平台服务器A与协作平台服务器B，并将协作平台服务器A与协作平台服务器B的对象标识分别拖拽到可编辑区域中。
S2420，根据目标服务器对应的协作逻辑关系在可编辑区域中生成处理分支，并对各个目标服务器之间的对象标识与所述处理分支进行关联处理。
基于上述假设，对于协作平台服务器A访问协作平台服务器B的访问业务，该访问业务对应的协作逻辑包括：协作平台服务器A向中心服务器发送访问请求的逻辑，协作平台服务器B接收中心服务器发送的访问请求的逻辑，协作平台服务器B向中心服务器发送应答响应的逻辑等等。这三个协作逻辑表现在数据处理界面上时，对应为生成在可编辑区域中的三个处理分支，分别为中心服务器是否接收到协作平台服务器A发送的访问请求的第一处理分支，中心服务器接收到协作平台服务器A发送的访问请求的第二处理分支和中心服务器未接收到协作平台服务器A发送的访问请求的第三处理分支。
此时，将上述三个处理分支、协作平台服务器A的对象标识、协作平台服务器B的对象标识进行连线处理。即协作平台服务器A的对象标识连接第一处理分支，第一处理分支分别连接第二处理分支和第三处理分支，第二处理分支还连接协作平台服务器B的对象标识。
优选地，在按照所述协作逻辑关系对各个目标服务器之间的对象标识进行关联处理之后，获得处理流程分支，设置每个处理流程分支的执行参数，执行参数包括异常情况重复执行次数、出现异常情况时的预置处理手段(例如忽略异常情况继续执行、暂停执行等)、处理流程分支中参数的引用规则，所述引用规则包括共享引用以及私有引用，以使得多个处理流程之间可以交互执行。
S2430，从存储区域选择每个目标服务器对应的脚本，并将每个目标服务器的对象标识关联该目标服务器对应的脚本。
仍基于上述假设，在将三个处理分支、协作平台服务器A的对象标识、协作平台服务器B的对象标识进行连线处理之后，将协作平台服务器A对应的业务脚本Script1关联到协作平台服务器A的对象标识，以在执行处理流程时，中心服务器的数据处理界面将业务脚本Script1下发给协作平台服务器A，由协作平台服务器A执行业务脚本Script1后，返回日志给服务器A的对象标识。同样的，将协作平台服务器B对应的业务脚本Script2关联到协作平台服务器B的对象标识，以在执行处理流程时，中心服务器的数据处理界面将业务脚本Script2下发给协作平台服务器B，由协作平台服务器B执行业务脚本Script2后，返回日志给协作平台服务器B的对象标识。
由此通过上述步骤S2410～步骤S2430即可在数据处理界面上生成所述业务对应的处理流程。
在一些实施例中，上述步骤S2500中在数据处理界面上执行所述处理流程，得到可视化的处理结果，进一步包括：
S2510，在接收到开始执行处理流程的指令时，数据处理界面将处理流程中每个目标服务器的对象标识关联的脚本下发给相应的目标服务器。
例如，用户点击数据处理界面上述处理流程的开始按钮时，数据处理界面开始执行处理流程，此时数据处理界面将每个目标服务器的对象标识关联的业务脚本下发给相应的目标服务器，使目标服务器执行该业务脚本，并在执行完毕后将生成的日志返回给数据处理界面。
其中，数据处理界面将业务脚本加密后下发给相应的目标服务器，目标服务器在接收到加密业务脚本后，获取解密规则对加密业务脚本解密后执行业务脚本。
S2520，数据处理界面接收每个目标服务器执行业务脚本后返回给数据处理界面的日志。
S2530，数据处理界面将接收到日志与相应的目标服务器的对象标识进行关联，在接收到查询指令时，通过在数据处理界面上弹出显示目标服务器的对象标识关联的日志，实现处理结果的可视化显示。
数据处理界面将接收到日志与相应的目标服务器的对象标识进行关联之后，若用户点击某个目标服务器的对象标识后，该目标服务器的对象标识处会弹出显示框，显示框中显示该目标服务器的对象标识关联的日志信息。
由此通过上述步骤S2510～步骤S2530即可在中心服务器上直观的看到到每个流程分支的进行和结果，一旦出现问题可直观的通过流程运行进度定位到哪个流程出错，可以根据运行结果和日志更准确的分析问题所在，且一但出现网络等未知因素也可通过反复尝试运行来避免未知问题。
以一个工单处理的业务为例说明本实施例的数据处理方法。
S1，生成该业务的处理流程。
在生成处理流程时，可以设置处理流程所涉及的各种变量参数。
例如设置全局可用变量A，全局可用变量A标识中心服务器对业务数据库的连接重试次数；设置变量B，变量B用于接收对业务数据库的扫描结果；设置变量C，用于保存用户ID。
S2，生成该业务的处理流程第一流程分支，即扫描业务数据库。例如可以设置中心服务器每5分钟扫描一次业务数据库，判断业务数据库中是否有新的任务达到执行时间或有新的要求立即执行的任务。
此时，扫描结果可能有三种取值情况，第一种情况为：业务数据库连接失败，重试3次，如3次内可以连接成功则继续判断返回值，如连接失败整个流程停止，此时变量B为空置。第二种情况为：业务数据库连接成功，但没有待执行的业务，继续等待下一个5分钟后再次执行扫描操作，此时变量B无值。第三种情况：业务数据库连接成功返回工单ID，此时变量B的值为工单ID。
S3，当变量B有返回值时，根据变量B的工单ID，获取该工单对应的用户ID，并对用户ID进行过滤处理。
S4，下发业务脚本到目标服务器，该目标服务器为用户资料服务器，该目标服务器中每个记录的标识为用户ID，每个记录的值为用户标签。
通过用户标签对工单对应的用户ID进行过滤，得到过滤后的有效用户ID，并将有效用户ID赋值给变量C。
S5，根据变量C获取有效用户ID的用户标签，得到最后结果并进行显示。
<实施例二>
图4为本发明实施例示出的数据处理装置的结构框图，应用于与多个协作平台服务器连接的中心服务器，中心服务器上预先创建有数据处理界面。
如图4所示，本实施例的装置包括：
业务获取单元4100，用于获取待执行的业务；
目标服务器确定单元4200，用于根据所述业务内容，从所述多个协作平台服务器中确定执行所述业务的目标服务；
协作关系确定单元4300，用于从所述中心服务器上存储的协作逻辑关系列表中确定所述目标服务器对应的协作逻辑关系；
处理流程生成单元4400，用于根据所述目标服务器对应的协作逻辑关系，在所述数据处理界面上生成处理流程；
数据处理与可视化单元4500，用于在所述数据处理界面上执行所述处理流程，得到可视化的处理结果。
在一些实施例中，数据处理界面为可视化的、可编辑的网页界面。
在一些实施例中，本实施例的装置还包括预处理单元，用于在所述数据处理界面上创建存储区域，所述存储区域用于存储所述系统中每个协作平台服务器的对象标识和用于驱动每个协作平台服务器执行所属该协作平台服务器的业务脚本；在所述数据处理界面上创建可编辑区域，所述可编辑区域用于生成处理流程。
相应的，处理流程生成单元4400，用于在数据处理界面上的存储区域选择所述目标服务器的对象标识，并将所述对象标识生成在所述可编辑区域中；根据目标服务器对应的协作逻辑关系在所述可编辑区域中生成处理分支，并对各个目标服务器之间的对象标识与所述处理分支进行关联处理；从存储区域选择每个目标服务器对应的业务脚本，并将每个目标服务器的对象标识关联该目标服务器对应的业务脚本。
优选地，处理流程生成单元4400，还用于在按照所述协作逻辑对各个目标服务器之间的对象标识进行关联处理之后，获得处理流程分支，设置每个处理流程分支的执行参数，所述执行参数包括异常情况重复执行次数、出现异常情况时的预置处理手段、处理流程分支中参数的引用规则。
在一些实施例中，数据处理与可视化单元4500，用于在接收到开始执行所述处理流程的指令时，所述数据处理界面将所述处理流程中每个目标服务器的对象标识关联的业务脚本下发给相应的目标服务器；所述数据处理界面接收每个目标服务器执行所述业务脚本后返回给所述数据处理界面的日志；所述数据处理界面将接收到日志与相应的目标服务器的对象标识进行关联，在接收到查询指令时，通过在所述数据处理界面上弹出显示所述目标服务器的对象标识关联的日志，实现所述处理结果的可视化显示。
优选地，数据处理与可视化单元4500，还用于将所述业务脚本加密后下发给相应的目标服务器，所述目标服务器在接收到加密业务脚本后，获取解密规则对所述加密业务脚本解密后执行所述业务脚本。
本发明装置实施例中各模块的具体实现方式可以参见本发明方法实施例中的相关内容，在此不再赘述。
<实施例三>
图5为本发明实施例示出的数据处理系统的结构框图，如图5所示，在硬件层面，该虚拟现实系统包括处理器，可选地还包括内部总线、网络接口、存储器。其中，存储器可能包含内存，例如高速随机存取存储器(Random-Access Memory，RAM)，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器等。
处理器、网络接口和存储器可以通过内部总线相互连接，该内部总线可以是ISA(Industry Standard Architecture，工业标准体系结构)总线、PCI(PeripheralComponent Interconnect，外设部件互连标准)总线或EISA(Extended Industry StandardArchitecture，扩展工业标准结构)总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示，图5中仅用一个双向箭头表示，但并不表示仅有一根总线或一种类型的总线。
存储器，用于存放程序。具体地，程序可以包括程序代码，所述程序代码包括计算机可执行指令。存储器可以包括内存和非易失性存储器，并向处理器提供指令和数据。
处理器从非易失性存储器中读取对应的计算机程序到内存中然后运行，在逻辑层面上形成数据处理装置。处理器，执行存储器所存放的程序实现如上文描述的数据处理方法。
上述如本说明书图5所示实施例揭示的数据处理装置执行的方法可以应用于处理器中，或者由处理器实现。处理器可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上文描述的数据处理方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器，包括中央处理器(CentralProcessing Unit，CPU)、网络处理器(Network Processor，NP)等；还可以是数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific IntegratedCircuit，ASIC)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本说明书实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本说明书实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器，处理器读取存储器中的信息，结合其硬件完成上述数据处理方法的步骤。
本发明还提供了一种计算机可读存储介质。
该计算机可读存储介质存储一个或多个计算机程序，该一个或多个计算机程序包括指令，该指令当被处理器执行时，能够实现上文描述的数据处理方法。
为了便于清楚描述本发明实施例的技术方案，在发明的实施例中，采用了“第一”、“第二”等字样对功能和作用基本相同的相同项或相似项进行区分，本领域技术人员可以理解“第一”、“第二”等字样并不对数量和执行次序进行限定。
以上所述，仅为本发明的具体实施方式，在本发明的上述教导下，本领域技术人员可以在上述实施例的基础上进行其他的改进或变形。本领域技术人员应该明白，上述的具体描述只是更好的解释本发明的目的，本发明的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种数据处理方法，其特征在于，应用于与多个协作平台服务器连接的中心服务器，所述中心服务器上预先创建有数据处理界面，所述方法包括：
获取待执行的业务；
根据所述业务内容，从所述多个协作平台服务器中确定执行所述业务的目标服务器；
从所述中心服务器上存储的协作逻辑关系列表中确定所述目标服务器对应的协作逻辑关系；
根据所述目标服务器对应的协作逻辑关系，在所述数据处理界面上生成处理流程；
在所述数据处理界面上执行所述处理流程，得到可视化的处理结果。
2.根据权利要求1所述的方法，其特征在于，所述数据处理界面为可视化的、可编辑的网页界面。
3.根据权利要求1所述的方法，其特征在于，通过下述方法在中心服务器上创建所述数据处理界面：
在所述数据处理界面上创建存储区域，所述存储区域用于存储每个协作平台服务器的对象标识和用于驱动每个协作平台服务器执行所属该协作平台服务器的业务脚本；
在所述数据处理界面上创建可编辑区域，所述可编辑区域用于生成处理流程。
4.根据权利要求3所述的方法，其特征在于，根据所述多个目标服务器之间的协作逻辑关系，在所述数据处理界面上生成处理流程，包括：
在数据处理界面上的存储区域选择所述目标服务器的对象标识，并将所述对象标识生成在所述可编辑区域中；
根据目标服务器对应的协作逻辑关系在所述可编辑区域中生成处理分支，并对各个目标服务器之间的对象标识与所述处理分支进行关联处理；
从存储区域选择每个目标服务器对应的业务脚本，并将每个目标服务器的对象标识关联该目标服务器对应的业务脚本。
5.根据权利要求4所述的方法，其特征在于，在按照所述协作逻辑关系对各个目标服务器之间的对象标识进行关联处理之后，还包括：
在按照所述协作逻辑关系对各个目标服务器之间的对象标识进行关联处理后，获得处理流程分支；
设置每个处理流程分支的执行参数，所述执行参数包括异常情况重复执行次数、出现异常情况时的预置处理手段、处理流程分支中参数的引用规则。
6.根据权利要求4所述的方法，其特征在于，在所述数据处理界面上执行所述处理流程，得到可视化的处理结果，包括：
在接收到开始执行所述处理流程的指令时，所述数据处理界面将所述处理流程中每个目标服务器的对象标识关联的业务脚本下发给相应的目标服务器；
所述数据处理界面接收每个目标服务器执行所述业务脚本后返回给所述数据处理界面的日志；
所述数据处理界面将接收到日志与相应的目标服务器的对象标识进行关联，在接收到查询指令时，通过在所述数据处理界面上弹出显示所述目标服务器的对象标识关联的日志，实现所述处理结果的可视化显示。
7.根据权利要求6所述的方法，其特征在于，所述数据处理界面将所述处理流程中每个目标服务器的对象标识关联的脚本下发给相应的目标服务器，包括：
所述数据处理界面将所述业务脚本加密后下发给相应的目标服务器，所述目标服务器在接收到加密业务脚本后，获取解密规则对所述加密业务脚本解密后执行所述业务脚本。
8.一种数据处理装置，其特征在于，应用于与多个协作平台服务器连接的中心服务器，所述中心服务器上预先创建有数据处理界面，所述装置包括：
业务获取单元，用于获取待执行的业务；
目标服务器确定单元，用于根据所述业务内容，从所述多个协作平台服务器中确定执行所述业务的目标服务；
协作关系确定单元，用于从所述中心服务器上存储的协作逻辑关系列表中确定所述目标服务器对应的协作逻辑关系；
处理流程生成单元，用于根据所述目标服务器对应的协作逻辑关系，在所述数据处理界面上生成处理流程；
数据处理与可视化单元，用于在所述数据处理界面上执行所述处理流程，得到可视化的处理结果。
9.一种数据处理系统，包括：存储器和处理器；
所述存储器，存储计算机可执行指令；
所述处理器，计算机可执行指令在被执行时使所述处理器执行如权利要求1-7任一项所述的数据处理方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有一个或多个计算机程序，所述一个或多个计算机程序被执行时实现如权利要求1-7任一项所述的数据处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010082816.9A CN111291091A (zh) | 2020-02-07 | 2020-02-07 | 一种数据处理方法、装置与数据处理系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010082816.9A CN111291091A (zh) | 2020-02-07 | 2020-02-07 | 一种数据处理方法、装置与数据处理系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111291091A true CN111291091A (zh) | 2020-06-16 |
Family
ID=71026606
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010082816.9A Pending CN111291091A (zh) | 2020-02-07 | 2020-02-07 | 一种数据处理方法、装置与数据处理系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111291091A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114625539A (zh) * | 2022-03-22 | 2022-06-14 | 中国平安人寿保险股份有限公司 | 脚本工具执行方法、装置、电子设备集群及存储介质 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101005416A (zh) * | 2006-01-18 | 2007-07-25 | 中国科学院计算技术研究所 | 一种基于业务规则的跨部门流程协同方法 |
| CN105573851A (zh) * | 2015-12-16 | 2016-05-11 | 山东中创软件工程股份有限公司 | 一种流程协同处理方法及系统 |
| CN109636078A (zh) * | 2017-10-09 | 2019-04-16 | 优甸网络科技（上海）有限公司 | 基于规则框的流程逻辑 |
-
2020
- 2020-02-07 CN CN202010082816.9A patent/CN111291091A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101005416A (zh) * | 2006-01-18 | 2007-07-25 | 中国科学院计算技术研究所 | 一种基于业务规则的跨部门流程协同方法 |
| CN105573851A (zh) * | 2015-12-16 | 2016-05-11 | 山东中创软件工程股份有限公司 | 一种流程协同处理方法及系统 |
| CN109636078A (zh) * | 2017-10-09 | 2019-04-16 | 优甸网络科技（上海）有限公司 | 基于规则框的流程逻辑 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114625539A (zh) * | 2022-03-22 | 2022-06-14 | 中国平安人寿保险股份有限公司 | 脚本工具执行方法、装置、电子设备集群及存储介质 |
| CN114625539B (zh) * | 2022-03-22 | 2024-04-05 | 中国平安人寿保险股份有限公司 | 脚本工具执行方法、装置、电子设备集群及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108282489B (zh) | 一种漏洞扫描方法、服务端及系统 | |
| CN108833459B (zh) | 数据上报方法及终端设备 | |
| CN106933709B (zh) | 一种测试方法及装置 | |
| CN113220431B (zh) | 跨云的分布式数据任务调度方法、设备及存储介质 | |
| CN110347946B (zh) | 一种页面展示方法、装置、计算机设备及存储介质 | |
| CN110262933B (zh) | 测试方法、测试装置和存储介质 | |
| CN111859076A (zh) | 数据爬取方法、装置、计算机设备及计算机可读存储介质 | |
| CN113888064A (zh) | 食品饮料行业的产品质量追溯方法、装置及设备 | |
| CN107704357B (zh) | 日志生成方法和装置 | |
| CN111221727A (zh) | 测试方法、装置、电子设备和计算机可读介质 | |
| CN111813377A (zh) | 一种自动生成应用程序的方法及装置 | |
| CN111291091A (zh) | 一种数据处理方法、装置与数据处理系统 | |
| CN109522202B (zh) | 一种软件测试的方法和装置 | |
| CN104461847B (zh) | 数据处理程序检测方法及装置 | |
| CN114157654A (zh) | 一种集成电路协同设计系统和方法 | |
| CN111443918A (zh) | 业务对象安装包的渠道接入方法及装置 | |
| CN108334524B (zh) | 一种storm日志错误分析方法及装置 | |
| CN112380094A (zh) | 一种rpa业务流程处理方法及装置 | |
| CN110188083B (zh) | 接口信息挖掘方法及装置 | |
| CN110768860B (zh) | 一种测试方法、测试装置及电子设备 | |
| CN113516729A (zh) | 一种图表绘制方法、装置及计算机可读存储介质 | |
| CN111966934A (zh) | 一种电网信息显示方法、设备、系统及存储介质 | |
| CN115426299B (zh) | 无特征数据标识方法、装置、计算机设备及存储介质 | |
| CN110968779A (zh) | 网页信息爬取的处理方法和装置 | |
| CN115203178A (zh) | 数据质检方法、装置、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20200616 |
|
| WD01 | Invention patent application deemed withdrawn after publication |