CN106713504A - 任务处理方法和系统 - Google Patents

任务处理方法和系统 Download PDF

Info

Publication number
CN106713504A
CN106713504A CN201710087579.3A CN201710087579A CN106713504A CN 106713504 A CN106713504 A CN 106713504A CN 201710087579 A CN201710087579 A CN 201710087579A CN 106713504 A CN106713504 A CN 106713504A
Authority
CN
China
Prior art keywords
task
processing
message
identifier
processed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710087579.3A
Other languages
English (en)
Other versions
CN106713504B (zh
Inventor
杨将
喻红
祁家庆
王建波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201710087579.3A priority Critical patent/CN106713504B/zh
Publication of CN106713504A publication Critical patent/CN106713504A/zh
Application granted granted Critical
Publication of CN106713504B publication Critical patent/CN106713504B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • H04L67/146—Markers for unambiguous identification of a particular session, e.g. session cookie or URL-encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Computer And Data Communications (AREA)
  • Multi Processors (AREA)

Abstract

本发明提出了一种任务处理系统，该系统包括：消息服务器和至少一个任务处理节点；消息服务器接收待处理任务的任务标识和对应的流程路径信息，根据流程路径信息向对应的任务处理节点发送开始处理消息；至少一个任务处理节点用于根据开始处理消息中的任务标识按照预设的规则进行对应任务的处理，处理完成后，向消息服务器发送处理完成消息；消息服务器根据处理完成消息中的任务标识和当前任务处理节点信息确定与任务标识对应的下一个任务处理节点，并向下一个任务处理节点发送开始处理消息，依次类推，直至任务完成。该系统不但流程路径信息配置更加灵活，而且有利于高并发的任务处理。此外，还提出了一种任务处理方法。

Description

任务处理方法和系统
技术领域
本发明涉及计算机处理领域，特别是涉及一种任务处理方法和系统。
背景技术
随着保险业务的发展，越来越多的人开始进行投保，用户申请投保会向保险公司提供相关资料，然而，用户提供的资料的格式有很多种，为了便于后续编辑和存储，需要将用户提供的非格式化的数据资料转化为符合要求的格式化数据，比如，将以影像形式存在的数据、PDF形式存在的数据转换成可以编辑的文档。其中，不同的数据类型转换为可以编辑的文档所需要的处理模块是不同的，比如，如果是影像形式存在的数据，只需要A模块和C模块处理即可，如果是以PDF形式存在的数据只需要B和C模块处理即可，但是传统的处理数据的平台流程路径是固定的，且流程路径中的各个功能模块之间是直接调用的，耦合严重，比如，流程路径为由A模块到B模块再到C模块，那么在处理数据的时候必须先由A模块处理，A模块处理完后，由A模块将任务发送给B模块，B模块处理完后，再由B模块将任务发送给C模块。也就是说，传统的流程路径是固定的，且模块间是直接调用的，耦合严重，一旦有一个模块不能工作，整个流程路径就断掉了，而且由于流程路径的限制也不利于高并发工作。
发明内容
基于此，有必要针对上述问题，提出一种能够比较灵活的且有利于高并发工作的任务处理方法和系统。
一种任务处理系统，所述系统包括：消息服务器，用于接收待处理任务的任务标识和对应的流程路径信息，根据所述流程路径信息向对应的任务处理节点发送开始处理消息，所述开始处理消息包括任务标识；至少一个任务处理节点，用于接收所述消息服务器发送的开始处理消息，根据所述开始处理消息中的任务标识按照预设的规则进行对应任务的处理，处理完成后，向所述消息服务器发送处理完成消息，所述处理完成消息包括所述任务标识和当前任务处理节点信息；所述消息服务器还用于接收所述任务处理节点返回的处理完成消息，根据所述处理完成消息中的任务标识和当前任务处理节点信息确定与所述任务标识对应的下一个任务处理节点，并向所述下一个任务处理节点发送开始处理消息，若当前任务处理节点为最后一个任务处理节点时，则任务完成。
在其中一个实施例中，上述任务处理系统还包括：派工服务器，用于获取待处理任务的任务类型和任务标识，根据所述任务类型确定与所述任务标识对应的流程路径信息，将所述任务标识和对应的流程路径信息发送到所述消息服务器。
在其中一个实施例中，所述任务处理节点还用于接收所述消息服务器发送的开始处理消息，提取所述开始处理消息中的任务标识，根据所述任务标识获取与所述任务标识对应的待处理数据，按照预设的规则对所述待处理数据进行处理，处理完成后，向所述消息服务器发送处理完成消息。
在其中一个实施例中，所述任务处理节点还用于接收所述消息服务器发送的开始处理消息，根据所述开始处理消息中的任务标识查找与所述任务标识对应的配置信息，所述配置信息包括待处理数据的地址，根据所述待处理数据的地址获取对应的待处理数据，根据预设的规则对所述待处理数据进行处理，处理完成后，向所述消息服务器发送处理完成消息。
在其中一个实施例中，所述派工服务器还用于设置任务类型与流程路径信息之间的对应关系，并将所述对应关系进行存储。
一种任务处理方法，所述方法包括：消息服务器接收待处理任务的任务标识和对应的流程路径信息，根据所述流程路径信息向对应的任务处理节点发送开始处理消息，所述开始处理消息包括任务标识；所述任务处理节点接收所述消息服务器发送的开始处理消息，根据所述开始处理消息中的任务标识按照预设的规则进行对应任务的处理，处理完成后，向所述消息服务器发送处理完成消息，所述处理完成消息包括所述任务标识和当前任务处理节点信息；所述消息服务器接收所述任务处理节点返回的处理完成消息，根据所述处理完成消息中的任务标识和当前任务处理节点信息确定与所述任务标识对应的下一个任务处理节点，并向所述下一个任务处理节点发送开始处理消息，若当前任务处理节点为最后一个任务处理节点时，则任务完成。
在其中一个实施例中，在所述消息服务器接收待处理任务的任务标识和对应的流程路径信息的步骤之前还包括：派工服务器获取待处理任务的任务类型和任务标识，根据所述任务类型确定与所述任务标识对应的流程路径信息，将所述任务标识和对应的流程路径信息发送到所述消息服务器。
在其中一个实施例中，所述任务处理节点接收所述消息服务器发送的开始处理消息，根据所述开始处理消息中的任务标识按照预设的规则进行对应任务的处理，处理完成后，向所述消息服务器发送处理完成消息的步骤包括：所述任务处理节点接收所述消息服务器发送的开始处理消息，提取所述开始处理消息中的任务标识，根据所述任务标识获取与该任务标识对应的待处理数据，按照预设的规则对所述待处理数据进行处理，处理完成后，向所述消息服务器发送处理完成消息。
在其中一个实施例中，所述任务处理节点接收所述消息服务器发送的开始处理消息，根据所述开始处理消息中的任务标识按照预设的规则进行对应任务的处理，处理完成后，向所述消息服务器发送处理完成消息的步骤包括：所述任务处理节点接收所述消息服务器发送的开始处理消息，根据所述开始处理消息中的任务标识查找与所述任务标识对应的配置信息，所述配置信息包括待处理数据的地址，根据所述待处理数据的地址获取对应的待处理数据，根据预设的规则对所述待处理数据进行处理，处理完成后，向所述消息服务器发送处理完成消息。
在其中一个实施例中，在所述派工服务器获取待处理任务的任务类型和任务标识的步骤之前还包括：所述派工服务器设置任务类型与流程路径信息之间的对应关系，并将所述对应关系进行存储。
上述任务处理系统和方法，引入了一个消息服务器，通过该消息服务器接收到任务标识和对应的流程路径信息后，根据流程路径信息按照顺序先向该流程路径中的第一个任务处理节点发送开始处理消息，当第一个任务处理节点处理完成后，将处理完成的消息反馈给消息服务器，消息服务器接收到第一个任务处理节点返回的处理完成消息后，再向下一个任务处理节点发送开始处理消息，依次类推，直至任务完成。在这个任务处理过程中，各个任务处理节点彼此独立，通过消息服务器来控制整个任务处理流程的运转，流程路径可以根据需求进行灵活的配置，而且由于各个任务处理节点彼此独立，可以同时根据多种流程路径信息进行多个任务的处理，故，有利于高并发的任务处理。
附图说明
图1为一个实施例中任务处理系统的结构框图；
图2为另一个实施例中任务处理系统的结构框图；
图3为一个实施例中任务处理方法的流程图；
图4为另一个实施例中任务处理方法的流程图；
图5为又一个实施例中任务处理方法的流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
如图1所示，在一个实施例中，提出了一种任务处理系统，该系统包括：消息服务器102和至少一个任务处理节点104；其中，
消息服务器102，用于接收待处理任务的任务标识和对应的流程路径信息，根据流程路径信息向对应的任务处理节点发送开始处理消息，开始处理消息包括任务标识。
在本实施例中，消息服务器102接收派工服务器发送的待处理任务的任务标识和对应的流程路径信息，其中，任务标识用于唯一标识一个任务，流程路径是由一个或多个任务处理节点组成的，流程路径信息中包括了具体的任务处理节点以及各任务处理节点的流转顺序。消息服务器102根据接收到流程路径信息向对应的任务处理节点发送开始处理消息，其中，开始处理消息包括任务标识，这样任务处理节点收到开始处理消息后，根据任务标识可以知道应该去处理哪个任务。具体的，由于流程路径信息中包括了各任务处理节点的流转顺序，消息服务器102根据流程路径信息中各任务处理节点的流转顺序首先向流程路径信息中的第一个任务处理节点发送开始处理消息。
至少一个任务处理节点104，用于接收消息服务器发送的开始处理消息，根据开始处理消息中的任务标识按照预设的规则进行对应任务的处理，处理完成后，向消息服务器发送处理完成消息，处理完成消息包括任务标识和当前任务处理节点信息。
在本实施例中，消息服务器102和任务处理节点104通过发送消息来控制任务的开始和接收。任务处理节点104接收到消息服务器102发送的开始处理消息，提取开始处理消息中的任务标识，根据该任务标识按照预设的规则进行对应任务的处理，当任务处理完成后，向消息服务器102发送处理完成消息，便于消息服务器102推动任务的下一步完成。具体的，任务处理节点104接收到开始处理消息后，根据开始处理消息中的任务标识获取与任务标识对应的待处理数据，然后按照预设的规则对待处理数据进行处理，并将处理完成消息返回给消息服务器，其中，处理完成信息中包括当前处理任务的任务标识和当前任务处理节点信息。
消息服务器102还用于接收任务处理节点返回的处理完成消息，根据处理完成消息中的任务标识和当前任务处理节点信息确定与任务标识对应的下一个任务处理节点，并向下一个任务处理节点发送开始处理消息，若当前任务处理节点为最后一个任务处理节点时，则任务完成。
在本实施例中，消息服务器102将开始处理消息发送给对应的任务处理节点后，任务处理节点104开始进行对应任务的处理，当任务处理完成后，则将处理完成消息发送给消息服务器，其中，处理完成消息包括任务标识和当前任务处理节点信息。消息服务器102接收到任务处理节点返回的处理完成信息后，根据处理完成信息中任务标识查找到对应的流程路径信息，然后根据流程路径信息和当前任务处理节点信息确定与任务标识对应的下一个任务处理节点，继而向下一个任务处理节点发送开始处理消息，依次类推。若判断得到当前任务处理节点为最后一个任务处理节点时，则结束发送消息，任务完成。在本实施例中，每个任务处理节点都相应的对应一个功能模块，功能模块彼此是独立的，即功能模块本身是独立的，没有顺序可言的，流程路径中的顺序只是代表了任务处理的顺序。比如，假设一共有五个功能模块，A、B、C、D和E。这五个功能模块彼此独立，在处理任务的过程中每个任务根据类型不同需要的处理顺序也不同，比如，处理I类型任务需要的处理顺序是A-C-D，而处理II类型任务对应的处理顺序是A-B-D，处理III类型任务对应的处理顺序是B-C-D。最终是由消息服务器统一控制每个任务的处理流转顺序，该方法不仅路径可以灵活配置，而且可以根据多个流程路径信息同时进行多个任务的处理，有利于高并发的任务处理。
在本实施例中，引入了一个消息服务器，通过该消息服务器接收到任务标识和对应的流程路径信息后，根据流程路径信息按照顺序先向该流程路径中的第一个任务处理节点发送开始处理消息，当第一个任务处理节点处理完成后，将处理完成的消息反馈给消息服务器，消息服务器接收到第一个任务处理节点返回的处理完成消息后，再向下一个任务处理节点发送开始处理消息，依次类推，直至任务完成。在这个任务处理过程中，各个任务处理节点彼此独立，通过消息服务器来控制整个任务处理流程的运转，流程路径可以根据需求进行灵活的配置，而且由于各个任务处理节点彼此独立，可以同时根据多种流程路径信息进行多个任务的处理，故，有利于高并发的任务处理。
如图2所示，在一个实施例中，上述任务处理系统还包括：
派工服务器106，用于获取待处理任务的任务类型和任务标识，根据任务类型确定与任务标识对应的流程路径信息，将任务标识和对应的流程路径信息发送到消息服务器。
在本实施例中，首先由派工服务器106通过MQ(消息队列)接口接收任务，派工服务器106接收到待处理任务的任务标识和任务类型后，根据任务类型查找与该任务类型匹配的流程路径信息，然后建立任务标识与该流程路径信息之间的对应关系，将任务标识和对应的流程路径信息发送到消息服务器，以便消息服务器来控制整个任务的处理流程。流程路径信息包含了需要用到的功能模块以及各功能模块的流转顺序，其中，每个处理流程节点对应一个功能模块。
在一个实施例中，任务处理节点还用于接收消息服务器发送的开始处理消息，提取开始处理消息中的任务标识，根据任务标识获取与任务标识对应的待处理数据，按照预设的规则对待处理数据进行处理，处理完成后，向消息服务器发送处理完成消息。
在本实施例中，任务处理节点104接收到消息服务器发送的开始处理消息后，提取开始处理消息中的任务标识，然后根据该任务标识去查找与该任务标识对应的待处理数据，然后按照该处理任务节点对应的功能对该待处理数据进行处理，处理完成后，向消息服务器反馈处理完成消息，以便消息服务器进行下一步的操作。
在一个实施例中，任务处理节点还用于接收消息服务器发送的开始处理消息，根据开始处理消息中的任务标识查找与任务标识对应的配置信息，配置信息包括待处理数据的地址，根据待处理数据的地址获取对应的待处理数据，根据预设的规则对待处理数据进行处理，处理完成后，向消息服务器发送处理完成消息。
在本实施例中，任务处理节点104接收到开始处理消息后，根据开始处理消息中的任务标识查找与该任务标识对应的配置信息，其中，配置信息包括待处理数据的存储地址以及数量等基本信息，然后根据配置信息中的待处理数据的地址去获取对应的待处理数据，获取到待处理数据后，则按照该任务处理节点对应的预设规则对待处理数据进行处理，处理完成后，将处理完成的消息反馈给消息服务器。
在一个实施例中，派工服务器106还用于设置任务类型与流程路径信息之间的对应关系，并将对应关系进行存储。
在本实施例中，由于各处理任务节点彼此独立，统一由消息服务器与各个任务处理节点进行交互，所以流程路径可以根据需要进行任意设置。首先，根据处理流程的不同将任务分为不同的类型，然后分别为每种类型设置一种对应的流程路径信息。具体的，预先设置任务类型与流程路径信息之间的对应关系，并将该对应关系进行存储，当接收到任务后，根据任务类型就可以查找与该任务类型对应的流程路径信息。举个例子，在将非格式数据转换为格式化数据的过程中可能需要不同流程路径，假设有A、B、C、D、E五个功能模块，每个任务处理节点都相应的会对应一个功能模块，在数据处理过程中，这些功能模块不一定全部都需要。比如，I类型对应的流程路径为：A-C-D；II类型对应的流程路径为：A-B-D-E；III类型对应的流程路径为：C-A-D；IV类型对应的流程路径为：A-B-C-D-E。不同类型的任务虽然对应的处理流程不同，但是都是由消息服务器统一对各个任务的流转进行控制，每个功能模块可以同时处理多个任务的数据，有利于任务的高并发运行。
如图3所示，在一个实施例中，提出了一种任务处理方法，该方法包括：
步骤302，消息服务器接收待处理任务的任务标识和对应的流程路径信息，根据流程路径信息向对应的任务处理节点发送开始处理消息，开始处理消息包括任务标识。
在本实施例中，消息服务器接收派工服务器发送的待处理任务的任务标识和对应的流程路径信息，其中，任务标识用于唯一标识一个任务，流程路径是由一个或多个任务处理节点组成的，流程路径信息中包括了具体的任务处理节点以及各任务处理节点的流转顺序。消息服务器根据接收到流程路径信息向对应的任务处理节点发送开始处理消息，其中，开始处理消息包括任务标识，这样任务处理节点收到开始处理消息后，根据任务标识可以知道应该去处理哪个任务。具体的，由于流程路径信息中包括了各任务处理节点的流转顺序，消息服务器根据流程路径信息中各任务处理节点的流转顺序首先向流程路径信息中的第一个任务处理节点发送开始处理消息。
步骤304，任务处理节点接收所述消息服务器发送的开始处理消息，根据所述开始处理消息中的任务标识按照预设的规则进行对应任务的处理，处理完成后，向消息服务器发送处理完成消息，处理完成消息包括任务标识和当前任务处理节点信息。
在本实施例中，消息服务器和任务处理节点通过互相发送消息来控制任务的开始和结束。首先，任务处理节点接收到消息服务器发送的开始处理消息，提取开始处理消息中的任务标识，根据该任务标识按照预设的规则进行对应任务的处理，当任务处理完成后，向消息服务器发送处理完成消息，其中，处理完成信息中包括任务标识和当前任务处理节点信息，便于消息服务器推动任务的下一步完成。具体的，任务处理节点接收到开始处理消息后，根据开始处理消息中的任务标识获取与任务标识对应的待处理数据，然后按照预设的规则对待处理数据进行处理，处理完成后，向消息服务器发送处理完成消息。
步骤306，消息服务器接收任务处理节点返回的处理完成消息，根据处理完成消息中的任务标识和当前任务处理节点信息确定与任务标识对应的下一个任务处理节点，并向下一个任务处理节点发送开始处理消息，若当前任务处理节点为最后一个任务处理节点时，则任务完成。
在本实施例中，消息服务器将开始处理消息发送给对应的任务处理节点后，任务处理节点开始进行对应任务的处理，当任务处理完成后，则向消息服务器发送处理完成消息，其中，处理完成消息包括任务标识和当前任务处理节点信息。消息服务器接收到任务处理节点返回的处理完成信息后，根据处理完成信息中任务标识查找到对应的流程路径信息，然后根据流程路径信息和当前任务处理节点信息确定与任务标识对应的下一个任务处理节点，继而向下一个任务处理节点发送开始处理消息，依次类推。若判断得到当前任务处理节点为最后一个任务处理节点时，则结束发送消息，任务完成。
在本实施例中，引入了一个消息服务器，通过该消息服务器接收到任务标识和对应的流程路径信息后，根据流程路径信息按照顺序先向该流程路径中的第一个任务处理节点发送开始处理消息，当第一个任务处理节点处理完成后，将处理完成的消息反馈给消息服务器，消息服务器接收到第一个任务处理节点返回的处理完成消息后，再向下一个任务处理节点发送开始处理消息，依次类推，直至任务完成。在这个任务处理过程中，各个任务处理节点彼此独立，通过消息服务器来控制整个任务处理流程的运转，不但流程路径信息配置更加灵活，而且有利于高并发的任务处理。
如图4所示，在一个实施例中，在消息服务器接收待处理任务的任务标识和对应的流程路径信息的步骤之前还包括：
步骤301，派工服务器获取待处理任务的任务类型和任务标识，根据任务类型确定与任务标识对应的流程路径信息，将任务标识和对应的流程路径信息发送到消息服务器。
在本实施例中，首先由派工服务器通过MQ(消息队列)接口接收任务，派工服务器接收到待处理任务的任务标识和任务类型后，根据任务类型查找与该任务类型匹配的流程路径信息，然后建立任务标识与该流程路径信息之间的对应关系，将任务标识和对应的流程路径信息发送到消息服务器，以便消息服务器来控制整个任务的处理流程，其中，流程路径信息包含了需要用到的流程处理节点以及各流程处理节点的先后顺序。
在一个实施例中，任务处理节点接收消息服务器发送的开始处理消息，根据开始处理消息中的任务标识按照预设的规则进行对应任务的处理，处理完成后，向消息服务器发送处理完成消息的步骤包括：任务处理节点接收消息服务器发送的开始处理消息，提取开始处理消息中的任务标识，根据任务标识获取与该任务标识对应的待处理数据，按照预设的规则对待处理数据进行处理，处理完成后，向消息服务器发送处理完成消息。
在本实施例中，任务处理节点接收到消息服务器发送的开始处理消息后，提取开始处理消息中的任务标识，然后根据该任务标识去查找与该任务标识对应的待处理数据，然后按照该处理任务节点对应的功能对该待处理数据进行处理，处理完成后，向消息服务器反馈处理完成消息，以便消息服务器进行下一步的操作。
在一个实施例中，任务处理节点接收消息服务器发送的开始处理消息，根据开始处理消息中的任务标识按照预设的规则进行对应任务的处理，处理完成后，向消息服务器发送处理完成消息的步骤包括：任务处理节点接收消息服务器发送的开始处理消息，根据开始处理消息中的任务标识查找与任务标识对应的配置信息，配置信息包括待处理数据的地址，根据待处理数据的地址获取对应的待处理数据，根据预设的规则对待处理数据进行处理，处理完成后，向消息服务器发送处理完成消息。
在本实施例中，任务处理节点接收到开始处理消息后，根据开始处理消息中的任务标识查找与该任务标识对应的配置信息，其中，配置信息包括待处理数据的存储地址以及数量等基本信息，然后根据配置信息中的待处理数据的地址去获取对应的待处理数据，获取到待处理数据后，则按照该任务处理节点对应的预设规则对待处理数据进行处理，处理完成后，将处理完成的消息反馈给消息服务器。
如图5所示，在一个实施例中，在派工服务器获取待处理任务的任务类型和任务标识的步骤之前还包括：
步骤300，派工服务器设置任务类型与流程路径信息之间的对应关系，并将对应关系进行存储。
在本实施例中，由于各处理任务节点彼此独立，统一由消息服务器与各个任务处理节点进行交互，所以流程路径可以根据需要进行任意设置。首先，根据处理流程的不同将任务分为不同的类型，然后分别为每种类型设置一种对应的流程路径信息。具体的，预先设置任务类型与流程路径信息之间的对应关系，并将该对应关系进行存储，当接收到任务后，根据任务类型就可以查找与该任务类型对应的流程路径信息。举个例子，在将非格式数据转换为格式化数据的过程中可能需要不同流程路径，假设有A、B、C、D、E五个功能模块，每个任务处理节点都相应的会对应一个功能模块，在数据处理过程中，这些功能模块不一定全部都需要。比如，I类型对应的流程路径为：A-C-D；II类型对应的流程路径为：A-B-D-E；III类型对应的流程路径为：C-A-D；IV类型对应的流程路径为：A-B-C-D-E。不同类型的任务虽然对应的处理流程不同，但是都是由消息服务器统一对各个任务的流转进行控制，每个功能模块可以同时处理多个任务的数据，有利于任务的高并发运行。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，该计算机程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，前述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等非易失性存储介质，或随机存储记忆体(Random Access Memory，RAM)等。
以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种任务处理系统，所述系统包括：
消息服务器，用于接收待处理任务的任务标识和对应的流程路径信息，根据所述流程路径信息向对应的任务处理节点发送开始处理消息，所述开始处理消息包括任务标识；
至少一个任务处理节点，用于接收所述消息服务器发送的开始处理消息，根据所述开始处理消息中的任务标识按照预设的规则进行对应任务的处理，处理完成后，向所述消息服务器发送处理完成消息，所述处理完成消息包括所述任务标识和当前任务处理节点信息；
所述消息服务器还用于接收所述任务处理节点返回的处理完成消息，根据所述处理完成消息中的任务标识和当前任务处理节点信息确定与所述任务标识对应的下一个任务处理节点，并向所述下一个任务处理节点发送开始处理消息，若当前任务处理节点为最后一个任务处理节点时，则任务完成。
2.根据权利要求1所述的系统，其特征在于，所述系统还包括：
派工服务器，用于获取待处理任务的任务类型和任务标识，根据所述任务类型确定与所述任务标识对应的流程路径信息，将所述任务标识和对应的流程路径信息发送到所述消息服务器。
3.根据权利要求1所述的系统，其特征在于，所述任务处理节点还用于接收所述消息服务器发送的开始处理消息，提取所述开始处理消息中的任务标识，根据所述任务标识获取与所述任务标识对应的待处理数据，按照预设的规则对所述待处理数据进行处理，处理完成后，向所述消息服务器发送处理完成消息。
4.根据权利要求1所述的系统，其特征在于，所述任务处理节点还用于接收所述消息服务器发送的开始处理消息，根据所述开始处理消息中的任务标识查找与所述任务标识对应的配置信息，所述配置信息包括待处理数据的地址，根据所述待处理数据的地址获取对应的待处理数据，根据预设的规则对所述待处理数据进行处理，处理完成后，向所述消息服务器发送处理完成消息。
5.根据权利要求2所述的系统，其特征在于，所述派工服务器还用于设置任务类型与流程路径信息之间的对应关系，并将所述对应关系进行存储。
6.一种任务处理方法，所述方法包括：
消息服务器接收待处理任务的任务标识和对应的流程路径信息，根据所述流程路径信息向对应的任务处理节点发送开始处理消息，所述开始处理消息包括任务标识；
所述任务处理节点接收所述消息服务器发送的开始处理消息，根据所述开始处理消息中的任务标识按照预设的规则进行对应任务的处理，处理完成后，向所述消息服务器发送处理完成消息，所述处理完成消息包括所述任务标识和当前任务处理节点信息；
所述消息服务器接收所述任务处理节点返回的处理完成消息，根据所述处理完成消息中的任务标识和当前任务处理节点信息确定与所述任务标识对应的下一个任务处理节点，并向所述下一个任务处理节点发送开始处理消息，若当前任务处理节点为最后一个任务处理节点时，则任务完成。
7.根据权利要求6所述的方法，其特征在于，在所述消息服务器接收待处理任务的任务标识和对应的流程路径信息的步骤之前还包括：
派工服务器获取待处理任务的任务类型和任务标识，根据所述任务类型确定与所述任务标识对应的流程路径信息，将所述任务标识和对应的流程路径信息发送到所述消息服务器。
8.根据权利要求6所述的方法，其特征在于，所述任务处理节点接收所述消息服务器发送的开始处理消息，根据所述开始处理消息中的任务标识按照预设的规则进行对应任务的处理，处理完成后，向所述消息服务器发送处理完成消息的步骤包括：
所述任务处理节点接收所述消息服务器发送的开始处理消息，提取所述开始处理消息中的任务标识，根据所述任务标识获取与该任务标识对应的待处理数据，按照预设的规则对所述待处理数据进行处理，处理完成后，向所述消息服务器发送处理完成消息。
9.根据权利要求6所述的方法，其特征在于，所述任务处理节点接收所述消息服务器发送的开始处理消息，根据所述开始处理消息中的任务标识按照预设的规则进行对应任务的处理，处理完成后，向所述消息服务器发送处理完成消息的步骤包括：
所述任务处理节点接收所述消息服务器发送的开始处理消息，根据所述开始处理消息中的任务标识查找与所述任务标识对应的配置信息，所述配置信息包括待处理数据的地址，根据所述待处理数据的地址获取对应的待处理数据，根据预设的规则对所述待处理数据进行处理，处理完成后，向所述消息服务器发送处理完成消息。
10.根据权利要求7所述的方法，其特征在于，在所述派工服务器获取待处理任务的任务类型和任务标识的步骤之前还包括：
所述派工服务器设置任务类型与流程路径信息之间的对应关系，并将所述对应关系进行存储。
CN201710087579.3A 2017-02-17 2017-02-17 任务处理方法和系统 Active CN106713504B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710087579.3A CN106713504B (zh) 2017-02-17 2017-02-17 任务处理方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710087579.3A CN106713504B (zh) 2017-02-17 2017-02-17 任务处理方法和系统

Publications (2)

Publication Number Publication Date
CN106713504A true CN106713504A (zh) 2017-05-24
CN106713504B CN106713504B (zh) 2018-01-16

Family

ID=58911823

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710087579.3A Active CN106713504B (zh) 2017-02-17 2017-02-17 任务处理方法和系统

Country Status (1)

Country Link
CN (1) CN106713504B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107786544A (zh) * 2017-09-29 2018-03-09 贵州白山云科技有限公司 一种消息的任务状态处理方法及系统
CN108428184A (zh) * 2017-12-01 2018-08-21 中国平安财产保险股份有限公司 一种保险投保时的资料处理方法、存储介质和服务器
CN108898471A (zh) * 2018-05-30 2018-11-27 深圳市买买提信息科技有限公司 一种任务处理方法及服务器
CN109377177A (zh) * 2018-10-18 2019-02-22 东软集团股份有限公司 流程处理方法、装置、设备和计算机可读存储介质
CN111338797A (zh) * 2020-02-19 2020-06-26 望海康信(北京)科技股份公司 任务处理方法、装置、电子设备及计算机可读存储介质
CN111586139A (zh) * 2020-04-30 2020-08-25 中国银行股份有限公司 基于回声状态网络的信息传输方法及装置
CN111782610A (zh) * 2020-06-03 2020-10-16 中移（杭州）信息技术有限公司 日志处理方法、装置、服务器、系统网络和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103942099A (zh) * 2014-04-30 2014-07-23 广州唯品会网络技术有限公司 基于Hive的并行执行任务方法及装置
CN104580381A (zh) * 2014-12-17 2015-04-29 北京可思云海科技有限公司 一种在多节点网络中执行作业任务的方法
CN105677462A (zh) * 2015-12-30 2016-06-15 生迪光电科技股份有限公司 基于物联网的分布式任务系统及业务处理方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103942099A (zh) * 2014-04-30 2014-07-23 广州唯品会网络技术有限公司 基于Hive的并行执行任务方法及装置
CN104580381A (zh) * 2014-12-17 2015-04-29 北京可思云海科技有限公司 一种在多节点网络中执行作业任务的方法
CN105677462A (zh) * 2015-12-30 2016-06-15 生迪光电科技股份有限公司 基于物联网的分布式任务系统及业务处理方法

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019062729A1 (zh) * 2017-09-29 2019-04-04 贵州白山云科技股份有限公司 一种消息的任务状态处理方法、系统及计算机可读存储介质
CN107786544B (zh) * 2017-09-29 2018-08-17 贵州白山云科技有限公司 一种消息的任务状态处理方法及系统
CN107786544A (zh) * 2017-09-29 2018-03-09 贵州白山云科技有限公司 一种消息的任务状态处理方法及系统
CN108428184A (zh) * 2017-12-01 2018-08-21 中国平安财产保险股份有限公司 一种保险投保时的资料处理方法、存储介质和服务器
CN108898471A (zh) * 2018-05-30 2018-11-27 深圳市买买提信息科技有限公司 一种任务处理方法及服务器
CN109377177B (zh) * 2018-10-18 2020-12-01 东软集团股份有限公司 流程处理方法、装置、设备和计算机可读存储介质
CN109377177A (zh) * 2018-10-18 2019-02-22 东软集团股份有限公司 流程处理方法、装置、设备和计算机可读存储介质
CN111338797A (zh) * 2020-02-19 2020-06-26 望海康信(北京)科技股份公司 任务处理方法、装置、电子设备及计算机可读存储介质
CN111338797B (zh) * 2020-02-19 2023-09-05 望海康信(北京)科技股份公司 任务处理方法、装置、电子设备及计算机可读存储介质
CN111586139A (zh) * 2020-04-30 2020-08-25 中国银行股份有限公司 基于回声状态网络的信息传输方法及装置
CN111586139B (zh) * 2020-04-30 2022-08-19 中国银行股份有限公司 基于回声状态网络的信息传输方法及装置
CN111782610A (zh) * 2020-06-03 2020-10-16 中移（杭州）信息技术有限公司 日志处理方法、装置、服务器、系统网络和存储介质
CN111782610B (zh) * 2020-06-03 2024-03-22 中移（杭州）信息技术有限公司 日志处理方法、装置、服务器、系统网络和存储介质

Also Published As

Publication number Publication date
CN106713504B (zh) 2018-01-16

Similar Documents

Publication Publication Date Title
CN106713504B (zh) 任务处理方法和系统
CN107665233B (zh) 数据库数据处理方法、装置、计算机设备和存储介质
CN109951547B (zh) 事务请求并行处理方法、装置、设备和介质
CN105786460A (zh) 一种基于服务组合的软件开发方法及装置
CN111144402A (zh) Ocr识别准确率的计算方法、装置、设备以及存储介质
CN107589990B (zh) 一种基于线程池的数据通讯的方法及系统
CN112311902B (zh) 基于微服务的文件发送方法及装置
CN114416049A (zh) 结合rpa和ai的服务接口的配置方法及装置
CN112019452B (zh) 一种业务需求的处理方法、系统及相关装置
CN112035169B (zh) 跳转处理方法及装置、计算机设备及计算机可读存储介质
CN115866017B (zh) 消息处理方法、装置、通信设备及存储介质
CN106453213A (zh) 一种系统间调用方法及装置
CN111258940B (zh) 配置方法、业务审核方法及系统、设备、存储介质
CN113095515A (zh) 业务故障信息处理方法及装置
CN107851058B (zh) 存储系统及设备扫描方法
CN113987107A (zh) 基于行为树的对话方法、装置及电子设备、存储介质
CN112764897B (zh) 任务请求的处理方法、装置、系统及计算机可读存储介质
CN115204841A (zh) 工作流的生成方法、装置、电子设备以及存储介质
CN104407846B (zh) 一种信息处理方法及装置
CN114221883A (zh) 消息测试方法、装置、服务器及存储介质
CN110909761B (zh) 图像识别方法、装置、计算机设备及存储介质
CN109165200B (zh) 数据同步方法、装置、计算设备及计算机存储介质
CN113537954A (zh) 一种项目里程碑的处理方法、装置、存储介质及电子设备
CN113691403A (zh) 拓扑节点配置方法、相关装置及计算机程序产品
CN113468446A (zh) 一种支持识别第三方二维码数据的方法、系统及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1235935

Country of ref document: HK

REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1235935

Country of ref document: HK