CN108491300A - 一种基于分布式的日志处理系统 - Google Patents

一种基于分布式的日志处理系统 Download PDF

Info

Publication number
CN108491300A
CN108491300A CN201810021983.5A CN201810021983A CN108491300A CN 108491300 A CN108491300 A CN 108491300A CN 201810021983 A CN201810021983 A CN 201810021983A CN 108491300 A CN108491300 A CN 108491300A
Authority
CN
China
Prior art keywords
proxyserver
request
task
queue
http request
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810021983.5A
Other languages
English (en)
Inventor
郭威
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zhang Kuo Mobile Media Science And Technology Ltd
Original Assignee
Beijing Zhang Kuo Mobile Media Science And Technology Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zhang Kuo Mobile Media Science And Technology Ltd filed Critical Beijing Zhang Kuo Mobile Media Science And Technology Ltd
Priority to CN201810021983.5A priority Critical patent/CN108491300A/zh
Publication of CN108491300A publication Critical patent/CN108491300A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3006—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/546—Message passing systems or structures, e.g. queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/547—Remote procedure calls [RPC]; Web services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/54—Indexing scheme relating to G06F9/54
    • G06F2209/548—Queue

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Quality & Reliability (AREA)
  • Mathematical Physics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种基于分布式的日志处理系统，包括：web服务器(httpserver)和代理服务器(proxyserver)，一个web服务器(httpserver)对应于多个远程的代理服务器(proxyserver)，且两者可通讯；其中，所述web服务器(httpserver)，包括：接收模块，用于接收用户提交的http请求；请求分配模块，用于将接收到的http请求放入队列中，读取队列并调用远程方法，将以上http请求分发到不同的代理服务器(proxyserver)中；所述代理服务器(proxyserver)，包括：任务分配模块，用于根据请求接收到的起止时间，操作类型、计算时间、清洗规则，形成不同的任务(job)，并放入不同的线程池中；任务处理模块，用于分别在线程池中对任务进行处理，并执行相应的操作行为，并将处理执行情况记录到日志中。

Description

一种基于分布式的日志处理系统
技术领域
本发明属于数据处理领域，尤其指一种基于分布式的日志处理系统。
背景技术
目前，在大数据处理过程中，需要对大量的日志数据进行处理，通常来 说，一般都是直接将日志数据进行hadoop处理，如：录入hive，并计算。
但是，现有技术的主要缺点如下：
1、错误比较多，脚本维护不便，代码效率低，每个日志需要生成2个临 时文件
2、脚本方式本身执行效率高，但是可调度行差，可监控性也查，和java 一起配合做日志处理。
发明内容
本发明所要解决的技术问题是实现控制和执行分离，为此，提供了一种 基于分布式的日志处理系统。
本发明解决上述技术问题所采取的技术方案如下：
一种基于分布式的日志处理系统，具体包括：
web服务器(httpserver)和代理服务器(proxyserver)，一个web服务器(httpserver)对应于多个远程的代理服务器(proxyserver)，且两者可通讯；
其中，所述web服务器(httpserver)，包括：
接收模块，用于接收用户提交的http请求；
请求分配模块，用于将接收到的http请求放入队列中，读取队列并调用 远程方法，将以上http请求分发到不同的代理服务器(proxyserver)中；
所述代理服务器(proxyserver)，包括：
任务分配模块，用于根据请求接收到的起止时间，操作类型、计算时间、 清洗规则，形成不同的任务(job)，并放入不同的线程池中；
任务处理模块，用于分别在线程池中对任务进行处理，并执行相应的操 作行为，并将处理执行情况记录到日志中。
优选的是，所述web服务器(httpserver)，还包括：请求监听模块，用于 启动任务队列，并监听队列；
其中，一旦有http请求加入到队列中，则取走该http请求，进行下一步 到代理服务器(proxyserver)的调用中。
优选的是，所述代理服务器(proxyserver)中，所述任务分配模块，用 于接收http请求，并根据任务类型处理请求，分发至服务(servic)层；
所述服务(servic)层，用于为转换(convert)类型的请求增加清洗规则 bean，其中，此规则可通过groovy脚本生成，然后调用dao层的代码，将此 请求put进任务队列。
优选的是，所述分发到不同的代理服务器(proxyserver)中的http请求中， 每个http请求都有自己的jobid，相同jobid的job们按照请求顺序顺序执行；
其中，非同一个jobid的job，放到不同的线程池执行。
优选的是，每个线程池都是单线程，最大不超过10个线程池。
优选的是，所述web服务器(httpserver)上启动的队列，对应于多个proxyserver，并且，所述http请求中需包含proxyserver的ip地址。
优选的是，所述代理服务器(Proxyserver)，具体包括：
任务处理模块(jobhandler)，用于启动jobhandler对象，处理job队列；
所述任务处理单元(jobhandler)，维护一个线程池的hashmap，根据不同 的jobid将job放到不同的线程池，每个线程池都只有一个worker，保证同一 个jobid的job顺序执行。
优选的是，所述任务处理模块(jobhandler)，用于当线程池中工作线程不 再工作时，通过修改这个线程池的map中的key，让他可以接受其他的jobid 的job。
优选的是，所述代理服务器(proxyserver)，通过java调用脚本来执行同 步，加载，计算工作，由此，通过调试的方式判断执行是否成功。
本发明基于分布式的日志处理系统，将日志加载分为控制端(web服务 器)和执行端(代理服务器)，一个控制端控制多个执行端；实时加载数据到hive；异常数据记录到日志，供用户查看；提供监控页面，查看执行状态。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说 明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优 点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实 现和获得。
附图说明
下面结合附图对本发明进行详细的描述，以使得本发明的上述优点更加 明确。其中，
图1是本发明基于分布式的日志处理系统的处理方法的示意图；
图2是本发明基于分布式的日志处理系统的结构示意图；
图3是本发明基于分布式的日志处理系统的web服务器的处理过程示意 图；
图4是本发明基于分布式的日志处理系统的代理服务器的处理过程示意 图。
具体实施方式
以下将结合附图及实施例来详细说明本发明的实施方式，借此对本发明 如何应用技术手段来解决技术问题，并达成技术效果的实现过程能充分理解 并据以实施。需要说明的是，只要不构成冲突，本发明中的各个实施例以及 各实施例中的各个特征可以相互结合，所形成的技术方案均在本发明的保护 范围之内。
另外，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的 计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情 况下，可以以不同于此处的顺序执行所示出或描述的步骤。
实施例一：
如图1所述，本发明基于分布式的日志处理系统，其主要的处理方式过 程如下：
步骤1)web服务器接收用户通过http方式提交的http请求；
步骤2)根据请求提交的顺序分发到不同的proxyserver；
步骤3)代理服务器proxyserver根据接收到的起止时间，操作类型，计 算时间，清洗规则做具体的行为
步骤4)记录执行情况到日志。
步骤5)作为可选的，可以设置界面，用户可以直接监控执行情况。
如图2-4所示，一种基于分布式的日志处理系统，具体包括：
web服务器(httpserver)和代理服务器(proxyserver)，一个web服务器(httpserver)对应于多个远程的代理服务器(proxyserver)，且两者可通讯；
其中，所述web服务器(httpserver)，包括：
接收模块，用于接收用户提交的http请求；
请求分配模块，用于将接收到的http请求放入队列中，读取队列并调用 远程方法，将以上http请求分发到不同的代理服务器(proxyserver)中；
所述代理服务器(proxyserver)，包括：
任务分配模块，用于根据请求接收到的起止时间，操作类型、计算时间、 清洗规则，形成不同的任务(job)，并放入不同的线程池中；
任务处理模块，用于分别在线程池中对任务进行处理，并执行相应的操 作行为，并将处理执行情况记录到日志中。
优选的是，所述web服务器(httpserver)，还包括：请求监听模块，用于 启动任务队列，并监听队列；
其中，一旦有http请求加入到队列中，则取走该http请求，进行下一步 到代理服务器(proxyserver)的调用中。
优选的是，所述代理服务器(proxyserver)中，所述任务分配模块，用 于接收http请求，并根据任务类型处理请求，分发至服务(servic)层；
所述服务(servic)层，用于为转换(convert)类型的请求增加清洗规则 bean，其中，此规则可通过groovy脚本生成，然后调用dao层的代码，将此 请求put进任务队列。
优选的是，所述分发到不同的代理服务器(proxyserver)中的http请求中， 每个http请求都有自己的jobid，相同jobid的job们按照请求顺序顺序执行；
其中，非同一个jobid的job，放到不同的线程池执行。
优选的是，每个线程池都是单线程，最大不超过10个线程池。
优选的是，所述web服务器(httpserver)上启动的队列，对应于多个proxyserver，并且，所述http请求中需包含proxyserver的ip地址。
优选的是，所述代理服务器(Proxyserver)，具体包括：
任务处理模块(jobhandler)，用于启动jobhandler对象，处理job队列；
所述任务处理单元(jobhandler)，维护一个线程池的hashmap，根据不同 的jobid将job放到不同的线程池，每个线程池都只有一个worker，保证同一 个jobid的job顺序执行。
优选的是，所述任务处理模块(jobhandler)，用于当线程池中工作线程不 再工作时，通过修改这个线程池的map中的key，让他可以接受其他的jobid 的job。
优选的是，所述代理服务器(proxyserver)，通过java调用脚本来执行同 步，加载，计算工作，由此，通过调试的方式判断执行是否成功。
实施例二：
在一个实施例中，如图2，在任意一台联网机器上装httpserver，直接将 打包好的工程拷贝到该机器，执行start脚本即可，默认使用8080端口。
在hive的安装机器上安装proxyserver，也是直接将打包好的工程拷贝， 执行start脚本即可，默认使用2222端口。
两台机器能够网络访问即可。
其中，Httpserver和proxyserver网络通畅，proxyserver的2222端口可以 访问；
其中，不同的jobid放入不同线程池，每个线程池只有一个工作线程，目 标是保证顺序执行的前提下，增加并发。
其中，Httpserver为web服务器用于接收日志处理请求，proxyserver为 hadoop1等服务器，该proxyserver直接进行处理数据，其中，该系统可以同 时处理多个服务器上的不同的日志。
如图3-4，根据部署图，给出httpserver和proxyserver的内部处理流程。
在Httpserver端，实施例中，程序是web项目，在项目启动的时候，在contextlistener中启动任务队列，并监听队列，一旦有任务加入到队列中则取 走任务，进行下一步到proxyserver的调用。
Httpclient发送http请求到action后，action根据job类型处理请求，分 发至service层，service层为convert类型的请求增加清洗规则bean，此规则 可通过groovy脚本生成。然后调用dao层的代码，将此请求put进任务队列。
其中，因为日志处理是有顺序的，因此httpclient的请求顺序必须和执行 顺序一致，并且，每个job都有自己的id，相同jobid的job们按照请求顺序 顺序执行，非同一个jobid的job，放到不同的线程池执行。每个线程池都是 单线程，最大不超过10个线程池。
此外，在httpserver上启动的队列，可以应对多个proxyserver，http请求 中需包含proxyserver的ip，默认使用localhost。
如图4，在Proxyserver端，其步骤包括：
Proxyserver启动jobhandler对象，用于处理job队列，该队列由远程方法 访问，就是remoteAPI访问，将任务对象，就是job放入到队列中。
Jobhandler用于取出队列中的job然后根据jobid考虑放入哪个线程池中。 同时维护一个线程池的hashmap，根据不同的jobid将job放到不同的线程池， 每个线程池都只有一个worker，保证同一个jobid的job顺序执行。
其中，控制线程池的数量，目前是10个，每个池子一个工作线程。
并且，每个线程池中工作线程不再工作时，修改这个线程池的map中的 key，让他可以接受其他的jobid的job。
由于是java调用脚本来执行同步，加载，计算等工作，因此判断执行成 功是个需要调试的工作。
本发明基于分布式的日志处理系统，将日志加载分为控制端(web服务 器)和执行端(代理服务器)，一个控制端控制多个执行端；实时加载数据到 hive；异常数据记录到日志，供用户查看；提供监控页面，查看执行状态。
需要说明的是，对于上述方法实施例而言，为了简单描述，故将其都表 述为一系列的动作组合，但是本领域技术人员应该知悉，本申请并不受所描 述的动作顺序的限制，因为依据本申请，某些步骤可以采用其他顺序或者同 时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属 于优选实施例，所涉及的动作和模块并不一定是本申请所必须的。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或 计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、 或结合软件和硬件方面的实施例的形式。
而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计 算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等) 上实施的计算机程序产品的形式。
最后应说明的是：以上所述仅为本发明的优选实施例而已，并不用于限 制本发明，尽管参照前述实施例对本发明进行了详细的说明，对于本领域的 技术人员来说，其依然可以对前述各实施例所记载的技术方案进行修改，或 者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内，所作 的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (9)

1.一种基于分布式的日志处理系统，其特征在于，包括：
web服务器(httpserver)和代理服务器(proxyserver)，一个web服务器(httpserver)对应于多个远程的代理服务器(proxyserver)，且两者可通讯；
其中，所述web服务器(httpserver)，包括：
接收模块，用于接收用户提交的http请求；
请求分配模块，用于将接收到的http请求放入队列中，读取队列并调用远程方法，将以上http请求分发到不同的代理服务器(proxyserver)中；
所述代理服务器(proxyserver)，包括：
任务分配模块，用于根据请求接收到的起止时间，操作类型、计算时间、清洗规则，形成不同的任务(job)，并放入不同的线程池中；
任务处理模块，用于分别在线程池中对任务进行处理，并执行相应的操作行为，并将处理执行情况记录到日志中。
2.根据权利要求1所述的基于分布式的日志处理系统，其特征在于，所述web服务器(httpserver)，还包括：请求监听模块，用于启动任务队列，并监听队列；
其中，一旦有http请求加入到队列中，则取走该http请求，进行下一步到代理服务器(proxyserver)的调用中。
3.根据权利要求1或2所述的基于分布式的日志处理系统，其特征在于，所述代理服务器(proxyserver)中，所述任务分配模块，用于接收http请求，并根据任务类型处理请求，分发至服务(servic)层；
所述服务(servic)层，用于为转换(convert)类型的请求增加清洗规则bean，其中，此规则可通过groovy脚本生成，然后调用dao层的代码，将此请求put进任务队列。
4.根据权利要求1或2所述的基于分布式的日志处理系统，其特征在于，所述分发到不同的代理服务器(proxyserver)中的http请求中，每个http请求都有自己的jobid，相同jobid的job们按照请求顺序顺序执行；
其中，非同一个jobid的job，放到不同的线程池执行。
5.根据权利要求4所述的基于分布式的日志处理系统，其特征在于，每个线程池都是顺序执行，最大不超过10个线程池。
6.根据权利要求4所述的基于分布式的日志处理系统，其特征在于，所述web服务器(httpserver)上启动的队列，对应于多个proxyserver，并且，所述http请求中需包含proxyserver的ip地址。
7.根据权利要求4所述的基于分布式的日志处理方法，其特征在于，所述代理服务器(Proxyserver)，具体包括：
任务处理模块(jobhandler)，用于启动jobhandler对象，处理job队列；
所述任务处理单元(jobhandler)，维护一个线程池的hashmap，根据不同的jobid将job放到不同的线程池，每个线程池都只有一个worker，保证同一个jobid的job顺序执行。
8.根据权利要求7所述的基于分布式的日志处理方法，其特征在于，所述任务处理模块(jobhandler)，用于当线程池中工作线程不再工作时，通过修改这个线程池的map中的key，让他可以接受其他的jobid的job。
9.根据权利要求7所述的基于分布式的日志处理方法，其特征在于，所述代理服务器(proxyserver)，通过java调用脚本来执行同步，加载，计算工作，由此，通过调试的方式判断执行是否成功。
CN201810021983.5A 2018-01-10 2018-01-10 一种基于分布式的日志处理系统 Pending CN108491300A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810021983.5A CN108491300A (zh) 2018-01-10 2018-01-10 一种基于分布式的日志处理系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810021983.5A CN108491300A (zh) 2018-01-10 2018-01-10 一种基于分布式的日志处理系统

Publications (1)

Publication Number Publication Date
CN108491300A true CN108491300A (zh) 2018-09-04

Family

ID=63344152

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810021983.5A Pending CN108491300A (zh) 2018-01-10 2018-01-10 一种基于分布式的日志处理系统

Country Status (1)

Country Link
CN (1) CN108491300A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111552619A (zh) * 2020-04-29 2020-08-18 深圳市道旅旅游科技股份有限公司 日志数据展示方法、装置、计算机设备及存储介质
CN113411206A (zh) * 2021-05-26 2021-09-17 北京沃东天骏信息技术有限公司 一种日志审计方法、装置、设备和计算机存储介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101262372A (zh) * 2008-04-15 2008-09-10 北京华纬讯电信技术有限公司 基于sip服务器集群的视频监控平台操控前端设备的方法
CN101651707A (zh) * 2009-09-22 2010-02-17 西安交通大学 一种网络用户行为日志自动获取方法
US20130132558A1 (en) * 2011-11-18 2013-05-23 The Boeing Company Server-Side Web Analytics System and Method
CN103577310A (zh) * 2012-07-20 2014-02-12 腾讯科技（深圳）有限公司 记录软件调试日志的方法以及装置
CN103902386A (zh) * 2014-04-11 2014-07-02 复旦大学 一种基于连接代理优化管理的多线程网络爬虫处理方法
CN106506389A (zh) * 2016-10-19 2017-03-15 广州华多网络科技有限公司 网络请求异步处理方法及装置
CN106777371A (zh) * 2017-01-23 2017-05-31 北京齐尔布莱特科技有限公司 日志收集系统和方法
CN107231402A (zh) * 2016-08-31 2017-10-03 北京新媒传信科技有限公司 Http请求处理方法、装置及系统
CN107332703A (zh) * 2017-06-28 2017-11-07 武汉斗鱼网络科技有限公司 一种多应用日志的查看方法及装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101262372A (zh) * 2008-04-15 2008-09-10 北京华纬讯电信技术有限公司 基于sip服务器集群的视频监控平台操控前端设备的方法
CN101651707A (zh) * 2009-09-22 2010-02-17 西安交通大学 一种网络用户行为日志自动获取方法
US20130132558A1 (en) * 2011-11-18 2013-05-23 The Boeing Company Server-Side Web Analytics System and Method
CN103577310A (zh) * 2012-07-20 2014-02-12 腾讯科技（深圳）有限公司 记录软件调试日志的方法以及装置
CN103902386A (zh) * 2014-04-11 2014-07-02 复旦大学 一种基于连接代理优化管理的多线程网络爬虫处理方法
CN107231402A (zh) * 2016-08-31 2017-10-03 北京新媒传信科技有限公司 Http请求处理方法、装置及系统
CN106506389A (zh) * 2016-10-19 2017-03-15 广州华多网络科技有限公司 网络请求异步处理方法及装置
CN106777371A (zh) * 2017-01-23 2017-05-31 北京齐尔布莱特科技有限公司 日志收集系统和方法
CN107332703A (zh) * 2017-06-28 2017-11-07 武汉斗鱼网络科技有限公司 一种多应用日志的查看方法及装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111552619A (zh) * 2020-04-29 2020-08-18 深圳市道旅旅游科技股份有限公司 日志数据展示方法、装置、计算机设备及存储介质
CN113411206A (zh) * 2021-05-26 2021-09-17 北京沃东天骏信息技术有限公司 一种日志审计方法、装置、设备和计算机存储介质
CN113411206B (zh) * 2021-05-26 2022-09-06 北京沃东天骏信息技术有限公司 一种日志审计方法、装置、设备和计算机存储介质

Similar Documents

Publication Publication Date Title
JP7197612B2 (ja) オンデマンドネットワークコード実行システム上での補助機能の実行
CN108845884B (zh) 物理资源分配方法、装置、计算机设备和存储介质
CN107992362B (zh) 自动化性能测试的方法、装置及系统
CN112527489B (zh) 一种任务调度方法、装置、设备及计算机可读存储介质
WO2020147330A1 (zh) 一种数据流处理方法及系统
US10162708B2 (en) Fault tolerance for complex distributed computing operations
US10831622B2 (en) Method and apparatus for processing gateway device fault
RU2568282C2 (ru) Система и способ обеспечения отказоустойчивости антивирусной защиты, реализуемой в виртуальной среде
US20090132703A1 (en) Verifying resource functionality before use by a grid job submitted to a grid environment
WO2012056596A1 (ja) 計算機システム及び処理制御方法
US20090070457A1 (en) Intelligent Performance Monitoring of a Clustered Environment
US20150178184A1 (en) Test management using distributed computing
CN111209110A (zh) 一种实现负载均衡的任务调度管理方法、系统和存储介质
US20110173319A1 (en) Apparatus and method for operating server using virtualization technique
CN111538585B (zh) 一种基于node.js的服务器进程调度方法、系统和装置
CN112162839A (zh) 任务调度方法、装置、计算机设备和存储介质
CN108491300A (zh) 一种基于分布式的日志处理系统
US20150355990A1 (en) Self-Spawning Probe in a Distributed Computing Environment
CN117193987A (zh) 一种互为中立的独立分布式计算与节点管理方法
CN115269193A (zh) 自动化测试中实现分布式负载均衡的方法及装置
US7882399B2 (en) Intelligent job functionality
CN109766131B (zh) 基于多线程技术实现软件智能化自动升级的系统及方法
CN111082964B (zh) 一种配置信息的分发方法和装置
CN111722917A (zh) 性能测试任务的资源调度方法、装置和设备
CN111158956A (zh) 一种集群系统的数据备份方法及相关装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination