CN106776453A - 一种控制提供信息技术服务的网络计算集群的方法 - Google Patents
一种控制提供信息技术服务的网络计算集群的方法 Download PDFInfo
- Publication number
- CN106776453A CN106776453A CN201611183853.9A CN201611183853A CN106776453A CN 106776453 A CN106776453 A CN 106776453A CN 201611183853 A CN201611183853 A CN 201611183853A CN 106776453 A CN106776453 A CN 106776453A
- Authority
- CN
- China
- Prior art keywords
- interchanger
- task
- limb
- data
- calculating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F15/00—Digital computers in general; Data processing equipment in general
- G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
- G06F15/161—Computing infrastructure, e.g. computer clusters, blade chassis or hardware partitioning
Landscapes
- Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- General Physics & Mathematics (AREA)
- Machine Translation (AREA)
Abstract
本发明公开了一种控制提供信息技术服务的网络计算集群的方法，包括以下步骤：S1：使用者通过操作主机输入计算主干命令，操作主机连接有任务分割交换机，任务分割交换机将计算命令分割为多个计算枝干命令，多个计算枝干命令分类存储于任务分割交换机内；S2：任务分割交换机将分类后的多个计算枝干命令发送给数个节点交换机，节点交换机将多个计算枝干命令平均非配给与节点交换机连接的数个计算机。本发明能够将计算命令合理的分配给各个计算机，并将基础数据按需分配给各个计算机，降低了信息的耦合和交叉，提高了计算效率，节省了时间，合理的利用了计算机资源。
Description
技术领域
本发明涉及网络计算集群技术领域，尤其涉及一种控制提供信息技术服务的网络计算集群的方法。
背景技术
进入21世纪，信息的爆炸式增长带了数据的海量化，面对规模日益庞大的数据量，全球知名咨询公司麦肯锡提出“大数据”时代说，麦肯锡称：数据，已经渗透到当今每一个行业和业务职能领域，成为重要的生产因素，人们对于海量数据的挖掘和运用，预示着新一波生产率增长和消费者盈余浪潮的到来,而网络信息数据采集是“大数据”战略的基础，搭建采集海量数据的架构体系、做到所见即所得的无阻拦式采集、满足在有限时间内采集更多的数据，都必须使数据得到高效、及时而有效的采集，因而对计算机进行集群计算。
集群计算实际上不能真正地被看作是一种分布式计算解决方案，集群计算存在大量的耦合信息及重复信息，极大的降低了集群计算的稳定性和计算效率。
发明内容
基于背景技术存在的技术问题，本发明提出了一种控制提供信息技术服务的网络计算集群的方法。
本发明提出的一种控制提供信息技术服务的网络计算集群的方法，包括以下步骤：
S1：使用者通过操作主机输入计算主干命令，操作主机连接有任务分割交换机，任务分割交换机将计算命令分割为多个计算枝干命令，多个计算枝干命令分类存储于任务分割交换机内；
S2：任务分割交换机将分类后的多个计算枝干命令发送给数个节点交换机，节点交换机将多个计算枝干命令平均非配给与节点交换机连接的数个计算机，节点交换机分配计算枝干命令后，将计算枝干命令分配情况反馈给任务分割交换机；
S3：上述的数个计算机均通过信号线与数据分配模块连接，且数据分配模块连接有数据采集装置，数据采集装置由多个数据采集模块采集基础数据，且多个数据采集模块连接有一个数据整理模块，数据整理模块可过滤以及覆盖重复的基础数据，整理后的基础数据存储于数据存储器内；
S4：数据分配模块的输入端通过信号线与任务分割交换机输出端连接，数据分配模块根据任务分割交换机接收到的计算枝干命令分配情况，对数据存储器内存储的基础数据进行分配，并将基础数据分配给各个计算机；
S5：各个计算机根据分配到的基础数据进行计算，计算机得出的结果反馈给节点交换机，并由节点交换机反馈给任务分割交换机，由任务分割交换机将结果反馈给操作主机。
优选地，所述任务分割交换机的分割过程包括人工分类和自动化分割，人工分类通过操作主机直接下达分类命令，分类命令包括类型分类、大小分类和名称分类。
优选地，所述自动化分割根据节点交换机的位置信息以及与节点交换机连接的计算机计算速率，对计算主干命令进行分割。
优选地，所述节点交换机根据就近原则和高速计算机处理大容量计算原则对计算机的计算任务进行分配，且将计算枝干命令分配的结果反馈给任务分割交换机。
优选地，所述任务分割交换机连接有检索模块，且检索模块对比操作主机的计算主干命令及通过节点交换机反馈回的计算枝干命令分配的结果，检测命令是否遗漏，并对遗漏的命令精细继续分配。
优选地，所述任务分割交换机遗漏的命令分割并将计算命令发送给最先反馈回结果的节点交换机，并通过节点交换机发送给处于空置状态的计算机。
本发明的有益效果为：
1.任务分割交换机将整个计算主干命令分割为若干计算支干命令，且通过节点交换机将计算支干命令按照就近原则和高速计算机处理大容量计算原则分配给计算机，明确了每个计算机的计算任务，避免计算机资源浪费；
2.数据采集模块采集的数据经过整理后，按需分配给各个计算机，减少了计算机对资源查找索取消耗的时间，同时降低了信息的耦合和交叉，提高了计算效率，节省了时间。
本发明能够将计算命令合理的分配给各个计算机，并将基础数据按需分配给各个计算机，降低了信息的耦合和交叉，提高了计算效率，节省了时间，合理的利用了计算机资源。
具体实施方式
下面将结合本发明实施例，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。
一种控制提供信息技术服务的网络计算集群的方法，包括以下步骤：
S1：使用者通过操作主机输入计算主干命令，操作主机连接有任务分割交换机，任务分割交换机将计算命令分割为多个计算枝干命令，多个计算枝干命令分类存储于任务分割交换机内；
S2：任务分割交换机将分类后的多个计算枝干命令发送给数个节点交换机，节点交换机将多个计算枝干命令平均非配给与节点交换机连接的数个计算机，节点交换机分配计算枝干命令后，将计算枝干命令分配情况反馈给任务分割交换机；
S3：上述的数个计算机均通过信号线与数据分配模块连接，且数据分配模块连接有数据采集装置，数据采集装置由多个数据采集模块采集基础数据，且多个数据采集模块连接有一个数据整理模块，数据整理模块可过滤以及覆盖重复的基础数据，整理后的基础数据存储于数据存储器内；
S4：数据分配模块的输入端通过信号线与任务分割交换机输出端连接，数据分配模块根据任务分割交换机接收到的计算枝干命令分配情况，对数据存储器内存储的基础数据进行分配，并将基础数据分配给各个计算机；
S5：各个计算机根据分配到的基础数据进行计算，计算机得出的结果反馈给节点交换机，并由节点交换机反馈给任务分割交换机，由任务分割交换机将结果反馈给操作主机。
本发明中，任务分割交换机的分割过程包括人工分类和自动化分割，人工分类通过操作主机直接下达分类命令，分类命令包括类型分类、大小分类和名称分类，自动化分割根据节点交换机的位置信息以及与节点交换机连接的计算机计算速率，对计算主干命令进行分割，节点交换机根据就近原则和高速计算机处理大容量计算原则对计算机的计算任务进行分配，且将计算枝干命令分配的结果反馈给任务分割交换机，任务分割交换机连接有检索模块，且检索模块对比操作主机的计算主干命令及通过节点交换机反馈回的计算枝干命令分配的结果，检测命令是否遗漏，并对遗漏的命令精细继续分配，任务分割交换机遗漏的命令分割并将计算命令发送给最先反馈回结果的节点交换机，并通过节点交换机发送给处于空置状态的计算机。
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。
Claims (6)
1.一种控制提供信息技术服务的网络计算集群的方法，其特征在于，包括以下步骤：
S1：使用者通过操作主机输入计算主干命令，操作主机连接有任务分割交换机，任务分割交换机将计算命令分割为多个计算枝干命令，多个计算枝干命令分类存储于任务分割交换机内；
S2：任务分割交换机将分类后的多个计算枝干命令发送给数个节点交换机，节点交换机将多个计算枝干命令平均非配给与节点交换机连接的数个计算机，节点交换机分配计算枝干命令后，将计算枝干命令分配情况反馈给任务分割交换机；
S3：上述的数个计算机均通过信号线与数据分配模块连接，且数据分配模块连接有数据采集装置，数据采集装置由多个数据采集模块采集基础数据，且多个数据采集模块连接有一个数据整理模块，数据整理模块可过滤以及覆盖重复的基础数据，整理后的基础数据存储于数据存储器内；
S4：数据分配模块的输入端通过信号线与任务分割交换机输出端连接，数据分配模块根据任务分割交换机接收到的计算枝干命令分配情况，对数据存储器内存储的基础数据进行分配，并将基础数据分配给各个计算机；
S5：各个计算机根据分配到的基础数据进行计算，计算机得出的结果反馈给节点交换机，并由节点交换机反馈给任务分割交换机，由任务分割交换机将结果反馈给操作主机。
2.根据权利要求1所述的一种控制提供信息技术服务的网络计算集群的方法，其特征在于，所述任务分割交换机的分割过程包括人工分类和自动化分割，人工分类通过操作主机直接下达分类命令，分类命令包括类型分类、大小分类和名称分类。
3.根据权利要求1所述的一种控制提供信息技术服务的网络计算集群的方法，其特征在于，所述自动化分割根据节点交换机的位置信息以及与节点交换机连接的计算机计算速率，对计算主干命令进行分割。
4.根据权利要求1所述的一种控制提供信息技术服务的网络计算集群的方法，其特征在于，所述节点交换机根据就近原则和高速计算机处理大容量计算原则对计算机的计算任务进行分配，且将计算枝干命令分配的结果反馈给任务分割交换机。
5.根据权利要求1所述的一种控制提供信息技术服务的网络计算集群的方法，其特征在于，所述任务分割交换机连接有检索模块，且检索模块对比操作主机的计算主干命令及通过节点交换机反馈回的计算枝干命令分配的结果，检测命令是否遗漏，并对遗漏的命令精细继续分配。
6.根据权利要求1或5所述的一种控制提供信息技术服务的网络计算集群的方法，其特征在于，所述任务分割交换机遗漏的命令分割并将计算命令发送给最先反馈回结果的节点交换机，并通过节点交换机发送给处于空置状态的计算机。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201611183853.9A CN106776453A (zh) | 2016-12-20 | 2016-12-20 | 一种控制提供信息技术服务的网络计算集群的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201611183853.9A CN106776453A (zh) | 2016-12-20 | 2016-12-20 | 一种控制提供信息技术服务的网络计算集群的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN106776453A true CN106776453A (zh) | 2017-05-31 |
Family
ID=58896220
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201611183853.9A Pending CN106776453A (zh) | 2016-12-20 | 2016-12-20 | 一种控制提供信息技术服务的网络计算集群的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106776453A (zh) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101441557A (zh) * | 2008-11-08 | 2009-05-27 | 腾讯科技（深圳）有限公司 | 基于动态数据拆分的分布式并行计算的系统及其方法 |
| CN102460886A (zh) * | 2009-06-24 | 2012-05-16 | 阿尔卡特朗讯公司 | 控制提供信息技术服务的网络计算集群的方法 |
| US20120166323A1 (en) * | 2010-12-23 | 2012-06-28 | Feng Golfen Guo | Information Technology Resource Allocation and Utilization Tracking in a Cloud-Based System |
| CN103873321A (zh) * | 2014-03-05 | 2014-06-18 | 国家电网公司 | 基于分布式文件系统的仿真分布式并行计算平台及方法 |
| CN104239144A (zh) * | 2014-09-22 | 2014-12-24 | 珠海许继芝电网自动化有限公司 | 一种多级分布式任务处理系统 |
| CN104239555A (zh) * | 2014-09-25 | 2014-12-24 | 天津神舟通用数据技术有限公司 | 基于mpp的并行数据挖掘架构及其方法 |
| CN105912390A (zh) * | 2016-04-07 | 2016-08-31 | 四川大学 | 云计算环境下基于模板的任务调度策略 |
-
2016
- 2016-12-20 CN CN201611183853.9A patent/CN106776453A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101441557A (zh) * | 2008-11-08 | 2009-05-27 | 腾讯科技（深圳）有限公司 | 基于动态数据拆分的分布式并行计算的系统及其方法 |
| CN102460886A (zh) * | 2009-06-24 | 2012-05-16 | 阿尔卡特朗讯公司 | 控制提供信息技术服务的网络计算集群的方法 |
| US20120166323A1 (en) * | 2010-12-23 | 2012-06-28 | Feng Golfen Guo | Information Technology Resource Allocation and Utilization Tracking in a Cloud-Based System |
| CN103873321A (zh) * | 2014-03-05 | 2014-06-18 | 国家电网公司 | 基于分布式文件系统的仿真分布式并行计算平台及方法 |
| CN104239144A (zh) * | 2014-09-22 | 2014-12-24 | 珠海许继芝电网自动化有限公司 | 一种多级分布式任务处理系统 |
| CN104239555A (zh) * | 2014-09-25 | 2014-12-24 | 天津神舟通用数据技术有限公司 | 基于mpp的并行数据挖掘架构及其方法 |
| CN105912390A (zh) * | 2016-04-07 | 2016-08-31 | 四川大学 | 云计算环境下基于模板的任务调度策略 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110166282B (zh) | 资源分配方法、装置、计算机设备和存储介质 | |
| CN106651633B (zh) | 一种基于大数据技术的用电信息采集系统及其采集方法 | |
| CN102467570B (zh) | 用于分布式数据仓库的连接查询系统和方法 | |
| CN101986661B (zh) | 一种改进的虚拟机群下MapReduce数据处理方法 | |
| CN103475538B (zh) | 一种基于多接口的自适应的云服务测试方法 | |
| CN102281192A (zh) | 交换网络芯片的信元处理方法及装置 | |
| CN107395731A (zh) | 一种基于服务编排的容器集群的调节方法和装置 | |
| US10235341B2 (en) | Method for solving the decomposition-coordination calculation based on block bordered diagonal form (BBDF) model using data center | |
| CN102314336A (zh) | 一种数据处理方法和系统 | |
| CN110278257A (zh) | 一种动态化配置分布式集群节点标签的方法 | |
| CN102681904A (zh) | 数据同步调度方法和装置 | |
| CN107562964A (zh) | 一种农作物谱系构建方法、数据库、追溯方法及系统 | |
| CN109993457A (zh) | 一种企业客户资源的分配方法及系统 | |
| CN102325054A (zh) | 一种分布式计算管理平台机群分级管理的自适应调整方法 | |
| CN106776453A (zh) | 一种控制提供信息技术服务的网络计算集群的方法 | |
| CN108073620A (zh) | 一种基于图数据结构的快速检索方法 | |
| CN105607587A (zh) | 一种智能生产吊挂系统 | |
| DE60319003T2 (de) | Verfahren zur Neuverteilung von Objekten an Recheneinheiten | |
| CN104468379B (zh) | 基于最短逻辑距离的虚拟Hadoop集群节点选择方法及装置 | |
| LU100482B1 (en) | Data storage system based on large data processing | |
| CN104933119A (zh) | 一种大数据管理方法 | |
| CN102779097B (zh) | 流程数据的内存存取方法 | |
| CN104391949A (zh) | 一种基于数据字典的广域数据资源管理方法 | |
| CN107609129A (zh) | 日志实时处理系统 | |
| CN115421900A (zh) | 一种前置数据采集方法、系统及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170531 |
|
| RJ01 | Rejection of invention patent application after publication |