CN104980254A - 因特网信息处理系统 - Google Patents

因特网信息处理系统 Download PDF

Info

Publication number
CN104980254A
CN104980254A CN201510312612.9A CN201510312612A CN104980254A CN 104980254 A CN104980254 A CN 104980254A CN 201510312612 A CN201510312612 A CN 201510312612A CN 104980254 A CN104980254 A CN 104980254A
Authority
CN
China
Prior art keywords
data
server
central controller
receiving
reception
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510312612.9A
Other languages
English (en)
Inventor
程崇煜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Liuzhou Zhirong Technology Co Ltd
Original Assignee
Liuzhou Zhirong Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Liuzhou Zhirong Technology Co Ltd filed Critical Liuzhou Zhirong Technology Co Ltd
Priority to CN201510312612.9A priority Critical patent/CN104980254A/zh
Publication of CN104980254A publication Critical patent/CN104980254A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/0001—Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0033—Systems modifying transmission characteristics according to link quality, e.g. power backoff arrangements specific to the transmitter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0823—Errors, e.g. transmission errors

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Environmental & Geological Engineering (AREA)
  • Quality & Reliability (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种因特网信息处理系统，包括，数据采集服务器：采集互联网上的数据，并对数据进行初步分类；发送服务器：接收数据采集服务器发送的数据后，保存接收的数据并建立发送队列表；接收服务器，按照数据分类，只接收同类别的数据，并保存接收的数据；中央控制器：中央控制器采集接收服务器组的状态，并根据采集的状态建立接收队列表，接收队列表内保存各个接收服务器的工作状态和繁忙程度；所述中央控制器以循环的方式侦测发送队列表，并依据接收队列表记录的数据控制数据的传输，中央控制器内设置数据冗余判断模块和电力控制模块，数据采集服务器内设置数据筛选模块，数据地图绘制服务器，绘制大数据地图。达到防止数据丢失的目的。

Description

因特网信息处理系统
技术领域
本发明涉及计算机领域，具体地，涉及一种因特网信息处理系统。
背景技术
目前，随着计算机技术和互联网的发展，许多政府和企业都在进行大数据的建设，而大数据建设对企业的发展方向，政府的管理水平和服务方式的改进都起到非常重要的作用，但现有的大数据处理中，往往是将数据都集中到一起后，再进行分类，造成后期工作量大，因数据量巨大，造成接收数据时网络堵塞，从而存在数据丢失的问题。
发明内容
本发明的目的在于，针对上述问题，提出一种因特网信息处理系统，以实现防止数据丢失的优点。
为实现上述目的，本发明采用的技术方案是：
一种因特网信息处理系统，包括，
数据采集服务器：采集互联网上的数据，并对数据进行初步分类，并将相同类别的数据压缩处理后传输至发送服务器；
发送服务器：接收数据采集服务器发送的数据后，保存接收的数据并按照数据类别和接收时间建立发送队列表；
接收服务器，按照数据类别进行分组，并对接收服务器组进行编号，接收服务器组按照数据分类，不同的接收服务器组只接收同类别的数据，并保存接收的数据；
中央控制器：中央控制器采集接收服务器组的状态，并根据采集的状态建立接收队列表，接收队列表内保存各个接收服务器的工作状态和繁忙程度；
所述中央控制器以循环的方式侦测发送队列表，并依据接收队列表记录的数据控制数据的传输；
中央控制器内设置数据冗余判断模块：数据冗余判断模块与接收服务器连接和数据采集服务器连接，对数据采集服务器采集的数据进行冗余判断，若接收服务器内保存的数据如数据采集服务器采集的数据相同则将相同的数据丢弃；
中央控制器内设置电力控制模块，电力控制模块根据接收队列表保存的接收服务器的状态和发送队列表的数据类别控制相应空闲的接收服务器处于待机状态；
数据采集服务器内设置数据筛选模块，数据筛选模块对采集的数据进行筛选，将无用的数据筛选出去；
数据地图绘制服务器，将接收服务去保存的数据进行汇总，并根据汇总数据绘制大数据地图。
本发明的技术方案具有以下有益效果：
本发明的技术方案，在前期对数据进行分类，并在发送服务器中建立发送队列表，中央控制器对发送队列表进行循环侦测，直到保存数据正确发送到接收服务器，从而达到防止数据丢失的目的。
具体实施方式
一种因特网信息处理系统，包括，
数据采集服务器：采集互联网上的数据，并对数据进行初步分类，并将相同类别的数据压缩处理后传输至发送服务器；
发送服务器：接收数据采集服务器发送的数据后，保存接收的数据并按照数据类别和接收时间建立发送队列表；
接收服务器，按照数据类别进行分组，并对接收服务器组进行编号，接收服务器组按照数据分类，不同的接收服务器组只接收同类别的数据，并保存接收的数据；
中央控制器：中央控制器采集接收服务器组的状态，并根据采集的状态建立接收队列表，接收队列表内保存各个接收服务器的工作状态和繁忙程度；
中央控制器以循环的方式侦测发送队列表，并依据接收队列表记录的数据控制数据的传输；
中央控制器内设置数据冗余判断模块：数据冗余判断模块与接收服务器连接和数据采集服务器连接，对数据采集服务器采集的数据进行冗余判断，若接收服务器内保存的数据如数据采集服务器采集的数据相同则将相同的数据丢弃；
中央控制器内设置电力控制模块，电力控制模块根据接收队列表保存的接收服务器的状态和发送队列表的数据类别控制相应空闲的接收服务器处于待机状态。
数据地图绘制服务器，将接收服务去保存的数据进行汇总，并根据汇总数据绘制大数据地图。
数据采集服务器内设置数据筛选模块，数据筛选模块对采集的数据进行筛选，将无用的数据筛选出去。
如在电商中将数据简单的分为家电、手机、电脑、办公用品、服装、化妆品和其它。
数据采集服务器将采集的数据按照上述的分类要求进行分类后，发送至发送服务器保存，并建立发送队列表，对应的接收服务器分为家电接收服务器组、手机接收服务器组、电脑接收服务器组、办公用品接收服务器组、服装接收服务器组、化妆品接收服务器组和其它接收服务器组。
家电接收服务器组只接收家电类的数据、化妆品接收服务器组至接收化妆品的数据。如发送服务器发送的数据类别和顺序为家电1、手机1、电脑1、办公用品1、服装1、家电2、家电3和办公用品1，发送队列表按照该顺序建立，中央控制器以循环的方式侦测发送队列表后，首先调取接收队列表的记录，如接收队列表内显示家电接收服务器组正常，可以接收数据，中央控制器控制发送服务器将家电1的数据发送到家电接收服务器，同理将手机1、电脑1、办公用品1和服装1按照顺序发送，发送家电2数据时，如家电接收服务器的通道被堵塞，中央控制器往下顺延，发送下一个数据，如办公用品1，发送完办公用品1后，中央控制器从新侦测发送队列表，至到发送队列表内的数据都发送完毕，再进行下一轮数据的发送。
接收服务器接收到相应数据后，给中央控制器发送一个反馈信号，中央控制器接收到反馈信号后，控制发送服务器，将发送服务器内相应的数据删除。
最后应说明的是：以上所述仅为本发明的优选实施例而已，并不用于限制本发明，尽管参照前述实施例对本发明进行了详细的说明，对于本领域的技术人员来说，其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (1)

1.一种因特网信息处理系统，其特征在于，包括，
数据采集服务器：采集互联网上的数据，并对数据进行初步分类，并将相同类别的数据压缩处理后传输至发送服务器；
发送服务器：接收数据采集服务器发送的数据后，保存接收的数据并按照数据类别和接收时间建立发送队列表；
接收服务器，按照数据类别进行分组，并对接收服务器组进行编号，接收服务器组按照数据分类，只接收同类别的数据，并保存接收的数据；
中央控制器：中央控制器采集接收服务器组的状态，并根据采集的状态建立接收队列表，接收队列表内保存各个接收服务器的工作状态和繁忙程度；
所述中央控制器以循环的方式侦测发送队列表，并依据接收队列表记录的数据控制数据的传输；
中央控制器内设置数据冗余判断模块：数据冗余判断模块与接收服务器连接和数据采集服务器连接，对数据采集服务器采集的数据进行冗余判断，若接收服务器内保存的数据如数据采集服务器采集的数据相同则将相同的数据丢弃；
中央控制器内设置电力控制模块，电力控制模块根据接收队列表保存的接收服务器的状态和发送队列表的数据类别控制相应空闲的接收服务器处于待机状态；
数据采集服务器内设置数据筛选模块，数据筛选模块对采集的数据进行筛选，将无用的数据筛选出去；
数据地图绘制服务器，将接收服务去保存的数据进行汇总，并根据汇总数据绘制大数据地图。
CN201510312612.9A 2015-06-10 2015-06-10 因特网信息处理系统 Pending CN104980254A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510312612.9A CN104980254A (zh) 2015-06-10 2015-06-10 因特网信息处理系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510312612.9A CN104980254A (zh) 2015-06-10 2015-06-10 因特网信息处理系统

Publications (1)

Publication Number Publication Date
CN104980254A true CN104980254A (zh) 2015-10-14

Family

ID=54276395

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510312612.9A Pending CN104980254A (zh) 2015-06-10 2015-06-10 因特网信息处理系统

Country Status (1)

Country Link
CN (1) CN104980254A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106844721A (zh) * 2017-02-09 2017-06-13 济南浪潮高新科技投资发展有限公司 数据存储方法、装置、系统、可读介质及存储控制器
CN107070748A (zh) * 2017-04-13 2017-08-18 周发辉 一种通信大数据的处理系统及方法
CN107094120A (zh) * 2017-04-05 2017-08-25 合肥酷睿网络科技有限公司 一种网络信息管理系统
CN111159280A (zh) * 2020-01-02 2020-05-15 南京欣网通信科技股份有限公司 一种大数据处理系统
CN111309826A (zh) * 2020-03-20 2020-06-19 西安航空学院 基于终端的大数据处理方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5740424A (en) * 1992-08-07 1998-04-14 Hitachi, Ltd. Information processing system and method using time-varying database altering information
CN102648465A (zh) * 2009-08-26 2012-08-22 杰维斯股份公司 远程数据收集系统和方法
CN103218744A (zh) * 2012-07-20 2013-07-24 上海大智慧股份有限公司 一种基于swot模型的行业投资信息及数据处理系统
CN104468399A (zh) * 2014-12-08 2015-03-25 北京奇虎科技有限公司 数据传输方法、装置和服务器

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5740424A (en) * 1992-08-07 1998-04-14 Hitachi, Ltd. Information processing system and method using time-varying database altering information
CN102648465A (zh) * 2009-08-26 2012-08-22 杰维斯股份公司 远程数据收集系统和方法
CN103218744A (zh) * 2012-07-20 2013-07-24 上海大智慧股份有限公司 一种基于swot模型的行业投资信息及数据处理系统
CN104468399A (zh) * 2014-12-08 2015-03-25 北京奇虎科技有限公司 数据传输方法、装置和服务器

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
李学龙等: "大数据系统综述", 《中国科学：信息科学》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106844721A (zh) * 2017-02-09 2017-06-13 济南浪潮高新科技投资发展有限公司 数据存储方法、装置、系统、可读介质及存储控制器
CN107094120A (zh) * 2017-04-05 2017-08-25 合肥酷睿网络科技有限公司 一种网络信息管理系统
CN107070748A (zh) * 2017-04-13 2017-08-18 周发辉 一种通信大数据的处理系统及方法
CN111159280A (zh) * 2020-01-02 2020-05-15 南京欣网通信科技股份有限公司 一种大数据处理系统
CN111309826A (zh) * 2020-03-20 2020-06-19 西安航空学院 基于终端的大数据处理方法及系统

Similar Documents

Publication Publication Date Title
CN104980254A (zh) 因特网信息处理系统
CN105101370B (zh) 一种数据的连接方法、装置及wifi模块
CN108124007A (zh) 消息数据实时传输的方法与装置
CN105718529A (zh) 一种通信终端上应用程序的消息推送方法及装置
CN103618733A (zh) 一种应用于移动互联网的数据过滤系统及方法
CN104679888A (zh) 一种数据同步的装置及方法
CN103490849A (zh) 分析信令流量的方法及装置
CN102754475A (zh) 确定协同多点传输的协作集的方法、装置
CN104994141B (zh) 缓解云服务器存储和计算压力的协同存储系统
CN104933124A (zh) 互联网大数据处理系统
CN102571990A (zh) 移动终端电子邮件同步方法及系统
CN204791080U (zh) 巡检终端和巡检系统
CN103581317A (zh) 一种网络资源共享的方法
CN105049371A (zh) 网络信息处理系统
CN105007232A (zh) 网络大数据处理平台
CN105022292A (zh) 因特网数据处理系统
CN103002038B (zh) 弹性负载均衡的处理方法和装置
CN103580951B (zh) 多个信息系统的输出比较方法、测试迁移辅助方法及系统
CN105007236A (zh) 网络大数据处理系统
CN105005498A (zh) 互联网信息处理平台
CN104935528A (zh) 互联网大数据处理平台
CN105022664A (zh) 互联网信息处理系统
CN109632842A (zh) 一种模块串行结构的ct探测器及其使用方法
CN105007237A (zh) 网络信息处理平台
CN103401892B (zh) 一种基于http post的数据上传加速方法及服务器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20151014