CN106878417A - 一种利用点对点数据传输技术进行计算机系统自动部署的方法 - Google Patents

一种利用点对点数据传输技术进行计算机系统自动部署的方法 Download PDF

Info

Publication number
CN106878417A
CN106878417A CN201710082713.0A CN201710082713A CN106878417A CN 106878417 A CN106878417 A CN 106878417A CN 201710082713 A CN201710082713 A CN 201710082713A CN 106878417 A CN106878417 A CN 106878417A
Authority
CN
China
Prior art keywords
data
client
server
transmission
file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710082713.0A
Other languages
English (en)
Inventor
黄道平
林海柱
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing East Billion League Technology Co Ltd
Original Assignee
Beijing East Billion League Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing East Billion League Technology Co Ltd filed Critical Beijing East Billion League Technology Co Ltd
Priority to CN201710082713.0A priority Critical patent/CN106878417A/zh
Publication of CN106878417A publication Critical patent/CN106878417A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks
    • H04L67/1074Peer-to-peer [P2P] networks for supporting data block transmission mechanisms
    • H04L67/1078Resource delivery mechanisms
    • H04L67/108Resource delivery mechanisms characterised by resources being split in blocks or fragments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks
    • H04L67/1061Peer-to-peer [P2P] networks using node-based peer discovery mechanisms
    • H04L67/1065Discovery involving distributed pre-established resource-based relationships among peers, e.g. based on distributed hash tables [DHT] 

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明涉及一种利用点对点数据传输技术进行计算机系统自动部署的方法,将目标客户机请求传输的数据文件切片为若干个数据块,然后将各个数据块的传输任务分配给服务器以及其他传输工作量小的客户机,最后目标客户机通过对数据块的组装得到完整的文件。与现有的计算机自动部署技术相比,本发明彻底解决了待部署计算机数量和网络性能之间的矛盾,大大提高了网络部署的速度,达到了部署的终端数量越多,效率越高的、速度越快的最佳效果。

Description

一种利用点对点数据传输技术进行计算机系统自动部署的 方法
技术领域
本发明属于计算机网络传输技术领域,涉及一种利用点对点数据传输技术进行计算机系统自动部署的方法。
背景技术
所谓操作系统的自动部署,指的是利用计算机的网络引导功能(PXE引导)将储存在网络服务器上的操作系统备份加载到待安装部署的客户机计算机上,整个过程不用人工参与,完全自动实现客户机计算机网络IP地址的分配、网络引导启动和操作系统的安装等功能。
计算机网络中对于各种约定做了如下定义:将计算机网络同等层间的通信约定称为网络协议,将不同层的通信约定称为接口,到目前为止最有代表性的网络分层模型有两种,其一为国际标准化组织(ISO)所提出的开放系统互连(OSI)七层协议参考模型,其二为美国电气与电子工程师学会(IEEE)802委员会所提出的参考模型。
在实际应用中我们通常采用ISO的OSI七层协议作为网络通讯的参考模型并实现各层功能。从OSI参考模型的应用层来看,可认为网络是由工作站和服务器组成的,但从传输层和网络层的角度看,工作站和服务器没有本质的区别,它们都是连接到网络上的一台机器,都可以用网络地址或名称来代替。它们之间的通信,就是所谓的点对点通信,也叫对等通信。在局域网上,点对点(Peer To Peer,简称P2P)通信意味着两个工作站可以直接对话而不用经过文件服务器中转。P2P通信示意图见图1,服务器和客户机在网络里面的位置是对等的,相互之间都可以直接进行通讯。
如果数据集中存储在服务器上,当客户机工作站需要从服务器获取数据的时候,客户机就需要与服务器进行通讯,如图2所示,一旦有大量的客户机都要从服务器上获取数据的时候,服务器上的通讯工作量就会成倍的增加,同时也会造成服务器端网络负载过大,影响网络系统数据传输的效率,出现传输拥堵。举个例子来说,当需要同时对一个计算机机房的计算机进行自动部署的时候,在网络通讯上具有以下特点:
1、所有的终端机器都要向服务器请求下载操作系统数据文件到本机,服务器要同时处理大量的网络数据通讯请求。如图3所示,服务器将客户机要请求传输的数据按顺序发送给客户机;每台客户机都从服务器请求数据,一方面服务器要负责大量的文件存取操作,另一方面服务器端网络要传输大量的数据,很容易造成网络拥堵。
2、所有终端机器要请求的数据是完全一致的,都是请求相同的操作系统数据文件。
所以,计算机操作系统自动部署时随着参与部署的计算机终端数量的增加往往会带来网络系统性能上的问题,即终端数量和网络传输性能之间的矛盾。
发明内容
有鉴于此,本发明的目的在于提供一种利用点对点数据传输技术进行计算机系统自动部署的方法。
为达到上述目的,本发明提供如下技术方案:
一种利用点对点数据传输技术进行计算机系统自动部署的方法,将目标客户机请求传输的数据文件切片为若干个数据块,然后将各个数据块的传输任务分配给服务器以及其他传输工作量小的客户机,最后目标客户机通过对数据块的组装得到完整的文件。
具体步骤如下:
(1)目标客户机向服务器请求传输数据文件;
(2)服务器查找该数据文件是否已经存在数据块序列映像表,是则进入步骤(3),否则服务器创建数据块序列映像表;
(3)将映像表信息发送给目标客户机,目标客户机根据映像表创建与待传输文件相同大小的空文件File;
(4)目标客户机向服务器请求下一个待传输的数据块,服务器根据所有客户机的数据块序列映像表信息,计算可为目标客户机提供传输服务的服务客户机,倘若找到服务客户机,则进入步骤(5),倘若找不到,则将服务器作为服务客户机;
(5)将服务客户机的信息发送给目标客户机,目标客户机向服务客户机请求传输数据块,并根据数据块在文件中的位置写入所创建的文件File;
(6)判断数据块传输是否完成,倘若完成,则进入步骤(7),倘若未完成,则返回步骤(5);
(7)向服务器提交数据块传输结果信息,以更新数据块序列映像表,倘若还有下一个待传输的数据块,则返回步骤(4),否则结束。
作为优选技术方案之一,步骤(2)中的数据块序列映像表创建方法是:将所请求传输的数据文件进行切片,得到待传输文件的数据块序列映像表,用来记录客户机所传输的数据块信息。
作为优选技术方案之一,步骤(4)中的服务客户机是根据每台客户机已经传输的数据块信息,查找到的当前各个数据块对应的传输工作量最小(负载最小)的客户机。
本发明的有益效果在于:
本发明将目标客户机的数据传输任务分配给所述的服务客户机,然后将服务客户机承担的传输数据块对应关系发送给目标客户机;在传输过程中,目标客户机将已经传输完成的数据块信息发送给服务器进行记录,并作为其他目标客户机的服务客户机提供数据传输服务。目标客户机创建一个与要传输文件大小一样的空文件,分别向服务器和服务客户机请求传输数据块,并直接把接收到的数据根据数据块的原来位置信息写入这个创建的空文件中。每个数据块传输完成,则通知服务器以更新数据块序列映像表。具体如下:
(1)与现有的计算机自动部署技术相比,本发明彻底解决了待部署计算机数量和网络性能之间的矛盾,大大提高了网络部署的速度,达到了部署的终端数量越多,效率越高、速度越快的最佳效果。
(2)本发明因为把所传输的数据块直接写入文件中,相当于传输完成则装配完成,不占用大量的计算机系统缓存,可以传输文件大小达到T级的特大型文件。
附图说明
为了使本发明的目的、技术方案和有益效果更加清楚,本发明提供如下附图进行说明:
图1为P2P通信示意图;
图2为数据集中存储在服务器时的数据传输示意图;
图3为现有的计算机自动部署技术示意图;
图4是本发明的自动部署方法示意图;
图5是本发明的数据传输流程图。
具体实施方式
下面将结合附图,对本发明的优选实施例进行详细的描述。
为方便过程描述,把请求传输数据的客户机称之为“目标客户机”,其他已经完成一些数据块传输工作的客户机称之为“服务客户机”。
如图5所示,一种利用点对点数据传输技术进行计算机自动部署的方法,具体步骤如下:
(1)目标客户机向服务器请求传输数据文件;
(2)服务器查找该数据文件是否已经存在数据块序列映像表,是则进入步骤(3),否则将所请求传输的数据文件进行切片,得到待传输文件的数据块序列映像表,用来记录客户机所传输的数据块信息;
(3)将映像表信息发送给目标客户机,目标客户机根据映像表创建与待传输文件相同大小的空文件File;
(4)目标客户机向服务器请求下一个待传输的数据块,服务器根据所有客户机的数据块序列映像表信息,计算可为目标客户机提供传输服务的服务客户机,根据每台客户机已经传输的数据块信息,查找到当前各个数据块对应的传输工作量最小(负载最小)的客户机,定义为服务客户机,倘若找到服务客户机,则进入步骤(5),倘若找不到,则将服务器作为服务客户机;
(5)将服务客户机的信息发送给目标客户机,目标客户机向服务客户机请求传输数据块,并根据数据块在文件中的位置写入所创建的文件File;
(6)判断数据块传输是否完成,倘若完成,则进入步骤(7),倘若未完成,则返回步骤(5);
(7)向服务器提交数据块传输结果信息,以更新数据块序列映像表,倘若还有下一个待传输的数据块,则返回步骤(4),否则结束。
如图4所示,目标客户机从服务器接收数据块0和数据块1、从服务客户机接收数据块1、从服务客户机2接收数据块2、从服务客户机n接收数据块n(n为大于0的整数),从而将原本需要全部从服务器接收数据的传输工作分割成多台机器共同完成,大大减轻了服务器端文件输入输出的工作量、服务器端网络传输的负载;达到优化网络传输速度的目的,提高了网络效率;并且,在传输过程中,目标客户机将已经传输完成的数据块信息发送给服务器进行记录,并作为其他目标客户机的服务客户机提供数据传输服务。
最后说明的是,以上优选实施例仅用以说明本发明的技术方案而非限制,尽管通过上述优选实施例已经对本发明进行了详细的描述,但本领域技术人员应当理解,可以在形式上和细节上对其作出各种各样的改变,而不偏离本发明权利要求书所限定的范围。

Claims (4)

1.一种利用点对点数据传输技术进行计算机系统自动部署的方法,其特征在于,将目标客户机请求传输的数据文件切片为若干个数据块,然后将各个数据块的传输任务分配给服务器以及其他传输工作量小的客户机,最后目标客户机通过对数据块的组装得到完整的文件。
2.根据权利要求1所述的一种利用点对点数据传输技术进行计算机系统自动部署的方法,其特征在于,具体步骤如下:
(1)目标客户机向服务器请求传输数据文件;
(2)服务器查找该数据文件是否已经存在数据块序列映像表,是则进入步骤(3),否则服务器创建数据块序列映像表;
(3)将映像表信息发送给目标客户机,目标客户机根据映像表创建与待传输文件相同大小的空文件File;
(4)目标客户机向服务器请求下一个待传输的数据块,服务器根据所有客户机的数据块序列映像表信息,计算可为目标客户机提供传输服务的服务客户机,倘若找到服务客户机,则进入步骤(5),倘若找不到,则将服务器作为服务客户机;
(5)将服务客户机的信息发送给目标客户机,目标客户机向服务客户机请求传输数据块,并根据数据块在文件中的位置写入所创建的文件File;
(6)判断数据块传输是否完成,倘若完成,则进入步骤(7),倘若未完成,则返回步骤(5);
(7)向服务器提交数据块传输结果信息,以更新数据块序列映像表,倘若还有下一个待传输的数据块,则返回步骤(4),否则结束。
3.根据权利要求2所述的一种利用点对点数据传输技术进行计算机系统自动部署的方法,其特征在于,步骤(2)中的数据块序列映像表创建方法是:将所请求传输的数据文件进行切片,得到待传输文件的数据块序列映像表,用来记录客户机所传输的数据块信息。
4.根据权利要求2所述的一种利用点对点数据传输技术进行计算机系统自动部署的方法,其特征在于,步骤(4)中的服务客户机是根据每台客户机已经传输的数据块信息,查找到的当前各个数据块对应的传输工作量最小的客户机。
CN201710082713.0A 2017-02-15 2017-02-15 一种利用点对点数据传输技术进行计算机系统自动部署的方法 Pending CN106878417A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710082713.0A CN106878417A (zh) 2017-02-15 2017-02-15 一种利用点对点数据传输技术进行计算机系统自动部署的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710082713.0A CN106878417A (zh) 2017-02-15 2017-02-15 一种利用点对点数据传输技术进行计算机系统自动部署的方法

Publications (1)

Publication Number Publication Date
CN106878417A true CN106878417A (zh) 2017-06-20

Family

ID=59166299

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710082713.0A Pending CN106878417A (zh) 2017-02-15 2017-02-15 一种利用点对点数据传输技术进行计算机系统自动部署的方法

Country Status (1)

Country Link
CN (1) CN106878417A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114528262A (zh) * 2022-01-27 2022-05-24 华南理工大学 一种基于物联网的数控系统文件共享系统

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101150410A (zh) * 2006-09-21 2008-03-26 腾讯科技(深圳)有限公司 一种在网络电视直播室中共享资源的方法及系统
CN101398744A (zh) * 2007-09-26 2009-04-01 新奥特硅谷视频技术有限责任公司 利用虚拟文件系统技术实现网络数据处理的方法及系统
CN101556557A (zh) * 2009-05-14 2009-10-14 浙江大学 一种基于对象存储设备的对象文件组织方法
CN101577695A (zh) * 2008-05-09 2009-11-11 上海未来宽带技术及应用工程研究中心有限公司 基于p2p技术的数据下载方法
CN101789975A (zh) * 2010-03-23 2010-07-28 深圳市同洲电子股份有限公司 用于推送视频点播业务的下载内容的方法及系统
CN101997890A (zh) * 2009-08-28 2011-03-30 中国移动通信集团公司 一种p2p流媒体下载方法、系统及装置
CN102497387A (zh) * 2011-11-11 2012-06-13 合一网络技术(北京)有限公司 一种基于P2P客户端状态分析的Flash视频分发方法
CN102546755A (zh) * 2011-12-12 2012-07-04 华中科技大学 云存储系统的数据存储方法
CN103139262A (zh) * 2011-11-25 2013-06-05 上海聚力传媒技术有限公司 一种为网页资源播放器提供资源访问数据的方法与设备
CN103269291A (zh) * 2013-04-19 2013-08-28 福州瑞芯微电子有限公司 android平台上利用点对点射频设备进行ADB调试的方法
CN103648056A (zh) * 2013-12-09 2014-03-19 乐视致新电子科技(天津)有限公司 一种智能电视的点对点传输方法和装置
CN105656986A (zh) * 2015-11-26 2016-06-08 乐视云计算有限公司 一种直播视频的播放方法、装置及系统

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101150410A (zh) * 2006-09-21 2008-03-26 腾讯科技(深圳)有限公司 一种在网络电视直播室中共享资源的方法及系统
CN101398744A (zh) * 2007-09-26 2009-04-01 新奥特硅谷视频技术有限责任公司 利用虚拟文件系统技术实现网络数据处理的方法及系统
CN101577695A (zh) * 2008-05-09 2009-11-11 上海未来宽带技术及应用工程研究中心有限公司 基于p2p技术的数据下载方法
CN101556557A (zh) * 2009-05-14 2009-10-14 浙江大学 一种基于对象存储设备的对象文件组织方法
CN101997890A (zh) * 2009-08-28 2011-03-30 中国移动通信集团公司 一种p2p流媒体下载方法、系统及装置
CN101789975A (zh) * 2010-03-23 2010-07-28 深圳市同洲电子股份有限公司 用于推送视频点播业务的下载内容的方法及系统
CN102497387A (zh) * 2011-11-11 2012-06-13 合一网络技术(北京)有限公司 一种基于P2P客户端状态分析的Flash视频分发方法
CN103139262A (zh) * 2011-11-25 2013-06-05 上海聚力传媒技术有限公司 一种为网页资源播放器提供资源访问数据的方法与设备
CN102546755A (zh) * 2011-12-12 2012-07-04 华中科技大学 云存储系统的数据存储方法
CN103269291A (zh) * 2013-04-19 2013-08-28 福州瑞芯微电子有限公司 android平台上利用点对点射频设备进行ADB调试的方法
CN103648056A (zh) * 2013-12-09 2014-03-19 乐视致新电子科技(天津)有限公司 一种智能电视的点对点传输方法和装置
CN105656986A (zh) * 2015-11-26 2016-06-08 乐视云计算有限公司 一种直播视频的播放方法、装置及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114528262A (zh) * 2022-01-27 2022-05-24 华南理工大学 一种基于物联网的数控系统文件共享系统
CN114528262B (zh) * 2022-01-27 2024-05-24 华南理工大学 一种基于物联网的数控系统文件共享系统

Similar Documents

Publication Publication Date Title
CN111556514B (zh) 一种去中心化的移动边缘计算资源发现和选择方法及系统
CN101459618B (zh) 虚拟机网络的数据包转发方法和装置
AU2013351670B2 (en) Business scheduling method and apparatus and convergence device
WO2018133454A1 (zh) 远程服务访问路径控制方法和相关设备
CN104350725B (zh) 通过软件定义网络进行信息中心网络的无缝集成和独立演进方法
CN102075445B (zh) 负载均衡方法及装置
US7406540B2 (en) Method and apparatus for content-aware web switching
CN102025630A (zh) 负载均衡方法及负载均衡系统
CN106131229A (zh) Cdn业务的处理方法、设备及通信系统
CN1135689A (zh) 互连局域网的方法和装置
CN105450555A (zh) 一种片上网络系统,及片上网络通信链路的建立方法
CN109756474B (zh) 一种电力调度自动化系统的服务跨区域调用方法及装置
CN101001264B (zh) L1vpn地址分配的方法、装置、网络边沿设备和编址服务器
CN104717081A (zh) 一种网关功能的实现方法及装置
CN105376299A (zh) 一种网络通信方法、设备及网络附属存储设备
CN108270878A (zh) 在vxlan中发送arp报文的方法、vtep设备
CN114503531B (zh) 分布式端点的管理
CN107222561A (zh) 一种传输层反向代理方法
CN112468529A (zh) 一种会话管理方法及设备
CN112968965B (zh) Nfv网络节点的元数据服务方法、服务器及存储介质
EP3529919A1 (en) Distributed gateways with centralized data center for high throughput satellite (hts) spot beam network
CN106302230A (zh) 一种数据传输方法及装置
CN103685007B (zh) 一种边缘设备报文转发时的mac学习方法及边缘设备
CN115955456A (zh) 基于IPv6的企业园区网及组网方法
CN108810936A (zh) 一种LoRa终端的配置方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170620

RJ01 Rejection of invention patent application after publication