CN101626389B - 一种网络节点的管理方法 - Google Patents
一种网络节点的管理方法 Download PDFInfo
- Publication number
- CN101626389B CN101626389B CN 200810029490 CN200810029490A CN101626389B CN 101626389 B CN101626389 B CN 101626389B CN 200810029490 CN200810029490 CN 200810029490 CN 200810029490 A CN200810029490 A CN 200810029490A CN 101626389 B CN101626389 B CN 101626389B
- Authority
- CN
- China
- Prior art keywords
- network node
- network
- content
- cdn server
- server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Information Transfer Between Computers (AREA)
Abstract
一种对等网P2P网络节点的管理方法,包括:内容服务器通过CDN网络把内容源复制到CDN服务器上;CDN服务器把内容源分割成固定大小的片段并计算片段的哈希值;P2P设备通过DHT网络或者tracker服务器加入到一个P2P网络;CDN服务器根据一个预先确定的算法选择P2P网络节点设备;CDN服务器根据P2P网络的拥塞状况选择发送内容片段的时间把内容片断和该片段的哈希值发送给选定的P2P网络节点设备储存;P2P网络节点设备计算收到的内容片段的哈希值并与收到的哈希值比较,如果二者一致,则储存该内容片段;如果二者不一致,则向CDN服务器发出错误报告;当P2P网络节点设备需要下载内容服务器中的内容时,自动从其他P2P网络节点设备下载内容片段。
Description
技术领域
本发明涉及一种对等网P2P网络的管理方法,特别是涉及一种在点对点和点对服务器技术P2SP架构基础中,内容分发运营平台进行内容加速分发的管理方法。
背景技术
P2P是近年来兴起的互连网技术,采用P2P架构可以有效地利用互联网中散布的大量普通结点,将计算任务或存储资料分布到所有结点上。在内容分发网络CDN中,人们能利用其中闲置的计算能力或存储空间,达到高性能计算和海量存储的目的。
随着互联网的普及,以往互联网节点是个人电脑的状况逐渐发生了变化,消费类电子设备随着处理能力和网络接入能力的增强,具备了直接连接互联网并且获取内容的能力,在这样的趋势下,消费类电子设备也开始逐步成为了互联网上的节点。消费类电子设备主要的功能之一是进行多媒体娱乐,当进行大数据量的高清视频下载或者直播/点播时,P2P技术天然地成为最好的技术选择,因为基于P2P架构可以以很小的基础架构投资,充分利用网络上大量对等节点的资源和带宽,实现较好的用户体验。
P2P技术存在的一个问题是:由于P2P网络的动态变化,导致种子资源的不稳定性,而种子资源的不稳定会直接影响到最终的下载效果,这也是为什么经常在进行P2P下载时会出现下载停滞的原因。P2SP的核心思想就是利用稳定且高性能的服务器作为一个稳定的种子,这样就可以确保内容的完整性和可获得性。对于自身拥有内容资源的平台来说,P2SP是一种可以确保P2P内容完整性的技术,但是还不能起到性能加速的作用,因为此时P2P下载的速度取决于当前有多少节点拥有所需的内容片段,而当前有多少节点拥有内容片段主要取决于有多少用户对该内容感兴趣从而进行下载,也就是说,如果对某个内容感兴趣的用户比较少的话,导致网络上拥有该内容的节点较少,即使使用P2P也无法提高下载速度,因为网络上只有少量的节点存在这些文件的数据。只有那些热门的资源才有可能让用户得到良好的体验。
因此,在P2SP架构基础中,加速内容的分发是现有技术中有待解决的问题。
发明内容
本发明需解决的问题是提供一种在P2SP架构基础中,预先将内容分割成片段推送至各个P2P网络节点上的技术,使得内容加速地分发。
根据上述需解决的问题设计了一种网络节点的管理方法,实施步骤为:
(1)内容服务器通过内容分发网络CDN把内容源复制到CDN服务器上;
(2)CDN服务器把内容源分割成固定大小的片段并计算片段的哈希值;
(3)P2P网络节点设备连加入到P2P网络;
(4)CDN服务器根据一个预先确定的算法选择P2P网络节点设备;
(5)CDN服务器把内容片段和该片段的哈希值发送给选定的P2P网络节点设备储存;
(6)P2P网络节点设备计算收到的内容片段的哈希值并与收到的哈希值比较,如果二者一致,则储存该内容片段;如果二者不一致,则向CDN服务器发出请求重新传送;
(7)当P2P网络节点设备需要下载内容服务器中的内容时,自动从其他P2P网络节点设备下载内容片段。
所述的P2P设备是通过分布式哈希表DHT网络或者追踪程序服务器tracker加入到P2P网络。
所述的P2P网络实行分区域和分层管理。
所述的CDN服务器维护者所辖区域的P2P网络节点设备的信息,包括网络状态信息和节点当前所拥有的内容片段的信息。
所述的算法考虑的因素包括P2P网络节点设备的计算能力,当前节点的储存空间和需要分发文件的热门程度。
CDN服务器根据P2P网络的拥塞状况选择发送内容片段的时间。
借助本发明管理方法,内容提供商可以通过扩展其终端系统所实现的P2P协议,预先将内容分片段推送至各个终端上,最终使得无论是否是热门的资源,用户在下载时都可以得到接近的用户体验。
附图说明
附图1是本发明实施例网络架构图;
附图2是本发明实施例流程图。
具体实施方式
本发明的主旨是设计一个技术方案以使在P2SP架构基础中,预先将内容分割成片段推送至各个P2P网络节点上的技术,使得内容加速地分发。下面结合实施例参照附图进行详细说明,以便对本发明方法的技术特征及优点进行更深入的诠释。
本发明P2P网络节点的管理方法的具体实施步骤为:其一,内容服务器通过CDN网络把内容源复制到CDN服务器上;其二,CDN服务器把内容源分割成固定大小的片段并计算片段的哈希值;其三,P2P设备通过分布式哈希表DHT网络或者追踪程序服务器tracker加入到一个P2P网络;其四,CDN服务器根据一个预先确定的算法选择P2P网络节点设备;其五,CDN服务器根据P2P网络的拥塞状况选择发送内容片段的时间,把内容片断和该片段的哈希值发送给选定的P2P网络节点设备储存;其六,P2P网络节点设备计算收到的内容片段的哈希值并与收到的哈希值比较,如果二者一致,则储存该内容片段;如果二者不一致,则向CDN服务器请求重新传送;其七,当P2P网络节点设备需要下载内容服务器中的内容时,自动从其他P2P网络节点设备下载内容片段。
其中,计算哈希值的主要目的是确保传输的正确性。tracker是指运行于服务器上的一个程序,这个程序能够追踪有多少人同时在下载同一个文件。客户端连上tracker服务器,就会获得一个下载人员的名单,根据名单,P2P设备能自动连上别人的机器进行下载。DHT全称叫分布式哈希表,是一种分布式存储方法。在不需要服务器的情况下,每个客户端负责一个小范围的路由,并负责存储小部分数据,从而实现整个DHT网络的寻址和存储。P2P网络实行分区域和分层管理。CDN服务器维护者所辖区域的P2P网络节点设备的信息,包括网络状态信息和节点当前所拥有的内容片段的信息。预先确定的算法根据P2P网络节点的计算能力,当前节点的储存空间和需要分发文件的热门程度来选择P2P网络节点设备来推送内容片段。
参照如图1所示,P2P网络节点142和P2P网络节点144处于P2P区域140中,P2P网络节点152和P2P网络节点154处于P2P区域150中。这两个P2P区域与CDN服务器120和130通过互联网骨干网络相连接,其中的CDN服务器120和130还与内容源110相连接。
如果图1中的P2P网络节点142要下载内容源110上的内容时,具体的交互流程如图2所示:
(步骤S201)内容源110通过CND网络把P2P网络节点142要下载的内容复制到CDN服务器120和130中;
(步骤S202)CDN服务器120和130把内容源110发来的内容分割成固定大小的片段;
(步骤S203)CDN服务器120和130计算该内容片段的哈希值;
(步骤S204)CDN服务器120和130根据一个预先确定的算法选择P2P网络节点设备144、152和154;
(步骤S205)CDN服务器120和130把内容片段和片段的哈希值发送到P2P网络节点设备144、152和154;
(步骤S206和S207和S208和S209)P2P网络节点设备144、152和154计算收到片段的哈希值并与CDN服务器120和130计算的哈希值作对比,如果两者相同,则储存该内容片断;如果两者不相同,则向CDN服务器120和130请求重传该内容片段;
(步骤S210)P2P网络节点设备142通过DHT网络或者tracker服务器了解到P2P网络节点设备144、152和154的网络状态信息和它们当前所拥有的内容片段的信息,开始从网络节点设备144、152和154下载该内容的片段。
CDN服务器以此类推,不停地将文件切割成片段后,按照预先确定的算法,主动地往P2P网络中的节点进行推送。这个过程相当于一个制作种子的过程,例如一个文件如果被分成了N个片段,那么就会有N个网络节点收到这N个片段中的一个,当分发的过程完成后,文件就从原来仅仅存在于一个CDN中央节点上,变为被分散存在于网络上的N个节点中,这样,最终将原本只集中存储在内容服务器上的内容,主动分发到了整个P2P网络中。当用户希望下载某一个文件时,可以确保无论何时,P2P网络上都存在相关的片段,在这样的前提下再进行对等节点间的片段交换时,就将极大提高速度,因为此时已经无须再重复一遍传统P2P网络下载的初始化的过程。
对于节点的选择算法,可以有多种选择,例如可以根据节点的计算能力,当前的存储空间,需要分发文件的热门程度等等因素,选择相应的接收片段的节点。文件片段的分发过程还可以选择在网络空闲的阶段进行,以免对正常的网络传输造成冲击。
以上述方式,CDN服务器主动地选择合适的节点,将原本维护在一个中央节点上的内容迅速地分散到整个网络中,一方面提高了未来文件的下载速度;另一方面,也增强了网络的可扩展性和容错性,使得无论是热门资源还是非热门资源,在整个网络中均有完整的内容分布。
总之,本领域的技术人员可以对本发明的在P2SP架构基础中加速内容分发的方法进行的各种改动和变形而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (5)
1.一种网络节点的管理方法,实施步骤为:
(1)内容服务器通过内容分发网络CDN把内容源复制到CDN服务器上;
(2)CDN服务器把内容源分割成固定大小的片段并计算片段的哈希值;
(3)P2P网络节点设备是通过分布式哈希表DHT网络或者追踪程序服务器tracker加入到P2P网络;
(4)CDN服务器根据一个预先确定的算法选择P2P网络节点设备;
(5)CDN服务器把内容片段和该片段的哈希值发送给选定的P2P网络节点设备储存;
(6)P2P网络节点设备计算收到的内容片段的哈希值并与收到的哈希值比较,如果二者一致,则储存该内容片段;如果二者不一致,则向CDN服务器发出请求重新传送。
2.根据权利要求1所述的网络节点的管理方法,其特征在于:所述的P2P网络实行分区域和分层管理。
3.根据权利要求2所述的网络节点的管理方法,其特征在于:所述的CDN服务器维护者所辖区域的P2P网络节点设备的信息,包括网络状态信息和节点当前所拥有的内容片段的信息。
4.根据权利要求3所述的网络节点的管理方法,其特征在于:所述的算法考虑的因素包括但不仅限于P2P网络节点设备的计算能力,当前节点的储存空间和需要分发文件的热门程度。
5.根据权利要求4所述的网络节点的管理方法,其特征在于:CDN服务器根据P2P网络的拥塞状况选择发送内容片段的时间。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200810029490 CN101626389B (zh) | 2008-07-12 | 2008-07-12 | 一种网络节点的管理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200810029490 CN101626389B (zh) | 2008-07-12 | 2008-07-12 | 一种网络节点的管理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101626389A CN101626389A (zh) | 2010-01-13 |
CN101626389B true CN101626389B (zh) | 2013-04-24 |
Family
ID=41522072
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 200810029490 Expired - Fee Related CN101626389B (zh) | 2008-07-12 | 2008-07-12 | 一种网络节点的管理方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101626389B (zh) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102739704A (zh) * | 2011-04-02 | 2012-10-17 | 中兴通讯股份有限公司 | 一种对等网络中数据迁移的方法及系统 |
CN102456076A (zh) * | 2011-11-23 | 2012-05-16 | 北京安天电子设备有限公司 | 海量片段数据汇聚的系统和方法 |
CN103139244B (zh) * | 2011-11-24 | 2015-10-21 | 腾讯科技(深圳)有限公司 | 云复制粘贴方法及系统 |
CN102638577B (zh) * | 2012-03-27 | 2014-08-06 | 北京蓝汛通信技术有限责任公司 | 一种采集种子文件的方法、设备及系统 |
CN103036973A (zh) * | 2012-12-13 | 2013-04-10 | 中国航天科工信息技术研究院 | 一种下载卫星导航精密星历的系统及方法 |
US20160057185A1 (en) * | 2013-03-21 | 2016-02-25 | Telefonaktiebolaget L M Ericsson (Publ) | Streaming Service Provision Support in a P2P-CDN Streaming System |
CN104935640B (zh) * | 2015-05-07 | 2018-05-01 | 上海逸云信息科技发展有限公司 | 一种p2p加速的内容分发网络系统及方法 |
CN109819266A (zh) * | 2017-11-20 | 2019-05-28 | 中兴通讯股份有限公司 | 一种cdn中心组网方法及系统 |
CN110035306A (zh) * | 2019-04-23 | 2019-07-19 | 深圳市网心科技有限公司 | 文件的部署方法及装置、调度方法及装置 |
CN116405563B (zh) * | 2023-06-08 | 2023-08-18 | 湖南快乐阳光互动娱乐传媒有限公司 | 一种基于点对点内容分发网络的资源获取方法及系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1614931A (zh) * | 2004-12-10 | 2005-05-11 | 张德浩 | 基于ip网络数字媒体传送方法 |
CN101145929A (zh) * | 2007-08-09 | 2008-03-19 | 复旦大学 | 一种面向ipv6环境的p2p流媒体点播系统 |
CN101150421A (zh) * | 2006-09-22 | 2008-03-26 | 华为技术有限公司 | 一种分布式内容分发方法、边缘服务器和内容分发网 |
-
2008
- 2008-07-12 CN CN 200810029490 patent/CN101626389B/zh not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1614931A (zh) * | 2004-12-10 | 2005-05-11 | 张德浩 | 基于ip网络数字媒体传送方法 |
CN101150421A (zh) * | 2006-09-22 | 2008-03-26 | 华为技术有限公司 | 一种分布式内容分发方法、边缘服务器和内容分发网 |
CN101145929A (zh) * | 2007-08-09 | 2008-03-19 | 复旦大学 | 一种面向ipv6环境的p2p流媒体点播系统 |
Also Published As
Publication number | Publication date |
---|---|
CN101626389A (zh) | 2010-01-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101626389B (zh) | 一种网络节点的管理方法 | |
US8606846B2 (en) | Accelerating peer-to-peer content distribution | |
EP2773080A1 (en) | Sharing control system and method for network resources download information | |
CN101714987B (zh) | P2p播放方法及系统 | |
CN102394899B (zh) | 提高文件下载速度的点播系统及方法 | |
EP3439239A1 (en) | Data transmission method and system based on peer-to-peer network | |
CN111046065B (zh) | 可扩展的高性能分布式查询处理方法及装置 | |
CN102137163A (zh) | 一种多媒体文件共享系统及其共享多媒体文件的方法 | |
CN110866046B (zh) | 一种可扩展的分布式查询方法及装置 | |
US20160381127A1 (en) | Systems and methods for dynamic networked peer-to-peer content distribution | |
CN102164317A (zh) | 一种面向ip机顶盒的多服务器分段下载系统 | |
CN101145929A (zh) | 一种面向ipv6环境的p2p流媒体点播系统 | |
CN104735044A (zh) | 一种流媒体直播方法及系统 | |
Xu et al. | Analysis of a hybrid architecture for cost-effective streaming media distribution | |
CN104394221B (zh) | 利用边缘服务节点为流媒体应用进行加速处理的方法和系统 | |
CN107241398B (zh) | 一种基于内容分发网络的视频下载方法 | |
CN110990448A (zh) | 一种支持容错的分布式查询方法及装置 | |
CN108833554B (zh) | 一种面向大规模网络的实时高可靠消息分发系统及其方法 | |
Goh et al. | A comparative study of tree-based and mesh-based overlay p2p media streaming | |
CN105872764A (zh) | 基于p2p网络的数据下载方法及装置 | |
KR20190029843A (ko) | 비트토렌트 기반의 네트워크 품질 관리 시스템 및 이를 이용한 네트워크 서비스 품질 향상 방법 | |
CN103179191A (zh) | P2p网络管控装置及p2p网络管控架构 | |
Gao et al. | Measurement study on P2P streaming systems | |
CN103167029B (zh) | 一种eMule网络上特定资源的发现方法和装置 | |
Wang et al. | Exploring peer-to-peer locality in multiple torrent environment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20130424 |