CN109981751A - 一种文件传输方法及系统、计算机设备及存储介质 - Google Patents

一种文件传输方法及系统、计算机设备及存储介质 Download PDF

Info

Publication number
CN109981751A
CN109981751A CN201910169078.9A CN201910169078A CN109981751A CN 109981751 A CN109981751 A CN 109981751A CN 201910169078 A CN201910169078 A CN 201910169078A CN 109981751 A CN109981751 A CN 109981751A
Authority
CN
China
Prior art keywords
file
node
file destination
downloading
packet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910169078.9A
Other languages
English (en)
Other versions
CN109981751B (zh
Inventor
康成浩
高勇
王枫环
岳雄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhuhai Kingsoft Digital Network Technology Co Ltd
Original Assignee
Zhuhai Kingsoft Online Game Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhuhai Kingsoft Online Game Technology Co Ltd filed Critical Zhuhai Kingsoft Online Game Technology Co Ltd
Priority to CN201910169078.9A priority Critical patent/CN109981751B/zh
Publication of CN109981751A publication Critical patent/CN109981751A/zh
Application granted granted Critical
Publication of CN109981751B publication Critical patent/CN109981751B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请提供一种文件传输方法及系统、计算机设备及存储介质,该方法包括:确定待下载的目标文件,向内容提供节点发送询问请求并接收反馈信息;从可提供下载资源的内容提供节点中确定所述目标文件的下载源,向所述下载源发送索引信息下载请求并从所述下载源下载所述目标文件所在的文件包的索引信息;接收目标文件所在的文件包的索引信息并根据所述目标文件所在的文件包的索引信息确定目标文件的存储位置;向所述下载源发送文件下载请求;接收下载源发送的目标文件。

Description

一种文件传输方法及系统、计算机设备及存储介质
技术领域
本申请涉及计算机技术领域,特别涉及一种文件传输方法及系统、计算机设备及存储介质。
背景技术
P2P(Peer to Peer)网络是一种资源分布利用与共享的网络体系架构,在进行通信时,各个节点之间是对等的,即每一个节点既可以是客户端,也可以是服务器。P2P网络通过将原本在集中式服务器完成的服务功能分散到用户端完成,解决网络拥塞和服务器带宽瓶颈等问题。P2P文件分发采用了分片的方法来进行数据交互,也就是将文件划分为许多长度相同或者不同的数据块,然后以数据块为单位进行传输。所述分片是一种计算方法,根据该计算方法,文件分发系统能够计算出一个文件的第几个分片在文件的哪个位置,这样在回复数据时就可以到计算出的位置处将所需大小的分片数据读取出来用于回复。
目前的P2P下载系统的分片大小是固定的,文件分发系统的分片大小也是固定的。终端在进行文件下载的时候进行无差别下载与传输,因为只是对文件包进行无差别分割与下载,因此,下载的终端无法确定自己下载了哪些内容,也不能实现针对文件包中某些特定内容进行精确下载。
发明内容
有鉴于此,本说明书实施例提供了一种文件传输方法及系统、计算机设备及存储介质,以解决现有技术中存在的技术缺陷。
一方面,本说明书实施例公开了一种文件传输方法,应用于下载节点,包括:
确定待下载的目标文件,向内容提供节点发送询问请求并接收反馈信息,所述询问请求中携带所述待下载的目标文件的标识,所述反馈信息中携带有所述待下载资源的可提供状态以及所述待下载的目标文件所在的文件包的标识;
从可提供下载资源的内容提供节点中确定所述目标文件的下载源,向所述下载源发送索引信息下载请求并从所述下载源下载所述目标文件所在的文件包的索引信息,所述索引信息的下载请求中携带有所述目标文件所在的文件包的标识;
接收目标文件所在的文件包的索引信息并根据所述目标文件所在的文件包的索引信息确定目标文件的存储位置;
向所述下载源发送文件下载请求,所述文件下载请求中携带有目标文件标识及其在所述文件包中的存储位置;
接收下载源发送的目标文件。
另一方面,本说明书实施例公开了一种文件传输方法,应用于内容提供节点,包括:
接收询问请求,所述询问请求中携带有待下载的目标文件的标识;
将所述目标文件的标识与本地文件包的索引信息进行比较;
在本地文件包的索引信息中存在与所述目标文件匹配的下载资源的情况下,发送可提供下载资源的反馈信息,反馈信息中包含与所述目标文件匹配的下载资源所在的文件包的标识;
接收对本地存储的文件包的索引信息的下载请求,发送待下载的目标文件所在的文件包的索引信息;
接收目标文件下载请求并根据所述文件下载请求中携带的目标文件标识及其在所述文件包中的存储位置发送所述目标文件。
另一方面,本说明书实施例公开了一种文件传输系统,包括:
内容提供节点和至少两个下载节点,每个下载节点均与内容提供节点通信连接,内容提供节点间均通信连接;
所述下载节点,被配置为确定待下载的目标文件,向内容提供节点发送询问请求所述询问请求中携带所述待下载的目标文件的标识;
所述内容提供节点,被配置为接收询问请求,将所述目标文件的标识与本地文件包的索引信息进行比较,在本地文件包的索引信息中存在与所述目标文件匹配的下载资源的情况下,发送可提供下载资源的反馈信息,反馈信息中包含与所述目标文件匹配的下载资源所在的文件包的标识;
所述下载节点,还被配置为接收所述反馈信息,从可提供下载资源的内容提供节点中确定所述目标文件的下载源,向所述下载源发送索引信息下载请求;
所述内容提供节点,还被配置为接收对本地存储的文件包的索引信息的下载请求,发送待下载的目标文件所在的文件包的索引信息;
所述下载节点,还被配置为向所述下载源发送文件下载请求,所述文件下载请求中携带有目标文件标识及其在所述文件包中的存储位置;
所述内容提供节点,还被配置为接收文件下载请求并根据所述文件下载请求中携带的目标文件标识及其在所述文件包中的存储位置发送所述目标文件;
所述下载节点,还被配置为接收下载源发送的目标文件。
另一方面,本说明书实施例公开了一种文件传输装置,包括:
第一处理模块,被配置为确定待下载的目标文件,向内容提供节点发送询问请求并接收反馈信息,所述询问请求中携带所述待下载的目标文件的标识,所述反馈信息中携带有所述待下载资源的可提供状态以及所述待下载的目标文件所在的文件包的标识;
第二处理模块,被配置为从可提供下载资源的内容提供节点中确定所述目标文件的下载源,向所述下载源发送索引信息下载请求并从所述下载源下载所述目标文件所在的文件包的索引信息,所述索引信息的下载请求中携带有所述目标文件所在的文件包的标识;
第三处理模块,被配置为接收目标文件所在的文件包的索引信息并根据所述目标文件所在的文件包的索引信息确定目标文件的存储位置;
发送模块,被配置为向所述下载源发送文件下载请求,所述文件下载请求中携带有目标文件标识及其在所述文件包中的存储位置;
接收模块,被配置为接收下载源发送的目标文件。
另一方面,本说明书实施例公开了一种文件传输装置,包括:
第一服务器连接模块,被配置为接收询问请求,所述询问请求中携带有待下载的目标文件的标识;
信息确定模块,被配置为将所述目标文件的标识与本地文件包的索引信息进行比较,本地文件包的索引信息中存在与所述目标文件匹配的下载资源的情况下,发送可提供下载资源的反馈信息,反馈信息中包含与所述目标文件匹配的下载资源所在的文件包的标识;
第二服务器连接模块,被配置为接收对本地存储的文件包的索引信息的下载请求,发送待下载的目标文件所在的文件包的索引信息;
第三服务器连接模块,被配置为接收目标文件下载请求并根据所述文件下载请求中携带的目标文件标识及其在所述文件包中的存储位置发送所述目标文件。
另一方面,本说明书实施例公开了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令,所述处理器执行所述指令时实现该指令被处理器执行时实现一种文件传输方法的步骤。
另一方面,本说明书实施例公开了一种计算机可读存储介质,其存储有计算机指令,该指令被处理器执行时实现一种文件传输方法的步骤。
本发明可以实现文件的按需下载,客户端可以实现精确地请求下载某个小文件,而传统的P2P则无法实现这一点。且本发明设置了内容中转节点,客户端可以先向内容中转节点请求资源,从而有效地缓解了内容分发网络节点的压力,因此,资源的下载速度相较于传统P2P极大地提高。且本发明的客户端下载请求资源的时候是进行精确请求与下载某个或几个文件,而不会像传统P2P技术那样进行大规模无差别化的进行文件包下载请求,因此,下载效率进一步提高。
附图说明
图1是本说明书一实施例提供的一种计算设备的结构框图;
图2是本说明书一实施例提供的一种文件传输方法的流程图;
图3是本说明书一实施例提供的一种文件传输方法的流程图;
图4是本说明书一实施例提供的一种文件传输方法的流程图;
图5是本说明书一实施例提供的一种文件传输系统的结构示意图;
图6是本说明书一实施例提供的一种文件传输装置的结构示意图;
图7是本说明书一实施例提供的一种文件传输装置的结构示意图。
具体实施方式
在下面的描述中阐述了很多具体细节以便于充分理解本说明书。但是本说明书能够以很多不同于在此描述的其它方式来实施,本领域技术人员可以在不违背本说明书内涵的情况下做类似推广,因此本说明书不受下面公开的具体实施的限制。
在本说明书一个或多个实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本说明书一个或多个实施例。在本说明书一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本说明书一个或多个实施例中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本说明书一个或多个实施例中可能采用术语第一、第二等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本说明书一个或多个实施例范围的情况下,第一也可以被称为第二,类似地,第二也可以被称为第一。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
在本说明书中,提供了一种文件传输方法及系统、一种计算机设备及存储介质,在下面的实施例中逐一进行详细说明。
图1是示出了根据本说明书一实施例的计算机设备100的结构框图。该计算设备100的部件包括但不限于存储器110和处理器120。处理器120与存储器110通过总线130相连接。
计算设备100还包括接入设备140,接入设备140可以包括有线或无线的任何类型的网络接口(例如,网络接口卡(NIC))中的一个或多个,诸如IEEE802.11无线局域网(WLAN)无线接口、全球微波互联接入(Wi-MAX)接口、以太网接口、通用串行总线(USB)接口、蜂窝网络接口、蓝牙接口、近场通信(NFC)接口,等等。
在本说明书的一个实施例中,计算设备100的上述部件以及图1中未示出的其他部件也可以彼此相连接,例如通过总线。应当理解,图1所示的计算设备结构框图仅仅是出于示例的目的,而不是对本说明书范围的限制。本领域技术人员可以根据需要,增添或替换其他部件。
计算设备100可以是任何类型的静止或移动计算设备,包括移动计算机或移动计算设备(例如,平板计算机、个人数字助理、膝上型计算机、笔记本计算机、上网本等)、移动电话(例如,智能手机)、可佩戴的计算设备(例如,智能手表、智能眼镜等)或其他类型的移动设备,或者诸如台式计算机或PC的静止计算设备。计算设备100还可以是移动式或静止式的服务器。
其中,处理器120可以执行图2所示方法中的步骤。图2示出了根据本说明书一实施例提供的一种文件传输方法的流程图,应用于下载节点,包括步骤202至步骤210。
步骤202、确定待下载的目标文件,向内容提供节点发送询问请求并接收反馈信息,所述询问请求中携带所述待下载的目标文件的标识,所述反馈信息中携带有所述待下载资源的可提供状态以及所述待下载的目标文件所在的文件包的标识。
本说明书一个或多个实施例中,所述询问请求中携带所述待下载的目标文件的标识,所述反馈信息中携带有所述待下载资源的可提供状态以及所述待下载的目标文件所在的文件包的标识。
步骤204、从可提供下载资源的内容提供节点中确定所述目标文件的下载源,向所述下载源发送索引信息下载请求并从所述下载源下载所述目标文件所在的文件包的索引信息,所述索引信息的下载请求中携带有所述目标文件所在的文件包的标识。
本发明的一个或多个实施例中,通过获取内容提供节点的优先级来确定下载源,并从下载源下载目标文件所在文件包的索引信息,通过索引信息可以确定待下载的目标文件在所述文件包中的存储位置。
本说明书一个或多个实施例中,步骤204可以通过如图3所示的步骤实现,包括步骤302至步骤306。
步骤302、根据反馈信息确定可提供下载资源的内容提供节点。
本说明书一个或多个实施例中,所述反馈信息中携带有所述待下载资源的可提供状态以及所述待下载的目标文件所在的文件包的标识,根据所述可提供状态确定可提供下载资源的内容提供节点。
步骤304、获取所述可提供下载资源的内容提供节点的优先级。
本说明书一个或多个实施例中,内容中转节点优先级高于内容分发网络节点的优先级,同级别中按照网络距离的远近进行排序,距离越近的源优先级越高。
步骤306、根据所述可提供下载资源的内容提供节点的优先级选择至少一个内容提供节点作为所述目标文件的下载源。
本说明书一个或多个实施例中,若所述目标文件为单个文件且所述目标文件的大小超过容量阈值时,需将所述目标文件分为多个下载单元并根据优先级别顺序选择多个内容分发节点作为目标文件的下载源;若所述目标文件为单个文件且目标文件的大小不超过容量阈值时,则选择优先级最高的内容提供节点作为目标文件的下载源;若所述目标文件为多个文件且所述多个文件的大小小于下载单元大小时,则将所述多个文件合并为一个或多个下载单元并根据优先级别顺序选择一个或多个内容分发节点作为目标文件的下载源。
本说明书一个或多个实施例中,在进行文件传输时,首先将文件分片为不同大小并打包在文件包内,文件的大小具体可以为4M、16KB、1KB或者更小,但是如果分片划分得过小,虽然有利于节点之间的数据共享,但会导致索引信息所占用字节数比较多,过多的索引信息在网络之间传输会占用消耗一定的带宽;而如果将分片划分得比较大,则会影响服务节点之间的数据共享,因此在进行目标文件下载前,先确定待下载的目标文件的个数及其大小,然后将其拆分或合并为固定下载单元大小的文件,所述下载单元的大小可以是16k,然后选择合适的下载源,这样更有利于提高网络利用率,也可以提高文件传输速率。
步骤206、接收目标文件所在的文件包的索引信息并根据所述目标文件所在的文件包的索引信息确定目标文件的存储位置。
本说明书一个或多个实施例中,所述索引信息中包含所述目标文件的标识及其偏移。
步骤208、向所述下载源发送文件下载请求,所述文件下载请求中携带有目标文件标识及其在所述文件包中的存储位置。
本说明书一个或多个实施例中,所述文件下载请求中携带有目标文件标识及其在所述文件包中的存储位置。
步骤208、接收下载源发送的目标文件。
本说明书一个或多个实施例中,所述目标文件可以包括但不限于视频文件、音频文件等。所述文件传输方法可以应用于终端用户需要快速下载游戏地图的场景,例如,智能手机下载游戏场景地图的视频数据或音频数据等场景,文件快速传输可以给用户带来更好的游戏体验。
图4示出了根据本说明书一实施例提供的一种文件传输方法的流程图,应用于内容提供节点,包括步骤402至步骤416。
步骤402、接收询问请求,所述询问请求中携带有待下载的目标文件的标识。
步骤404、将所述目标文件的标识与本地文件包的索引信息进行比较。
本说明书一个或多个实施例中,内容提供节点在文件传输前,先将文件分片为不同大小并打包在文件包内,生成各个文件包的索引信息,所述索引信息包括所述文件包内所包含的文件的标识及其存储位置,将所述目标文件的标识与本地文件包的索引信息进行比较,可以确定本地文件包中是否包含所述目标文件。
步骤406、在本地文件包的索引信息中存在与所述目标文件匹配的下载资源的情况下,发送可提供下载资源的反馈信息,反馈信息中包含与所述目标文件匹配的下载资源所在的文件包的标识。
本说明书一个或多个实施例中,若本地文件包中有所述目标文件,则向下载节点发送反馈信息,所述反馈信息中包含与所述目标文件匹配的下载资源所在的文件包的标识。
步骤408、接收对本地存储的文件包的索引信息的下载请求,发送待下载的目标文件所在的文件包的索引信息。
本说明书一个或多个实施例中,所述下载请求中携带有目标文件所在的文件包的标识,通过识别所述标识将对应的文件包索引信息发送到下载节点,所述索引信息中携带有所述目标文件在所述文件包中的存储位置。
步骤410、接收目标文件下载请求并根据所述文件下载请求中携带的目标文件标识及其在所述文件包中的存储位置发送所述目标文件。
本说明书一个或多个实施例中,所述索引信息中携带有所述目标文件在所述文件包中的存储位置,内容分发节点可以根据所述存储位置信息直接在所述文件包中进行查找并发送所述目标文件。
本说明书一个或多个实施例中,内容提供节点中的文件包索引信息中携带有目标文件标识及其在所述文件包中的存储位置,下载节点发送的文件下载请求中携带有所述信息,下载源可以根据所述索引信息快速确定目标文件的位置,极大地缩短了文件传输时间。
图5示出了根据本说明书一实施例提供的一种文件传输系统的结构示意图,文件传输系统,可以包括:
下载节点502和内容提供节点504。
下载节点502,被配置为确定待下载的目标文件,向内容提供节点发送询问请求,所述询问请求中携带所述待下载的目标文件的标识。
内容提供节点504,被配置为接收询问请求,将所述目标文件的标识与本地文件包的索引信息进行比较,在本地文件包的索引信息中存在与所述目标文件匹配的下载资源的情况下,发送可提供下载资源的反馈信息,反馈信息中包含与所述目标文件匹配的下载资源所在的文件包的标识。
所述下载节点502,还被配置为还被配置为接收所述反馈信息,从可提供下载资源的内容提供节点中确定所述目标文件的下载源,向所述下载源发送索引信息下载请求。
所述内容提供节点504,还被配置为接收对本地存储的文件包的索引信息的下载请求,发送待下载的目标文件所在的文件包的索引信息。
所述下载节点502,还被配置为向所述下载源发送文件下载请求,所述文件下载请求中携带有目标文件标识及其在所述文件包中的存储位置。
所述内容提供节点504,还被配置为接收文件下载请求并根据所述文件下载请求中携带的目标文件标识及其在所述文件包中的存储位置发送所述目标文件。
所述下载节点502,还被配置为接收下载源发送的目标文件。
本说明书一个或多个实施例中,所述内容提供节点包括客户端节点、内容分发网络节点或者内容中转节点,所述下载节点为有文件下载需求的客户端节点。客户端既可以做内容提供节点,也可以做下载节点,实际应用中,内容分发网络节点可以是CDN服务器节点,内容中转节点可以是中转服务器。下载节点可以选择需要下载的一个或多个目标文件进行指定下载,提高了工作效率。
本说明书一实施例还提供一种文件传输装置,如图6所示,包括第一处理模块602、第二处理模块604、第三处理模块606、发送模块608和接收模块610。
第一处理模块602,被配置为确定待下载的目标文件,向内容提供节点发送询问请求并接收反馈信息,所述询问请求中携带所述待下载的目标文件的标识,所述反馈信息中携带有所述待下载资源的可提供状态以及所述待下载的目标文件所在的文件包的标识。
本说明书提供的一个或多个实施例中,所述询问请求中携带所述待下载的目标文件的标识,所述反馈信息中携带有所述待下载资源的可提供状态以及所述待下载的目标文件所在的文件包的标识。
第二处理模块604,被配置为从可提供下载资源的内容提供节点中确定所述目标文件的下载源,向所述下载源发送索引信息下载请求并从所述下载源下载所述目标文件所在的文件包的索引信息,所述索引信息的下载请求中携带有所述目标文件所在的文件包的标识。
本发明的一个或多个实施例中,通过获取内容提供节点的优先级来确定下载源,并从下载源下载目标文件所在文件包的索引信息,通过索引信息可以确定待下载的目标文件在所述文件包中的存储位置。
第三处理模块606,被配置为接收目标文件所在的文件包的索引信息并根据所述目标文件所在的文件包的索引信息确定目标文件的存储位置。
发送模块608,被配置为向所述下载源发送文件下载请求,所述文件下载请求中携带有目标文件标识及其在所述文件包中的存储位置。
本说明书一个或多个实施例中,所述索引信息中包含所述目标文件的标识及其偏移。
接收模块610,被配置为接收下载源发送的目标文件。
本说明书一个或多个实施例中,通过最优下载节点下载数据,实现客户端自主选择下载节点进行下载,可以提高用户终端的主动性,还可以提高下载速度,缩短下载耗时。
本说明书一实施例还提供一种文件传输装置,如图7所示,包括第一服务器连接模块702、信息确定模块704、第二服务器连接模块706和第三服务器连接模块708。
第一服务器连接模块702,被配置为接收询问请求,所述询问请求中携带有待下载的目标文件的标识。
信息确定模块704,被配置为将所述目标文件的标识与本地文件包的索引信息进行比较,本地文件包的索引信息中存在与所述目标文件匹配的下载资源的情况下,发送可提供下载资源的反馈信息,反馈信息中包含与所述目标文件匹配的下载资源所在的文件包的标识。
本说明书一个或多个实施例中,内容提供节点在文件传输前,先将文件分片为不同大小并打包在文件包内,生成各个文件包的索引信息,所述索引信息包括所述文件包内所包含的文件的标识及其存储位置,将所述目标文件的标识与本地文件包的索引信息进行比较,可以确定本地文件包中是否包含所述目标文件。若本地文件包中有所述目标文件,则向下载节点发送反馈信息,所述反馈信息中包含与所述目标文件匹配的下载资源所在的文件包的标识。
第二服务器连接模块706,被配置为接收对本地存储的文件包的索引信息的下载请求,发送待下载的目标文件所在的文件包的索引信息。
本说明书一个或多个实施例中,所述下载请求中携带有目标文件所在的文件包的标识,通过识别所述标识将对应的文件包索引信息发送到下载节点,所述索引信息中携带有所述目标文件在所述文件包中的存储位置。
第三服务器连接模块708,被配置为接收目标文件下载请求并根据所述文件下载请求中携带的目标文件标识及其在所述文件包中的存储位置发送所述目标文件。
本说明书一个或多个实施例中,所述索引信息中携带有所述目标文件在所述文件包中的存储位置,内容分发节点可以根据所述存储位置信息直接在所述文件包中进行查找并发送所述目标文件。
本说明书一个或多个实施例中,P2P技术是通过参与系统节点之间的直接交互来实现系统资源和信息的共享。P2P系统强调节点之间的对等性,信息资源分散存储在各个参与节点,每个参与节点兼有服务器和客户端两种身份,都可以请求服务和提供服务,内容传输直接在节点间进行,避免了容易出现网络和服务器瓶颈问题。因此,P2P技术能够充分利用网络终端的空闲资源,大大降低了系统的建设和运营成本,同时,节点越多服务资源也越多,系统因此具有良好的可扩展性和高度的自适应性,能够满足各种突发环境下的业务需求。
本申请一实施例还提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令,所述处理器执行所述指令时实现如前所述文件传输方法的步骤。本申请一实施例还提供一种计算机可读存储介质,其存储有计算机指令,该指令被处理器执行时实现如前所述文件传输方法的步骤。
说明书上述为本实施例的一种计算机可读存储介质的示意性方案。需要说明的是,该存储介质的技术方案与上述的文件传输方法的技术方案属于同一构思,存储介质的技术方案未详细描述的细节内容,均可以参见上述文件传输方法的技术方案的描述。
所述计算机指令包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
需要说明的是,对于前述的各方法实施例,为了简便描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本说明书并不受所描述的动作顺序的限制,因为依据本说明书,某些步骤可以采用其它顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定都是本说明书所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其它实施例的相关描述。
以上公开的本说明书优选实施例只是用于帮助阐述本说明书。可选实施例并没有详尽叙述所有的细节,也不限制该发明仅为所述的具体实施方式。显然,根据本说明书的内容,可作很多的修改和变化。本说明书选取并具体描述这些实施例,是为了更好地解释本说明书的原理和实际应用,从而使所属技术领域技术人员能很好地理解和利用本说明书。本说明书仅受权利要求书及其全部范围和等效物的限制。

Claims (21)

1.一种文件传输方法,其特征在于,应用于下载节点,包括:
确定待下载的目标文件,向内容提供节点发送询问请求并接收反馈信息,所述询问请求中携带所述待下载的目标文件的标识,所述反馈信息中携带有所述待下载资源的可提供状态以及所述待下载的目标文件所在的文件包的标识;
从可提供下载资源的内容提供节点中确定所述目标文件的下载源,向所述下载源发送索引信息下载请求并从所述下载源下载所述目标文件所在的文件包的索引信息,所述索引信息的下载请求中携带有所述目标文件所在的文件包的标识;
接收目标文件所在的文件包的索引信息并根据所述目标文件所在的文件包的索引信息确定目标文件的存储位置;
向所述下载源发送文件下载请求,所述文件下载请求中携带有目标文件标识及其在所述文件包中的存储位置;
接收下载源发送的目标文件。
2.如权利要求1所述的文件传输方法,其特征在于,所述从可提供下载资源的内容提供节点中确定所述目标文件的下载源包括:
根据反馈信息确定可提供下载资源的内容提供节点;
获取所述可提供下载资源的内容提供节点的优先级;
根据所述可提供下载资源的内容提供节点的优先级选择至少一个内容提供节点作为所述目标文件的下载源。
3.如权利要求2所述的文件传输方法,其特征在于,所述根据所述可提供下载资源的内容提供节点的优先级选择至少一个内容提供节点作为所述目标文件的下载源包括:
根据优先级别顺序选择至少一个内容分发节点作为目标文件的下载源;
若多个内容分发节点处于同一优先级,则将所述多个内容分发节点按照网络距离的远近进行排序,距离越近的优先级越高,并根据优先级别顺序选择至少一个内容分发节点作为目标文件的下载源。
4.如权利要求2所述的文件传输方法,其特征在于,所述根据所述从可提供下载资源的内容提供节点中确定所述目标文件的下载源包括:
确定所述目标文件的个数及大小;
若所述目标文件为单个文件且所述目标文件的大小超过容量阈值时,需将所述目标文件分为多个下载单元并根据优先级别顺序选择多个内容分发节点作为目标文件的下载源;
若所述目标文件为单个文件且目标文件的大小不超过容量阈值时,则选择优先级最高的内容提供节点作为目标文件的下载源;
若所述目标文件为多个文件且所述多个文件的大小小于下载单元大小时,则将所述多个文件合并为一个或多个下载单元并根据优先级别顺序选择一个或多个内容分发节点作为目标文件的下载源。
5.如权利要求1所述的文件传输方法,其特征在于,还包括:
在目标文件下载完成后,根据本地的文件包索引信息将文件包中的文件还原。
6.如权利要求1所述的文件传输方法,其特征在于,还包括:
在目标文件下载完成后,对外发布本地存储的文件。
7.一种文件传输方法,其特征在于,应用于内容提供节点,包括:
接收询问请求,所述询问请求中携带有待下载的目标文件的标识;
将所述目标文件的标识与本地文件包的索引信息进行比较;
在本地文件包的索引信息中存在与所述目标文件匹配的下载资源的情况下,发送可提供下载资源的反馈信息,反馈信息中包含与所述目标文件匹配的下载资源所在的文件包的标识。
8.根据权利要求7所述的文件传输方法,其特征在于,所述接收询问请求之前,还包括:将内容提供节点的文件进行分片并打包在文件包内,建立文件包的索引信息,所述文件包的索引信息包括分片得到的各级片段的索引信息,每级索引信息包括对应片段的分片位置信息。
9.如权利要求7所述的文件传输方法,其特征在于,还包括:
接收对本地存储的文件包的索引信息的下载请求,发送待下载的目标文件所在的文件包的索引信息;
接收目标文件下载请求并根据所述文件下载请求中携带的目标文件标识及其在所述文件包中的存储位置发送所述目标文件。
10.如权利要求7所述的文件传输方法,其特征在于,所述内容提供节点包括内容分发网络节点、内容中转节点和除需下载所述目标文件的客户端之外的客户端。
11.一种文件传输系统,其特征在于,包括:
内容提供节点和至少两个下载节点,每个下载节点均与内容提供节点通信连接,内容提供节点间均通信连接;
所述下载节点,被配置为确定待下载的目标文件,向内容提供节点发送询问请求,所述询问请求中携带所述待下载的目标文件的标识;
所述内容提供节点,被配置为接收询问请求,将所述目标文件的标识与本地文件包的索引信息进行比较,在本地文件包的索引信息中存在与所述目标文件匹配的下载资源的情况下,发送可提供下载资源的反馈信息,反馈信息中包含与所述目标文件匹配的下载资源所在的文件包的标识;
所述下载节点,还被配置为接收所述反馈信息,从可提供下载资源的内容提供节点中确定所述目标文件的下载源,向所述下载源发送索引信息下载请求;
所述内容提供节点,还被配置为接收对本地存储的文件包的索引信息的下载请求,发送待下载的目标文件所在的文件包的索引信息;
所述下载节点,还被配置为向所述下载源发送文件下载请求,所述文件下载请求中携带有目标文件标识及其在所述文件包中的存储位置;
所述内容提供节点,还被配置为接收文件下载请求并根据所述文件下载请求中携带的目标文件标识及其在所述文件包中的存储位置发送所述目标文件;
所述下载节点,还被配置为接收下载源发送的目标文件。
12.根据权利要求11所述的文件传输系统,其特征在于,所述内容提供节点包括客户端节点、内容分发网络节点或者内容中转节点,所述下载节点包括有文件下载需求的客户端节点。
13.根据权利要求11所述的文件传输系统,其特征在于,所述内容提供节点,还被配置为将节点内的文件进行分片并打包在文件包内,建立该文件包的索引信息,所述文件包的索引信息包括分片得到的各级片段的索引信息,每级索引信息包括对应片段的分片位置信息。
14.如权利要求11所述的文件传输系统,其特征在于,所述下载节点,还被配置为在目标文件下载完成后,对外发布本地存储的文件。
15.如权利要求11所述的文件传输系统,其特征在于,所述下载节点,还被配置为在目标文件下载完成后,根据本地的文件包索引信息将文件包中的文件还原。
16.一种文件传输装置,其特征在于,应用于下载节点,包括:
第一处理模块,被配置为确定待下载的目标文件,向内容提供节点发送询问请求并接收反馈信息,所述询问请求中携带所述待下载的目标文件的标识,所述反馈信息中携带有所述待下载资源的可提供状态以及所述待下载的目标文件所在的文件包的标识;
第二处理模块,被配置为从可提供下载资源的内容提供节点中确定所述目标文件的下载源,向所述下载源发送索引信息下载请求并从所述下载源下载所述目标文件所在的文件包的索引信息,所述索引信息的下载请求中携带有所述目标文件所在的文件包的标识;
第三处理模块,被配置为接收目标文件所在的文件包的索引信息并根据所述目标文件所在的文件包的索引信息确定目标文件的存储位置;
发送模块,被配置为向所述下载源发送文件下载请求,所述文件下载请求中携带有目标文件标识及其在所述文件包中的存储位置;
接收模块,被配置为接收下载源发送的目标文件。
17.根据权利要求16所述的文件传输装置,其特征在于,所述内容提供节点包括客户端节点、内容分发网络节点或者内容中转节点,所述下载节点为有文件下载需求的客户端节点。
18.根据权利要求16所述的文件传输装置,其特征在于,还包括:
还原模块,被配置为在目标文件下载完成后,根据本地的文件包索引信息将文件包中的文件还原。
消息传输模块,在目标文件下载完成后,对外发布本地存储的文件。
19.一种文件传输装置,其特征在于,应用于内容提供节点,包括:
第一服务器连接模块,被配置为接收询问请求,所述询问请求中携带有待下载的目标文件的标识;
信息确定模块,被配置为将所述目标文件的标识与本地文件包的索引信息进行比较,本地文件包的索引信息中存在与所述目标文件匹配的下载资源的情况下,发送可提供下载资源的反馈信息,反馈信息中包含与所述目标文件匹配的下载资源所在的文件包的标识;
第二服务器连接模块,被配置为接收对本地存储的文件包的索引信息的下载请求,发送待下载的目标文件所在的文件包的索引信息;
第三服务器连接模块,被配置为接收目标文件下载请求并根据所述文件下载请求中携带的目标文件标识及其在所述文件包中的存储位置发送所述目标文件。
20.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令,其特征在于,所述处理器执行所述指令时实现该指令被处理器执行时实现权利要求1-10中任意一项所述方法的步骤。
21.一种计算机可读存储介质,其存储有计算机指令,其特征在于,该指令被处理器执行时实现权利要求1-10中任意一项所述方法的步骤。
CN201910169078.9A 2019-03-06 2019-03-06 一种文件传输方法及系统、计算机设备及存储介质 Active CN109981751B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910169078.9A CN109981751B (zh) 2019-03-06 2019-03-06 一种文件传输方法及系统、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910169078.9A CN109981751B (zh) 2019-03-06 2019-03-06 一种文件传输方法及系统、计算机设备及存储介质

Publications (2)

Publication Number Publication Date
CN109981751A true CN109981751A (zh) 2019-07-05
CN109981751B CN109981751B (zh) 2022-06-17

Family

ID=67078004

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910169078.9A Active CN109981751B (zh) 2019-03-06 2019-03-06 一种文件传输方法及系统、计算机设备及存储介质

Country Status (1)

Country Link
CN (1) CN109981751B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110519357A (zh) * 2019-08-20 2019-11-29 深圳市网心科技有限公司 文件传输方法及系统、计算机装置及存储介质
CN110765092A (zh) * 2019-09-20 2020-02-07 北京三快在线科技有限公司 分布式搜索系统、索引分发方法及存储介质
CN111752946A (zh) * 2020-06-22 2020-10-09 上海众言网络科技有限公司 一种基于分片方式对调研数据进行预处理的方法及装置
CN111770188A (zh) * 2020-07-03 2020-10-13 珠海西山居移动游戏科技有限公司 一种bt下载节点管理方法及装置
CN111818362A (zh) * 2020-05-31 2020-10-23 武汉市慧润天成信息科技有限公司 一种多媒体数据云存储系统及方法
CN112019605A (zh) * 2020-08-13 2020-12-01 上海哔哩哔哩科技有限公司 数据流的数据分发方法和系统
CN112422603A (zh) * 2020-06-09 2021-02-26 上海哔哩哔哩科技有限公司 资源下载方法、系统及装置
WO2022021357A1 (zh) * 2020-07-31 2022-02-03 华为技术有限公司 一种文件块下载方法及装置
CN114422499A (zh) * 2021-12-27 2022-04-29 北京奇艺世纪科技有限公司 一种文件下载方法、系统及装置

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101030873A (zh) * 2007-02-15 2007-09-05 深圳市迅雷网络技术有限公司 一种下载数据的方法及系统
CN101247193A (zh) * 2008-02-28 2008-08-20 华为技术有限公司 对等网络中发送数据的方法、系统、节点和超级节点
CN102170475A (zh) * 2011-04-22 2011-08-31 中兴通讯股份有限公司 一种基于p2p的文件分发系统及分片方法
CN103078847A (zh) * 2012-12-24 2013-05-01 深圳市龙视传媒有限公司 一种多码率流文件的存储和读取方法及相关装置
CN103281394A (zh) * 2013-06-07 2013-09-04 北京奇虎科技有限公司 文件获取方法、节点服务器和系统
CN103702235A (zh) * 2013-12-24 2014-04-02 乐视网信息技术(北京)股份有限公司 内容传送网络的数据处理方法与系统
CN103841135A (zh) * 2012-11-22 2014-06-04 腾讯科技(深圳)有限公司 文件加速下载方法及装置
CN103986747A (zh) * 2014-04-14 2014-08-13 曦威胜科技开发(深圳)有限公司 P2p协议中文件共享下载方法
CN104519090A (zh) * 2013-09-27 2015-04-15 深圳市腾讯计算机系统有限公司 文件传输方法及装置
CN105893433A (zh) * 2015-12-09 2016-08-24 乐视云计算有限公司 文件存储方法、访问方法及装置
US20160321291A1 (en) * 2015-04-29 2016-11-03 Box, Inc. Virtual file system for cloud-based shared content
CN107807989A (zh) * 2017-11-03 2018-03-16 小草数语(北京)科技有限公司 小文件处理方法及装置
CN108737498A (zh) * 2018-04-18 2018-11-02 中国地质大学(武汉) 一种基于区块链的p2p安全下载检测方法及系统

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101030873A (zh) * 2007-02-15 2007-09-05 深圳市迅雷网络技术有限公司 一种下载数据的方法及系统
CN101247193A (zh) * 2008-02-28 2008-08-20 华为技术有限公司 对等网络中发送数据的方法、系统、节点和超级节点
CN102170475A (zh) * 2011-04-22 2011-08-31 中兴通讯股份有限公司 一种基于p2p的文件分发系统及分片方法
CN103841135A (zh) * 2012-11-22 2014-06-04 腾讯科技(深圳)有限公司 文件加速下载方法及装置
CN103078847A (zh) * 2012-12-24 2013-05-01 深圳市龙视传媒有限公司 一种多码率流文件的存储和读取方法及相关装置
CN103281394A (zh) * 2013-06-07 2013-09-04 北京奇虎科技有限公司 文件获取方法、节点服务器和系统
CN104519090A (zh) * 2013-09-27 2015-04-15 深圳市腾讯计算机系统有限公司 文件传输方法及装置
CN103702235A (zh) * 2013-12-24 2014-04-02 乐视网信息技术(北京)股份有限公司 内容传送网络的数据处理方法与系统
CN103986747A (zh) * 2014-04-14 2014-08-13 曦威胜科技开发(深圳)有限公司 P2p协议中文件共享下载方法
US20160321291A1 (en) * 2015-04-29 2016-11-03 Box, Inc. Virtual file system for cloud-based shared content
CN105893433A (zh) * 2015-12-09 2016-08-24 乐视云计算有限公司 文件存储方法、访问方法及装置
CN107807989A (zh) * 2017-11-03 2018-03-16 小草数语(北京)科技有限公司 小文件处理方法及装置
CN108737498A (zh) * 2018-04-18 2018-11-02 中国地质大学(武汉) 一种基于区块链的p2p安全下载检测方法及系统

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110519357A (zh) * 2019-08-20 2019-11-29 深圳市网心科技有限公司 文件传输方法及系统、计算机装置及存储介质
CN110519357B (zh) * 2019-08-20 2022-08-12 深圳市网心科技有限公司 文件传输方法及系统、计算机装置及存储介质
CN110765092A (zh) * 2019-09-20 2020-02-07 北京三快在线科技有限公司 分布式搜索系统、索引分发方法及存储介质
CN111818362A (zh) * 2020-05-31 2020-10-23 武汉市慧润天成信息科技有限公司 一种多媒体数据云存储系统及方法
CN112422603A (zh) * 2020-06-09 2021-02-26 上海哔哩哔哩科技有限公司 资源下载方法、系统及装置
CN111752946A (zh) * 2020-06-22 2020-10-09 上海众言网络科技有限公司 一种基于分片方式对调研数据进行预处理的方法及装置
CN111770188A (zh) * 2020-07-03 2020-10-13 珠海西山居移动游戏科技有限公司 一种bt下载节点管理方法及装置
WO2022021357A1 (zh) * 2020-07-31 2022-02-03 华为技术有限公司 一种文件块下载方法及装置
CN112019605A (zh) * 2020-08-13 2020-12-01 上海哔哩哔哩科技有限公司 数据流的数据分发方法和系统
CN114422499A (zh) * 2021-12-27 2022-04-29 北京奇艺世纪科技有限公司 一种文件下载方法、系统及装置
CN114422499B (zh) * 2021-12-27 2023-12-05 北京奇艺世纪科技有限公司 一种文件下载方法、系统及装置

Also Published As

Publication number Publication date
CN109981751B (zh) 2022-06-17

Similar Documents

Publication Publication Date Title
CN109981751A (zh) 一种文件传输方法及系统、计算机设备及存储介质
Ning et al. Deep reinforcement learning for intelligent internet of vehicles: An energy-efficient computational offloading scheme
CN106549878B (zh) 一种业务分流方法和装置
CN107734558A (zh) 一种基于多服务器的移动边缘计算控制及资源调度方法
US7873019B2 (en) Systems and methods for establishing gateway bandwidth sharing ad-hoc networks
US20130124689A1 (en) Content delivery using multiple sources over heterogeneous interfaces
CN108881354A (zh) 一种推送信息存储方法、装置、服务器和计算机存储介质
CN103391319B (zh) 一种资源分享方法、资源分享系统、云端设备及用户终端
CN111163130A (zh) 一种网络服务系统及其数据传输方法
CN105791381A (zh) 访问控制的方法及装置
Bonadio et al. An integrated framework for blockchain inspired fog communications and computing in internet of vehicles
CN109413202B (zh) 区块链交易信息的排序系统及方法
CN112764900A (zh) 结合云网融合和人工智能的业务数据处理方法及云端平台
CN114924751A (zh) 一种业务访问请求流量分配的方法和装置
CN111245965B (zh) 一种数据同步方法及系统
de Souza et al. Exploring computation offloading in vehicular clouds
CN111092925B (zh) 一种区块链扩容处理方法、装置及设备
CN116582173B (zh) 基于卫星的分布式网络处理数据的方法、装置及存储介质
CN108028874A (zh) 用于形成群组并在群组中共享数据的系统、装置和方法
CN116471276A (zh) 一种业务接入方法、系统及相关设备
CN112637351B (zh) 一种文件下载方法及装置
CN110611702B (zh) 区块链的文件快速传输方法、设备、系统及存储介质
CN108566635B (zh) 一种d2d路由选择方法
CN102663133B (zh) 一种文件发送方法和装置
CN112214259B (zh) 地图加载系统、方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 519000 Room 102, 202, 302 and 402, No. 325, Qiandao Ring Road, Tangjiawan Town, high tech Zone, Zhuhai City, Guangdong Province, Room 102 and 202, No. 327 and Room 302, No. 329

Patentee after: Zhuhai Jinshan Digital Network Technology Co.,Ltd.

Address before: 519000 Room 102, 202, 302 and 402, No. 325, Qiandao Ring Road, Tangjiawan Town, high tech Zone, Zhuhai City, Guangdong Province, Room 102 and 202, No. 327 and Room 302, No. 329

Patentee before: ZHUHAI KINGSOFT ONLINE GAME TECHNOLOGY Co.,Ltd.

CP01 Change in the name or title of a patent holder