CN1926540A - 在高速缓存网络环境中调度下载的系统和方法 - Google Patents

在高速缓存网络环境中调度下载的系统和方法 Download PDF

Info

Publication number
CN1926540A
CN1926540A CNA2004800423462A CN200480042346A CN1926540A CN 1926540 A CN1926540 A CN 1926540A CN A2004800423462 A CNA2004800423462 A CN A2004800423462A CN 200480042346 A CN200480042346 A CN 200480042346A CN 1926540 A CN1926540 A CN 1926540A
Authority
CN
China
Prior art keywords
request
cache server
content file
job list
scheduling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2004800423462A
Other languages
English (en)
Inventor
李钧
张军标
沙兰·维尔马
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN1926540A publication Critical patent/CN1926540A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/957Browsing optimisation, e.g. caching or content distillation
    • G06F16/9574Browsing optimisation, e.g. caching or content distillation of access to content, e.g. by caching

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

一种通过高速缓存服务器调度从内容服务器到客户端的内容文件的下载的系统和方法。用户能够在诸如热点之类的特定位置、在特定时间来请求用于未来传送的内容文件。高速缓存服务器接收这些请求,并将这些请求依据相对服务时间的顺序进行分类,并且通过仅下载还未存储在高速缓存服务器中的内容文件来消除冗余。调度算法将高速缓存存储器容量的限制下的延迟情况最小化。

Description

在高速缓存网络环境中调度下载的系统和方法
技术领域
本发明总体上涉及数据通信和内容发送网络的领域,更具体地,涉及在内容传送网络中调度文件下载的系统和方法。
背景技术
对于诸如电影之类的较大数据量的内容,内容客户端通常能够容忍传送中的一些时延以换取更好的质量。通常,客户端将宁愿选择在预定时间观看高质量的下载视频,而非即时地观看低质量的视频流。例如,移动用户能够在他或她处于蜂窝网络时提前定购视频,以及在稍后用户访问无线LAN热点时下载电影。这样,移动用户能够以高带宽和低成本来享受内容。
近年来,内容传送网络(CDN)技术的使用已扩展到因特网来改进网页的下载。CDN包括在不同地理位置的多个高速缓存服务器。CDN技术的基本前提依据低成本、以及高速缓存服务器与客户端之间的高带宽链接。如果在客户端请求网页时,所请求的网页存在于附近高速缓存服务器的高速缓存中,则会迅速地进行下载。否则,客户端会体验到时延。
典型地,如果时延不会超出内容客户端指定为他或她想获取该内容文件的期望服务时间,则客户端能够在大数据量内容文件的下载过程中忍受时延。因此,即使所需内容文件当前不会存在于靠近客户端的高速缓存服务器,只要下载系统先于期望服务时间将内容文件转移至高速缓存服务器,则用户将不会体验到时延。然而,当内容服务器接收一些客户端请求来将内容文件下载至特定高速缓存服务器时,必须使用调度算法来优化内容服务器、网络连接、以及高速缓存服务器的资源。
无线技术的提高和远程站点下载的引入增加了对优化内容服务器、网络连接、以及高速缓存服务器的资源的调度算法的需求。仅出于示例性的目的,将对这些调度问题进行讨论,这些问题涉及使用无线和远程站点下载技术的CDN,应理解这些问题存在于所有类型的CDN中,以及本发明并不局限于此。
随着无线技术的提高,诸如个人数据助理(PDA)、蜂窝电话-PDA混和、以及膝上型计算机之类的移动/无线设备能够使用蜂窝移动网络来发送和接收电子邮件、获得网络服务、以及下载多媒体文件。然而,使用这样的蜂窝网络不能有效地下载或流化(streaming)诸如电影、音乐、电视节目、或者其它多媒体文件之类的大数据量内容文件。每个传送的流媒体比特的成本和速度使移动设备用户能够更有效地使用诸如有线宽带、DSL、电话调制解调器、或其它硬件有线网络连接之类的更高带宽连接,以便从内容网路服务器中下载内容文件。
当行进时,移动设备用户通常仅访问成本较低的网络,诸如蜂窝网络(即,低带宽网络)。为了缓解这个问题、以及限制有关通过蜂窝网络下载大数据量内容文件,已知也作为内容传送网络(“CDN”)的高速缓存服务器网络变得更加普遍。CDN与网站运营商签订了合约,以确保网站的内容文件从高速缓存服务器中可用,从而对于网站内容服务器的用户请求能够更加迅速、有效地被执行和发送,和/或地理上更加靠近CDN中的高速缓存服务器。例如,下载系统允许用户在一个位置处、在第一网络上、第一次请求来自内容服务器的内容文件,以及在第二位置处、和/或在第二网络上、和/或在将来的第二时间下载内容文件。这称为远程站点下载功能。远程站点下载功能可以由CDN或内容服务器提供。
为了满足这些需求,已开发了被称为“热点”的公共接入点,通过高速缓存服务器的使用来促进有效下载。如这里使用的,热点是已经建立了无线局域网(“WLAN”)的位置,例如,在公共空间内的无线宽带计算机网络。当前,热点提供了使用IEEE 802.11b(“Wi-Fi”)标准的11兆比特每秒的连接速度,或者使用IEEE 802.11g的55兆比特每秒的连接速度,并且可以位于例如咖啡店、餐厅、旅馆、机场、书店、复印店、会议中心、以及其它公共可访问的位置。例如,在热点处,具有诸如PDA、膝上型电脑、蜂窝电话、或者混合PDA-蜂窝电话之类的支持WiFi的移动设备的用户能够非常有效地访问互联网并下载或流通大数据量内容文件。
通常,通过具有无线电收发机的无线路由器为用户的移动设备提供热点处的互联网访问,具有无线电收发机的无线路由器与具有无线卡的移动设备进行通信。尽管将来所有移动设备都期望是支持Wi-Fi的,但是不支持Wi-Fi的移动用户可以在一些情况下使用有线连接与热点互联网服务器进行连接。
目前,无线移动设备用户能够在热点处访问互联网,以便选择、请求、以及支付即时下载的来自远程内容网络服务器的内容文件。然而,移动用户经常会发现,在用户进行访问以获得内容文件期间,当移动用户在不必须与内容服务器网站连接的情况下访问热点时,通过蜂窝或其它低速网络选择来自内容提供商网站的内容文件以及为即时访问而提前下载内容文件是方便的。在这种情形下,移动用户通过移动/无线设备产生内容文件的请求,指定内容要发送到的热点/高速缓存服务器,以及他或她想访问和接收内容的估计时间(即,服务时间)。
尽管请求该文件下载至热点高速缓存服务器具有一定的优点,但是用户遇到了与当前网络的若干问题,其中的一个问题是:所请求的内容文件到达特定高速缓存服务器过程的延迟。通常,用户需要超过等待请求内容的估计服务时间,才得以在高速缓存服务器上进行访问。这个问题随着高速缓存网络下载的继续发展而变得更加严峻。
调度大多数互联网服务中的下载过程通常几乎瞬时地发生,而与服务器、网络和客户端条件无关。在瞬时下载系统中几乎不存在任何调度问题。这种系统中的调度程序(scheduler)根据内容服务器的处理能力来进行操作,并且对于文件请求的处理按照接收这种请求的顺序来进行。然而,随着具有服务时间信息的请求变得越来越多,将需要设计调度程序用于在高速缓存网络环境中下载内容文件,其中,这些需求考虑了出现在这样的网络中的特定限制。
发明内容
本发明的目的是提供了一种用于下载系统的调度下载作业(job)的方法和系统。
另一个目的是提供一种在下载系统中调度下载的方法和网络,以减少有关服务时间的下载延迟情况。
另一目的是提供一种在下载系统中调度下载的方法和网络,以使高速缓存服务器的使用率最大化。
另一目的是提供一种在下载系统中下载的方法和网络,以消除在高速缓存服务器上存储复制内容文件。
本发明的另一目的是提供一种在下载系统中调度下载的方法和网络,考虑到了内容服务器和高速缓存服务器容量。
通过本发明实现了这些目的及其它。在下载系统中,发现由于提前于内容服务时间(即,内容花费时间)作出了下载内容文件的请求,所以能够提出一种用于调度下载的方法和网络,以便提高系统的吞吐量。本发明的目的是在服务器、网络和高速缓存容量的限制下,最大化网络吞吐量。本发明能够用于有线和无线网络环境。
在一方面中,本发明是一种用于下载系统环境的调度下载方法,包括:在特定高速缓存服务器处接收包括服务时间的内容文件的请求;以及根据服务时间,以时间顺序在作业列表中列出请求。请求也可以包括内容文件URL以及内容文件大小的数据组。具有初始化为指向列表顶部的调度指针。优选地,当接收到内容文件的新请求时,动态地更新作业列表,如果在调度指针当前指示的请求之前插入新请求,则向后移动调度指针。一旦创建和排列了作业列表,则确定由在调度指针处的请求所请求的内容文件是否已存储在特定高速缓存服务器上。如果确定由在调度指针处的请求所请求的内容文件没有存储在特定高速缓存服务器上,则当自由空间可用时,将请求该内容文件下载至高速缓存服务器上。在该下载完成时,下载的内容将具有至调度指针处的请求的连接,以及调度指针将被向前移动至作业列表上的下一请求。
然而,如果在高速缓存服务器上存在由调度指针所指示的请求所请求的内容文件时,优选地,将该请求与所存储的内容文件相链接,然后将调度指针向前移动至作业列表上的下一请求。这消除了在相同高速缓存服务器上重复存储内容文件,将高速缓存服务器存储器的使用率最大化。
本发明不仅考虑了内容服务器处理能力,而且考虑了诸如存储器空间之类的高速缓存服务器容量。高速缓存服务器不能处理列表上的下一作业(即,下载所请求的内容文件),除非高速缓存服务器具有容纳该文件的自由空间。由于高速缓存服务器的自由空间依据客户端的随机提取,而非依据请求的期望服务时间,所以优选地,连续地监视高速缓存服务器自由空间。本发明在服务器和高速缓存容量的限制下将吞吐量最大化。
优选地,将内容文件从内容源下载至特定高速缓存服务器。如这里使用的,内容源包括包含所需内容文件的内容网络服务器或未指定的高速缓存服务器。作业列表能够存储在特定高速缓存服务器上,并由特定高速缓存服务器执行。此外,优选地,特定高速缓存服务器是热点高速缓存服务器。能够由无线或有线用户设备,包括诸如PDA、蜂窝电话、膝上型电脑之类的移动电子设备,或者诸如台式计算机之类的固定设备来生成请求。
另一方面,本发明是一种系统,包括:具有作业列表和内容存储器空间的高速缓存服务器;用户设备,适于生成在高速缓存服务器上可用的内容文件的请求,该请求具有服务时间;将请求添加至作业列表的装置,作业列表根据服务时间以时间顺序排列,并具有作业列表的顶部处初始化的调度指针;确定由调度指针处的请求所请求的内容文件是否存储在高速缓存服务器上的装置;当在高速缓存服务器上检测到自由空间并且当确定由调度指针处的请求所请求的内容文件没有存储在高速缓存服务器上时,将由在调度指针处的请求所请求的内容文件下载至高速缓存服务器的装置。
优选地,系统应具有:移动装置,当下载了由调度指针指示的请求所请求的内容时,将调度指针向前移动至作业列表上的下一请求。此外优选地,系统包括:移动装置,当高速缓存服务器上存在由调度指针处的请求所请求的内容文件时,将调度指针向前移动至作业列表的下一请求。在这两个实施例中,系统能够包括:创建装置,在将调度指针向前移动至作业列表上的下一请求之前,创建从由调度指针处的请求所请求的内容文件至该请求的链接。
本发明系统还包括内容源,用于将内容下载至高速缓存服务器。该内容源可以是内容服务器、或者另一高速缓存服务器。
附图说明
图1示出了根据本发明实施例的下载系统的示意图,其中,内容请求和内容下载使用不同的网络。
图2描述了根据本发明实施例,在远程下载系统中调度下载的方法的流程图。
具体实施方式
图1示出了下载系统100。下载系统100包括用户设备10(通常演示为矩形框)、内容服务器20、以及高速缓存服务器30。用户设备10通过第一网络a与内容服务器20进行通信,将数据发送至内容服务器20、以及从内容服务器20中接收数据,在本示例中,所述第一网络a包括以相对较低速率(即,低带宽)操作的无线蜂窝网络。内容服务器20通过诸如具有高速率(即,高带宽)的因特网之类的第二网络b,与高速缓存服务器30进行通信,将数据发送至高速缓存服务器30、以及从高速缓存服务器30中接收数据。高速缓存服务器30与用户设备彼此进行通信,以及在例如咖啡店或机场的能够提供无线或硬线(hard-wire)连接的热点c处,本地地发送和接收数据。
本示例中的用户设备10包括无线设备,如支持网络的PDA或蜂窝电话。本示例中的内容服务器20包括能够购买和下载电影的网站。本示例中的高速缓存服务器30包括可由多个用户访问的热点高速缓存。
图2示出了根据本发明的实施例下载系统100如何进行操作的流程图。尽管图2将对有关图1的下载系统100进行讨论,但是应理解,可以替换为不同的实施例和硬件。
当用户决定在稍后时间获得内容文件、但想立即请求内容文件时,用户通过在第一远程位置处的用户设备10,生成对所需内容文件的请求。该请求将包括用户期望获得文件的服务时间。该请求还指定了用户想在此直接或间接检索(retri eval)内容文件的高速缓存服务器。可选地,能够通过下载系统100将该请求分配给特定高速缓存服务器,以便进行检索。在使用用户设备10生成请求时,该请求直接传送至高速缓存服务器30,或者通过内容服务器20间接地传送至高速缓存服务器30。
在图2的步骤200期间,高速缓存服务器30接收对内容文件的请求。当接收到该请求时,在步骤210期间,高速缓存服务器30确定与该请求相关的服务时间,并且将请求添加至包含先前请求的作业列表中。作业列表包括由高速缓存服务器30接收的内容文件的所有请求的列表,以便处理。在步骤220期间,高速缓存服务器30排列作业列表,使得请求根据服务时间,按时间顺序出现。高速缓存服务器30具有被初始化为指向作业列表顶部的调度指针。由于新请求经常固定地到达高速缓存服务器30,所以高速缓存服务器动态地更新作业列表,并且当迄今为止由调度指针所识别的请求之前插入新的请求时,将会向后移动调度指针。适当的编程处理器和传统硬件(未示出)将执行所有处理步骤和决定。
在更新和排列作业列表的任何时间,调度指针指向作业列表上请求调度的请求。在步骤230期间,高速缓存服务器30确定当前由作业列表上的调度指针识别的请求是否请求已经存储在高速缓存服务器30的存储器中的内容文件。如果是这样,则高速缓存服务器30进行至步骤240。在步骤240期间,高速缓存服务器将该内容文件与由调度指针识别的请求相链接,使得相应的用户能够在到达热点位置之后,当利用用户设备10访问高速缓存服务器时能够检索所需的内容文件。完成步骤240后,在步骤250期间,调度指针前进至作业列表上的下一请求。这消除了在高速缓存服务器30的存储器中存储重复的内容文件,因而节约和最大化了高速缓存服务器有限的存储空间。
然而,如果在步骤230期间,在检查高速缓存服务器30时,所请求的内容不存在,则出现步骤260,确定高速缓存服务器30上是否存在足够的自由空间以下载由调度指针所识别的请求中指定的内容文件。如这里使用的,在高速缓存服务器30在不盖写链接的内容文件的情况下,当有足够的存储空间来存储与调度指针处的请求相关的内容文件时,则自由空间存在。当高速缓存服务器存储器上有足够的空余空间时、或者当能够替换存储在存储器中的内容文件时,存在这种情况。当不存在到该文件的任何请求的链接时,可以替换存储在存储器中的内容文件。当该请求的相应用户将该内容文件提取(pick up)(即,下载)至用户设备10时,或者当请求到期时(即,经过超过估计服务时间的特定量的时间),将删除到请求的链接。
如果在步骤260的执行期间不存在足够的空间,则此时出现步骤270,高速缓存服务器30处理现有的已链接作业,直到在重新执行步骤260之前自由空间变得可用为止。
当步骤260期间存在足够的空间时,出现步骤280,高速缓存服务器30将信号发送至内容服务器20,请求由调度指针在作业列表上所识别的请求所请求的内容文件。在步骤280期间,内容服务器20响应具有授权高速缓存服务器下载由调度指针指示的请求所请求的内容文件的时间的信号,以及在授权时间内将该内容文件下载至高速缓存服务器30以便存储。在完成下载之后,在步骤290期间,将调度指针处的请求与下载的文件相链接。之后,在步骤300期间,调度指针在返回步骤220之前,向前移动至作业列表上的下一请求。
本发明的目的之一在于:使被看作对下载系统的延迟损失的预期服务时间之后继续的作业数最小化。尽管普通计算机用户能够在没有所谓的早期损失(earliness penalty)的情况下,早在服务器具有容量时就请求下载,但是在CDN中,高速缓存服务器不能早在服务器具有该容量时请求下载。这意味着早期损失。高速缓存服务器存储器的使用是早期损失。给定内容在高速缓存中保存的时间越长,花销或损失将越大。设定总高速缓存服务器存储器具有固定的存储容量将简化该问题。因此,早期损失成为早期限制。本发明的一个目的是将具有固定早期限制的延迟损失量最小化。
注意到,处理(诸如用于下载)新请求到达的请求不必触发请求处理。请求到达和请求处理能够彼此正交,其中,将新到达插入请求列表的插入构成了出现在请求到达与请求处理之间的仅有连接。
为了描述性目的,图2中示出的调度算法被称为基于上述目标和限制的按照服务顺序的最早传输(“ETSO”)。由于受到高速缓存服务器对最大化传输能力和高速缓存服务器容量的使用的限制,ETSO调度算法试图尽早传输内容文件。ETSO算法能够实时和脱机操作。随着请求处理进行,当新请求到达时出现实时的情况。脱机的情况假设:在开始请求处理之前,具有预期服务时间的所有请求是可用的。在脱机的情况下,ETSO算法证实自身在内容大小固定的情况下是最优算法。在可变内容大小的情况下,最优目标不仅与延迟的作业数量或延迟速率有关,即丢失最终期限,而且与延迟作业内容的总大小有关。由于服务器为了实现目标,可能需要使用之后的预期服务时间来处理较大或较小内容,所以这样的目标函数有时会不以预期服务时间的顺序来请求传输。这将在作业处理接近预期服务时间时发生。如果系统设计能够给出低延迟速率,则这不会频繁地发生。因此,尽管按照服务顺序(ETSO)算法的最早传输不再最优,但是具有高速缓存限制的最早传输的原则仍是有效的,并且能够用于可变内容大小系统中。
本发明中的调度问题能够定义如下:在内容服务器上,存在K个不同的内容文件。所有的内容文件具有相等的大小,请求相同的时间量p来将其下载至高速缓存服务器。在高速缓存服务器上,在时间段T内存在具有数据量N的一组请求R={ri}。高速缓存大小为C。每个请求ri=(ki,di)用于内容ki并具有期望服务时间di。在不丧失一般性的情况下,对于N个请求的期望服务时间的顺序是若i<j,则di<dj。调度问题是发现时间序列S={si},其中,si是调度请求i的时间。能够将“调度”定义为所请求的内容被下载至高速缓存服务器的时间,即,传输的结束而非传输的开始。寻求调度表S,所述调度表S产生服务延迟的最小次数,即,出现si>di的次数。
适当的ETSO调度表SETSO遵循以下步骤:
1.在s1=d1处,调度请求r1,令d1’=d1,di’是ki必须处于高速缓存中的时间。令当前调度表时间t=s1
2.对于i=2至N(请求数)
A.如果内容文件ki处于高速缓存中,则令si=t,dj’=t-p,其中,j是对内容ki的最后一个请求,否则
B.等待,直到t’≥t,使得Gs(t’)<C/p,如果di≥t’+p,则令si=t’+p,di’=di,以及t=t’+p,否则
C.si=∞(调度失败,延迟++)。
Gs(t)=∑ip[Θ(t-si+p)-Θ(t-di′)]是在当前时间t处必须在高速缓存中保存的内容的总大小,其中,Θ(x)是单位阶跃函数,即,如果x>0,则Θ(x)=1,否则Θ(x)=0;Θ(t-si+p)-Θ(t-di′)意味着请求i的高速缓存请求,从传输(si-p)的开始至服务时间(di)或下一相同内容请求(di’)的传输开始。
第一步骤是初始化,以及第二步骤是调度所有请求的循环,直至rN。循环中的步骤可以解释如下:
步骤2A:所请求的内容在高速缓存中。在当前时间调度请求ri。由于请求ri需要内容ki存储在高速缓存中,直至di≥dj,其中j<i,所以请求rj不需要请求存储多于si-p的内容ki(=kj)。引入d’来避免对高速缓存存储器过计数,即,使用Gs(t)中的d’将不会具有相同内容的高速缓存重叠时间段。
步骤2B:如果高速缓存满,则需要等待直至t’,此时,至少一个内容使其所有的调度请求被服务。如果仍然有时间下载,即,di≥t’+p,则在si=t’+p处调度请求ri。这是最新的高速缓存内容,所以必须存储ki,直至di’=di。时间前行t=t’+p。
步骤2C:如果没有时间下载,则令si=∞。出现调度失败。
由于受到高速缓存限制,所以ETSO调度算法试图仅在发送请求。将传输能力和高速缓存容量最大化。能够证实,ETSO算法是对于所给目标功能的最优算法,即,将延迟出现的次数最小化。对于多达i个请求,最优调度表是具有最小延迟数目的调度表(1)以及对于最后的调度si具有最早调度时间的调度表(2)。
假设第一请求具有固定的调度s1=d1,意味着时间开始于t=d1-p。根据ETSO,能够证实第二请求是最优的。即,最早时间是在t+p处。如果t+p>d2,则s2=t+p造成了延迟,所以需要调度第三请求,依此类推。在不丧失一般性的情况下,假设d2≥d1+p。很明显,通过上述两个准则得知,S2={s1=d1,s2=d1+p}是最优调度。
使用归纳的方法,假设直到请求ri,具有调度表Si={s1……sj}的ETSO算法是最优的。如果在当前时间t=si处,请求ri+1的内容ki+1在高速缓存中,则t’=t=si。在这样的情况下,Si+1*具有相等的延迟和相等的最后调度时间。所以Si+1={Si,si+1=si}是最优的。如果请求ri+1的内容ki+1不在高速缓存中,则根据ETSO算法,在先前请求之后调度ri+1,Si+1*={Si,si+1=t’+p}是ri+1的最早调度,其中,t’≥si是满足Gsi(t’)<C/p的最小值。由于直到t’,高速缓存状态Gsi(t)都不会受到影响,所以ETSO算法在si之后选择最早可能的si+1。在这样的情况下,也必须优化调度表Si+1*={Si,…,si+1}。
然而,能够在先前的i个调度之间调度请求ri+1吗?假设调度表Si+1={sa,…,si+1=t1,sb=t2,…,s1=tm}存在,能够证实所有可能的Si+1的延迟数目大于或等于Si+1*。
由于有di+1≥d1≥s1,所以有效的调度Si+1必须满足高速缓存限制Gs(t)。考虑调度表S’i+1={sa,…,sb=t1,si+1=t2,…,s1=tm},该调度表针对请求rb和ri+1交换调度S。然后,对于请求rb,高速缓存占用率的差为[Θ(t-t1+p)-Θ(t-d′b)]-[Θ(t-t2+p)-Θ(t-d′b)]=[Θ(t-t1+p)-Θ(t-t2+p)]。对于请求ri+1,高速缓存占用率的差为[Θ(t-t2+p)-Θ(t-di+1)]-[Θ(t-t1+p)-Θ(t-di+1)]=[Θ(t-t2+p)-Θ(t-t1+p)]。因此,Gs,(t)=Gs(t)≤C/p。
由si+1的高速缓存减少来取消sb的高速缓存增加。由于较早调度请求rb,所以将不会引入延迟。由于si+1=t2<s1≤d1≤di+1,所以也将不会存在请求ri+1的延迟。最后的调度仍然是s1=tm。这证实了S’i+1与Si+1一样好。以相同的方式,可以将请求ri+1与请求rb之后的下一个调度请求进行交换,直到与S’i+1中的最后调度交换。这证实了先前i个请求的最后调度之后的调度请求ri+1至少与在i个请求的先前调度之间调度一样好。
先前示出了,如果请求ri+1在先前的i个请求的最后调度之后进行调度,则ETSO算法给出最早可能si+1
示出在i=1,2时的S2是最优的。假设Si是前i个请求中的最优,示出Si+1*={Si,si+1=t’}是前(i+1)个请求的最优调度。这证实了基于ETSO算法的调度至少与任何其它调度一样好,即最优调度。
尽管以本领域技术人员易于使用的足够细节对本发明进行了描述和说明,但是在不偏离本发明的精神和范围的情况下的不同选择项、修改和改进是显而易见的。具体地,本发明不局限于使用远程站点下载功能的CDN。本发明可应用于所有高速缓存网络环境中。

Claims (18)

1、一种用于下载系统的调度下载方法,包括:
接收对内容文件的请求,所述请求包括服务时间和特定高速缓存服务器;
根据服务时间,按照时间顺序在作业列表中列出所述请求,所述作业列表具有调度指针,所述调度指针被初始化为指向对所述作业列表顶部处的内容文件的请求;
确定由所述调度指针处的请求所要求的内容文件是否存储在所述特定高速缓存服务器中;以及
在确定由所述调度指针处的请求所要求的内容文件没有存储在所述特定高速缓存服务器中时,当所述特定高速缓存服务器上存在自由空间时,将由调度指针处的请求所要求的内容文件下载至所述特定高速缓存服务器。
2、如权利要求1所述的方法,还包括:在下载完成时,将所述调度指针前进至所述作业列表上的下一请求。
3、如权利要求1所述的方法,还包括:在确定由所述调度指针处的请求所要求的内容文件存储在所述特定高速缓存服务器时,将所述调度指针处的请求与所存储的内容文件相链接,以及将所述调度指针前进至所述作业列表上的下一请求。
4、如权利要求1所述的方法,其中,将所述内容文件从内容服务器下载至所述特定高速缓存服务器。
5、如权利要求1所述的方法,其中,所述作业列表存储在所述特定高速缓存服务器上,并由所述特定高速缓存服务器执行。
6、如权利要求1所述的方法,其中,当接收到新请求时,动态地更新所述作业列表。
7、如权利要求1所述的方法,还包括:
在接收具有早于所述作业列表上所有其它请求的服务时间的新请求时,将新请求插入所述作业列表中所述调度指针处的请求之前;以及
将所述调度指针向后移动至新请求。
8、如权利要求1所述的方法,其中,所述特定高速缓存服务器是热点高速缓存服务器。
9、如权利要求1所述的方法,其中,由用户设备生成所述请求。
10、如权利要求1所述的方法,其中,由内容服务器接收所述请求,并将所述请求传输至特定高速缓存服务器。
11、一种系统,包括:
具有作业列表的高速缓存服务器;
处理装置,处理在服务时间处内容文件在高速缓存服务器上可用的用户请求;
添加装置,将所述请求添加至作业列表、以及根据服务时间以时间顺序来排列作业列表,所述作业列表具有调度指针,根据对所述作业列表顶部处内容文件的请求来初始化所述调度指针;
确定装置,确定由所述调度指针处的请求所要求的内容文件是否存储在所述高速缓存服务器上;
发送装置,当在所述高速缓存服务器上存在自由空间时、并且当确定由所述调度指针处的请求所要求的内容文件没有存储在高速缓存服务器上时,将请求发送至内容源,以便将由在所述调度指针处的请求所要求的内容文件下载至高速缓存服务器;以及
授权装置,授权从所述高速缓存服务器下载请求。
12、如权利要求11所述的系统,还包括:移动装置,当下载了由所述调度指针指示的请求所要求的内容时,在所述作业列表上将所述调度指针向前移动。
13、如权利要求12所述的系统,还包括:移动装置,当确定由所述调度指针处的请求所要求的内容文件存储在所述高速缓存服务器上时,在所述作业列表上将所述调度指针向前移动。
14、如权利要求11所述的系统,还包括:链接装置,在确定由所述调度指针处的请求所要求的内容文件存储在所述高速缓存服务器中时,将由所述调度指针处的请求所要求的内容文件与所述调度指针处的请求相链接。
15、如权利要求11所述的系统,还包括:内容源,从所述内容源将内容下载至所述高速缓存服务器。
16、如权利要求11所述的系统,还包括:更新装置,当接收到新请求时,动态地更新所述作业列表,其中,当在接收具有早于所述作业列表上的所有其它请求的服务时间的新请求时,将新请求插入所述作业列表中所述调度指针处的请求之前,以及将所述调度指针向后移动至所述新请求。
17、如权利要求11所述的系统,其中,所述高速缓存服务器是热点高速缓存服务器。
18、如权利要求11所述的系统,其中,所述内容源是内容服务器、或者是存储有内容文件的另一高速缓存服务器。
CNA2004800423462A 2004-03-12 2004-03-12 在高速缓存网络环境中调度下载的系统和方法 Pending CN1926540A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2004/007651 WO2005098674A1 (en) 2004-03-12 2004-03-12 System and method for scheduling downloading in a cached network environment

Publications (1)

Publication Number Publication Date
CN1926540A true CN1926540A (zh) 2007-03-07

Family

ID=34957435

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2004800423462A Pending CN1926540A (zh) 2004-03-12 2004-03-12 在高速缓存网络环境中调度下载的系统和方法

Country Status (6)

Country Link
US (1) US20080235360A1 (zh)
EP (1) EP1723551A1 (zh)
JP (1) JP2007529072A (zh)
CN (1) CN1926540A (zh)
BR (1) BRPI0418599A (zh)
WO (1) WO2005098674A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101335876B (zh) * 2007-06-28 2010-11-10 海尔集团公司 一种点播系统、点播方法及点播服务器
WO2014047951A1 (zh) * 2012-09-29 2014-04-03 华为技术有限公司 一种网络存储的方法、交换设备和控制器
CN106302745A (zh) * 2016-08-17 2017-01-04 上海交通大学 基于缓存和冗余消除的上行链路小基站内容调度方法

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9239686B2 (en) * 2003-07-22 2016-01-19 Sheng Tai (Ted) Tsao Method and apparatus for wireless devices access to external storage
US9100814B2 (en) * 2003-09-17 2015-08-04 Unwired Plant, Llc Federated download of digital content to wireless devices
AU2003287497A1 (en) 2003-11-04 2004-06-06 Thomson Licensing Cache server at hotspots for downloading services
JP4980879B2 (ja) * 2004-03-12 2012-07-18 トムソン ライセンシング ジオグラフィックドライブ上の自動リモートサイトダウンロード
JP2006221476A (ja) * 2005-02-10 2006-08-24 Fujitsu Ltd 管理装置、データ受信装置、操作端末及び情報処理装置
GB2424546A (en) * 2005-03-24 2006-09-27 Silk Mobile Ltd Scheduling transfer of data content to a mobile telephone
KR101225224B1 (ko) * 2006-03-28 2013-01-22 톰슨 라이센싱 콘텐츠 전달 네트워크용의 중앙 집중 스케줄러
US8260881B1 (en) 2006-09-06 2012-09-04 Amazon Technologies, Inc. Remote download of content
EP2080322B1 (en) * 2006-11-06 2018-07-11 Intel Corporation Method and apparatus for command synchronization
CN101601234B (zh) * 2007-01-11 2016-05-04 汤姆逊许可公司 用于内容通信的系统和方法
US8620279B2 (en) 2007-03-13 2013-12-31 Open Invention Network, Llc Apparatus and method for sending video content to a mobile device
CN101895967A (zh) * 2010-07-21 2010-11-24 中兴通讯股份有限公司 基于wifi的文件下载方法和装置
WO2012044786A1 (en) 2010-10-01 2012-04-05 Smith Micro Software, Inc. System and method for managing hotspot network access of a plurality of devices and billing for hotspot network access
US9319453B2 (en) * 2011-07-15 2016-04-19 Shmuel Ur User-controlled download duration time
US8819303B2 (en) 2011-07-25 2014-08-26 General Instrument Corporation Deferred transfer of content to optimize bandwidth usage
CN103430489B (zh) 2011-12-20 2016-11-30 华为技术有限公司 内容分发网络中文件下载方法、装置和系统
US9806792B2 (en) 2012-07-06 2017-10-31 Neutronic Perpetual Innovations Operating, Llc System and method for mobile data expansion
US10959158B2 (en) 2012-07-06 2021-03-23 Neutronic Perpetual Innovations Operating, Llc System and method for mobile data expansion
US9219991B2 (en) 2012-07-06 2015-12-22 Neutronic Perpetual Innovations, Llc. System and method for mobile data expansion
US9414222B1 (en) * 2013-03-12 2016-08-09 Amazon Technologies, Inc. Predictive caching devices, systems and methods
MX358556B (es) * 2013-03-15 2018-08-24 Neutronic Perpetual Innovations Llc Sistema y método para expansión de datos móviles.
US9986696B2 (en) * 2013-08-26 2018-06-05 Et Water Systems, Inc. Irrigation smart controllers with programming and firmware updating
US10270883B2 (en) * 2014-03-27 2019-04-23 Hewlett Packard Enterprise Development Lp Scheduling downloads
US20160080439A1 (en) * 2014-09-12 2016-03-17 Lineage Labs, Inc. Media Sharing Device
CN106612456A (zh) * 2015-10-26 2017-05-03 中兴通讯股份有限公司 网络视频播放方法和系统及用户终端、家庭流服务节点
US10733591B2 (en) 2016-10-11 2020-08-04 International Business Machines Corporation Tiered model for event-based serverless computing
US10382513B2 (en) 2017-02-15 2019-08-13 International Business Machines Corporation Scheduling downloads based on metadata in a client-server topology
US10587716B2 (en) * 2017-10-26 2020-03-10 Rovi Guides, Inc. Systems and methods for optimizing allocation of bandwidth for pre-caching media content
CN108184149B (zh) * 2017-12-29 2021-04-20 北京奇艺世纪科技有限公司 一种视频cdn调度优化方法及装置
CN109005056B (zh) * 2018-07-16 2020-06-23 网宿科技股份有限公司 基于cdn应用的存储容量评估方法和装置
US11064249B2 (en) 2019-02-26 2021-07-13 At&T Intellectual Property I, L.P. System and method for pushing scheduled content to optimize network bandwidth

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02197948A (ja) * 1989-01-27 1990-08-06 Nec Corp ファイル転送方式
US6061504A (en) * 1995-10-27 2000-05-09 Emc Corporation Video file server using an integrated cached disk array and stream server computers
JP2927259B2 (ja) * 1996-12-25 1999-07-28 日本電気株式会社 ダウンロード装置
JPH10285510A (ja) * 1997-04-04 1998-10-23 Sony Corp 映像送信方法
KR100269114B1 (ko) * 1997-07-15 2000-10-16 윤종용 캐쉬 운영방법
JP3794663B2 (ja) * 1998-03-13 2006-07-05 株式会社東芝 無線通信システム
JP4299911B2 (ja) * 1999-03-24 2009-07-22 株式会社東芝 情報転送システム
US6721794B2 (en) * 1999-04-01 2004-04-13 Diva Systems Corp. Method of data management for efficiently storing and retrieving data to respond to user access requests
US20020010753A1 (en) * 1999-12-20 2002-01-24 Matsuoka Robert M. Method and apparatus for delivering dynamic information in a computer network
JP2001229081A (ja) * 2000-02-17 2001-08-24 Hitachi Ltd データ転送方式
JP4625158B2 (ja) * 2000-05-29 2011-02-02 本田技研工業株式会社 遠心式コンプレッサ
US6959327B1 (en) * 2000-08-29 2005-10-25 International Business Machines Corporation System and method for dispatching and scheduling network transmissions with feedback
US20020040389A1 (en) * 2000-10-03 2002-04-04 Wirespring Technologies, Inc. System and method for remotely-managed content distribution network
US7222184B2 (en) * 2000-11-29 2007-05-22 Ncr Corporation Method of downloading web content to a network kiosk in advance
EP1233348A1 (en) * 2001-02-20 2002-08-21 Matsushita Electric Industrial Co., Ltd. Data transmission system
US20020198963A1 (en) * 2001-06-21 2002-12-26 Wu Alex C. Method of timer based download and playback scheme for internet browser
EP1466259A4 (en) * 2001-12-13 2010-08-18 Thomson Licensing APPARATUS AND METHODS FOR TRANSFERRING INFORMATION USING A CACHE SERVER
WO2003052608A1 (en) * 2001-12-13 2003-06-26 Thomson Licensing S.A. Apparatus and methods for delayed network information transfer
AU2002359664A1 (en) * 2001-12-13 2003-06-30 Thomson Licensing S.A. System and method for downloading data using a proxy
US7093004B2 (en) * 2002-02-04 2006-08-15 Datasynapse, Inc. Using execution statistics to select tasks for redundant assignment in a distributed computing platform
US7010762B2 (en) * 2002-02-27 2006-03-07 At&T Corp. Pre-loading content to caches for information appliances

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101335876B (zh) * 2007-06-28 2010-11-10 海尔集团公司 一种点播系统、点播方法及点播服务器
US9686724B2 (en) 2009-06-05 2017-06-20 Huawei Technologies Co., Ltd. Network storage method, switch device, and controller
WO2014047951A1 (zh) * 2012-09-29 2014-04-03 华为技术有限公司 一种网络存储的方法、交换设备和控制器
CN103891237A (zh) * 2012-09-29 2014-06-25 华为技术有限公司 一种网络存储的方法、交换设备和控制器
US10117140B2 (en) 2012-09-29 2018-10-30 Huawei Technologies Co., Ltd. Network storage method, switch device, and controller
CN106302745A (zh) * 2016-08-17 2017-01-04 上海交通大学 基于缓存和冗余消除的上行链路小基站内容调度方法
CN106302745B (zh) * 2016-08-17 2020-07-14 上海交通大学 基于缓存和冗余消除的上行链路小基站内容调度方法

Also Published As

Publication number Publication date
US20080235360A1 (en) 2008-09-25
BRPI0418599A (pt) 2007-06-26
WO2005098674A1 (en) 2005-10-20
EP1723551A1 (en) 2006-11-22
JP2007529072A (ja) 2007-10-18

Similar Documents

Publication Publication Date Title
CN1926540A (zh) 在高速缓存网络环境中调度下载的系统和方法
US7899886B2 (en) Apparatus and methods for information transfer using a cached server
EP1697833B1 (en) Cache server at hotspots for downloading services
KR101359081B1 (ko) 성능 인식 p2p 콘텐트 온 디맨드
US8787164B2 (en) Media delivery system and method for transporting media to desired target devices
US20140082135A1 (en) Apparatus and method for providing content, and system for providing content with the said apparatus
US8589477B2 (en) Content information display device, system, and method used for creating content list information based on a storage state of contents in a cache
CN101156407B (zh) 通过通信网络提供内容的方法
CN1681248A (zh) 服务器与客户端间传送用于数据同步的数据的方法与系统
JP2007529073A (ja) キャッシュサーバネットワーク及びコンテンツファイルの配信をスケジューリングする方法
US10346303B1 (en) Origin server cache eviction system
CN1605071A (zh) 用于延迟的网络信息传输的设备和方法
CN1732661A (zh) 混合网络
US7395314B2 (en) Systems and methods for governing the performance of high volume electronic mail delivery
CN102111426A (zh) 点对点技术的实现方法、系统和装置
CN103369020A (zh) 缓存同步系统、缓存同步方法及其装置
CN1435756A (zh) 用于处理二进制程序文件的方法
CN1186902C (zh) 分配系统软件数据包的方法
US7930706B1 (en) Managing cache reader and writer threads in a proxy server
CN102404616A (zh) 基于数字电视网络进行数据云推送的方法及系统
CN102571409A (zh) 一种用于实现业务跨终端使用的业务请求管理系统及方法
CN1451220A (zh) 在内容交换机中预装内容对象
CN116112065B (zh) 基于卫星通信的文件共享方法、系统、装置及存储介质
CN1592258A (zh) 具有自动客户组态的网络系统与方法
CN101610165B (zh) 一种自动扩散资源的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication