CN112398884B - 镜像回源场景下流量调度控制方法、可读存储介质及计算机设备 - Google Patents

镜像回源场景下流量调度控制方法、可读存储介质及计算机设备 Download PDF

Info

Publication number
CN112398884B
CN112398884B CN201910747594.5A CN201910747594A CN112398884B CN 112398884 B CN112398884 B CN 112398884B CN 201910747594 A CN201910747594 A CN 201910747594A CN 112398884 B CN112398884 B CN 112398884B
Authority
CN
China
Prior art keywords
scheduling
request
cdn node
node server
flow
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910747594.5A
Other languages
English (en)
Other versions
CN112398884A (zh
Inventor
唐君行
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Bilibili Technology Co Ltd
Original Assignee
Shanghai Bilibili Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Bilibili Technology Co Ltd filed Critical Shanghai Bilibili Technology Co Ltd
Priority to CN201910747594.5A priority Critical patent/CN112398884B/zh
Publication of CN112398884A publication Critical patent/CN112398884A/zh
Application granted granted Critical
Publication of CN112398884B publication Critical patent/CN112398884B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1095Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/568Storing data temporarily at an intermediate stage, e.g. caching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/62Establishing a time schedule for servicing the requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/63Routing a service request depending on the request content or context
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/50Reducing energy consumption in communication networks in wire-line communication networks, e.g. low power modes or reduced link rate

Abstract

本发明公开了一种镜像回源场景下流量调度控制方法、可读存储介质及计算机设备,属于通信技术领域,本发明应用于CDN节点服务器,包括以下步骤:接收请求端发出的调度请求,所述调度请求包括请求对象信息;根据所述调度请求生成调度规则;所述调度规则包括第一调度规则和第二调度规则;所述第一调度规则为根据请求对象信息将与所述请求对象信息对应的调度流量发送至所述请求端;所述第二调度规则为根据所述请求对象信息生成一调度地址,并将所述调度地址发送至所述请求端,所述请求端根据所述调度地址获取与所述请求对象信息对应的调度流量;根据所述调度规则进行流量调度,本发明实现了对源站服务器的保护。

Description

镜像回源场景下流量调度控制方法、可读存储介质及计算机 设备
技术领域
本发明涉及通信技术领域,尤其涉及一种镜像回源场景下流量调度控制方法、可读存储介质及计算机设备。
背景技术
CDN(Content Delivery Network,内容分发网络)是指一种通过互联网互相连接的电脑网络系统,利用最靠近用户的服务器,更快、更可靠地将文件发送给用户,在CDN中,调度是一种重要的技术,调度指的是将用户请求根据其地域等信息,分配到不同的服务器上进行处理,以满足服务质量、商业价值、流量控制等需求。
当客户端向CDN节点服务器发送调度请求,客户端要访问的内容未存储在CDN节点服务器上,那么CDN节点将从源站服务器拉取缺失的内容进行访问,以获得客户端所需的内容,此过程称为回源,源设置主要用于数据的热迁移、特定请求的重定向等场景,设置回源地址可以有效满足用户需求。
镜像回源是使用镜像方式配置回源规则,在现有镜像回源场景下,当某一CDN节点访问的客户端较多时,每一客户端均向CDN节点发送一调度请求,CDN节点每收到一调度请求均向源站服务器发送访问,在调度请求较多的情况下源站服务器负载较大,源站服务器容易损坏。
发明内容
针对现有技术中镜像回源场景下调度请求较多,源站服务器负载较大,容易损坏的问题,现提供一种旨在控制流量,保护源站服务器的一种镜像回源场景下流量调度控制方法、可读存储介质及计算机设备。
本发明提供了一种镜像回源场景下流量调度控制方法,应用于CDN节点服务器,包括以下步骤:
接收请求端发出的调度请求,所述调度请求包括请求对象信息;
根据所述调度请求生成调度规则;
所述生成调度规则包括生成第一调度规则或第二调度规则;
所述生成所述第一调度规则包括根据请求对象信息将与所述请求对象信息对应的调度流量发送至所述请求端;
所述生成所述第二调度规则包括根据所述请求对象信息生成一调度地址,并将所述调度地址发送至所述请求端;
根据所述调度规则进行流量调度。
优选的,所述根据所述调度请求生成调度规则,包括以下步骤:
根据所述调度请求查询所述CDN节点服务器,判断所述CDN节点服务器中是否有与所述调度请求内的请求对象信息对应的调度流量;
若否,则生成第二调度规则;
同时根据所述调度请求生成一虚拟调度请求;
根据所述虚拟调度请求将所述调度流量从源站服务器中调度至CDN节点服务器。
优选的,所述根据所述调度请求生成一虚拟调度请求,包括以下步骤:
获取所述调度请求内请求对象信息的URL信息;
采集所述请求对象信息的部分字符段;
将所述URL信息与所述字符段合并生成所述虚拟调度请求。
优选的,所述根据所述调度请求生成一虚拟调度请求,包括以下步骤:
获取所述调度请求内请求对象信息的URL信息;
采集所述请求对象信息的部分字符段;
将所述URL信息与所述字符段合并生成所述虚拟调度请求。
优选的,所述根据所述调度请求生成调度规则,还包括以下步骤:
根据所述调度请求查询所述CDN节点服务器,判断所述CDN节点服务器中是否有与所述调度请求内的请求对象信息对应的调度流量;
若是,则判断所述CDN节点服务器中存储的调度流量是否完整;
若是,则生成第一调度规则;
若否,则生成第二调度规则。
优选的,所述判断所述CDN节点服务器中存储的调度流量是否完整,包括以下步骤:
获取所述请求对象信息对应调度流量的首次调度时刻以及所述调度流量对应的缓存时间;
根据所述首次调度时刻以及所述缓存时间计算所述调度流量的调度时段;
判断所述调度请求的请求时刻是否在所述调度时段内;
若是,则所述CDN节点服务器中存储的调度流量不完整;
若否,则所述CDN节点服务器中存储的调度流量完整。
优选的,所述首次调度时刻为所述CDN节点服务器第一次接收到包含所述请求对象信息调度请求的时刻。
本发明还提供了一种镜像回源场景下流量调度控制方法,包括以下步骤:
向CDN节点服务器发送调度请求;
获取由所述CDN节点服务器返回的调度流量或调度地址;
当获取由所述CDN节点服务器返回的调度地址时,根据所述调度地址获取与所述调度请求对应的调度流量。
本发明还提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如上所述方法的步骤。
本发明还提供了一种计算机设备,所述计算机设备包括:
存储器,用于存储可执行程序代码;以及
处理器,用于调用所述存储器中的所述可执行程序代码,执行步骤包括如上所述的镜像回源场景下流量调度控制方法。
上述技术方案的有益效果:
本技术方案中,根据调度请求,在CDN节点服务器从源站服务器拉取调度流量的过程中发送一调度地址给请求端,使请求端根据调度地址获取调度流量,在CDN节点服务器完成调度流量缓存后再向请求端进行流量调度,延迟了用户端从CDN节点服务器拉取流量的过程,减少CDN节点服务器从源站服务器拉取调度流量的次数,控制源站服务器的回源量,减少对源站服务器的负载,实现了对源站服务器的保护。
附图说明
图1为本发明的系统架构图的一种实施例的框架图;
图2为本发明所述的镜像回源场景下流量调度控制方法的一种实施例的流程图;
图3为本发明所述的镜像回源场景下流量调度控制方法的一种实施例中所述根据所述调度请求生成调度规则的流程图;
图4为本发明所述的镜像回源场景下流量调度控制方法的一种实施例中所述根据所述调度请求生成一虚拟调度请求的流程图;
图5为本发明所述的镜像回源场景下流量调度控制方法的一种实施例中另一所述根据所述调度请求生成调度规则的流程图;
图6为本发明所述的镜像回源场景下流量调度控制方法的一种实施例中所述判断所述CDN节点服务器中存储的调度流量是否完整的流程图;
图7为本发明所述的镜像回源场景下流量调度控制方法的另一种实施例的流程图;
图8为本发明所述的镜像回源场景下流量调度控制系统的一种实施例的模块图;
图9为本发明所述的镜像回源场景下流量调度控制系统的另一种实施例的模块图;
图10为本发明实施例提供的镜像回源场景下流量调度控制方法的计算机设备的硬件结构示意图。
具体实施方式
以下结合附图与具体实施例进一步阐述本发明的优点。
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
在本公开使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本公开。在本公开和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本公开可能采用术语、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本公开范围的情况下,信息也可以被称为第二信息,类似地,第二信息也可以被称为信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
在本发明的描述中,需要理解的是,步骤前的数字标号并不标识执行步骤的前后顺序,仅用于方便描述本发明及区别每一步骤,因此不能理解为对本发明的限制。
本申请实施例中调度流量的请求端可以是大型视频播放设备、游戏机、台式计算机、智能手机、平板电脑、膝上型便携计算机、电子书阅读器、MP3(MovingPictureExpertsGroupAudioLayerIII,动态影像专家压縮标准音频层)播放器、MP4(MovingPictureExpertsGroupAudioLayerlV,动态影像专家压縮标准音频层面)播放器以及其它显示终端等请求端。
本申请实施例中,回源过程中,请求端度请求发送至CDN节点服务器后,CDN节点服务器将从源站服务器拉取相应的内容进行访问,以获得客户端所需的内容,请参考图1,图1是本申请实施例提供的一种镜像回源场景下流量调度控制方法的系统架构图。如图1所示,此处Q1、Q2均为CDN节点服务器,CDN节点服务器Q1需要向源站服务器W拉取调度流量,CDN节点服务器Q2为第三方CDN节点服务器,其中存储完整的调度流量;给出两个请求端,用户A和用户B,用户A和用户B可同时发出调度指令,也可分开发出调度指令,此处的应用场景还可以包括多台请求端,此处以用户A先于用户B发出调度指令为例:用户A发送调度指令至CDN节点服务器Q1,调度指令对应调度流量未存储在CDN节点服务器Q1内,CDN节点服务器Q1从源站服务器W拉取调度流量,源站服务器W可以是云端服务器,还可以是本地服务器,同时返回CDN节点服务器Q2地址至用户A,用户A从CDN节点服务器Q2节点服务器中获取调度流量;在上述过程完成后,用户B再发送调度指令至CDN节点服务器Q1,当CDN服务器节点NQ1从源站服务器W拉取调度流量过程完成,则直接从CDN节点服务器Q1调度流量至用户B,当CDN节点服务器Q1从源站服务器W拉取调度流量过程未完成,则同样返回CDN节点服务器Q2地址至用户B,此处应用场景还可包括多个CDN节点服务器Q2。通过上述过程,延迟从CDN节点服务器Q1调度资源至请求端的时间,使CDN节点服务器Q1从源站服务器W拉取调度流量过程只需进行一次,进而缓解源站服务器的压力,实现保护源站服务器的效果。
针对现有技术中源站服务器负载较大的问题,本申请实施例中提供了一种镜像回源场景下流量调度控制方法,应用于CDN节点服务器,参阅图2,其为一符合本发明一优选实施例的一种镜像回源场景下流量调度控制方法的流程示意图,从图中可以看出,包括以下步骤:
S1:接收请求端发出的调度请求;
所述调度请求包括请求对象信息和请求端地址;
具体的,请求端发出调度请求至CDN节点服务器,CDN节点服务器请求端接收调度请求进行调度,请求端一般为用户端,每一请求对象信息对应一请求对象,每一调度请求对应一请求对象,不同的请求端可以发出对应同一请求对象,在本具体实施例中,以请求对象为某一视频为例,可以是某一请求端发出调度请求,也可以是多个请求端发出调度请求,每一请求端均对应唯一请求端地址。
S2:根据所述调度请求生成调度规则;
所述生成调度规则包括生成第一调度规则或第二调度规则;
所述生成所述第一调度规则包括以下步骤:根据请求对象信息将与所述请求对象信息对应的调度流量发送至所述请求端;
所述生成所述第二调度规则包括以下步骤:根据所述请求对象信息生成一调度地址,并将所述调度地址发送至所述请求端。
需要说明的是,在回源场景下,用户发送一调度请求至CDN节点服务器,CDN节点服务器根据调度请求获取对应的请求对象信息,并将请求对象信息发送至源站服务器,从源站服务器中拉取与请求对象对应的流量,将流量发送至用户端,从源站服务器中缓存请求对象信息对应的流量。
当接收到多个请求信号,从CDN节点服务器中调度流量至各个请求端,即为第一调度规则的调度过程。
需要特殊说明的是,上述调度地址为第三方CDN节点服务器地址,该第三方CDN节点服务器中存储有与请求对象对应的调度流量,不需要再向源站服务器进行拉取,请求端根据CDN节点服务器发送的调度地址从第三方CDN节点服务器拉取调度流量,即为第二调度规则的调度过程,这个过程可以缓解将多个请求对象信息发送至源站服务器对源站服务器造成的压力。
S3:根据所述调度规则进行流量调度。
在上述步骤中,所述根据所述调度请求生成调度规则,参阅图3,包括以下步骤:
S211:根据所述调度请求查询所述CDN节点服务器,判断所述CDN节点服务器中是否有与所述调度请求内的请求对象信息对应的调度流量;
具体的,判断所述CDN节点服务器中是否有与所述调度请求内的请求对象信息对应的调度流量,可以根据所述调度请求对应的调度对象信息,在CDN节点服务器中搜索与调度对象信息对应的流量,本实施例中镜像回源场景下,该CDN节点服务器为镜像服务器,镜像服务器通常安装有一个可以进行自动远程备份的应用,每隔一定时间,各个镜像服务器就会到网站的源站服务器上去获取最新的内容,但是对于未在镜像服务器中的对象,接收到该对象的首次调度请求时,需要从源站服务器中获取缓存内容,所以通过查询CDN节点服务器中是否存在调度对象对应的流量来判断该调度请求是否为首次调度请求。
S212:若否,则生成第二调度规则,同时根据所述调度请求生成一虚拟调度请求;
具体的,所述根据所述调度请求生成一虚拟调度请求,参阅图4,包括以下步骤:
S2121:获取所述调度请求内请求对象信息的URL信息;
URL(统一资源定位符)是一种URI(统一资源标识符),它标识一个互联网资源,并指定对其进行操作或获取该资源的方法,URL信息也是虚拟调度请求中的一部分,根据URL信息搜索与请求对象对应的流量。
S2122:采集所述请求对象信息的部分字符段;
需要说明的是,虚拟调度请求中的字符段为请求对象信息内字符串的一部分,用于标识需要调度的流量片段,可以以预设的规则采集,也可以以预设的长度随机采集,上述部分字符段长度应尽量小,以减少虚拟调度请求对源站服务器的压力,在本具体实施例中,可以第1个字节到第1个字节。
S2123:将所述URL信息与所述字符段合并生成所述虚拟调度请求。
在上述实施方式中,生成虚拟调度请求主要是为了将与所述请求对象信息对应的调度流量从源站服务器调度至CDN节点服务器,由于调度请求中包含请求对象信息和请求端地址,该请求对象信息为完整的请求对象信息,发送整个调度请求对源站服务器压力较大,当源站服务器接收到包含URL和部分字符段时,也可将调度对象对应的调度流量全部调度至CDN节点服务器内,因此采集部分用于标识的信息生成虚拟调度请求,在调度流量从源站服务器调度至CDN节点服务器地址过程中减少源站服务器的负载,进一步实现对源站服务器的保护。
S213:根据所述虚拟调度请求将所述调度流量从源站服务器中调度至CDN节点服务器。
在上述实施方式中,用户端发送调度请求至CDN节点服务器,当CDN节点服务器内的调度组件判断该调度请求为首次调度请求,延迟调度组件根据该判断结果生成并发送虚拟调度请求至CDN节点服务器,CDN节点服务器根据虚拟调度请求从源站服务器中缓冲调度流量,同时发送调度地址,即第三方CDN节点服务器地址给到用户端,用户端根据收到的第三方CDN节点服务器地址从第三方CDN节点服务器中获取调度流量。
在上述步骤中,所述根据所述调度请求生成调度规则,参阅图5,还包括以下步骤:
S221:根据所述调度请求查询所述CDN节点服务器,判断所述CDN节点服务器中是否有与所述调度请求内的请求对象信息对应的调度流量;
S222:当所述CDN节点服务器中有与所述调度请求内的请求对象信息对应的调度流量,判断所述CDN节点服务器中存储的调度流量是否完整,若是,执行步骤S223;若否,执行步骤S224。
当判断所述CDN节点服务器中是否有与所述调度请求内的请求对象信息对应的调度流量的结果为是,则说明所述调度请求不是首次调度请求,此时在CDN节点服务器中可能存储有完整的调度流量,也可能存储有部分调度流量,即在CDN节点服务器中从源站服务器中拉取调度流量过程中接收到调度请求,通过判断CDN节点服务器内调度流量的完整性实现对调度流量缓存进度的判断,进而生成相应的调度规则,以满足调度需求的同时保护源站服务器。
S223:生成第一调度规则;
S224:生成第二调度规则。
在上述实施方式中,当所述CDN节点服务器中存储的调度流量不完整,即调度流量缓存未完成,此时根据请求对象信息将与所述请求对象信息对应的调度流量从第三方CDN节点服务器调度至请求端,减少在CDN节点服务器中从源站服务器中拉取调度流量过程中接收到较多调度请求,使得CDN节点服务器对源站服务器发送多次拉取请求造成源站服务器负载过大的情况,进一步实现对源站服务器的保护。
在上述实施方式中,用户端发送调度请求至CDN节点服务器,当CDN节点服务器内的调度组件判断该调度请求为非首次调度请求,再次判断CDN节点服务器内调度流量的完整性,当CDN节点服务器内调度流量不完整时,延迟调度组件基于该判断结果发送第三方CDN节点服务器地址给到用户端,用户端根据收到的调度地址,即第三方CDN节点服务器地址从第三方CDN节点服务器中获取调度流量;当CDN节点服务器内调度流量完整时,延迟调度组件基于该判断结果将调度流量从CDN节点服务器地址调度至请求端地址,通过上述过程,CDN节点服务器收到多次调度请求也只需在首次调度请求时向源站服务器拉取调度流量即可,控制源站服务器的回源量,有效缓解源站服务器的压力。
在上述实施方式中,根据调度请求采用第一调度规则或第二调度规则进行流量调度,在CDN节点服务器从源站服务器中拉取流量时,使用户端从第三方CDN节点服务器获取调度流量,延迟用户端从CDN节点服务器调度流量,减少在多个调度请求使CDN节点服务器需要发送多个拉取信号至源站服务器过程中,对源站服务器造成的压力,减少CDN节点服务器从源站服务器拉取调度流量的次数,控制回源量,实现对源站服务器的保护。
需要特别解释说明的是,上述调度组件和延迟调度组件为CDN节点服务器中两个功能不同的组件,调度组件为现有技术回源过程中的组件,延迟调度组件为本实施例中用于实现生成地调度规则延迟流量调度过程的主要硬件,调度组件用于判断调度请求是否为首次调度请求和判断CDN节点服务器内调度流量的完整性,延迟调度组件中包括用于根据判断结果生成调度规则的状态机以及用于生成并发出虚拟请求信号的触发器。
具体的,所述判断所述CDN节点服务器中存储的调度流量是否完整,参阅图6,包括以下步骤:
S2221:获取所述请求对象信息对应调度流量的首次调度时刻以及所述调度流量对应的缓存时间;
需要强调的是,所述首次调度时刻为所述CDN节点服务器第一次接收到包含所述请求对象信息调度请求的时刻。
S2222:根据所述首次调度时刻以及所述缓存时间计算所述调度流量的调度时段;
具体的,首次调度时刻加上缓存时间即可获得调度时段。
S2223:判断所述调度请求的请求时刻是否在所述调度时段内,若是,执行步骤S2224;若否,执行步骤S2225;
S2224:获得所述CDN节点服务器中存储的调度流量不完整的结果;
S2225:获得所述CDN节点服务器中存储的调度流量完整的结果。
在上述的实施方式中,通过调度请求的时刻来判断收到调度请求时CDN节点服务器内调度流量的缓存进度,时刻是比较容易获得的一个指标,可以直观地体现CDN节点服务器内调度流量的缓存进度,当调度请求的请求时刻在所述调度时段内时,CDN节点服务器内调度流量的缓存过程未完成,当调度请求的请求时刻不在所述调度时段内时,CDN节点服务器内调度流量的缓存过程已完成,除了通过时间的方式,现有的其他可以用于体现CDN节点服务器内调度流量的缓存进度的指标也可以用于此。
本实施例中还提供一种镜像回源场景下流量调度控制方法,参阅图7,包括以下步骤:
S41:向CDN节点服务器发送调度请求;
调度请求包括请求对象信息和请求端地址,请求对象信息用于匹配调度流量,请求端地址便于CDN节点服务器返回信息;
S42:获取由所述CDN节点服务器返回的调度流量;
S43:获取由所述CDN节点服务器返回的调度地址;
S431:根据所述调度地址获取与所述调度请求对应的调度流量。
具体的,当CDN节点服务器已缓存与请求对象信息对应的调度流量时,则CDN节点服务器返回调度流量,用户端获取调度流量;当CDN节点服务器未缓存或未完全缓存与请求对象信息对应的调度流量时,则CDN返回的调度地址,调度地址为第三方CDN节点服务器地址,用户端从第三方CDN节点服务器地址中获取调度流量,可以给CDN节点服务器从源站服务器中获取调度流量的时间,该时间为延迟用户端从CDN节点服务器调度流量的时间,CDN节点服务器无需多次向源站服务器发送拉取请求,实现缓解源站服务器的压力的目的。
本实施例中还提供一种镜像回源场景下流量调度控制方法,包括以下步骤:
CDN节点服务器接收请求端发出的调度请求;
CDN节点服务器根据所述调度请求生成调度规则;
所述生成调度规则包括生成第一调度规则或第二调度规则;
所述生成所述第一调度规则包括以下步骤:CDN节点服务器根据请求对象信息将与所述请求对象信息对应的调度流量发送至所述请求端;
所述生成所述第二调度规则包括以下步骤:
CDN节点服务器根据所述请求对象信息生成一调度地址,并将所述调度地址发送至所述请求端;
请求端根据所述调度地址获取与与所述请求对象信息对应的调度流量;
CDN节点服务器根据所述调度规则对所述请求端进行流量调度。
本实施例提供一种镜像回源场景下流量调度控制系统5,如图8所示,包括:
接收单元51,用于接收调度请求;
生成单元52,用于根据所述调度请求生成调度规则;
调度单元53,用于根据所述调度规则进行流量调度。
生成单元52包括:
判断模块521,用于判断所述CDN节点服务器中是否有与所述调度请求内的请求对象信息对应的调度流量;
第二判断模块522,用于判断所述CDN节点服务器中存储的调度流量是否完整。
调度单元53包括:
调度模块531,用于根据请求对象信息将与所述请求对象信息对应的调度流量从CDN节点服务器地址调度至请求端地址;
调度模块532,用于根据请求对象信息将与所述请求对象信息对应的调度流量从调度地址调度至请求端地址;
执行模块533,用于生成一虚拟调度请求并将所述虚拟调度发送至CDN节点服务器。
本实施例还提供一种镜像回源场景下流量调度控制系统6,如图9所示,包括:
发送单元61,用于向CDN节点服务器发送调度请求;
获取单元62,用于获取由所述CDN节点服务器返回的所述调度流量或调度地址;
拉取单元63,根据所述调度地址获取与所述调度请求对应的调度流量。
本实施例还提供一种镜像回源场景下流量调度控制系统,图图8和图9所示包括:
接收单元51,用于请求端发出的调度请求;
生成单元52,用于根据所述调度请求生成调度规则;
调度单元53,用于根据所述调度规则对请求端进行流量调度;
发送单元61,用于向CDN节点服务器发送调度请求;
获取单元62,用于获取由所述CDN节点服务器返回的所述调度流量或调度地址;
拉取单元63,根据所述调度地址获取与所述调度请求对应的调度流量。
如图10所示,一种计算机设备7,所述计算机设备7包括:
存储器71,用于存储可执行程序代码;以及
处理器72,用于调用所述存储器71中的所述可执行程序代码,执行步骤包括上述的一种镜像回源场景下流量调度控制方法。
图10中以一个处理器72为例。
存储器71作为一种非易失性计算机可读存储介质,可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块,如本申请实施例中的一种镜像回源场景下流量调度控制方法对应的程序指令/模块(例如,图8所示的接收单元51、生成单元52、调度单元53、判断模块521、第二判断模块522、调度模块531、调度模块532、执行模块,图9所示的发送单元61、获取单元62、拉取单元63)。处理器72通过运行存储在存储器71中的非易失性软件程序、指令以及模块,从而执行计算机设备7的各种功能应用以及数据处理,即实现上述方法实施例的镜像回源场景下流量调度控制方法。
存储器71可以包括存储程序区和存储数据区,其中,存储程序区可存储搡作系统、至少一个功能所需要的应用程序;存储数据区可存储用户在计算机设备4的调度规则信息。此外,存储器71可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中,存储器71可选包括相对于处理器72远程设置的存储器71,这些远程存储器71可以通过网络连接至直播界面的动态换肤系统。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
所述一个或者多个模块存储在所述存储器71中,当被所述一个或者多个处理器72执行时,执行上述任意方法实施例中的镜像回源场景下流量调度控制方法,例如,执行以上描述的图2中的方法步骤S1至步骤S3、图3中的方法步骤S211至步骤S213、图4中的方法步骤S2121至步骤S2123、图5中的方法步骤S321至步骤S324,图6中的方法步骤S2221至步骤S2225、图7中的方法步骤S41至步骤S431,实现图8所示的接收单元51、生成单元52、调度单元53、判断模块521、第二判断模块522、调度模块531、调度模块532、执行模块,图9所示的发送单元61、获取单元62、拉取单元63的功能。
上述产品可执行本申请实施例所提供的方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本申请实施例所提供的方法。
本申请实施例的计算机设备4以多种形式存在,包括但不限于:
(1)移动通信设备:这类设备的特点是具备移动通信功能,并且以提供话音、数据通信为主要目标。这类终端包括:智能手机(例如iPhone)、多媒体手机、功能性手机,以及低端手机等。
(2)超移动个人计算机设备:这类设备属于个人计算机的范畴,有计算和处理功能,一般也具备移动上网特性。这类终端包括:PDA、MID和UMPC设备等,例如iPad。
(3)便携式娱乐设备:这类设备可以显示和播放多媒体内容。该类设备包括:音频、视频播放器(例如iPod),掌上游戏机,电子书,以及智能玩具和便携式车载导航设备。
(4)服务器:提供计算服务的设备,服务器的构成包括处理器、硬盘、内存、系统总线等,服务器和通用的计算机架构类似,但是由于需要提供高可靠的服务,因此在处理能力、稳定性、可靠性、安全性、可扩展性、可管理性等方面要求较高。
(5)其他具有数据交互功能的电子装置。
本申请实施例提供了一种非易失性计算机可读存储介质,所述计算机可读存储介质存储有计算机可执行指令,该计算机可执行指令被一个或多个处理器执行,例如图10中的一个处理器42,可使得上述一个或多个处理器42可执行上述任意方法实施例中的流量调度控制方法,例如,执行以上描述的图2中的方法步骤S1至步骤S3、图3中的方法步骤S211至步骤S213、图4中的方法步骤S2121至步骤S2123、图5中的方法步骤S321至步骤S324,图6中的方法步骤S2221至步骤S2225、图7中的方法步骤S41至步骤S431,实现图8所示的接收单元51、生成单元52、调度单元53、判断模块521、第二判断模块522、调度模块531、调度模块532、执行模块,图9所示的发送单元61、获取单元62、拉取单元63的功能。最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (9)

1.一种镜像回源场景下流量调度控制方法,应用于CDN节点服务器,其特征在于,包括以下步骤:
接收请求端发出的调度请求,所述调度请求包括请求对象信息;
根据所述调度请求生成调度规则;
所述生成调度规则包括生成第一调度规则或第二调度规则;
所述生成所述第一调度规则包括调度组件判断所述调度请求为非首次调度,根据请求对象信息将与所述请求对象信息对应的调度流量发送至所述请求端;
所述生成所述第二调度规则包括调度组件判断所述调度请求为首次调度,根据所述请求对象信息生成一调度地址,并将所述调度地址发送至所述请求端,其中,所述调度地址为第三方CDN节点服务器地址,所述第三方CDN节点服务器中存储有与请求对象对应的调度流量,使得请求端根据所述调度地址从第三方CDN节点服务器拉取调度流量,延迟从所述CDN节点服务器调度流量,且无需向源站服务器拉取调度流量;同时根据所述调度请求生成一虚拟调度请求,根据所述虚拟调度请求将所述调度流量从源站服务器中调度至CDN节点服务器;
根据所述调度规则进行流量调度。
2.根据权利要求1所述的镜像回源场景下流量调度控制方法,其特征在于:
所述根据所述调度请求生成调度规则,包括以下步骤:
根据所述调度请求查询CDN节点服务器,判断所述CDN节点服务器中是否有与所述调度请求内的请求对象信息对应的调度流量;
若否,则生成第二调度规则。
3.根据权利要求2所述的镜像回源场景下流量调度控制方法,其特征在于:
所述根据所述调度请求生成一虚拟调度请求,包括以下步骤:
获取所述调度请求内请求对象信息的URL信息;
采集所述请求对象信息的部分字符段;
将所述URL信息与所述字符段合并生成所述虚拟调度请求。
4.根据权利要求1所述的镜像回源场景下流量调度控制方法,其特征在于:
所述根据所述调度请求生成调度规则,还包括以下步骤:
根据所述调度请求查询所述CDN节点服务器,判断所述CDN节点服务器中是否有与所述调度请求内的请求对象信息对应的调度流量;
若是,则判断所述CDN节点服务器中存储的调度流量是否完整;
若是,则生成第一调度规则;
若否,则生成第二调度规则。
5.根据权利要求4所述的镜像回源场景下流量调度控制方法,其特征在于:
所述判断所述CDN节点服务器中存储的调度流量是否完整,包括以下步骤:
获取所述请求对象信息对应调度流量的首次调度时刻以及所述调度流量对应的缓存时间;
根据所述首次调度时刻以及所述缓存时间计算所述调度流量的调度时段;
判断所述调度请求的请求时刻是否在所述调度时段内;
若是,则所述CDN节点服务器中存储的调度流量不完整;
若否,则所述CDN节点服务器中存储的调度流量完整。
6.根据权利要求5所述的镜像回源场景下流量调度控制方法,其特征在于:
所述首次调度时刻为所述CDN节点服务器第一次接收到包含所述请求对象信息调度请求的时刻。
7.一种镜像回源场景下流量调度控制方法,其特征在于,用于请求端中,包括以下步骤:
向CDN节点服务器发送调度请求,所述调度请求包括请求对象信息;
获取由所述CDN节点服务器返回的调度流量或调度地址;
当获取由所述CDN节点服务器返回的调度地址时,根据所述调度地址获取与所述调度请求对应的调度流量;
其中,所述CDN节点服务器返回的调度流量是基于第一调度规则得到的;所述第一调度规则通过以下操作生成:判断所述调度请求为非首次调度,根据请求对象信息将与所述请求对象信息对应的调度流量发送至所述请求端;
所述CDN节点服务器返回的调度地址是基于第二调度规则得到的;所述第二调度规则通过以下操作生成:判断所述调度请求为首次调度,根据所述请求对象信息生成一调度地址,并将所述调度地址发送至所述请求端,其中,所述调度地址为第三方CDN节点服务器地址,所述第三方CDN节点服务器中存储有与请求对象对应的调度流量,使得所述请求端根据所述调度地址从第三方CDN节点服务器拉取调度流量,延迟从所述CDN节点服务器调度流量,且无需向源站服务器拉取调度流量;同时根据所述调度请求生成一虚拟调度请求,根据所述虚拟调度请求将所述调度流量从源站服务器中调度至CDN节点服务器。
8.一种计算机可读存储介质,其上存储有计算机程序,其特征在于:
所述计算机程序被处理器执行时实现权利要求1至7任一项所述方法的步骤。
9.一种计算机设备,其特征在于:所述计算机设备包括:
存储器,用于存储可执行程序代码;以及
处理器,用于调用所述存储器中的所述可执行程序代码,执行步骤包括如权利要求1至7中任一项所述的镜像回源场景下流量调度控制方法。
CN201910747594.5A 2019-08-14 2019-08-14 镜像回源场景下流量调度控制方法、可读存储介质及计算机设备 Active CN112398884B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910747594.5A CN112398884B (zh) 2019-08-14 2019-08-14 镜像回源场景下流量调度控制方法、可读存储介质及计算机设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910747594.5A CN112398884B (zh) 2019-08-14 2019-08-14 镜像回源场景下流量调度控制方法、可读存储介质及计算机设备

Publications (2)

Publication Number Publication Date
CN112398884A CN112398884A (zh) 2021-02-23
CN112398884B true CN112398884B (zh) 2023-08-25

Family

ID=74601290

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910747594.5A Active CN112398884B (zh) 2019-08-14 2019-08-14 镜像回源场景下流量调度控制方法、可读存储介质及计算机设备

Country Status (1)

Country Link
CN (1) CN112398884B (zh)

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101764747A (zh) * 2009-12-24 2010-06-30 北京世纪互联宽带数据中心有限公司 内容分发网络流量智能调度方法、装置及系统
CN103023924A (zh) * 2012-12-31 2013-04-03 网宿科技股份有限公司 基于内容分发网络的云分发平台的DDoS攻击防护方法和系统
CN103248695A (zh) * 2013-05-07 2013-08-14 北京奇虎科技有限公司 文件下载方法、系统及cdn中的服务器节点
CN103297472A (zh) * 2012-03-01 2013-09-11 上海盛霄云计算技术有限公司 一种应用于内容分发网络的重定向方法及内容分发节点
CN103685576A (zh) * 2014-01-03 2014-03-26 中国联合网络通信集团有限公司 一种cdn节点的交互方法及cdn管理系统
CN104185036A (zh) * 2014-09-10 2014-12-03 北京奇艺世纪科技有限公司 一种视频文件回源方法及装置
CN105162878A (zh) * 2015-09-24 2015-12-16 网宿科技股份有限公司 基于分布式存储的文件分发系统及方法
CN106230942A (zh) * 2016-08-01 2016-12-14 中国联合网络通信集团有限公司 一种回源访问的方法及系统
CN106790324A (zh) * 2015-11-20 2017-05-31 华为技术有限公司 内容分发方法、虚拟服务器管理方法、云平台和系统
CN106941507A (zh) * 2016-01-04 2017-07-11 中兴通讯股份有限公司 请求消息的调度方法及装置
CN107426302A (zh) * 2017-06-26 2017-12-01 腾讯科技(深圳)有限公司 访问调度方法、装置、系统、终端、服务器及存储介质
CN107995314A (zh) * 2017-12-21 2018-05-04 蛮蛮天下(北京)网络科技有限公司 Cdn网络系统及其网络回源方法
CN108306971A (zh) * 2018-02-02 2018-07-20 网宿科技股份有限公司 一种发送数据资源的获取请求的方法和系统
CN108449387A (zh) * 2018-02-24 2018-08-24 中国科学院信息工程研究所 内容分发网络中的内容节点以及内容分发方法
CN109412957A (zh) * 2017-08-17 2019-03-01 阿里巴巴集团控股有限公司 流量调度方法、装置和系统以及电子设备
CN109922105A (zh) * 2017-12-13 2019-06-21 苏宁云商集团股份有限公司 实现cdn回源请求携带客户端ip的方法及系统

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101764747A (zh) * 2009-12-24 2010-06-30 北京世纪互联宽带数据中心有限公司 内容分发网络流量智能调度方法、装置及系统
CN103297472A (zh) * 2012-03-01 2013-09-11 上海盛霄云计算技术有限公司 一种应用于内容分发网络的重定向方法及内容分发节点
CN103023924A (zh) * 2012-12-31 2013-04-03 网宿科技股份有限公司 基于内容分发网络的云分发平台的DDoS攻击防护方法和系统
CN103248695A (zh) * 2013-05-07 2013-08-14 北京奇虎科技有限公司 文件下载方法、系统及cdn中的服务器节点
CN103685576A (zh) * 2014-01-03 2014-03-26 中国联合网络通信集团有限公司 一种cdn节点的交互方法及cdn管理系统
CN104185036A (zh) * 2014-09-10 2014-12-03 北京奇艺世纪科技有限公司 一种视频文件回源方法及装置
CN105162878A (zh) * 2015-09-24 2015-12-16 网宿科技股份有限公司 基于分布式存储的文件分发系统及方法
CN106790324A (zh) * 2015-11-20 2017-05-31 华为技术有限公司 内容分发方法、虚拟服务器管理方法、云平台和系统
CN106941507A (zh) * 2016-01-04 2017-07-11 中兴通讯股份有限公司 请求消息的调度方法及装置
CN106230942A (zh) * 2016-08-01 2016-12-14 中国联合网络通信集团有限公司 一种回源访问的方法及系统
CN107426302A (zh) * 2017-06-26 2017-12-01 腾讯科技(深圳)有限公司 访问调度方法、装置、系统、终端、服务器及存储介质
CN109412957A (zh) * 2017-08-17 2019-03-01 阿里巴巴集团控股有限公司 流量调度方法、装置和系统以及电子设备
CN109922105A (zh) * 2017-12-13 2019-06-21 苏宁云商集团股份有限公司 实现cdn回源请求携带客户端ip的方法及系统
CN107995314A (zh) * 2017-12-21 2018-05-04 蛮蛮天下(北京)网络科技有限公司 Cdn网络系统及其网络回源方法
CN108306971A (zh) * 2018-02-02 2018-07-20 网宿科技股份有限公司 一种发送数据资源的获取请求的方法和系统
CN108449387A (zh) * 2018-02-24 2018-08-24 中国科学院信息工程研究所 内容分发网络中的内容节点以及内容分发方法

Also Published As

Publication number Publication date
CN112398884A (zh) 2021-02-23

Similar Documents

Publication Publication Date Title
US10249301B2 (en) Method and system for speech recognition processing
CN111586164B (zh) 远程云桌面的分享、接替、信息处理方法及电子设备
US10165058B2 (en) Dynamic local function binding apparatus and method
CN110535961B (zh) 资源获取方法、装置、电子设备和存储介质
US20170163706A1 (en) Method, electronic device and system for controlling pull stream
CN107197359B (zh) 视频文件缓存方法及装置
JP7397094B2 (ja) リソース構成方法、リソース構成装置、コンピューター機器、及びコンピュータープログラム
CN108877804A (zh) 语音服务方法、系统、电子设备及存储介质
US11889133B2 (en) Burst traffic processing method, computer device and readable storage medium
US8954851B2 (en) Adding video effects for video enabled applications
CN111277869A (zh) 视频播放方法、装置、设备和存储介质
US20170171585A1 (en) Method and Electronic Device for Recording Live Streaming Media
CN113010818A (zh) 访问限流方法、装置、电子设备及存储介质
CN112312145B (zh) 接入服务器、突发流量的缓存方法、系统、计算机设备及可读存储介质
WO2021047239A1 (zh) 一种页面获取方法、装置及系统
US20170155741A1 (en) Server, method, and system for providing service data
US20200382232A1 (en) Systems and methods for secure, low bandwidth replicated virtual worlds for shared space computing
CN113286157A (zh) 一种视频播放方法、装置、电子设备及存储介质
US20170155712A1 (en) Method and device for updating cache data
US20170155739A1 (en) Advertisement data processing method and router
CN112468874B (zh) 一种视频播放方法、终端设备及系统
EP2997715A1 (en) Transmitting information based on reading speed
CN106487653B (zh) 一种消息处理方法及服务器
CN112398884B (zh) 镜像回源场景下流量调度控制方法、可读存储介质及计算机设备
JP7217181B2 (ja) ウェアラブルデバイス、情報処理方法、装置及びシステム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant