CN112182070B - 基于云计算的Elasticsearch查询管理系统 - Google Patents

基于云计算的Elasticsearch查询管理系统 Download PDF

Info

Publication number
CN112182070B
CN112182070B CN202011091175.XA CN202011091175A CN112182070B CN 112182070 B CN112182070 B CN 112182070B CN 202011091175 A CN202011091175 A CN 202011091175A CN 112182070 B CN112182070 B CN 112182070B
Authority
CN
China
Prior art keywords
query
cdn node
cdn
user terminal
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011091175.XA
Other languages
English (en)
Other versions
CN112182070A (zh
Inventor
张俊杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Anhui Jiplay Cloud Technology Co ltd
Original Assignee
Anhui Jiplay Cloud Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Anhui Jiplay Cloud Technology Co ltd filed Critical Anhui Jiplay Cloud Technology Co ltd
Priority to CN202011091175.XA priority Critical patent/CN112182070B/zh
Publication of CN112182070A publication Critical patent/CN112182070A/zh
Application granted granted Critical
Publication of CN112182070B publication Critical patent/CN112182070B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2471Distributed queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2453Query optimisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network

Abstract

本发明公开了基于云计算的Elasticsearch查询管理系统,包括定位模块、查询处理模块、数据分析模块和节点分配模块;所述查询处理模块用于对查询信息进行智能处理,本发明根据降序排列的查询优先值依次处理用户终端查询请求,实现了用户查询信息的有序处理;所述数据分析模块用于对CDN节点进行智能分析;所述节点分配模块用于根据查询到的归属ISP以及归属地域,按照预设规则选择与用户终端匹配的CDN节点,并将被选CDN节点IP地址下发至用户终端;本发明通过对各个CDN节点的性能、负载率、服务质量分等数据进行分析,从而在用户信息查询时优选出相应的CDN节点,信息查询效率高效,用户体验感较佳。

Description

基于云计算的Elasticsearch查询管理系统
技术领域
本发明属于CDN查询应用领域,涉及Elasticsearch查询管理系统,具体是基于云计算的Elasticsearch查询管理系统。
背景技术
CDN即内容分发网络。CDN是构建在现有网络基础之上的智能虚拟网络,依靠部署在各地的边缘服务器,通过中心平台的负载均衡、内容分发、调度等功能模块,使用户就近获取所需内容,降低网络拥塞,提高用户访问响应速度和命中率。CDN的关键技术主要有内容存储和分发技术。CDN网络的诞生大大地改善了互联网的服务质量,因此传统的大型网络运营商纷纷开始建设自己的CDN网络。
现有技术中,利用CDN节点进行信息查询时,无法对查询信息进行有序处理;无法对各个CDN节点的性能、负载率等数据进行分析,导致信息查询时无法优选出相应的CDN节点,信息查询效率缓慢,用户体验感欠佳,为此,我们提出基于云计算的Elasticsearch查询管理系统。
发明内容
针对现有技术存在的不足,本发明目的是提供基于云计算的Elasticsearch查询管理系统。
本发明所要解决的技术问题为:
(1)利用CDN节点进行信息查询时,无法对查询信息进行有序处理;
(2)无法对各个CDN节点的性能、负载率等数据进行分析,导致信息查询时无法优选出相应的CDN节点,信息查询效率缓慢,用户体验感欠佳。
本发明的目的可以通过以下技术方案实现:
基于云计算的Elasticsearch查询管理系统,包括若干个用户终端、数据采集模块、定位模块、查询处理模块、数据分析模块、节点分配模块、评价模块以及服务器;
若干个用户终端用于使用人员注册登录后输入查询信息,并将查询信息发送至服务器;所述数据采集模块用于采集若干个CDN节点的基本信息,基本信息包括CDN节点数、CDN节点位置信息、CDN节点的上传网速、下载网速和响应时间;
查询处理模块包括请求解析单元和IPS查询单元,所述请求解析单元用于解析用户终端的查询请求并从中解析出来源IP地址;所述ISP查询单元用于查询来源IP地址所归属的ISP;
所述定位模块用于定位来源IP地址所归属地域;所述查询处理模块用于对查询信息进行智能处理;
所述数据分析模块用于对CDN节点进行智能分析,具体分析过程如下:
SS1:获取若干个CDN节点,并将CDN节点标记为o,o=1,……,n;
SS2:获取若干个CDN节点的上传网速So和下载网速Xo;
SS3:获取若干个CDN节点的请求时间和获取时间,计算得到CDN节点的响应时间XTo;
SS4:分别获取若干个CDN节点的时延平均值SYo和价格Go;
SS5:利用公式计算得出CDN节点的性能值XNo,具体公式如下:
Figure BDA0002722164950000021
式中b1、b2、b3、b4和b5均为预设比例系数固定数值;
SS6:将所有CDN节点的性能值XNo降序排列后生成CDN节点性能值降序排列表,服务器按照CDN节点性能值降序排列表由上到下依次推送CDN节点至用户终端;
所述节点分配模块用于根据查询到的归属ISP以及归属地域,按照预设规则选择与用户终端匹配的CDN节点,并将被选CDN节点IP地址下发至用户终端;
所述评价模块用于对CDN节点进行评价,并将评价结果发送至服务器中。
进一步地,所述查询处理模块的具体处理过程如下:
S1:获取发送查询请求的用户终端,并将用户终端标记为u,u=1,……,n;
S2:获取用户终端的会员等级Dui,i=1,2,3,4;其中,Du1=X1,Du2=X2,Du3=X3,Du4=X4,X1、X2、X3和X4均为预设固定数值;
S3:获取用户终端的查询请求次数,并将查询请求次数标记为Cu;获取用户终端的查询等待时长,并将查询等待时长标记为Tu;
S4:利用公式计算得出用户终端查询请求的查询优先值CYXu,具体公式如下:
CYXu=Dui×a1+Cu×a2+Tu×a3,式中a1、a2和a3均为预设比例系数固定数值;
S5:查询优先值CYXu降序排列后,服务器根据降序排列的查询优先值依次处理用户终端查询请求。
进一步地,所述预设规则具体包括:
P1:首先,根据查询到的归属ISP选择与用户终端匹配的CDN节点;
P2:其次,根据查询到的归属地域选择与用户终端匹配的CDN节点;
P3:最后,依据实时监测各CDN节点的连接数、CPU负载率、读写负载率和带宽负载率,并在根据来源IP地址所归属的ISP以及所归属地域选取到多个CDN节点时,根据连接数、CPU负载率、读写负载率和带宽负载率选择首选CDN节点以及备选CDN节点。
进一步地,所述预设规则中步骤P3的具体工作步骤如下:
步骤一:获取CDN节点的解析时间T1o、建立连接时间T2o、首包时间T3o和下载时间T4o;
步骤二:根据上述数据计算得到CDN节点的状态参数值ZCo;
步骤三:获取CDN节点的连接数LJo、CPU负载率CLo、读写负载率DXo和带宽负载率DKo;
步骤四:利用公式FZo=LJo×c1+CLo×c2+DXo×c3+DKo×c4计算得到CDN节点的负载值FZo,c1、c2、c3和c4均为预设比例系数固定数值;
步骤五:获取CDN节点的负载阈值,并将CDN节点的负载阈值标记为Yfzo;获取CDN节点的状态参数阈值,并将CDN节点的状态参数阈值标记为Yzco;
步骤六:获取CDN节点的状态参数值ZCo和负载值FZo,利用公式得到CDN节点的服务质量分F,具体公式如下:
Figure BDA0002722164950000041
式中α和β均为预设比例系数固定数值;
步骤七:将CDN节点的服务质量分F降序排列后生成CDN节点服务质量分降序排列表,服务器按照CDN节点服务质量分降序排列表由上到下将CDN节点分配给用户终端。
进一步地,所述基本信息包括CDN节点数、CDN节点位置信息、CDN节点的上传网速、下载网速和响应时间。
进一步地,所述请求解析单元的具体解析过程如下:用户终端通过动态DNS技术访问到最近的CDN节点服务器,即用户终端通过域名访问视频社交网站时,本地DNS服务器若无法直接解析视频社交网站域名,则通过根DNS服务器查询解析视频社交网站域名的主DNS服务器,然后本地DNS服务器连接查询到的主DNS服务器并对视频社交网站域名进行解析,主DNS服务器查询本地DNS服务器的IP地址所在的地域,从而将该地域内距离本地DNS服务器最近的CDN节点服务器IP地址下发至该本地DNS服务器,本地DNS服务器将接收到的CDN节点服务器IP地址下发至用户终端,CDN节点服务器中的请求解析单元在接收到用户终端的查询请求时,从中解析出查询请求的来源IP地址,即用户终端的真实地址。
进一步地,所述ISP查询单元的具体查询过程如下:服务器中预存储有包含有IP地址与ISP对应关系的第一数据文件,ISP查询单元从第一数据文件中查询来源IP地址所归属的ISP,其中,第一数据文件通过ISP自治域信息查询获取第一数据文件或者由ISP提供第一数据文件。
进一步地,所述定位模块的具体定位过程如下:服务器中预存储有包含IP地址与地域之间对应关系的第二数据文件,定位模块从第二数据文件中查询来源IP地址所归属地域,其中,第二数据文件通过搜集互联网上现有的IP地址与其所归属地域对应关系信息获取。
与现有技术相比,本发明的有益效果是:
1、本发明在利用CDN节点进行信息查询时,通过获取用户终端的会员等级、查询请求次数和查询等待时长等数据,计算得到用户终端查询请求的查询优先值CYXu,并根据降序排列的查询优先值依次处理用户终端查询请求,实现了用户查询信息的有序处理;
2、本发明通过获取若干个CDN节点的上传网速、下载网速、响应时间、时延平均值和价格,利用公式计算得出CDN节点的性能值XNo,通过查询到的归属ISP、归属地域以及服务质量分,按照预设规则选择与用户终端匹配的CDN节点,实现了对各个CDN节点的性能、负载率、服务质量分等数据进行分析,从而在用户信息查询时优选出相应的CDN节点,信息查询效率高效,用户体验感较佳。
附图说明
为了便于本领域技术人员理解,下面结合附图对本发明作进一步的说明。
图1为本发明的整体系统框图;
图2为本发明中查询处理模块的系统框图。
具体实施方式
下面将结合实施例对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
请参阅图1-图2所示,基于云计算的Elasticsearch查询管理系统,包括若干个用户终端、数据采集模块、定位模块、查询处理模块、数据分析模块、节点分配模块、评价模块以及服务器;
若干个用户终端用于使用人员注册登录后输入查询信息,并将查询信息发送至服务器;所述数据采集模块用于采集若干个CDN节点的基本信息,基本信息包括CDN节点数、CDN节点位置信息、CDN节点的上传网速、下载网速和响应时间;
查询处理模块包括请求解析单元和IPS查询单元,所述请求解析单元用于解析用户终端的查询请求并从中解析出来源IP地址;
具体解析过程如下:用户终端通过动态DNS技术访问到最近的CDN节点服务器,即用户终端通过域名访问视频社交网站时,本地DNS服务器若无法直接解析视频社交网站域名,则通过根DNS服务器查询解析视频社交网站域名的主DNS服务器,然后本地DNS服务器连接查询到的主DNS服务器并对视频社交网站域名进行解析,主DNS服务器查询本地DNS服务器的IP地址所在的地域,从而将该地域内距离本地DNS服务器最近的CDN节点服务器IP地址下发至该本地DNS服务器,本地DNS服务器将接收到的CDN节点服务器IP地址下发至用户终端,CDN节点服务器中的请求解析单元在接收到用户终端的查询请求时,从中解析出查询请求的来源IP地址,即用户终端的真实地址;
所述ISP查询单元用于查询来源IP地址所归属的ISP;
具体查询过程如下:服务器中预存储有包含有IP地址与ISP对应关系的第一数据文件,ISP查询单元从第一数据文件中查询来源IP地址所归属的ISP,其中,第一数据文件通过ISP自治域信息查询获取第一数据文件或者由ISP提供第一数据文件;
所述定位模块用于定位来源IP地址所归属地域;
具体定位过程如下:服务器中预存储有包含IP地址与地域之间对应关系的第二数据文件,定位模块从第二数据文件中查询来源IP地址所归属地域,其中,第二数据文件通过搜集互联网上现有的IP地址与其所归属地域对应关系信息获取;
所述查询处理模块用于对查询信息进行智能处理,具体处理过程如下:
S1:获取发送查询请求的用户终端,并将用户终端标记为u,u=1,……,n;
S2:获取用户终端的会员等级Dui,i=1,2,3,4;其中,Du1=X1,Du2=X2,Du3=X3,Du4=X4,X1、X2、X3和X4均为预设固定数值;
S3:获取用户终端的查询请求次数,并将查询请求次数标记为Cu;获取用户终端的查询等待时长,并将查询等待时长标记为Tu;
S4:利用公式计算得出用户终端查询请求的查询优先值CYXu,具体公式如下:
CYXu=Dui×a1+Cu×a2+Tu×a3,式中a1、a2和a3均为预设比例系数固定数值;
S5:查询优先值CYXu降序排列后,服务器根据降序排列的查询优先值依次处理用户终端查询请求;
所述数据分析模块用于对CDN节点进行智能分析,具体分析过程如下:
SS1:获取若干个CDN节点,并将CDN节点标记为o,o=1,……,n;
SS2:获取若干个CDN节点的上传网速So和下载网速Xo;
SS3:获取若干个CDN节点的请求时间和获取时间,计算得到CDN节点的响应时间XTo;
SS4:分别获取若干个CDN节点的时延平均值SYo和价格Go;
SS5:利用公式计算得出CDN节点的性能值XNo,具体公式如下:
Figure BDA0002722164950000081
式中b1、b2、b3、b4和b5均为预设比例系数固定数值;
SS6:将所有CDN节点的性能值XNo降序排列后生成CDN节点性能值降序排列表,服务器按照CDN节点性能值降序排列表由上到下依次推送CDN节点至用户终端;
所述节点分配模块用于根据查询到的归属ISP以及归属地域,按照预设规则选择与用户终端匹配的CDN节点,并将被选CDN节点IP地址下发至用户终端;
其中,预设规则具体包括:
P1:首先,根据查询到的归属ISP选择与用户终端匹配的CDN节点;
P2:其次,根据查询到的归属地域选择与用户终端匹配的CDN节点;
P3:最后,依据实时监测各CDN节点的连接数、CPU负载率、读写负载率和带宽负载率等数据,并在根据来源IP地址所归属的ISP以及所归属地域选取到多个CDN节点时,根据连接数、CPU负载率、读写负载率和带宽负载率等数据选择首选CDN节点以及备选CDN节点,具体工作步骤如下:
步骤一:获取CDN节点的解析时间T1o、建立连接时间T2o、首包时间T3o和下载时间T4o;
步骤二:根据上述数据计算得到CDN节点的状态参数值ZCo;
步骤三:获取CDN节点的连接数LJo、CPU负载率CLo、读写负载率DXo和带宽负载率DKo;
步骤四:利用公式FZo=LJo×c1+CLo×c2+DXo×c3+DKo×c4计算得到CDN节点的负载值FZo,c1、c2、c3和c4均为预设比例系数固定数值;
步骤五:获取CDN节点的负载阈值,并将CDN节点的负载阈值标记为Yfzo;获取CDN节点的状态参数阈值,并将CDN节点的状态参数阈值标记为Yzco;
步骤六:获取CDN节点的状态参数值ZCo和负载值FZo,利用公式得到CDN节点的服务质量分F,具体公式如下:
Figure BDA0002722164950000091
式中α和β均为预设比例系数固定数值;
步骤七:将CDN节点的服务质量分F降序排列后生成CDN节点服务质量分降序排列表,服务器按照CDN节点服务质量分降序排列表由上到下将CDN节点分配给用户终端;
所述评价模块用于对CDN节点进行评价,并将评价结果发送至服务器中。
基于云计算的Elasticsearch查询管理系统,工作时,若干个用户终端用于使用人员注册登录后输入查询信息,并将查询信息发送至服务器,并通过数据采集模块用于采集若干个CDN节点的基本信息;
通过定位模块用于定位来源IP地址所归属地域,利用服务器中预存储有包含IP地址与地域之间对应关系的第二数据文件,定位模块从第二数据文件中查询来源IP地址所归属地域,第二数据文件通过搜集互联网上现有的IP地址与其所归属地域对应关系信息获取
通过请求解析单元用于用户终端的查询请求并从中解析出来源IP地址,用户终端通过动态DNS技术访问到最近的CDN节点服务器,即用户终端通过域名访问视频社交网站时,本地DNS服务器若无法直接解析视频社交网站域名,则通过根DNS服务器查询解析视频社交网站域名的主DNS服务器,然后本地DNS服务器连接查询到的主DNS服务器并对视频社交网站域名进行解析,主DNS服务器查询本地DNS服务器的IP地址所在的地域,从而将该地域内距离本地DNS服务器最近的CDN节点服务器IP地址下发至该本地DNS服务器,本地DNS服务器将接收到的CDN节点服务器IP地址下发至用户终端,CDN节点服务器中的请求解析单元在接收到用户终端的查询请求时,从中解析出查询请求的来源IP地址,即用户终端的真实地址;
通过ISP查询单元用于查询来源IP地址所归属的ISP,利用服务器中预存储有包含有IP地址与ISP对应关系的第一数据文件,ISP查询单元从第一数据文件中查询来源IP地址所归属的ISP,其中,第一数据文件通过ISP自治域信息查询获取第一数据文件或者由ISP提供第一数据文件;
通过查询处理模块用于对查询信息进行智能处理,首先获取发送查询请求的用户终端u,获取用户终端的会员等级Dui,获取用户终端的查询请求次数Cu和查询等待时长Tu,利用公式CYXu=Dui×a1+Cu×a2+Tu×a3计算得出用户终端查询请求的查询优先值CYXu,查询优先值CYXu降序排列后,服务器根据降序排列的查询优先值依次处理用户终端查询请求,本发明在利用CDN节点进行信息查询时,通过获取用户终端的会员等级、查询请求次数和查询等待时长等数据,计算得到用户终端查询请求的查询优先值CYXu,并根据降序排列的查询优先值依次处理用户终端查询请求,实现了用户查询信息的有序处理。
通过数据分析模块用于对CDN节点进行智能分析,获取若干个CDN节点o,获取若干个CDN节点的上传网速So和下载网速Xo,通过获取若干个CDN节点的请求时间和获取时间,计算得到CDN节点的响应时间XTo,而后分别获取若干个CDN节点的时延平均值SYo和价格Go,利用公式
Figure BDA0002722164950000111
计算得出CDN节点的性能值XNo,将所有CDN节点的性能值XNo降序排列后生成CDN节点性能值降序排列表,服务器按照CDN节点性能值降序排列表由上到下依次推送CDN节点至用户终端;
通过节点分配模块用于根据查询到的归属ISP以及归属地域,按照预设规则选择与用户终端匹配的CDN节点,并将被选CDN节点IP地址下发至用户终端,首先根据查询到的归属ISP选择与用户终端匹配的CDN节点,其次根据查询到的归属地域选择与用户终端匹配的CDN节点,最后通过获取CDN节点的解析时间T1o、建立连接时间T2o、首包时间T3o和下载时间T4o,根据上述数据计算得到CDN节点的状态参数值ZCo,获取CDN节点的连接数LJo、CPU负载率CLo、读写负载率DXo和带宽负载率DKo,利用公式FZo=LJo×c1+CLo×c2+DXo×c3+DKo×c4计算得到CDN节点的负载值FZo,c1、c2、c3和c4均为预设比例系数固定数值,获取CDN节点的负载阈值Yfzo和CDN节点的状态参数阈值Yzco,获取CDN节点的状态参数值ZCo和负载值FZo,利用公式
Figure BDA0002722164950000112
得到CDN节点的服务质量分F,将CDN节点的服务质量分F降序排列后生成CDN节点服务质量分降序排列表,服务器按照CDN节点服务质量分降序排列表由上到下将CDN节点分配给用户终端,本发明通过获取若干个CDN节点的上传网速、下载网速、响应时间、时延平均值和价格,利用公式计算得出CDN节点的性能值XNo,通过查询到的归属ISP、归属地域以及服务质量分,按照预设规则选择与用户终端匹配的CDN节点,实现了对各个CDN节点的性能、负载率、服务质量分等数据进行分析,从而在用户信息查询时优选出相应的CDN节点,信息查询效率高效,用户体验感较佳。
上述公式均是去量化取其数值计算,公式是由采集大量数据进行软件模拟得到最近真实情况的一个公式,公式中的预设参数由本领域的技术人员根据实际情况进行设置;虽然申请文件中的请求解析单元、ISP查询单元、数据采集模块、定位模块、查询处理模块、数据分析模块、节点分配模块和评价模块,但是容易理解的是,其也可以为实现具体功能的硬件模块,在此不做特殊限定。
以上公开的本发明优选实施例只是用于帮助阐述本发明。优选实施例并没有详尽叙述所有的细节,也不限制该发明仅为的具体实施方式。显然,根据本说明书的内容,可作很多的修改和变化。本说明书选取并具体描述这些实施例,是为了更好地解释本发明的原理和实际应用,从而使所属技术领域技术人员能很好地理解和利用本发明。本发明仅受权利要求书及其全部范围和等效物的限制。

Claims (7)

1.基于云计算的Elasticsearch查询管理系统,其特征在于,包括若干个用户终端、数据采集模块、定位模块、查询处理模块、数据分析模块、节点分配模块、评价模块以及服务器;
若干个用户终端用于使用人员注册登录后输入查询信息,并将查询信息发送至服务器;所述数据采集模块用于采集若干个CDN节点的基本信息,基本信息包括CDN节点数、CDN节点位置信息、CDN节点的上传网速、下载网速和响应时间;
查询处理模块包括请求解析单元和ISP查询单元,所述请求解析单元用于解析用户终端的查询请求并从中解析出来源IP地址;所述ISP查询单元用于查询来源IP地址所归属的ISP;
所述定位模块用于定位来源IP地址所归属地域;所述查询处理模块用于对查询信息进行智能处理;
所述数据分析模块用于对CDN节点进行智能分析,具体分析过程如下:
SS1:获取若干个CDN节点,并将CDN节点标记为o,o=1,……,n;
SS2:获取若干个CDN节点的上传网速So和下载网速Xo;
SS3:获取若干个CDN节点的请求时间和获取时间,计算得到CDN节点的响应时间XTo;
SS4:分别获取若干个CDN节点的时延平均值SYo和价格Go;
SS5:利用公式计算得出CDN节点的性能值XNo,具体公式如下:
Figure FDA0003595587160000011
式中b1、b2、b3、b4和b5均为预设比例系数固定数值;
SS6:将所有CDN节点的性能值XNo降序排列后生成CDN节点性能值降序排列表,服务器按照CDN节点性能值降序排列表由上到下依次推送CDN节点至用户终端;
所述节点分配模块用于根据查询到的归属ISP以及归属地域,按照预设规则选择与用户终端匹配的CDN节点,并将被选CDN节点IP地址下发至用户终端;
所述评价模块用于对CDN节点进行评价,并将评价结果发送至服务器中;
所述查询处理模块的具体处理过程如下:
S1:获取发送查询请求的用户终端,并将用户终端标记为u,u=1,……,n;
S2:获取用户终端的会员等级Dui,i=1,2,3,4;其中,Du1=X1,Du2=X2,Du3=X3,Du4=X4,X1、X2、X3和X4均为预设固定数值;
S3:获取用户终端的查询请求次数,并将查询请求次数标记为Cu;获取用户终端的查询等待时长,并将查询等待时长标记为Tu;
S4:利用公式计算得出用户终端查询请求的查询优先值CYXu,具体公式如下:
CYXu=Dui×a1+Cu×a2+Tu×a3,式中a1、a2和a3均为预设比例系数固定数值;
S5:查询优先值CYXu降序排列后,服务器根据降序排列的查询优先值依次处理用户终端查询请求。
2.根据权利要求1所述的基于云计算的Elasticsearch查询管理系统,其特征在于,所述预设规则具体包括:
P1:首先,根据查询到的归属ISP选择与用户终端匹配的CDN节点;
P2:其次,根据查询到的归属地域选择与用户终端匹配的CDN节点;
P3:最后,依据实时监测各CDN节点的连接数、CPU负载率、读写负载率和带宽负载率,并在根据来源IP地址所归属的ISP以及所归属地域选取到多个CDN节点时,根据连接数、CPU负载率、读写负载率和带宽负载率选择首选CDN节点以及备选CDN节点。
3.根据权利要求2所述的基于云计算的Elasticsearch查询管理系统,其特征在于,所述预设规则中步骤P3的具体工作步骤如下:
步骤一:获取CDN节点的解析时间T1o、建立连接时间T2o、首包时间T3o和下载时间T4o;
步骤二:根据上述数据计算得到CDN节点的状态参数值ZCo;
步骤三:获取CDN节点的连接数LJo、CPU负载率CLo、读写负载率DXo和带宽负载率DKo;
步骤四:利用公式FZo=LJo×c1+CLo×c2+DXo×c3+DKo×c4计算得到CDN节点的负载值FZo,c1、c2、c3和c4均为预设比例系数固定数值;
步骤五:获取CDN节点的负载阈值,并将CDN节点的负载阈值标记为Yfzo;获取CDN节点的状态参数阈值,并将CDN节点的状态参数阈值标记为Yzco;
步骤六:获取CDN节点的状态参数值ZCo和负载值FZo,利用公式得到CDN节点的服务质量分F,具体公式如下:
Figure FDA0003595587160000031
式中α和β均为预设比例系数固定数值;
步骤七:将CDN节点的服务质量分F降序排列后生成CDN节点服务质量分降序排列表,服务器按照CDN节点服务质量分降序排列表由上到下将CDN节点分配给用户终端。
4.根据权利要求1所述的基于云计算的Elasticsearch查询管理系统,其特征在于,所述基本信息包括CDN节点数、CDN节点位置信息、CDN节点的上传网速、下载网速和响应时间。
5.根据权利要求1所述的基于云计算的Elasticsearch查询管理系统,其特征在于,所述请求解析单元的具体解析过程如下:
用户终端通过动态DNS技术访问到最近的CDN节点服务器,即用户终端通过域名访问视频社交网站时,本地DNS服务器若无法直接解析视频社交网站域名,则通过根DNS服务器查询解析视频社交网站域名的主DNS服务器,然后本地DNS服务器连接查询到的主DNS服务器并对视频社交网站域名进行解析,主DNS服务器查询本地DNS服务器的IP地址所在的地域,从而将该地域内距离本地DNS服务器最近的CDN节点服务器IP地址下发至该本地DNS服务器,本地DNS服务器将接收到的CDN节点服务器IP地址下发至用户终端,CDN节点服务器中的请求解析单元在接收到用户终端的查询请求时,从中解析出查询请求的来源IP地址,即用户终端的真实地址。
6.根据权利要求1所述的基于云计算的Elasticsearch查询管理系统,其特征在于,所述ISP查询单元的具体查询过程如下:
服务器中预存储有包含有IP地址与ISP对应关系的第一数据文件,ISP查询单元从第一数据文件中查询来源IP地址所归属的ISP。
7.根据权利要求1所述的基于云计算的Elasticsearch查询管理系统,其特征在于,所述定位模块的具体定位过程如下:
服务器中预存储有包含IP地址与地域之间对应关系的第二数据文件,定位模块从第二数据文件中查询来源IP地址所归属地域。
CN202011091175.XA 2020-10-13 2020-10-13 基于云计算的Elasticsearch查询管理系统 Active CN112182070B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011091175.XA CN112182070B (zh) 2020-10-13 2020-10-13 基于云计算的Elasticsearch查询管理系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011091175.XA CN112182070B (zh) 2020-10-13 2020-10-13 基于云计算的Elasticsearch查询管理系统

Publications (2)

Publication Number Publication Date
CN112182070A CN112182070A (zh) 2021-01-05
CN112182070B true CN112182070B (zh) 2022-06-14

Family

ID=73949467

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011091175.XA Active CN112182070B (zh) 2020-10-13 2020-10-13 基于云计算的Elasticsearch查询管理系统

Country Status (1)

Country Link
CN (1) CN112182070B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113094580A (zh) * 2021-03-24 2021-07-09 远光软件股份有限公司 碳配额的计算方法、装置、存储介质和终端设备
CN115394453B (zh) * 2022-10-30 2023-01-20 四川大学华西医院 基于云计算环境下医学科研数据的智能管理系统和方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103825975A (zh) * 2014-02-26 2014-05-28 北京太阳庄科技有限公司 Cdn节点分配服务器及系统
CN105516391A (zh) * 2015-12-25 2016-04-20 互联网域名系统北京市工程研究中心有限公司 一种基于cname的dns域名解析方法
CN107872423A (zh) * 2016-09-23 2018-04-03 中国电信股份有限公司 用于实现 cdn 调度的方法、设备和系统
CN109040259A (zh) * 2018-08-09 2018-12-18 中国联合网络通信集团有限公司 一种基于mec的cdn节点分配方法和系统
CN109819285A (zh) * 2017-11-21 2019-05-28 乐蜜有限公司 一种直播方法、装置、电子设备及存储介质
CN110401552A (zh) * 2018-04-24 2019-11-01 贵州白山云科技股份有限公司 一种cdn业务自动调优方法及装置
CN111552714A (zh) * 2020-05-06 2020-08-18 山东汇贸电子口岸有限公司 一种cdn节点智能存储动态资源方法及系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9294582B2 (en) * 2011-12-16 2016-03-22 Microsoft Technology Licensing, Llc Application-driven CDN pre-caching
CN105183809A (zh) * 2015-08-26 2015-12-23 成都布林特信息技术有限公司 一种云平台数据查询方法
CN106599186A (zh) * 2016-12-14 2017-04-26 孙冯离尘 一种知识变现网络平台的构建系统及方法
CN111586134A (zh) * 2020-04-29 2020-08-25 新浪网技术(中国)有限公司 一种cdn节点过载的调度方法及系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103825975A (zh) * 2014-02-26 2014-05-28 北京太阳庄科技有限公司 Cdn节点分配服务器及系统
CN105516391A (zh) * 2015-12-25 2016-04-20 互联网域名系统北京市工程研究中心有限公司 一种基于cname的dns域名解析方法
CN107872423A (zh) * 2016-09-23 2018-04-03 中国电信股份有限公司 用于实现 cdn 调度的方法、设备和系统
CN109819285A (zh) * 2017-11-21 2019-05-28 乐蜜有限公司 一种直播方法、装置、电子设备及存储介质
CN110401552A (zh) * 2018-04-24 2019-11-01 贵州白山云科技股份有限公司 一种cdn业务自动调优方法及装置
CN109040259A (zh) * 2018-08-09 2018-12-18 中国联合网络通信集团有限公司 一种基于mec的cdn节点分配方法和系统
CN111552714A (zh) * 2020-05-06 2020-08-18 山东汇贸电子口岸有限公司 一种cdn节点智能存储动态资源方法及系统

Also Published As

Publication number Publication date
CN112182070A (zh) 2021-01-05

Similar Documents

Publication Publication Date Title
CN105516391B (zh) 一种基于cname的dns域名解析方法
CN103685583B (zh) 一种域名解析的方法和系统
Cardellini et al. Request redirection algorithms for distributed web systems
CN101873358B (zh) 一种基于域名解析的链路负载均衡方法和设备
CN101764747B (zh) 内容分发网络流量智能调度方法、装置及系统
CN107453900B (zh) 一种云解析参数设定管理系统及实现参数设定的方法
CN112182070B (zh) 基于云计算的Elasticsearch查询管理系统
US11616831B1 (en) Point to node in a multi-tiered middleware environment
CN106067890B (zh) 一种域名解析方法、装置及系统
CN104754640B (zh) 一种网络资源调度方法及网络资源管理服务器
CN107071078B (zh) 域名解析系统、域名解析服务器和域名解析方法
CN108011995A (zh) 异地多活的实现方法、异地多活服务平台及存储介质
CN102047243A (zh) 基于类别请求路由
CN103825975A (zh) Cdn节点分配服务器及系统
CN104821965B (zh) 基于出口网络的dns智能解析方法
WO2013131485A1 (en) Method, apparatus, and system for allocating cdn volume
EP3066577B1 (en) Content node selection using network performance profiles
CN107342913B (zh) 一种cdn节点的探测方法和装置
CN101610294A (zh) 一种利用智能dns提高网站访问速度的方法
US11323412B2 (en) DNS rendezvous localization
CN110474994A (zh) 域名解析方法、装置、电子设备和存储介质
CN112954089B (zh) 一种解析数据的方法、装置、设备以及存储介质
CN108881516A (zh) 一种调度多cdn服务系统的方法和装置
CN108111639A (zh) 一种提高域名系统可用性的方法及系统
CN109756584A (zh) 域名解析方法、域名解析装置及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant