CN109302505B - 数据传输方法、系统、装置和存储介质 - Google Patents

数据传输方法、系统、装置和存储介质 Download PDF

Info

Publication number
CN109302505B
CN109302505B CN201811025667.1A CN201811025667A CN109302505B CN 109302505 B CN109302505 B CN 109302505B CN 201811025667 A CN201811025667 A CN 201811025667A CN 109302505 B CN109302505 B CN 109302505B
Authority
CN
China
Prior art keywords
client
address
access
server
channel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811025667.1A
Other languages
English (en)
Other versions
CN109302505A (zh
Inventor
李焕达
陈幼凌
英杰
胡仲强
邹骏杰
黎卓锋
李祥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Construction Bank Corp
Original Assignee
China Construction Bank Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Construction Bank Corp filed Critical China Construction Bank Corp
Priority to CN201811025667.1A priority Critical patent/CN109302505B/zh
Publication of CN109302505A publication Critical patent/CN109302505A/zh
Application granted granted Critical
Publication of CN109302505B publication Critical patent/CN109302505B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00—Network arrangements, protocols or services for addressing or naming
    • H04L61/45—Network directories; Name-to-address mapping
    • H04L61/4505—Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols
    • H04L61/4511—Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols using domain name system [DNS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00—Network arrangements, protocols or services for addressing or naming
    • H04L61/09—Mapping addresses
    • H04L61/10—Mapping addresses of different types
    • H04L61/103—Mapping addresses of different types across network layers, e.g. resolution of network layer into physical layer addresses or address resolution protocol [ARP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明提供一种数据传输方法、系统、装置和存储介质，所述方法包括：服务器根据客户端的客户信息通过取模算法得出所述客户端的通道地址，并且把通用的访问规则返回给所述客户端；所述客户端根据所述通道地址和所述访问规则计算得到访问地址，并根据所述访问地址访问服务端；所述服务端识别所述访问地址并分发给对应的应用服务器。本发明通过通道地址和访问规则计算得到的访问地址，分发给与之对应的应用服务器，可有效减少服务器的路由分析成本和处理时间。

Description

数据传输方法、系统、装置和存储介质
技术领域
本发明涉及数据处理领域，具体而言，涉及一种数据传输方法、系统、装置和存储介质。
背景技术
负载均衡技术在现有网络结构之上提供了一种廉价、有效、透明的方法，来扩展网络设备和服务器的带宽、增加吞吐量、加强网络数据处理能力、提高网络的灵活性和可用性。它有两方面的含义：首先，大量的并发访问或数据流量分担到多台节点设备上分别处理，减少用户等待响应的时间；其次，单个重负载的运算分担到多台节点设备上做并行处理，每个节点设备处理结束后，将结果汇总，返回给用户，系统处理能力得到大幅度提高。负载均衡技术在现有网络结构之上提供了一种廉价、有效、透明的方法，来扩展网络设备和服务器的带宽、增加吞吐量、加强网络数据处理能力、提高网络的灵活性和可用性。它有两方面的含义：首先，大量的并发访问或数据流量分担到多台节点设备上分别处理，减少用户等待响应的时间；其次，单个重负载的运算分担到多台节点设备上做并行处理，每个节点设备处理结束后，将结果汇总，返回给用户，系统处理能力得到大幅度提高。
现有技术中，通常采用四层服务器负载均衡技术。客户端将请求发送给服务器群前端的负载均衡设备，负载均衡设备上的虚服务接收客户端请求，通过调度算法，选择真实服务器，再通过网络地址转换，用真实服务器地址重写请求报文的目标地址后，将请求发送给选定的真实服务器；真实服务器的响应报文通过负载均衡设备时，报文的源地址被还原为虚服务的VSIP，再返回给客户，完成整个负载调度过程。
另外，现有技术也尝试采用DNS域名解析负载均衡。在DNS服务器上配置多个域名对应IP的记录。例如一个域名www.baidu.com对应一组web服务器IP地址，域名解析时经过DNS服务器的算法将一个域名请求分配到合适的真实服务器上。目前的DNS解析是多级解析，每一级DNS都可能化缓存记录A，当摸一服务器下线后，该服务器对应的DNS记录A可能仍然存在，导致分配到该服务器的用户访问失败。DNS负载均衡的控制权在域名服务商手里，网站可能无法做出过多的改善和管理。不能够按服务器的处理能力来分配负载。DNS负载均衡采用的是简单的轮询算法，不能区分服务器之间的差异，不能反映服务器当前运行状态，所以其的负载均衡效果并不是太好。
可能会造成额外的网络问题。为了使本DNS服务器和其他DNS服务器及时交互，保证DNS数据及时更新，使地址能随机分配，一般都要将DNS的刷新时间设置的较小，但太小将会使DNS流量大增造成额外的网络问题。
发明内容
为解决上述技术问题，本发明提供一种数据传输方法、系统、装置和存储介质，解决当前交易数据一致性差的问题。
根据本发明实施例的第一方面，提供了一种数据传输方法，所述方法包括：
服务器根据客户端的客户信息通过取模算法得出所述客户端的通道地址，并且把通用的访问规则返回给所述客户端；
所述客户端根据所述通道地址和所述访问规则计算得到访问地址，并根据所述访问地址访问服务端；
所述服务端识别所述访问地址并分发给与所述访问地址对应的应用服务器。
根据本发明实施例的第二方面，一种数据传输系统，所述系统包括：
服务器，用于根据客户端的客户信息通过取模算法得出所述客户端的通道地址，并且把通用的访问规则返回给所述客户端；
所述客户端，用于提供客户信息，根据所述通道地址和所述访问规则计算得到访问地址，并根据所述访问地址访问服务端；
所述服务端，用于识别所述访问地址并分发给与所述访问地址对应的应用服务器。
根据本发明实施例的第三方面，提供一种计算机可读存储介质，所述计算机存储介质包含有计算机程序，其中，所述计算机程序在被一个或多个计算机执行时使得所述一个或多个计算机执行如下操作：
所述操作包括如上中任一项所述数据传输方法所包含的步骤。
根据本发明实施例的第四方面，提供一种分布式数据一致性处理装置，所述装置包括：
存储器，存储有计算机可读指令；
处理器，执行所述计算机可读指令以执行如上所述的数据传输方法所包含的步骤。
实施本发明实施例提供的一种数据传输方法、系统、装置和存储介质，具有以下优点：可有效减少服务器的路由分析成本和处理时间。
附图说明
图1是本发明实施例的一种数据传输方法的流程图；
图2是本发明实施例所述方法中所述取模算法的流程图；
图3是本发明实施例的一种数据传输系统1的结构示意图。
具体实施方式
为使本发明的实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述。
图1是本发明实施例的一种数据传输方法的流程图，参见图1，所述方法包括：
步骤S1，服务器根据客户端的客户信息通过取模算法得出所述客户端的通道地址，并且把通用的访问规则返回给所述客户端；
步骤S2，所述客户端根据所述通道地址和所述访问规则计算得到访问地址，并根据所述访问地址访问服务端；
步骤S3，所述服务端识别所述访问地址并分发给与所述访问地址对应的应用服务器。
在本发明的实施方式中，述服务器根据客户端的客户信息通过取模算法得出所述客户端的通道地址包括：所述服务器根据服务器集群数量和所述客户信息得到响应服务器，把该服务器地址返回给客户端。
在本发明的实施方式中，所述客户端根据所述通道地址和所述访问规则计算得到访问地址包括：所述客户端将所述访问规则缓存至客户端本地，再根据所述访问规则计算出所述访问地址。
在本发明的实施方式中，所述访问规则包括：所述应用服务器的各种服务和各种服务对应的地址映射规则。客户端通过访问规则计算出新的访问地址，该访问规则是指服务端把各种服务的请求地址规则下发到客户端，让客户端根据规则来计算出请求的新地址，并且把原请求发送到新地址上，这样实际上相当于把负载均衡服务器的部分工作前移给客户端，从而减少了服务器的计算压力。
本发明通过一种数据传输方法技术，通过通道地址和访问规则计算得到的访问地址，分发给与之对应的应用服务器，可有效减少服务器的路由分析成本和处理时间。
本发明的实现方法为在客户端发起请求的时候，在负载均衡服务器层面通过预设的算法并结合用户个人信息得出访问规则，客户端接收到响应之后把访问规则缓存在客户端本地，该客户端后续发起请求的时候根据缓存的访问规则计算出访问地址，负载均衡服务器识别到新地址后直接把请求分发到对应的应用服务器，从而减少均衡负载服务器的路由分析成本和处理时间。
图2是本发明实施例所述方法中所述取模算法的流程图，参见图2，所述方法包括如下步骤：
取客户号的后六位，并按12取模；根据取模后数值，查询通道地址映射表，取主通道和备用通道；判断主通道可用标志是否为可用，如果是，则拼装地址并返回通道地址，如果否，则使用备用通道；并判断备用通道可用标志是否为可用，如果是则拼装地址并返回通道地址，如果否，则随机从通道列表中选取一个可用通道后再拼装地址并返回通道地址。将服务划分为n个逻辑上的服务通道，那么，服务请求地址选择算法可以根据客户号取模后得到1-n之中的一个数字，以此对应选择n个通道地址之一。负载均衡服务器将计算得到的通道地址返回给客户端缓存。
图3是本发明实施例的一种数据传输系统1的结构示意图，参见图3，所述系统1包括：
服务器100，用于根据客户端的客户信息通过取模算法得出所述客户端的通道地址，并且把通用的访问规则返回给所述客户端；
客户端200，用于提供客户信息，根据所述通道地址和所述访问规则计算得到访问地址，并根据所述访问地址访问服务端；
服务端300，用于识别所述访问地址并分发给与所述访问地址对应的应用服务器。
在本发明的实施方式中，述服务器根据客户端的客户信息通过取模算法得出所述客户端的通道地址包括：所述服务器根据服务器集群数量和所述客户信息得到响应服务器，把该服务器地址返回给客户端。
在本发明的实施方式中，所述客户端根据所述通道地址和所述访问规则计算得到访问地址包括：所述客户端将所述访问规则缓存至客户端本地，再根据所述访问规则计算出所述访问地址。
在本发明的实施方式中，所述访问规则包括：所述应用服务器的各种服务和各种服务对应的地址映射规则。客户端通过访问规则计算出新的访问地址，该访问规则是指服务端把各种服务的请求地址规则下发到客户端，让客户端根据规则来计算出请求的新地址，并且把原请求发送到新地址上，这样实际上相当于把负载均衡服务器的部分工作前移给客户端，从而减少了服务器的计算压力。
本发明通过一种数据传输方法技术，通过通道地址和访问规则计算得到的访问地址，分发给与之对应的应用服务器，可有效减少服务器的路由分析成本和处理时间。
本发明的实现方法为在客户端发起请求的时候，在负载均衡服务器层面通过预设的算法并结合用户个人信息得出访问规则，客户端接收到响应之后把访问规则缓存在客户端本地，该客户端后续发起请求的时候根据缓存的访问规则计算出访问地址，负载均衡服务器识别到新地址后直接把请求分发到对应的应用服务器，从而减少均衡负载服务器的路由分析成本和处理时间。
另外，本发明还提供一种计算机可读存储介质，所述计算机存储介质包含有计算机程序，其特征在于，所述计算机程序在被一个或多个计算机执行时使得所述一个或多个计算机执行如下操作：所述操作包括如上所述数据传输方法所包含的步骤，在此不再赘述。
另外，本发明还提供一种数据传输装置，所述装置包括：
存储器，存储有计算机可读指令；
处理器，执行所述计算机可读指令以执行如上所述的数据传输方法所包含的步骤。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本发明可借助软件结合硬件平台的方式来实现。基于这样的理解，本发明的技术方案对背景技术做出贡献的全部或者部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
以上所揭露的仅为本发明的优选实施例而已，当然不能以此来限定本发明的保护范围，因此依本发明权利要求的教导对上述实施例所作的等同变化，仍属于本发明权利要求所涵盖的范围内。

Claims (8)

1.一种数据传输方法，其特征在于，所述方法包括：
服务器根据客户端的客户信息通过取模算法得出所述客户端的通道地址，并且把通用的访问规则返回给所述客户端；
所述客户端根据所述通道地址和所述访问规则计算得到访问地址，并根据所述访问地址访问服务端；
所述服务端识别所述访问地址并分发给与所述访问地址对应的应用服务器；
其中，所述服务器根据客户端的客户信息通过取模算法得出所述客户端的通道地址包括：所述服务器根据服务器集群数量划分通道，根据所述客户信息中的客户号的后6位按12取模得到取模后数值，根据所述取模后数值查询通道地址映射表获取可用通道，并拼装地址得到通道地址以返回给客户端。
2.如权利要求1所述方法，其特征在于，所述客户端根据所述通道地址和所述访问规则计算得到访问地址包括：
所述客户端将所述访问规则缓存至客户端本地，再根据所述访问规则计算出所述访问地址。
3.如权利要求1或2所述方法，其特征在于，所述访问规则包括：
所述应用服务器的各种服务和各种服务对应的地址映射规则。
4.一种数据传输系统，其特征在于，所述系统包括：
服务器，用于根据客户端的客户信息通过取模算法得出所述客户端的通道地址，并且把通用的访问规则返回给所述客户端；
所述客户端，用于提供客户信息，根据所述通道地址和所述访问规则计算得到访问地址，并根据所述访问地址访问服务端；
所述服务端，用于识别所述访问地址并分发给与所述访问地址对应的应用服务器；
其中，所述服务器根据客户端的客户信息通过取模算法得出所述客户端的通道地址包括：所述服务器根据服务器集群数量划分通道，根据所述客户信息中的客户号的后6位按12取模得到取模后数值，根据所述取模后数值查询通道地址映射表获取可用通道，并拼装地址得到通道地址以返回给客户端。
5.如权利要求4所述系统，其特征在于，所述客户端根据所述通道地址和所述访问规则计算得到访问地址包括：
所述客户端将所述访问规则缓存至客户端本地，再根据所述访问规则计算出所述访问地址。
6.如权利要求4或5所述系统，其特征在于，所述访问规则包括：
所述应用服务器的各种服务和各种服务对应的地址映射规则。
7.一种计算机可读存储介质，所述计算机可读 存储介质包含有计算机程序，其特征在于，所述计算机程序在被一个或多个计算机执行时使得所述一个或多个计算机执行如下操作：
所述操作包括如权利要求1-3中任一项所述数据传输方法所包含的步骤。
8.一种数据传输装置，其特征在于，所述装置包括：
存储器，存储有计算机可读指令；
处理器，执行所述计算机可读指令以执行如权利要求1-3中任一项所述的数据传输方法所包含的步骤。
CN201811025667.1A 2018-09-04 2018-09-04 数据传输方法、系统、装置和存储介质 Active CN109302505B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811025667.1A CN109302505B (zh) 2018-09-04 2018-09-04 数据传输方法、系统、装置和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811025667.1A CN109302505B (zh) 2018-09-04 2018-09-04 数据传输方法、系统、装置和存储介质

Publications (2)

Publication Number Publication Date
CN109302505A CN109302505A (zh) 2019-02-01
CN109302505B true CN109302505B (zh) 2022-03-22

Family

ID=65166416

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811025667.1A Active CN109302505B (zh) 2018-09-04 2018-09-04 数据传输方法、系统、装置和存储介质

Country Status (1)

Country Link
CN (1) CN109302505B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101860493A (zh) * 2009-04-08 2010-10-13 华为软件技术有限公司 为客户端分配应用服务器地址的方法、服务器及系统
CN102223411A (zh) * 2011-06-15 2011-10-19 奇智软件（北京）有限公司 采用p2p技术下载文件的方法和系统、客户端
CN105450757A (zh) * 2015-12-02 2016-03-30 联动优势电子商务有限公司 一种服务管理方法及系统
CN107579924A (zh) * 2017-09-29 2018-01-12 阿里巴巴集团控股有限公司 一种流量调拨方法和装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102571991B (zh) * 2012-03-27 2014-06-11 电子科技大学 基于多级映射的大规模多副本分布式存储系统的应用方法
CN105337755B (zh) * 2014-08-08 2019-01-18 阿里巴巴集团控股有限公司 主从架构服务器及其处理业务的方法和处理业务的系统
CN106921726A (zh) * 2016-06-12 2017-07-04 阿里巴巴集团控股有限公司 多因子算法服务的管理系统、终端及方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101860493A (zh) * 2009-04-08 2010-10-13 华为软件技术有限公司 为客户端分配应用服务器地址的方法、服务器及系统
CN102223411A (zh) * 2011-06-15 2011-10-19 奇智软件（北京）有限公司 采用p2p技术下载文件的方法和系统、客户端
CN105450757A (zh) * 2015-12-02 2016-03-30 联动优势电子商务有限公司 一种服务管理方法及系统
CN107579924A (zh) * 2017-09-29 2018-01-12 阿里巴巴集团控股有限公司 一种流量调拨方法和装置

Also Published As

Publication number Publication date
CN109302505A (zh) 2019-02-01

Similar Documents

Publication Publication Date Title
US20200220840A1 (en) Method, server and system for resolving domain name
US20190222666A1 (en) Routing for origin-facing points of presence
US9407570B2 (en) Method, apparatus, and system for allocating CDN volume
US11778068B2 (en) Systems and methods for processing requests for content of a content distribution network
US10235047B2 (en) Memory management method, apparatus, and system
US20100235509A1 (en) Method, Equipment and System for Resource Acquisition
CN111935752B (zh) 一种网关接入方法、装置、计算机设备和存储介质
US20130007253A1 (en) Method, system and corresponding device for load balancing
CN111585887B (zh) 基于多个网络的通信方法、装置、电子设备及存储介质
US11068461B1 (en) Monitoring key access patterns for nonrelational databases
CN108124020B (zh) 域名解析方法、系统及设备
US11805093B2 (en) Systems and methods for processing requests for content of a content distribution network
CN104378452A (zh) 一种用于域名解析的方法、装置及系统
US20220318071A1 (en) Load balancing method and related device
CN109743357B (zh) 一种业务访问连续性的实现方法及装置
CN113377866B (zh) 一种虚拟化数据库代理服务的负载均衡方法及装置
CN112688917A (zh) 网络访问方法、装置、电子设备和存储介质
CN109302505B (zh) 数据传输方法、系统、装置和存储介质
CN116009983A (zh) 基于请求路径的预加载方法、装置和电子设备
US10481963B1 (en) Load-balancing for achieving transaction fault tolerance
CN109510864A (zh) 一种缓存请求的转发方法、传输方法及相关装置
CN112968980B (zh) 一种概率确定方法、装置、存储介质及服务器
WO2017215249A1 (zh) 分配网际协议ip磁盘的方法及装置
CN109088913A (zh) 请求数据的方法和负载均衡服务器
US12061708B1 (en) Remote tracking and identification of key access patterns for databases

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant