CN106709784A - 一种高并发可扩展分布式架构的跨境电商平台 - Google Patents

一种高并发可扩展分布式架构的跨境电商平台 Download PDF

Info

Publication number
CN106709784A
CN106709784A CN201611235301.8A CN201611235301A CN106709784A CN 106709784 A CN106709784 A CN 106709784A CN 201611235301 A CN201611235301 A CN 201611235301A CN 106709784 A CN106709784 A CN 106709784A
Authority
CN
China
Prior art keywords
module
layer
cross
service layer
electric business
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611235301.8A
Other languages
English (en)
Inventor
邱维明
林祥行
张志坚
陈晓欣
周芹
苏永芳
邱晓敏
丁立明
邱泽帆
邱金明
胡建军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Network Technology Co Ltd Goby
Original Assignee
Guangzhou Network Technology Co Ltd Goby
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Network Technology Co Ltd Goby filed Critical Guangzhou Network Technology Co Ltd Goby
Priority to CN201611235301.8A priority Critical patent/CN106709784A/zh
Publication of CN106709784A publication Critical patent/CN106709784A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network

Landscapes

  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Development Economics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开一种高并发可扩展分布式架构的跨境电商平台,包括NODE前端、NODE后台、接口层、服务层、数据访问层和数据存储层,所述NODE后端为NODE前端提供路由、GET或AJAX请求,然后调用接口层,所述接口层用于接受后台请求参数,然后转换并据此调用服务层,所述服务层调用数据访问层从数据存储层中调用数据,所述服务层包括会员模块、商品模块、物流模块、订单模块和支付模块,服务层的各个模块间采用RPC远程调用。

Description

一种高并发可扩展分布式架构的跨境电商平台
技术领域
本发明涉及跨境电商领域,具体涉及一种高并发可扩展分布式架构的跨境电商平台。
背景技术
目前市场竞争全球化,国内市场虽然够大,但电商在大城市趋于饱和,有国际眼光的企业希望通过电子商务开拓国际市场。但目前的电子商务平台的架构不能满足大容量SAAS电商平台的需求。
发明内容
本发明的目的是解决现有技术的缺陷,提供一种跨境电商平台,采用的技术方案如下:
一种高并发可扩展分布式架构的跨境电商平台,其特征在于,包括NODE前端、NODE后台、接口层、服务层、数据访问层和数据存储层, 所述NODE后端为NODE前端提供路由、GET或AJAX请求,然后调用接口层,所述接口层用于接受后台请求参数,然后转换并据此调用服务层,所述服务层调用数据访问层从数据存储层中调用数据,所述服务层包括会员模块、商品模块、物流模块、订单模块和支付模块,服务层的各个模块间采用RPC远程调用。
服务层采用的RPC远程调用,支持跨主机的分布式部署,大大减少了对于单台服务器的资源依赖,可以做到横向扩容,满足大容量SAAS电商平台的需求。会员模块用于会员注册、登录、并管理会员账号信息;商品模块用于查询商品列表及商品详情;物流模块用于发货、指定配送承运商、查询物流进度;支付模块用于支付订单。作为优选,所述服务层还包括供应商模块、店铺模块、商城模块、运营后台模块、营销活动模块、日志监控模块和权限管理模块。
作为优选,服务层的各个模块有各自独立的数据库。
本领域技术人员可以知道数据库是位于数据存储层。
本发明对业务模块、数据库进行了拆分,单个系统的资源是有限的,把业务进行逻辑分离到不同模块,并且每个模块有自己的独立的数据库,这样每个库可以单独优化,提高了系统的并发量。
作为优选,所述服务层基于定制主流RPC 框架和ZOOKEEPER 实现分布式调用,以进行横向扩容。
作为优选,所述数据库包括MYSQL云数据库并配置主从同步。
采用云端MYSQL数据库,并配置了主从同步,实现读写分离,减少对写库的压力。
作为优选,所述数据库还包括内存数据库。
对一些频繁查询的数据,可缓存到内存数据库REDIS,大大减少对MYSQL数据库的查询压力。
作为优选,所述服务层还包括供应商模块、店铺模块、商城模块、运营后台模块、营销活动模块、日志监控模块和权限管理模块。
供应商模块提供供应商添加、修改商品,查看自身收益等功能。店铺模块提供商家信息管理、店铺装修、店铺评价等功能。商城模块提供用户注册、商品查询等功能。运营后台提供商品发布,订单管理等功能。营销模块提供了拼团、闪购、团购、积分、卡券、搭配、满件、拍卖等丰富的活动。日志模块提供平台、店铺的PV、UV、订单、收入等统计功能。权限模块则提供不同用户角色的菜单、按钮控制,提供数据权限控制。
本发明采用了微服务架构,在不影响现有业务情况下,可以很方便集成新的个性化业务服务进来,通过不同版本或者服务的方式添加新的功能,而不会导致大面积程序发布和变更,加速推进了SAAS电商平台的维护升级。
作为优选,前端封装了通信组件,形成一个通用的请求头,每次请求带上ID,后台就可以根据ID查询对应ID的数据。
另外,本发明的平台采用J2EE分布式架构,支持千万级以上商品数据、亿级订单数据,具备强大的系统支撑能力,高速缓存机制。
平台通过部署的主机AGENT,收集NODE、JAVA实时日志,经过SPARK计算,形成大数据存储,实现首页商品可根据用户偏好进行个性化推荐。
平台部署采用JENKINS+RSYNC实现自动化部署,可以实现全量、增量两种部署方式,减少分布式架构程序部署的难度。
系统考虑到了云平台和数据的安全性,云服务器只暴露必要的端口,保障平台安全运行,减少各种网络攻击。NODE前端、NODE后端部署在一起,通过NGINX反向代理部署在多台云服务器,主要完成前端HTML、JAVASCRIPT、CSS等静态资源访问,以及页面路由、SESSION管理功能。接口层也通过NGINX反向代理部署在多台服务器,接收NODE层的调用。服务层则借助ZOOKEEPER灵活部署在内网服务器,增加安全性,同时可以根据负载情况部署多个节点,能为接口层提供高并发处理能力。数据访问层也同服务层部署在一起,实现对MySQL、Redis、MongdoDB等数据库资源的访问,实现分库分表策略,提高数据库处理能力。数据库则部署在独立的服务器中,实现主从复制和热备,保证数据库稳定可靠。
与现有技术相比,本发明的有益效果:支持跨主机的分布式部署,大大减少了对于单台服务器的资源依赖,可以做到横向扩容,满足大容量SAAS电商平台的需求。
附图说明
图1是本发明的系统结构示意图。
具体实施方式
如图1所示,一种高并发可扩展分布式架构的跨境电商平台,其特征在于,包括NODE前端、NODE后台、接口层、服务层、数据访问层和数据存储层, 所述NODE后端为NODE前端提供路由、GET或AJAX请求,然后调用接口层,所述接口层用于接受后台请求参数,然后转换并据此调用服务层,所述服务层调用数据访问层从数据存储层中调用数据,所述服务层包括会员模块、商品模块、物流模块、订单模块和支付模块,服务层的各个模块间采用RPC远程调用。
服务层采用的RPC远程调用,支持跨主机的分布式部署,大大减少了对于单台服务器的资源依赖,可以做到横向扩容,满足大容量SAAS电商平台的需求。
服务层的各个模块有各自独立的数据库。
本发明对业务模块、数据库进行了拆分,单个系统的资源是有限的,把业务进行逻辑分离到不同模块,并且每个模块有自己的独立的数据库,这样每个库可以单独优化,提高了系统的并发量。
所述服务层基于定制主流RPC 框架和ZOOKEEPER 实现分布式调用,以进行横向扩容。
所述数据库包括MYSQL云数据库并配置主从同步。
采用云端MYSQL数据库,并配置了主从同步,实现读写分离,减少对写库的压力。
所述数据库还包括内存数据库。
对一些频繁查询的数据,可缓存到内存数据库REDIS,大大减少对MYSQL数据库的查询压力。
所述服务层还包括供应商模块、店铺模块、商城模块、运营后台模块、营销活动模块、日志监控模块和权限管理模块。
本发明采用了微服务架构,在不影响现有业务情况下,可以很方便集成新的个性化业务服务进来,通过不同版本或者服务的方式添加新的功能,而不会导致大面积程序发布和变更,加速推进了SAAS电商平台的维护升级。
前端封装了通信组件,形成一个通用的请求头,每次请求带上ID,后台就可以根据ID查询对应ID的数据。

Claims (7)

1.一种高并发可扩展分布式架构的跨境电商平台,其特征在于,包括NODE前端、NODE后台、接口层、服务层、数据访问层和数据存储层, 所述NODE后端为NODE前端提供路由、GET或AJAX请求,然后调用接口层,所述接口层用于接受后台请求参数,然后转换并据此调用服务层,所述服务层调用数据访问层从数据存储层中调用数据,所述服务层包括会员模块、商品模块、物流模块、订单模块和支付模块,服务层的各个模块间采用RPC远程调用。
2.根据权利要求1所述的一种高并发可扩展分布式架构的跨境电商平台,其特征在于,服务层的各个模块有各自独立的数据库。
3.根据权利要求1所述的一种高并发可扩展分布式架构的跨境电商平台,其特征在于,所述服务层基于定制主流RPC 框架和ZOOKEEPER 实现分布式调用,以进行横向扩容。
4.根据权利要求1所述的一种高并发可扩展分布式架构的跨境电商平台,其特征在于,所述数据库包括MYSQL云数据库并配置主从同步。
5.根据权利要求4所述的一种高并发可扩展分布式架构的跨境电商平台,其特征在于,所述数据库还包括内存数据库。
6.根据权利要求1所述的一种高并发可扩展分布式架构的跨境电商平台,其特征在于,所述服务层还包括供应商模块、店铺模块、商城模块、运营后台模块、营销活动模块、日志监控模块和权限管理模块中的一个或两个以上。
7.根据权利要求1所述的一种高并发可扩展分布式架构的跨境电商平台,其特征在于,前端封装了通信组件,形成一个通用的请求头,每次请求带上ID,后台就可以根据ID查询对应ID的数据。
CN201611235301.8A 2016-12-28 2016-12-28 一种高并发可扩展分布式架构的跨境电商平台 Pending CN106709784A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611235301.8A CN106709784A (zh) 2016-12-28 2016-12-28 一种高并发可扩展分布式架构的跨境电商平台

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611235301.8A CN106709784A (zh) 2016-12-28 2016-12-28 一种高并发可扩展分布式架构的跨境电商平台

Publications (1)

Publication Number Publication Date
CN106709784A true CN106709784A (zh) 2017-05-24

Family

ID=58903650

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611235301.8A Pending CN106709784A (zh) 2016-12-28 2016-12-28 一种高并发可扩展分布式架构的跨境电商平台

Country Status (1)

Country Link
CN (1) CN106709784A (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107124429A (zh) * 2017-06-05 2017-09-01 华北电力大学 一种基于双数据表设计的网络业务安全保护方法及系统
CN107295077A (zh) * 2017-06-16 2017-10-24 深圳易嘉恩科技有限公司 基于微服务架构的分布式云平台系统
CN107370786A (zh) * 2017-06-02 2017-11-21 广州杰赛科技股份有限公司 一种基于微服务架构的通用信息管理系统
CN107786379A (zh) * 2017-11-15 2018-03-09 四川省龙逸凤集网络科技有限公司 一种基于微服务架构的分层云管理平台
CN108009889A (zh) * 2017-12-12 2018-05-08 柳州市北龟农业科技孵化器有限公司 一种咨询服务订单处理系统
CN108123963A (zh) * 2018-01-19 2018-06-05 深圳市易仓科技有限公司 一种跨境电商的api辅助系统及处理方法
CN108170561A (zh) * 2018-01-03 2018-06-15 杭州时趣信息技术有限公司 一种容灾备份方法、装置及系统
CN108205780A (zh) * 2018-01-02 2018-06-26 掌合天下(北京)信息技术有限公司 订单处理系统及订单划分方法
CN108446955A (zh) * 2018-03-08 2018-08-24 江苏聚衣网络科技有限公司 一种基于分布式服务框架的服饰网络平台
CN108900593A (zh) * 2018-06-21 2018-11-27 南通大学 一种储物柜数据的分布式处理方法
CN110457134A (zh) * 2019-08-08 2019-11-15 杭州阿启视科技有限公司 建立基于容器云和微服务架构的视频大数据云平台的方法
CN111090534A (zh) * 2019-12-24 2020-05-01 天地伟业技术有限公司 一种嵌入式设备的并发式远程调用系统
CN111209507A (zh) * 2019-12-25 2020-05-29 杭州龙席网络科技股份有限公司 一种基于saas的面向全球客户的独立网上购物平台
CN111382209A (zh) * 2020-04-02 2020-07-07 北京思特奇信息技术股份有限公司 分布式内存数据库的数据转存和操作方法
CN113360550A (zh) * 2021-08-10 2021-09-07 深圳市爱云信息科技有限公司 基于大数据的内容精准分发平台

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101567816A (zh) * 2009-05-27 2009-10-28 北京中企开源信息技术有限公司 一种监控服务器及监控方法
CN102710554A (zh) * 2012-06-25 2012-10-03 深圳中兴网信科技有限公司 分布式消息系统和分布式消息系统的服务状态检测方法
CN103218389A (zh) * 2012-12-20 2013-07-24 江苏乐买到网络科技有限公司 一种数据处理服务系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101567816A (zh) * 2009-05-27 2009-10-28 北京中企开源信息技术有限公司 一种监控服务器及监控方法
CN102710554A (zh) * 2012-06-25 2012-10-03 深圳中兴网信科技有限公司 分布式消息系统和分布式消息系统的服务状态检测方法
CN103218389A (zh) * 2012-12-20 2013-07-24 江苏乐买到网络科技有限公司 一种数据处理服务系统

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107370786B (zh) * 2017-06-02 2020-11-13 广州杰赛科技股份有限公司 一种基于微服务架构的通用信息管理系统
CN107370786A (zh) * 2017-06-02 2017-11-21 广州杰赛科技股份有限公司 一种基于微服务架构的通用信息管理系统
CN107124429A (zh) * 2017-06-05 2017-09-01 华北电力大学 一种基于双数据表设计的网络业务安全保护方法及系统
CN107295077A (zh) * 2017-06-16 2017-10-24 深圳易嘉恩科技有限公司 基于微服务架构的分布式云平台系统
CN107786379A (zh) * 2017-11-15 2018-03-09 四川省龙逸凤集网络科技有限公司 一种基于微服务架构的分层云管理平台
CN108009889A (zh) * 2017-12-12 2018-05-08 柳州市北龟农业科技孵化器有限公司 一种咨询服务订单处理系统
CN108205780A (zh) * 2018-01-02 2018-06-26 掌合天下(北京)信息技术有限公司 订单处理系统及订单划分方法
CN108170561A (zh) * 2018-01-03 2018-06-15 杭州时趣信息技术有限公司 一种容灾备份方法、装置及系统
CN108123963A (zh) * 2018-01-19 2018-06-05 深圳市易仓科技有限公司 一种跨境电商的api辅助系统及处理方法
CN108446955A (zh) * 2018-03-08 2018-08-24 江苏聚衣网络科技有限公司 一种基于分布式服务框架的服饰网络平台
CN108900593A (zh) * 2018-06-21 2018-11-27 南通大学 一种储物柜数据的分布式处理方法
CN108900593B (zh) * 2018-06-21 2021-04-30 南通大学 一种储物柜数据的分布式处理方法
CN110457134A (zh) * 2019-08-08 2019-11-15 杭州阿启视科技有限公司 建立基于容器云和微服务架构的视频大数据云平台的方法
CN111090534A (zh) * 2019-12-24 2020-05-01 天地伟业技术有限公司 一种嵌入式设备的并发式远程调用系统
CN111090534B (zh) * 2019-12-24 2023-09-19 天地伟业技术有限公司 一种嵌入式设备的并发式远程调用系统
CN111209507A (zh) * 2019-12-25 2020-05-29 杭州龙席网络科技股份有限公司 一种基于saas的面向全球客户的独立网上购物平台
CN111382209A (zh) * 2020-04-02 2020-07-07 北京思特奇信息技术股份有限公司 分布式内存数据库的数据转存和操作方法
CN113360550A (zh) * 2021-08-10 2021-09-07 深圳市爱云信息科技有限公司 基于大数据的内容精准分发平台

Similar Documents

Publication Publication Date Title
CN106709784A (zh) 一种高并发可扩展分布式架构的跨境电商平台
US11276027B2 (en) Object item distribution method and apparatus
US10949447B2 (en) Blockchain-based data synchronizing and data block parsing method and device
CN113014651B (zh) 灰度发布方法、应用服务器及灰度发布系统
CN109862051A (zh) 一种微服务架构下多租户的实现方法及系统
CN109582722A (zh) 公安资源数据服务系统
CN102609813B (zh) 基于云的主数据管理体系结构
CN102710793B (zh) 一种基于云计算的网络印刷系统以及用于该系统中的数据存储方法
CN107463434B (zh) 一种分布式任务处理方法与设备
CN105635283A (zh) 一种云制造服务的组织管理和使用方法和系统
CN101969391A (zh) 一种支持融合网络业务的云平台及其工作方法
CN107979632A (zh) 推送信息的处理方法、装置及系统
CN109155758A (zh) 虚拟基础架构
CN106372995A (zh) 一种基于云计算和移动互联网技术的多商户电商云系统及其下单购物实现方法
CN104320482A (zh) 一种银行柜员前端系统
CN112149079A (zh) 基于微服务架构的规划评审管理平台及用户访问授权方法
CN109087151A (zh) 一种基于通用积分的区块链系统
CN114217981A (zh) 银企直连的通信方法、装置、计算机设备和存储介质
CN114331382A (zh) 批量文件处理方法、处理装置、处理器与批量处理系统
CN103107976A (zh) Cp/sp认证用户身份的方法、系统及认证支撑装置
Kshetri Cloud computing in sub-Saharan Africa
CN106940725B (zh) 一种征信数据存储调度方法及系统
Zhang 2-Tier Cloud Architecture with maximized RIA and SimpleDB via minimized REST
US9742852B2 (en) Switchable business feature with prices and sales integration
CN113539423A (zh) 智能营养师在线检测系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170524