CN110533486A - 一种基于电商平台的大数据分析方法 - Google Patents

一种基于电商平台的大数据分析方法 Download PDF

Info

Publication number
CN110533486A
CN110533486A CN201910842547.9A CN201910842547A CN110533486A CN 110533486 A CN110533486 A CN 110533486A CN 201910842547 A CN201910842547 A CN 201910842547A CN 110533486 A CN110533486 A CN 110533486A
Authority
CN
China
Prior art keywords
data
module
data analysis
electric business
big data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910842547.9A
Other languages
English (en)
Inventor
司中明
章文兵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu IoT Research and Development Center
Original Assignee
Jiangsu IoT Research and Development Center
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu IoT Research and Development Center filed Critical Jiangsu IoT Research and Development Center
Priority to CN201910842547.9A priority Critical patent/CN110533486A/zh
Publication of CN110533486A publication Critical patent/CN110533486A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/951—Indexing; Web crawling techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201—Market modelling; Market analysis; Collecting market data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201—Market modelling; Market analysis; Collecting market data
    • G06Q30/0202—Market predictions or forecasting for commercial activities
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L2463/00—Additional details relating to network architectures or network communication protocols for network security covered by H04L63/00
    • H04L2463/102—Additional details relating to network architectures or network communication protocols for network security covered by H04L63/00 applying security measure for e-commerce
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/16—Implementing security features at a particular protocol layer
    • H04L63/168—Implementing security features at a particular protocol layer above the transport layer

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Data Mining & Analysis (AREA)
  • Game Theory and Decision Science (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开一种基于电商平台的大数据分析方法及其系统，包括目标数据分析、数据查询存储、数据建模、趋势预测分析步骤。本发明公开一种基于电商平台的大数据分析方法可根据电商平台的数据为系统开发提供方向性指导，预测销售情况、产品未来发展方向等，具有很高的智能化，减少人工操作，提高工作效率，准确率高，本发明提供产品特点趋势的大数据分析，为产品的未来发展提供准确的预测，在电子商务领域具有应用前景。

Description

一种基于电商平台的大数据分析方法
技术领域
本发明涉及一种大数据分析方法，尤其涉及一种基于电商平台的大数据分析方法，属于电子商务网络技术领域。
背景技术
随着经济的快速发展和互联网的快速发展，线下的商务活动模式已经满足不了时代的需求，越来越多的电子商务平台应运而生。企业在电子商务平台可充分利用其网络基础设施、支付平台、安全平台、管理平台等共享资源有效地、低成本地开展商务活动。但现有技术的电商平台对数据的分析方法不够全面、细致，无法判断用户的哪些行为可直接影响销售额，也无法通过用户的喜爱预测产品未来发展的方向，降低了电商平台上企业把握用户动向、及时调整销售策略的效率。
发明内容
为克服现有技术的缺陷，本发明提供一种大数据分析系统，所述电商平台的大数据分析方法是由大数据分析系统实现的，所述大数据分析系统包括控制模块、数据查询模块、存储模块、大数据分析模块、趋势预测模块。
所述控制模块为所述大数据分析系统的核心，作为所述大数据分析系统的起点，用于接收需进行大数据分析的目标数据。
所述数据查询模块用于查询数据，查询方法为爬行抓取数据，具体为：采用哈希函数遍历整个电商平台的所有页面，采用MD5集合对是否抓取的状态进行判断，将已抓取和未抓取的网页进行分类，并分别建立URL，直到抓取数据完成。
所述存储模块对所述数据查询模块查询到的数据进行存储、更新、备份、删除操作。
所述大数据分析模块，对存储模块的数据进行数据模型转换，将存储模块的源数据转化为数据模型，并发送至趋势预测模块。
所述趋势预测模块用于将大数据分析模块发送的数据进行建模并输出结果。
本发明涉及的一种基于电商平台的大数据分析方法，基于上述大数据分析系统，具体步骤如下：
（1）由控制模块对接收的目标数据进行分析，从而确定本次数据分析目的及要点。
（2）由数据查询模块对整个电商平台的收集、分类，存储在存储模块中。
（3）存储模块完成数据更新后，大数据分析模块将用户主要行为、用户活动区域、产品销售额、产品销售量、产品评价数、产品特点6种类型数据进行数据统计，组成矩阵，并对数据进行模型转换，进行相关性分析，根据公因子方差提取出5个公因子，再采取因子旋转的方法确定各因子的实际意义，建立数据模型。
（4）趋势预测模块根据大数据分析发送的数据模型，对数值与计算数值进行分析预测。所述趋势预测模块根据用户的主要行为与产品销售额、销售量的关系，列举出用户哪些行为会提高销售额、销售量，并以列表和/或曲线和/或趋势图的形式输出；所述趋势预测模块根据用户的区域用户行为与产品销售额、销售量的关系，列举出每个区域用户的行为、购买力、活跃度，并以列表和/或曲线和/或趋势图的形式输出；所述趋势预测模块根据产品特点与销售额、销售量的关系，得出用户对产品的喜好，预测产品未来发展的方向，并以列表和/或曲线和/或趋势图的形式输出。
进一步地，区域用户行为的分析方法：获取电商平台的销售数据； 将销售数据中发货地址中的区域信息进行采集。
进一步地，本发明所述电商平台为基于Oracle ERP的订单管理与B2B电商平台，包括ERP系统、B2B系统和终端系统三个子系统，使用JAVA语言作为主要的开发语言，通过整合Spring MVC、Spring Data、Spring Cache框架，提供针对经销商的下单、购物功能，使用Thrift作为RPC框架，实现B2B电商平台与Oracle ERP的数据联通，同时使用Angular JS提供了高度响应式桌面 UI和移动端。更进一步地，所述B2B系统与所述ERP系统采用加密的RPC协议实现数据传输，具体的加密方法为SSL加密。
本发明涉及的一种基于电商平台的大数据分析方法可根据电商平台的数据为系统开发提供方向性指导，预测销售情况、产品未来发展方向等，具有很高的智能化，减少人工操作，提高工作效率，准确率高。
本发明涉及的一种基于电商平台的大数据分析方法对用户行为的大数据分析，为系统的开发提供数据指导。对基于区域的用户行为的大数据分析，为产品的销售情况提供准确的预测。提供产品特点趋势的大数据分析，为产品的未来发展提供准确的预测，在电子商务领域具有应用前景。
具体实施方式
下面通过具体实施例，进一步对本发明的技术方案进行具体说明。应该理解，下面的实施例只是作为具体说明，而不限制本发明的范围，同时本领域的技术人员根据本发明所做的显而易见的改变和修饰也包含在本发明范围之内。
实施例1
一种基于电商平台的大数据分析方法，具体步骤如下：
（1）由控制模块对接收的目标数据进行分析，从而确定本次数据分析目的及要点。
（2）由数据查询模块对整个电商平台的收集、分类，存储在存储模块中。
（3）存储模块完成数据更新后，大数据分析模块将用户主要行为、用户活动区域、产品销售额、产品销售量、产品评价数、产品特点6种类型数据进行数据统计，组成矩阵，并对数据进行模型转换，进行相关性分析，根据公因子方差提取出5个公因子，再采取因子旋转的方法确定各因子的实际意义，建立数据模型。
（4）趋势预测模块根据大数据分析发送的数据模型，对数值与计算数值进行分析预测。所述趋势预测模块根据用户的主要行为与产品销售额、销售量的关系，列举出用户哪些行为会提高销售额、销售量，并以列表和/或曲线和/或趋势图的形式输出；所述趋势预测模块根据用户的区域用户行为与产品销售额、销售量的关系，列举出每个区域用户的行为、购买力、活跃度，并以列表和/或曲线和/或趋势图的形式输出；所述趋势预测模块根据产品特点与销售额、销售量的关系，得出用户对产品的喜好，预测产品未来发展的方向，并以列表和/或曲线和/或趋势图的形式输出。
区域用户行为的分析方法：获取电商平台的销售数据； 将销售数据中发货地址中的区域信息进行采集。
本发明所述电商平台为基于Oracle ERP的订单管理与B2B电商平台，包括ERP系统、B2B系统和终端系统三个子系统，使用JAVA语言作为主要的开发语言，通过整合SpringMVC、Spring Data、Spring Cache框架，提供针对经销商的下单、购物功能，使用Thrift作为RPC框架，实现B2B电商平台与Oracle ERP的数据联通，同时使用Angular JS提供了高度响应式桌面 UI和移动端。所述B2B系统与所述ERP系统采用加密的RPC协议实现数据传输，具体的加密方法为SSL加密。
实施例2
一种大数据分析系统，包括控制模块、数据查询模块、存储模块、大数据分析模块、趋势预测模块。
所述控制模块为所述大数据分析系统的核心，作为所述大数据分析系统的起点，用于接收需进行大数据分析的目标数据。
所述数据查询模块用于查询数据，查询方法为爬行抓取数据，具体为：采用哈希函数遍历整个电商平台的所有页面，采用MD5集合对是否抓取的状态进行判断，将已抓取和未抓取的网页进行分类，并分别建立URL，直到抓取数据完成。
所述存储模块对所述数据查询模块查询到的数据进行存储、更新、备份、删除操作。所述大数据分析模块，对存储模块的数据进行数据模型转换，将存储模块的源数据转化为数据模型，并发送至趋势预测模块。所述趋势预测模块用于将大数据分析模块发送的数据进行建模并输出结果。

Claims (5)

1.一种基于电商平台的大数据分析方法，其特征在于，具体步骤如下：
（1）由控制模块对接收的目标数据进行分析，确定本次数据分析目的及要点；
（2）由数据查询模块对整个电商平台的收集、分类，存储在存储模块中；
（3）存储模块完成数据更新后，大数据分析模块将用户主要行为、用户活动区域、产品销售额、产品销售量、产品评价数、产品特点6种类型数据进行数据统计，组成矩阵，并对数据进行模型转换，进行相关性分析，根据公因子方差提取出5个公因子，再采取因子旋转的方法确定各因子的实际意义，建立数据模型；
（4）趋势预测模块根据大数据分析发送的数据模型，对数值与计算数值进行分析预测；所述趋势预测模块根据用户的主要行为与产品销售额、销售量的关系，列举出用户哪些行为会提高销售额、销售量，并以列表和/或曲线和/或趋势图的形式输出；所述趋势预测模块根据用户的区域用户行为与产品销售额、销售量的关系，列举出每个区域用户的行为、购买力、活跃度，并以列表和/或曲线和/或趋势图的形式输出；所述趋势预测模块根据产品特点与销售额、销售量的关系，得出用户对产品的喜好，预测产品未来发展的方向，并以列表和/或曲线和/或趋势图的形式输出。
2.根据权利要求1所述的一种基于电商平台的大数据分析方法，其特征在于：区域用户行为的分析方法是：获取电商平台的销售数据，对销售数据中发货地址中的区域信息进行采集。
3.根据权利要求1所述的一种基于电商平台的大数据分析方法，其特征在于：所述电商平台为基于Oracle ERP的订单管理与B2B电商平台，包括ERP系统、B2B系统和终端系统三个子系统，使用JAVA语言作为主要的开发语言，通过整合Spring MVC、Spring Data、SpringCache框架，提供针对经销商的下单、购物功能，使用Thrift作为RPC框架，实现B2B电商平台与Oracle ERP的数据联通，同时使用Angular JS提供了高度响应式桌面 UI和移动端。
4.根据权利要求3所述的一种基于电商平台的大数据分析方法，其特征在于：所述B2B系统与所述ERP系统采用加密的RPC协议实现数据传输，具体的加密方法为SSL加密。
5.一种大数据分析系统，其特征在于：用于实现权利要求1~4任一项的一种基于电商平台的大数据分析方法；
包括控制模块、数据查询模块、存储模块、大数据分析模块、趋势预测模块；
所述控制模块为所述大数据分析系统的核心，作为所述大数据分析系统的起点，用于接收需进行大数据分析的目标数据；
所述数据查询模块用于查询数据，查询方法为爬行抓取数据，具体为：采用哈希函数遍历整个电商平台的所有页面，采用MD5集合对是否抓取的状态进行判断，将已抓取和未抓取的网页进行分类，并分别建立URL，直到抓取数据完成；
所述存储模块对所述数据查询模块查询到的数据进行存储、更新、备份、删除操作；
所述大数据分析模块，对存储模块的数据进行数据模型转换，将存储模块的源数据转化为数据模型，并发送至趋势预测模块；
所述趋势预测模块用于将大数据分析模块发送的数据进行建模并输出结果。
CN201910842547.9A 2019-09-06 2019-09-06 一种基于电商平台的大数据分析方法 Pending CN110533486A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910842547.9A CN110533486A (zh) 2019-09-06 2019-09-06 一种基于电商平台的大数据分析方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910842547.9A CN110533486A (zh) 2019-09-06 2019-09-06 一种基于电商平台的大数据分析方法

Publications (1)

Publication Number Publication Date
CN110533486A true CN110533486A (zh) 2019-12-03

Family

ID=68667562

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910842547.9A Pending CN110533486A (zh) 2019-09-06 2019-09-06 一种基于电商平台的大数据分析方法

Country Status (1)

Country Link
CN (1) CN110533486A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111461741A (zh) * 2020-03-20 2020-07-28 深圳市优达智胜科技有限公司 一种基于云平台电商大数据监测系统
CN111798314A (zh) * 2020-06-30 2020-10-20 绍兴柯桥铂林科技有限公司 一种基于ai及大数据的算法自动化交易策略风控系统
CN113807886A (zh) * 2021-08-30 2021-12-17 浪潮卓数大数据产业发展有限公司 一种自动预测电商销售额的装置及方法
CN116823337A (zh) * 2023-08-24 2023-09-29 北京信索咨询股份有限公司 基于大数据分析用户习惯的产品销售预测系统
CN117726360A (zh) * 2024-02-18 2024-03-19 深圳市加推科技有限公司 客户行为驱动的工业产品销售分析方法及相关组件

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104966185A (zh) * 2015-06-19 2015-10-07 浙江双商信息科技有限公司 Erp系统间的业务处理方法与装置
CN105809289A (zh) * 2016-03-11 2016-07-27 郑州师范学院 基于大数据的电子商务行业景气度指数系统和方法
CN106600395A (zh) * 2017-02-27 2017-04-26 山东浪潮云服务信息科技有限公司 一种基于电商数据分析的信息控税平台
CN108596742A (zh) * 2018-05-09 2018-09-28 上海祷曦健康管理有限公司 一种针对健康管理的数字化平台商业分析方法
CN110046926A (zh) * 2018-12-28 2019-07-23 江苏淳客网络科技有限公司 电商数据分析平台

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104966185A (zh) * 2015-06-19 2015-10-07 浙江双商信息科技有限公司 Erp系统间的业务处理方法与装置
CN105809289A (zh) * 2016-03-11 2016-07-27 郑州师范学院 基于大数据的电子商务行业景气度指数系统和方法
CN106600395A (zh) * 2017-02-27 2017-04-26 山东浪潮云服务信息科技有限公司 一种基于电商数据分析的信息控税平台
CN108596742A (zh) * 2018-05-09 2018-09-28 上海祷曦健康管理有限公司 一种针对健康管理的数字化平台商业分析方法
CN110046926A (zh) * 2018-12-28 2019-07-23 江苏淳客网络科技有限公司 电商数据分析平台

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111461741A (zh) * 2020-03-20 2020-07-28 深圳市优达智胜科技有限公司 一种基于云平台电商大数据监测系统
CN111798314A (zh) * 2020-06-30 2020-10-20 绍兴柯桥铂林科技有限公司 一种基于ai及大数据的算法自动化交易策略风控系统
CN113807886A (zh) * 2021-08-30 2021-12-17 浪潮卓数大数据产业发展有限公司 一种自动预测电商销售额的装置及方法
CN116823337A (zh) * 2023-08-24 2023-09-29 北京信索咨询股份有限公司 基于大数据分析用户习惯的产品销售预测系统
CN116823337B (zh) * 2023-08-24 2023-11-21 北京信索咨询股份有限公司 基于大数据分析用户习惯的产品销售预测系统
CN117726360A (zh) * 2024-02-18 2024-03-19 深圳市加推科技有限公司 客户行为驱动的工业产品销售分析方法及相关组件
CN117726360B (zh) * 2024-02-18 2024-05-17 深圳市加推科技有限公司 客户行为驱动的工业产品销售分析方法及相关组件

Similar Documents

Publication Publication Date Title
CN110533486A (zh) 一种基于电商平台的大数据分析方法
Wu et al. Research on internet information mining based on agent algorithm
KR20230070272A (ko) 머신 러닝 모델에서 동적 이상값 편향 감소를 구현하도록 구성된 컴퓨터 기반 시스템, 컴퓨팅 구성요소 및 컴퓨팅 객체
CN102419768B (zh) 用于文档搜索的搜索高速缓存
CN103955842B (zh) 一种面向大规模媒体数据的在线广告推荐系统及方法
CN105208113A (zh) 信息推送的方法和装置
CN103049563A (zh) 服务器、会计凭证生成系统和会计凭证生成方法
CN107515933A (zh) 修改源数据库表结构的方法、服务器、系统及存储介质
CN106489165A (zh) 将来自应用的转化与所选内容项目匹配
CN107666515B (zh) 图像处理方法和装置、计算机设备、计算机可读存储介质
CN107844914B (zh) 基于集团管理的风险管控系统和实现方法
Zhang et al. How ICT can contribute to realize a sustainable society in the future: a CGE approach
CN102402553B (zh) 一种用于对推广账户的运营质量进行分析的方法与设备
CN107197046A (zh) 一种基于移动智能平台的公路勘测调查内外业一体化系统
CN111400465A (zh) 客服机器人的生成方法、装置、电子设备及介质
CN104348628A (zh) 获取本机Root权限的方法和装置
CN104270443B (zh) 一种能够动态解析Web应用的云计算系统及方法
CN102103606A (zh) 一种在手机客户端上实现高级检索商品的技术
CN105023184A (zh) 一种基于微信端的金融行情信息查询方法
Jin et al. [Retracted] Cloud Statistics of Accounting Informatization Based on Statistics Mining
CN113987300A (zh) 标签生成方法及装置
CN104599146A (zh) 一种订单管理方法
Jia et al. Development model of enterprise green marketing based on cloud computing
Peng et al. Machine learning with variable sampling rate for traffic prediction in 6G MEC IoT
CN202041990U (zh) 一种银行个人贷款业务平台

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20191203

WD01 Invention patent application deemed withdrawn after publication