CN111177256A - 一种实现多地区数据统计的数据库系统和方法 - Google Patents
一种实现多地区数据统计的数据库系统和方法 Download PDFInfo
- Publication number
- CN111177256A CN111177256A CN201911263797.3A CN201911263797A CN111177256A CN 111177256 A CN111177256 A CN 111177256A CN 201911263797 A CN201911263797 A CN 201911263797A CN 111177256 A CN111177256 A CN 111177256A
- Authority
- CN
- China
- Prior art keywords
- data
- database
- module
- report
- statistics
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Software Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种实现多地区数据统计的数据库系统和方法，包括数据库总库模块：用户向该数据库总库写入数据，该数据带有数据唯一标识ID，数据唯一标识ID至少能够标识该数据所对应的区域信息。本发明利用数据库总库、数据库分库、数据分发、数据库定时运行计算统计的方法，来解决多地区或者多国家数据报表统计的业务场景，为企业提供可扩展性强、独立性强、极易管理的后台数据统计报表解决方案。
Description
技术领域
本发明涉及计算机数据库系统技术领域，尤其涉及的是一种实现多地区数据统计的数据库系统和方法。
背景技术
目前，实现多地区多国家数据统计分析，大多利用一地区或者国家部署服务器，利用服务器shell脚本定时计算产生数据报表。一个地区或者一个国家部署服务器，独立计算数据报表，主要存在以下几个缺点：
(1)数据分散，无法做到随时将任意A地区和任意B地区合并计算；
(2)数据互通性差，数据分散于各个地区，后续的数据分析或者数据提取不方便；
(3)管理复杂，由于采用多地区独立计算统计报表，造成管理成本增加；
(4)可扩展性差，现有的技术想实现增加一个地区或者国家的数据统计，需要增加对应的服务器，迁移程序等。
因此，现有技术存在缺陷，需要改进。
发明内容
本发明所要解决的技术问题是针对现有技术的不足提供一种实现多地区数据统计的数据库系统和方法。
本发明的技术方案如下：
一种实现多地区数据统计的数据库系统，包括：数据库总库模块：该数据库总库为总库，由用户向该数据库总库写入数据，该数据带有数据唯一标识ID，数据唯一标识ID至少能够标识该数据所对应的区域信息。
所述的数据库系统，还包括：
数据分发模块：利用数据库定时事务触发存储过程，定时按照数据唯一标识ID对应的区域信息将数据库总库模块的总库数据分发到各个区域对应的数据分库模块；
数据分库模块：用于存放通过数据分发后得到的某区域的数据。
所述的数据库系统，还包括：
定时统计计算模块：定时获取数据库分库模块的数据，通过相应预设置的计算统计后，形成数据库报表的数据库表，存放在对应区域的报表库模块中；
报表库模块：用于存放生成的数据报表的数据库表；
用户端：通过PHP、WEB或者java程序读取该报表库模块中的数据报表，在用户端数据统计页面呈现该数据报表；
所述的数据库系统，该数据分库模块可以无限扩展，可以根据业务需要或增加或去掉。
所述的数据库系统，定时统计计算模块按照每日、每周、每年的周期进行统计计算。
一种实现多地区数据统计的数据库方法，包括：用户向数据库总库为总库写入数据的时候，向该数据增加数据唯一标识ID，数据唯一标识ID至少能够标识该数据所对应的区域信息。
所述的数据库方法，还包括：
数据分发模块：利用数据库定时事务触发存储过程，定时按照数据唯一标识ID对应的区域信息将数据库总库模块的总库数据分发到各个区域对应的数据分库模块；
数据分库模块：用于存放通过数据分发后得到的某区域的数据。
所述的数据库方法，还包括：
定时获取数据库分库模块的数据，通过相应预设置的计算统计后，形成数据库报表的数据库表，存放在对应区域的报表库模块中；
将生成的数据报表的数据库表存储在报表库模块中；
通过PHP、WEB或者java程序读取该报表库模块中的数据报表，在用户端数据统计页面呈现该数据报表。
本发明利用数据库总库、数据库分库、数据分发、数据库定时运行计算统计的方法，来解决多地区或者多国家数据报表统计的业务场景，为企业提供可扩展性强、独立性强、极易管理的后台数据统计报表解决方案。
附图说明
图1为本发明数据库系统示意图；
图2为具体应用案例数据库系统示意图；
具体实施方式
以下结合具体实施例，对本发明进行详细说明。
参考图1，一种实现多地区数据统计的数据库系统，包括：数据库总库模块：该数据库总库为总库，由用户向该数据库总库写入数据，在写入数据的时候带有数据唯一标识ID，数据唯一标识ID至少能够标识该数据所对应的区域信息，例如大中华地区、中东地区或者全球；
数据分发模块：利用数据库定时事务触发存储过程，定时按照数据唯一标识ID对应的区域信息将数据库总库模块的总库数据分发到各个区域对应的数据分库模块；
数据分库模块：用于存放通过数据分发后得到的某一特定地区的数据，该数据分库模块可以无限扩展，可以根据业务需要或增加或去掉，做到可扩展性；
定时统计计算模块：利用数据库定时事务触发存储过程，定时获取数据库分库模块的数据(例如每日、每周、每年等)，通过相应预设置的计算统计后，形成数据库报表的数据库表，存放在对应区域的报表库模块中，此处的统计计算存储可以根据地区业务不同而作调整，实现了地区业务差异化的需求；
报表库模块：用于存放生成的数据报表的数据库表；
用户端：通过PHP、WEB或者java程序读取该报表库模块中的数据报表，在用户端数据统计页面呈现该数据报表；
参考图2，是一个实际应用案例的示意图，某APP初始化，全球不同区域的用户向该数据库总库写入数据，在写入数据的时候带有数据唯一标识ID，例如有关大中华地区的数据带有大中华地区的标识ID、有关中东地区的数据带有中东地区的标识ID，有关全球的数据带有全球标识ID；
定时按照数据唯一标识ID对应的区域信息将数据库总库模块的总库数据分发到各个区域对应的数据分库模块；大中华地区的数据根据其大中华地区的标识ID分发到大中华地区分库、有关中东地区的数据根据其中东地区的标识ID分发到中东地区分库，有关全球的数据根据其全球标识ID分发到全球合计分库；
定时各个获取数据库分库模块的数据，通过相应预设置的计算统计后，形成数据库报表的数据库表，存放在对应区域的报表库模块中；
通过PHP或者java程序通过读取该报表库，在客户端数据统计页面呈现该数据报表；
应当理解的是，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，而所有这些改进和变换都应属于本发明所附权利要求的保护范围。
Claims (8)
1.一种实现多地区数据统计的数据库系统，其特征在于，包括：数据库总库模块：用户向该数据库总库写入数据，该数据带有数据唯一标识ID，数据唯一标识ID至少能够标识该数据所对应的区域信息。
2.根据权利要求1所述的数据库系统，其特征在于，还包括：
数据分发模块：利用数据库定时事务触发存储过程，定时按照数据唯一标识ID对应的区域信息将数据库总库模块的总库数据分发到各个区域对应的数据分库模块；
数据分库模块：用于存放通过数据分发后得到的某区域的数据。
3.根据权利要求2所述的数据库系统，其特征在于，还包括：
定时统计计算模块：定时获取数据库分库模块的数据，通过相应预设置的计算统计后，形成数据库报表的数据库表，存放在对应区域的报表库模块中；
报表库模块：用于存放生成的数据报表的数据库表；
用户端：通过PHP、WEB或者java程序读取该报表库模块中的数据报表，在用户端数据统计页面呈现该数据报表。
4.根据权利要求1所述的数据库系统，其特征在于，该数据分库模块可以无限扩展，可以根据业务需要或增加或去掉。
5.根据权利要求1所述的数据库系统，其特征在于，定时统计计算模块按照每日、每周、每年的周期进行统计计算。
6.一种实现多地区数据统计的数据库方法，其特征在于，包括：用户向数据库总库为总库写入数据的时候，向该数据增加数据唯一标识ID，数据唯一标识ID至少能够标识该数据所对应的区域信息。
7.根据权利要求6所述的数据库方法，其特征在于，还包括：
数据分发模块：利用数据库定时事务触发存储过程，定时按照数据唯一标识ID对应的区域信息将数据库总库模块的总库数据分发到各个区域对应的数据分库模块；
数据分库模块：用于存放通过数据分发后得到的某区域的数据。
8.根据权利要求7所述的数据库方法，其特征在于，还包括：
定时获取数据库分库模块的数据，通过相应预设置的计算统计后，形成数据库报表的数据库表，存放在对应区域的报表库模块中；
将生成的数据报表的数据库表存储在报表库模块中；
通过PHP、WEB或者java程序读取该报表库模块中的数据报表，在用户端数据统计页面呈现该数据报表。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911263797.3A CN111177256A (zh) | 2019-12-11 | 2019-12-11 | 一种实现多地区数据统计的数据库系统和方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911263797.3A CN111177256A (zh) | 2019-12-11 | 2019-12-11 | 一种实现多地区数据统计的数据库系统和方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111177256A true CN111177256A (zh) | 2020-05-19 |
Family
ID=70657235
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201911263797.3A Withdrawn CN111177256A (zh) | 2019-12-11 | 2019-12-11 | 一种实现多地区数据统计的数据库系统和方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111177256A (zh) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101004758A (zh) * | 2007-01-26 | 2007-07-25 | 华为技术有限公司 | 生成和获取报表的方法及相应的系统 |
| CN106777037A (zh) * | 2016-12-09 | 2017-05-31 | 南京欣网互联信息技术有限公司 | 一种生成运营平台一体化报表的方法 |
| CN108053313A (zh) * | 2018-01-02 | 2018-05-18 | 中国工商银行股份有限公司 | 跨境开户数据处理方法、装置及系统 |
| CN109144966A (zh) * | 2018-07-06 | 2019-01-04 | 航天星图科技（北京）有限公司 | 一种海量时空数据的高效组织与管理方法 |
| CN109471846A (zh) * | 2018-11-02 | 2019-03-15 | 中国电子科技网络信息安全有限公司 | 一种基于云日志分析的云上用户行为审计系统及方法 |
| CN109597850A (zh) * | 2018-11-22 | 2019-04-09 | 四川省烟草公司成都市公司 | 烟草综合信息数据加工储存平台及数据加工方法 |
| CN109614506A (zh) * | 2018-11-05 | 2019-04-12 | 厦门市美亚柏科信息股份有限公司 | 一种基于rocksdb排重数据导入图库的方法、装置及存储介质 |
-
2019
- 2019-12-11 CN CN201911263797.3A patent/CN111177256A/zh not_active Withdrawn
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101004758A (zh) * | 2007-01-26 | 2007-07-25 | 华为技术有限公司 | 生成和获取报表的方法及相应的系统 |
| CN106777037A (zh) * | 2016-12-09 | 2017-05-31 | 南京欣网互联信息技术有限公司 | 一种生成运营平台一体化报表的方法 |
| CN108053313A (zh) * | 2018-01-02 | 2018-05-18 | 中国工商银行股份有限公司 | 跨境开户数据处理方法、装置及系统 |
| CN109144966A (zh) * | 2018-07-06 | 2019-01-04 | 航天星图科技（北京）有限公司 | 一种海量时空数据的高效组织与管理方法 |
| CN109471846A (zh) * | 2018-11-02 | 2019-03-15 | 中国电子科技网络信息安全有限公司 | 一种基于云日志分析的云上用户行为审计系统及方法 |
| CN109614506A (zh) * | 2018-11-05 | 2019-04-12 | 厦门市美亚柏科信息股份有限公司 | 一种基于rocksdb排重数据导入图库的方法、装置及存储介质 |
| CN109597850A (zh) * | 2018-11-22 | 2019-04-09 | 四川省烟草公司成都市公司 | 烟草综合信息数据加工储存平台及数据加工方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105373448B (zh) | 数据库中故障数据的恢复方法和系统 | |
| CN110489699B (zh) | 一种异步数据采集方法及系统 | |
| US20180365649A1 (en) | Attendance processing method and apparatus | |
| US8620720B2 (en) | Embedding calendar knowledge in event-driven inventory forecasting | |
| CN100449548C (zh) | 数据库同步方法及系统 | |
| WO2020077877A1 (zh) | 平台商品入驻方法、装置、计算机设备及存储介质 | |
| US11134193B2 (en) | Information processing system, information processing method, and non-transitory computer-readable storage medium | |
| CN103268336A (zh) | 一种快数据和大数据结合的数据处理方法及其系统 | |
| CN103744906A (zh) | 一种数据同步系统、方法及装置 | |
| CN110162570A (zh) | 区块链数据的分次获取方法和装置 | |
| CN105160549A (zh) | 一种客流统计分析系统 | |
| CN106933843A (zh) | 数据库心跳检测方法以及装置 | |
| CN110309249A (zh) | 地图服务发布方法和装置 | |
| US11671669B2 (en) | System and method of tablet-based distribution of digital media content | |
| CN109360106B (zh) | 画像构建方法、系统、介质和计算机系统 | |
| CN111833121A (zh) | 售货机、售货机管理方法及装置 | |
| CN115480987A (zh) | 链路数据展示方法、装置和计算机设备 | |
| CN111177256A (zh) | 一种实现多地区数据统计的数据库系统和方法 | |
| CN105574026A (zh) | 非关系型数据库支持事务的方法及装置 | |
| CN111666144A (zh) | 批处理任务执行方法、系统以及机房部署系统 | |
| WO2020000198A1 (zh) | 一种基于区块链的考勤系统 | |
| CN105512829A (zh) | 基于webservice协议的卡片价值多维度成本归集方法 | |
| CN115661624A (zh) | 一种货架的数字化方法、装置及电子设备 | |
| CN111966650A (zh) | 一种运维大数据共享数据表的处理方法、装置及存储介质 | |
| CN102750822B (zh) | 一种智能交通的业务处理系统及业务处理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WW01 | Invention patent application withdrawn after publication |
Application publication date: 20200519 |
|
| WW01 | Invention patent application withdrawn after publication |