CN112732712A - 图表信息数据存储方法、系统及相应设备和存储介质 - Google Patents
图表信息数据存储方法、系统及相应设备和存储介质 Download PDFInfo
- Publication number
- CN112732712A CN112732712A CN202011595047.9A CN202011595047A CN112732712A CN 112732712 A CN112732712 A CN 112732712A CN 202011595047 A CN202011595047 A CN 202011595047A CN 112732712 A CN112732712 A CN 112732712A
- Authority
- CN
- China
- Prior art keywords
- data
- dimension
- tables
- chart information
- establishing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 30
- 238000013500 data storage Methods 0.000 title claims abstract description 15
- 238000000605 extraction Methods 0.000 claims abstract description 8
- 238000004590 computer program Methods 0.000 claims description 9
- 230000008520 organization Effects 0.000 claims description 9
- 230000008859 change Effects 0.000 claims description 4
- 238000013075 data extraction Methods 0.000 claims description 3
- 230000002354 daily effect Effects 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- PEDCQBHIVMGVHV-UHFFFAOYSA-N Glycerine Chemical compound OCC(O)CO PEDCQBHIVMGVHV-UHFFFAOYSA-N 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 238000007728 cost analysis Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 238000013499 data model Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 229910052760 oxygen Inorganic materials 0.000 description 1
- 239000001301 oxygen Substances 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
- 230000003442 weekly effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了图表信息数据存储方法、系统及相应设备和存储介质，其中所述方法包括：根据业务流水数据确定所涉及的维度类型；对于每一维度类型建立一个维度表，所述维度表包含维度字段和维度名称；对于每一时间维度建立一个数据表，所述数据表包含维度值字段和数据字段；根据数据表的数据字段对业务流水数据进行抽取，将抽取结果存储到相应数据表中，并将数据对应的维度信息和维度数据值存储到相应数据表中，其中存储有数据的数据表用于响应于进行图表信息展现，根据图表信息的维度直接从相应数据表获取对应的数值。本发明使能提高图表信息展现时的数据加载速度。
Description
技术领域
本申请涉及电数字数据处理领域，尤其涉及图表信息数据存储方法、系统及相应设备和存储介质。
背景技术
在商业智能化视觉显示中，图表信息展现发挥了不可替代的作用。然而，目前生产中这些数据信息直接从生产中的数据中关联获取，原生数据展现。这种方式存在加载速度慢、涉及数据源多、维护复杂等问题。
发明内容
为了克服现有技术中存在的不足，本发明提供一种图表信息数据存储方法、系统及相应设备和存储介质，其使能提高图表信息展现时的数据加载速度。
在本发明的第一方面，提供一种图表信息数据存储方法，该方法包括：
根据业务流水数据确定所涉及的维度类型；
对于每一维度类型建立一个维度表，所述维度表包含维度字段和维度名称；
对于每一时间维度建立一个数据表，所述数据表包含维度值字段和数据字段；
根据数据表的数据字段对业务流水数据进行抽取，将抽取结果存储到相应数据表中，并将数据对应的维度信息和维度数据值存储到相应数据表中，其中存储有数据的数据表用于响应于进行图表信息展现，根据图表信息的维度直接从相应数据表获取对应的数值。
在本发明的第二方面，提供一种图表信息数据存储系统，该系统包括：
维度类型确定模块，用于根据业务流水数据确定所涉及的维度类型；
维度表建立模块，用于对于每一维度类型建立一个维度表，所述维度表包含维度字段和维度名称；
数据表建立模块，用于对于每一时间维度建立一个数据表，所述数据表包含维度值字段和数据字段；
数据抽取存储模块，用于根据数据表的数据字段对业务流水数据进行抽取，将抽取结果存储到相应数据表中，并将数据对应的维度信息和维度数据值存储到相应数据表中，其中存储有数据的数据表用于响应于进行图表信息展现，根据图表信息的维度直接从相应数据表获取对应的数值。
在本发明的第三方面，提供一种计算机设备，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其中所述处理器执行所述计算机程序时实现根据本发明的第一方面的方法的步骤。
根据本发明的第四方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现根据本发明的第一方面的方法的步骤。
按照本发明，将数据和维度隔离开，有利于数据存储的扩展性、高效性、便捷性，有助于数据挖掘、数据分析等基础数据的获取，提高开发效率，降低运维成本。通过对数据信息进行多维度存储，后台数据服务直接获取对应的数值，达到了高效响应。数据网格化的存储也提高了数据存储的高效性。数据结构划分为数据和维度使数据与约束条件解耦，可以更好地适应随着业务发展增加维度或数据字段的场景，同时也能更好地分工，提高开发人员的工作效率。图表信息数据与生产数据的解耦也使得运维变得简便，降低运维成本。
结合附图阅读本发明实施方式的详细描述后，本发明的其它特点和优点将变得更加清楚。
附图说明
图1为根据本发明方法的一实施例的流程图；
图2为根据本发明系统的一实施例的框图。
为清晰起见，这些附图均为示意性及简化的图，它们只给出了对于理解本发明所必要的细节，而省略其他细节。
具体实施方式
下面参照附图对本发明的实施方式和实施例进行详细说明。
通过下面给出的详细描述，本发明的适用范围将显而易见。然而，应当理解，在详细描述和具体例子表明本发明优选实施例的同时，它们仅为说明目的给出。
图1示出了根据本发明的图表信息数据存储方法的一优选实施例的流程图。
在步骤S102，根据具体业务中各个业务主题对象即数据模型中的实体的自然属性，例如：发生的时间、发生的地点、所属区域、隶属部门、组织机构、预算类型、预算项目类型等等，确定所涉及的维度类型，如时间、区域、组织、部门、类型等。维度部分定义数据的时间域、颗粒度、离散值及关联性等。
在步骤S104，对于每一维度类型，建立一个对应的维度表。每一维度表包含维度编码、维度名称、备注等字段。
在步骤S106，对于每一时间维度，建立一个对应的数据表。每一数据表包含维度值字段(用于存储维度表的维度字段的值)和数据字段，即包含存储信息的所有关键数值和数据对应的维度值。例如，可建立年度数据表、半年数据表、月度数据表、每周数据表、每日数据表等。维度值字段例如为时间、区域、组织、部门等，数据字段例如为数量、金额、变化量、变化率等。数据表与维度表的结合构成图表信息数据结构。
在步骤S108，根据数据表的数据字段对业务流水数据进行抽取，例如采用ETL(Extract-Transform-Load，数据抽取、转换和加载)定时进行处理，将抽取结果存储到对应的数据表中，同时将数据对应的维度信息和维度数据值根据具体业务流水数据本身的维度信息按着维度表的维度字段存储到相应数据表中，其中存储有数据的数据表用于响应于进行图表信息展现，根据图表信息的维度直接从相应数据表获取对应的数值，从而提高数据加载速度。
在此说明应用本发明方法的一个例子。医院费用分析中涉及大量“宽表”的运用，例如医院费用年汇总、医院费用月汇总等。根据费用值数据对医院费用信息的影响，该图表信息为在时间维度上费用数据的情况，即时间对医院费用信息影响力的表现，如：费用趋势、费用同比、费用环比、每年最高费用项对比、每年最低费用项对比、每年费用结余对比等。“宽表”从字面意义上讲就是字段比较多的数据库表，通常是指业务主题相关的指标、维度、属性关联在一起的一张数据库表。由于资产信息数据点比较多，维度错综复杂，使用本发明方法非常合适。
确定医院费用数据涉及的维度包含时间维度、组织维度等。具体地，时间维度有日、周、月、半年、年等；组织维度有省级、市级、区县级、乡镇级、村级等。
数据内容为医院运营、管理、医疗服务等的费用额，例如：办公费、印刷费、水费、电费、取暖费、医疗费、血费、氧气费等等。
建立维度表，并定义对应的维度编码和维度名称。例如：
时间维度表
| 时间维度编码 | 时间维度名称 | 备注 |
| Y | 年 | 自然年 |
| H | 半年 | 自然半年 |
| M | 月 | 自然月 |
| W | 周 | 自然周 |
| D | 日 | 自然日 |
组织维度表
| 组织维度编码 | 组织维度名称 | 备注 |
| P | 省 | 省、自治区、直辖市 |
| C | 市 | 省会、直辖市、地级市 |
| D | 区县 | 区或县 |
| T | 乡镇 | 乡或镇 |
| V | 村 | 村或大队 |
后台ETL服务定时(例如每日凌晨2点)抽取医院生产服务的费用数据到建立的图表数据库的医院费用信息数据表中，医院费用信息数据表包含各种费用值和维度值(时间维度值、组织维度值)。
在对数据表存储的时候将定义好的维度信息和维度数据值一起存储到数据表内。每个维度的具体数值，例如“2020年”、“北京市”等来源于医院及其费用本身的信息。
例如，建立的医院费用信息数据表包括年度数据表、月度数据表和每日数据表。年度数据表存储着时间维度值Y(年)和完整的2018年、2019年、2020年的数据信息；月度数据表存储着时间维度值M(月)和每年该月对应的数据信息；每日数据表存储着时间维度值D(日)和每年每月该日对应的数据信息。后台服务就可以根据前端界面的不同维度参数来直接获取对应的数值。例如：获取年度费用统计，传参为维度值Y-2020，直接从年度数据表获取2020年的费用统计；查看2020年月度费用走向，传参为维度值M-2020，直接从月度数据表获取2020年的12个月的费用列表信息；更详细的趋势分析，传参为维度值D-2020，直接从每日数据表获取2020年365天的费用列表信息；对于其它维度，依此类推。
图2示出了根据本发明的图表信息数据存储系统的一优选实施例的框图，该系统包括：
维度类型确定模块202，用于根据业务流水数据确定所涉及的维度类型；
维度表建立模块204，用于对于每一维度类型建立一个维度表，所述维度表包含维度字段和维度名称；
数据表建立模块206，用于对于每一时间维度建立一个数据表，所述数据表包含维度值字段和数据字段；
数据抽取存储模块208，用于根据数据表的数据字段对业务流水数据进行抽取，将抽取结果存储到相应数据表中，并将数据对应的维度信息和维度数据值存储到相应数据表中，其中存储有数据的数据表用于响应于进行图表信息展现，根据图表信息的维度直接从相应数据表获取对应的数值。
在另一实施例中，本发明提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现结合图1所示和所述的方法实施例或其它相应方法实施例的步骤，在此不再赘述。
在另一实施例中，本发明提供一种计算机设备，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其中所述处理器执行所述计算机程序时实现结合图1所示和所述的方法实施例或其它相应方法实施例的步骤，在此不再赘述。
在此所述的多个不同实施方式或者其特定特征、结构或特性可在本发明的一个或多个实施方式中适当组合。另外，在某些情形下，只要适当，流程图中和/或流水处理描述的步骤顺序可修改，并不必须精确按照所描述的顺序执行。另外，本发明的多个不同方面可使用软件、硬件、固件或者其组合和/或执行所述功能的其它计算机实施的模块或装置进行实施。本发明的软件实施可包括保存在计算机可读介质中并由一个或多个处理器执行的可执行代码。计算机可读介质可包括计算机硬盘驱动器、ROM、RAM、闪存、便携计算机存储介质如CD-ROM、DVD-ROM、闪盘驱动器和/或具有通用串行总线(USB)接口的其它装置，和/或任何其它适当的有形或非短暂计算机可读介质或可执行代码可保存于其上并由处理器执行的计算机存储器。本发明可结合任何适当的操作系统使用。
除非明确指出，在此所用的单数形式“一”、“该”均包括复数含义(即具有“至少一”的意思)。应当进一步理解，说明书中使用的术语“具有”、“包括”和/或“包含”表明存在所述的特征、步骤、操作、元件和/或部件，但不排除存在或增加一个或多个其他特征、步骤、操作、元件、部件和/或其组合。如在此所用的术语“和/或”包括一个或多个列举的相关项目的任何及所有组合。
前面说明了本发明的一些优选实施例，但是应当强调的是，本发明不局限于这些实施例，而是可以本发明主题范围内的其它方式实现。本领域技术人员可以在本发明技术构思的启发和不脱离本发明内容的基础上对本发明做出各种变型和修改，这些变型或修改仍落入本发明的保护范围之内。
Claims (10)
1.一种图表信息数据存储方法，其特征在于，所述方法包括：
根据业务流水数据确定所涉及的维度类型；
对于每一维度类型建立一个维度表，所述维度表包含维度字段和维度名称；
对于每一时间维度建立一个数据表，所述数据表包含维度值字段和数据字段；
根据数据表的数据字段对业务流水数据进行抽取，将抽取结果存储到相应数据表中，并将数据对应的维度信息和维度数据值存储到相应数据表中，其中存储有数据的数据表用于响应于进行图表信息展现，根据图表信息的维度直接从相应数据表获取对应的数值。
2.根据权利要求1所述的方法，其特征在于，所述数据表包括：年度数据表、半年数据表、月度数据表、每周数据表和/或每日数据表。
3.根据权利要求1所述的方法，其特征在于，所述维度类型包括时间、区域、组织和/或部门。
4.根据权利要求1所述的方法，其特征在于，所述数据字段包括数量、金额、变化量、变化率。
5.根据权利要求1所述的方法，其特征在于，所述维度值字段包括时间值字段、区域值字段、组织值字段和/或部门值字段。
6.根据权利要求1所述的方法，其特征在于，所述抽取采用ETL进行。
7.一种图表信息数据存储系统，其特征在于，所述系统包括：
维度类型确定模块，用于根据业务流水数据确定所涉及的维度类型；
维度表建立模块，用于对于每一维度类型建立一个维度表，所述维度表包含维度字段和维度名称；
数据表建立模块，用于对于每一时间维度建立一个数据表，所述数据表包含维度值字段和数据字段；
数据抽取存储模块，用于根据数据表的数据字段对业务流水数据进行抽取，将抽取结果存储到相应数据表中，并将数据对应的维度信息和维度数据值存储到相应数据表中，其中存储有数据的数据表用于响应于进行图表信息展现，根据图表信息的维度直接从相应数据表获取对应的数值。
8.根据权利要求7所述的系统，其特征在于，所述抽取采用ETL进行。
9.一种计算机设备，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其中所述处理器执行所述计算机程序时实现根据权利要求1所述的方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现根据权利要求1所述的方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011595047.9A CN112732712A (zh) | 2020-12-29 | 2020-12-29 | 图表信息数据存储方法、系统及相应设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011595047.9A CN112732712A (zh) | 2020-12-29 | 2020-12-29 | 图表信息数据存储方法、系统及相应设备和存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112732712A true CN112732712A (zh) | 2021-04-30 |
Family
ID=75610950
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011595047.9A Pending CN112732712A (zh) | 2020-12-29 | 2020-12-29 | 图表信息数据存储方法、系统及相应设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112732712A (zh) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104573077A (zh) * | 2015-01-27 | 2015-04-29 | 中国联合网络通信集团有限公司 | 数据展示方法及装置 |
| CN105468651A (zh) * | 2014-09-12 | 2016-04-06 | 阿里巴巴集团控股有限公司 | 一种关系数据库数据查询方法及系统 |
| CN107729399A (zh) * | 2017-09-21 | 2018-02-23 | 北京京东尚科信息技术有限公司 | 数据处理的方法和装置 |
| CN108052513A (zh) * | 2017-09-07 | 2018-05-18 | 中国石油化工股份有限公司 | 油田开发指标数据立方体可视化设计方法和装置 |
| CN110275920A (zh) * | 2019-06-27 | 2019-09-24 | 中国石油集团东方地球物理勘探有限责任公司 | 数据查询方法、装置、电子设备及计算机可读存储介质 |
| CN110716989A (zh) * | 2019-08-27 | 2020-01-21 | 苏宁云计算有限公司 | 维度数据处理方法、装置、计算机设备和存储介质 |
| CN111444256A (zh) * | 2019-01-16 | 2020-07-24 | 北京京东尚科信息技术有限公司 | 一种数据可视化的实现方法和装置 |
-
2020
- 2020-12-29 CN CN202011595047.9A patent/CN112732712A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105468651A (zh) * | 2014-09-12 | 2016-04-06 | 阿里巴巴集团控股有限公司 | 一种关系数据库数据查询方法及系统 |
| CN104573077A (zh) * | 2015-01-27 | 2015-04-29 | 中国联合网络通信集团有限公司 | 数据展示方法及装置 |
| CN108052513A (zh) * | 2017-09-07 | 2018-05-18 | 中国石油化工股份有限公司 | 油田开发指标数据立方体可视化设计方法和装置 |
| CN107729399A (zh) * | 2017-09-21 | 2018-02-23 | 北京京东尚科信息技术有限公司 | 数据处理的方法和装置 |
| CN111444256A (zh) * | 2019-01-16 | 2020-07-24 | 北京京东尚科信息技术有限公司 | 一种数据可视化的实现方法和装置 |
| CN110275920A (zh) * | 2019-06-27 | 2019-09-24 | 中国石油集团东方地球物理勘探有限责任公司 | 数据查询方法、装置、电子设备及计算机可读存储介质 |
| CN110716989A (zh) * | 2019-08-27 | 2020-01-21 | 苏宁云计算有限公司 | 维度数据处理方法、装置、计算机设备和存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Poncet | Provincial migration dynamics in China: Borders, costs and economic motivations | |
| CN110472068A (zh) | 基于异构分布式知识图谱的大数据处理方法、设备及介质 | |
| CN103678339B (zh) | 数据回流、关系型数据库中的数据访问方法及系统 | |
| CN102541867A (zh) | 数据字典生成方法及系统 | |
| CN110084536B (zh) | 工作日志处理方法及装置 | |
| CN105760474A (zh) | 一种基于位置信息的文档集的特征词提取方法及系统 | |
| Hauff et al. | Placing images on the world map: a microblog-based enrichment approach | |
| CN101859303A (zh) | 元数据管理方法及管理系统 | |
| CN102722537A (zh) | 一种数据库测试数据的生成方法及系统 | |
| CN106021301B (zh) | 一种不同文件格式的数据比对系统及方法 | |
| CN107729330B (zh) | 获取数据集的方法和装置 | |
| CN111125229A (zh) | 数据血缘生成方法、装置、电子设备 | |
| CN105808653A (zh) | 一种基于用户标签系统的数据处理方法及装置 | |
| CN103235811A (zh) | 一种数据存储方法及装置 | |
| CN113032403A (zh) | 数据洞察方法、装置、电子设备及存储介质 | |
| CN112541693A (zh) | 绩效数据生成方法、系统、电子设备及存储介质 | |
| CN114416891A (zh) | 在知识图谱中进行数据处理的方法、系统、装置和介质 | |
| CN114490840A (zh) | 一种日期维度表自动生成方法及系统 | |
| CN114637811A (zh) | 数据表实体关系图生成方法、装置、设备及存储介质 | |
| CN114066533A (zh) | 产品推荐方法、装置、电子设备及存储介质 | |
| CN112732712A (zh) | 图表信息数据存储方法、系统及相应设备和存储介质 | |
| CN116468011A (zh) | 一种报表的生成方法、装置、设备及存储介质 | |
| CN115455106B (zh) | 配用电运维的配电监测方法、服务平台、设备及存储介质 | |
| CN116910032A (zh) | 一种数据集市迁移的方法、装置、设备及存储介质 | |
| CN107608950A (zh) | 一种生成电子报表的方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |