CN111460045A - 数据仓库建设的建模方法、模型、计算机设备和存储介质 - Google Patents
数据仓库建设的建模方法、模型、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN111460045A CN111460045A CN202010134023.7A CN202010134023A CN111460045A CN 111460045 A CN111460045 A CN 111460045A CN 202010134023 A CN202010134023 A CN 202010134023A CN 111460045 A CN111460045 A CN 111460045A
- Authority
- CN
- China
- Prior art keywords
- data
- business
- layer
- detail
- convert
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 238000010276 construction Methods 0.000 title claims abstract description 23
- 230000008676 import Effects 0.000 claims abstract description 9
- 238000006243 chemical reaction Methods 0.000 claims description 24
- 238000004590 computer program Methods 0.000 claims description 15
- 230000008569 process Effects 0.000 claims description 13
- 238000004458 analytical method Methods 0.000 claims description 7
- 238000009795 derivation Methods 0.000 claims description 7
- 238000012544 monitoring process Methods 0.000 claims description 5
- 238000012795 verification Methods 0.000 claims description 3
- 230000002776 aggregation Effects 0.000 claims 2
- 238000004220 aggregation Methods 0.000 claims 2
- 238000012423 maintenance Methods 0.000 abstract description 3
- 238000013461 design Methods 0.000 description 10
- 238000013499 data model Methods 0.000 description 9
- 238000012545 processing Methods 0.000 description 6
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 230000008570 general process Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000007670 refining Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/283—Multi-dimensional databases or data warehouses, e.g. MOLAP or ROLAP
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/211—Schema design and management
- G06F16/212—Schema design and management with details for data modelling support
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
数据仓库建设的建模方法、模型、计算机设备和存储介质,属于业务建模领域,为了解决维护以及扩展性比较差的问题,要点是将抽取的业务系统中的业务数据导入至原始层对应的表中;转换业务数据至数据明细层,业务数据按照业务主题进行分域处理;转换业务明细数据至汇总衍生层,业务明细数据进行域间合并或衍生;转换业务合并或衍生数据至数据集市层,业务合并或衍生数据根据需求和/或页面展示进行数据汇总,效果是综合考虑功能需求以及实际业务,建立后的模型不但便于扩展,也能满足功能需求。
Description
技术领域
本发明属于业务建模领域,涉及一种数据仓库建设的建模方法及模型。
背景技术
业务建模是建设数据仓库过程中最为重要的难点之一,模型建立的好与坏直接影响到系统的稳定性、健壮性、可扩展型和是否拥有良好的性能。所谓模型就是数据仓库内容的基本库结构和数据处理流程,可以用数据模型的形式来描述和开发维护。对于注重数据利用的分析型系统来说,数据模型的重要性是显而易见的,数据模型基本决定了数据仓库的轮廓,模型构想的功能范围基本决定了数据仓库的功能范围,数据模型建立的成败基本决定了数据仓库建立的成败。
数据仓库建模体系指的是数据仓库从无到有的一整套建模方法,最常见的三种数据仓库建模体系分别为:规范化数据仓库,维度建模数据仓库,独立数据集市,这些建模体系各有优缺点,大致过程是根据业务需求去建立模型,分析整理数据快速适应需求,包括建立逻辑模型,物理建模等,最后得到一个基于需求的数据集市,这种方式是开发速度快,能完全满足需求,但是后期的维护以及扩展性比较差,如果面对的业务需求整体上是不确定的或很难确定的,那么就需要数据模型在提炼业务规则上要更加深入。
发明内容
为了解决上述问题,本发明提出如下技术方案:一种数据仓库建设的建模方法,包括
将抽取的业务系统中的业务数据导入至原始层对应的表中;
转换业务数据至数据明细层,业务数据按照业务主题进行分域处理;
转换业务明细数据至汇总衍生层,业务明细数据进行域间合并或衍生;
转换业务合并或衍生数据至数据集市层,业务合并或衍生数据根据需求和/或页面展示进行数据汇总。
进一步的,非需求的域间合并或衍生的业务明细数据,直接转换业务明细数据至数据集市层,将业务明细数据根据需求和/或页面展示进行数据汇总。
进一步的,监控不同结构层间的数据转换执行的过程、结果。
进一步的,原始层中的数据加载的范围包括业务表以及字典表,数据明细层进行数据转换中的编码转换及对数据质量校验,所述编码转换是对各业务系统的数据按照分析系统标准的字典表代码转换。
进一步的,数据明细层的数据粒度与业务系统的数据粒度一致,汇总衍生层的数据粒度与业务系统的数据粒度一致。
本发明还涉及一种数据仓库建设模型,包括
原始层,用于抽取的业务系统中的业务数据导入其对应的表中;
数据明细层,用于将业务数据按照业务主题进行分域处理;
汇总衍生层,用于将业务明细数据进行域间合并或衍生;
数据集市层,用于将业务合并或衍生数据根据需求和/或页面展示进行数据汇总。
进一步的,所述数据集市层,还用于对数据明细层的非需求的域间合并或衍生的业务明细数据,直接根据需求和/或页面展示进行数据汇总。
进一步的,所述的数据仓库建设模型还包括监控层,监控不同结构层间的数据转换执行的过程、结果。
本发明还涉及一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现任一项所述数据仓库建设的建模方法的步骤。
本发明还涉及一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现任一项所述的数据仓库建设的建模方法的步骤。
有益效果:本发明提出了上下结合的建模方法,在考虑了需求的基础上,从实际业务出发,根据业务去开发主题域,分为不同层架构,综合考虑功能需求以及实际业务,建立后的模型不但便于扩展,也能满足功能需求。
附图说明
图1是建模流程图。
具体实施方式
为了进一步阐述本发明,结合附图及具体实施例对本发明的数据仓库建设的建模方法及模型进一步说明,在该部分涉及的技术术语如表一词汇含义表所列。
表一
本发明实质是一种模型架构,属于计算机软件,模型分为STG层(原始层)、DWD层(数据明细层)、DWA层(汇总衍生层)、DM层(数据集市层)。数据流向由业务系统向DM层逐层转换形成数据仓库,数据仓库建设的建模方法的具体流程图1所示,包括如步骤:
1:将抽取的业务系统中的业务数据导入至原始层对应的表中,具体的,业务系统到STG层:STG层上的数据模型结构,与各业务系统中的基本保持一致,通过ETL工具,将业务系统中的数据直接导入STG对应的表中。数据加载的范围包括业务表以及字典表。
2:转换业务数据至数据明细层,业务数据按照业务主题进行分域处理,具体的STG层到DWD层:数据接入到STG层后,通过ETL工具,将业务数据转换至DWD层。DWD层的数据粒度与业务系统一致,并且DWD层的数据模型原则上保持稳定,为后续转换过程的产品化打好基础。数据转换中的编码转换,在该层完成。各业务系统的数据,需要按照分析系统标准的字典表代码进行转换。对于数据质量的校验,例如非空检验、唯一性校验等。
3:转换业务明细数据至汇总衍生层,业务明细数据进行域间合并或衍生,具体的,DWD层到DWA层:按照数据加工步骤和逻辑,继续进行加工,数据转换至DWA层后,数据粒度依然与原始数据保持一致,但进行了内部扩展和汇总。
4:转换业务合并或衍生数据至数据集市层,业务合并或衍生数据根据需求和/或页面展示进行数据汇总,具体的,DWA层到DM层:按照数据加工步骤和逻辑,将数据从DWA层转换至DM。DM层的数据粒度不再是明细数据,而是汇总的、满足对外提供分析的数据。
5:非需求的域间合并或衍生的业务明细数据,直接转换业务明细数据至数据集市层,将业务明细数据根据需求和/或页面展示进行数据汇总,具体的,DWD层到DM层:根据数据加工的需要,对于不需要加工到DWA的数据,可以直接从DWD层转换到DM。同时,将DWD层的字典表,在DM层建立视图。
6:监控不同结构层间的数据转换执行的过程、结果,具体的,ETL监控:各层数据转换过程,都需要将执行状态、结果、涉及数据行数等进行监控。
对于步骤1-4的具体数据转换实例,给出如下应用表格:表二是步骤1-4各层举例及说明,其中业务数据是医疗数据。
表二
由表二可知,本发明的业务数据是医疗数据,具有不同层架构,主要包括患者信息、住院信息、诊断信息及费用信息,在数据明细层,按照主题,将患者、住院、诊断及费用分为三个分域,能够方便域内拓展字段,便于扩展。并且通过不同域间合并和整理,能够得到合并域和衍生域,在业务数据基础上,将实体基本属性与实体业务分类属性分离,在实体分类属性发生变化时,只需要增加实体分类关系数据记录即可,对模型本身不产生影响。模型输出按照需求及页面展现要求,将合并的汇总域形成总表,根据需求展示。
由上述,该方案考虑了模型设计中所要考虑的关键因素,包括模型完整性、稳定性、扩展性、继承性、前瞻性。
模型完整性:包含两类:业务覆盖范围的完整性、模型设计的完整性
业务覆盖范围的完整性:通过对数据环境与应用环境的分析,对模型的域、子域和实体进行覆盖性测试,以保证模型覆盖到工程要求的数据整合范围。
模型设计的完整性包括:模型实体完整性、模型参照完整性。
稳定性:为保证模型的稳定性,将实体基本属性与实体业务分类属性分离,在实体分类属性发生变化时,只需要增加实体分类关系数据记录即可,对模型本身不产生影响。
扩展性:模型设计中实体内只保留最细粒度的基本维,粗粒度或上层的属性通过属性依赖关系实体来表现,这样在扩充属性或者扩充实体关系时,只增加表现属性依赖关系的实体即可。
继承性:数据仓库面对的外部数据环境往往是复杂的、多变的,如何在这样的环境下保持仓库结构的稳定一致,是需要考虑数据模型的继承性问题。通过数据模型的分层设计和业务逻辑抽象,用以屏蔽生产环境的变化,从而保证数据仓库模型的在变化前后的一致继承。
前瞻性:为保证模型的前瞻性,同时采用自底向上和自顶向下的方式设计模型,其中自顶向下主要基于业务需求进行模型设计,使其可以完全覆盖到所有需求,自底向上主要基于业务逻辑而非业务需求进行模型设计,模型设计为囊括企业运营的各种业务关系,保证在有新需求时,底层模型能够对其进行支撑。
在一种方案中,可以同时对于DWD层的非需求的域间合并或衍生的业务明细数据,直接转换业务明细数据至数据集市层,将业务明细数据根据需求和/或页面展示进行数据汇总,得到汇总表输出。
即如果数据集市中需要直接展现业务明细数据,可以直接从DWD层抽取到DM层,不需要进行DWD-DWA层的处理,这样保证数据完整性的同时,也能保证数据粒度不受影响,重点展现企业运营过程中的业务结果数据。在对业务进行衍生扩展的时候,需要将业务主题数据进行再加工,确保对基础数据按照业务规则进行扩充和转换处理,处理后的数据可直接由DWA层抽取到数据集市进行展现,也可进行关联形成业务事件。
本发明是对需求分析、概念模型设计、逻辑模型设计、物理模型设计。该方案具有分布性:模型业务支持范围涵盖核心业务。事实性:设计后的模型满足实际业务需求。主题划分:根据业务关系的耦合度进行主题域划分。是一种自上而下的设计和自下而上的验证。
能够解决现有方法的继承性差,不易于扩展。规范性差,不利于管理。未全局考虑,覆盖率差。分析质量、效率难以满足要求。为满足需求快速定制,后期维护成本大。不支持异构数据源的问题。
概况的说,本发明的数据仓库建设的建模方法,包括
将抽取的业务系统中的业务数据导入至原始层对应的表中;
转换业务数据至数据明细层,业务数据按照业务主题进行分域处理;
转换业务明细数据至汇总衍生层,业务明细数据进行域间合并或衍生;
转换业务合并或衍生数据至数据集市层,业务合并或衍生数据根据需求和/或页面展示进行数据汇总。
在一种方案中,非需求的域间合并或衍生的业务明细数据,直接转换业务明细数据至数据集市层,将业务明细数据根据需求和/或页面展示进行数据汇总。
在一种方案中,监控不同结构层间的数据转换执行的过程、结果。
在一种方案中,原始层中的数据加载的范围包括业务表以及字典表,数据明细层进行数据转换中的编码转换及对数据质量校验,所述编码转换是对各业务系统的数据按照分析系统标准的字典表代码转换。
在一种方案中,数据明细层的数据粒度与业务系统的数据粒度一致,汇总衍生层的数据粒度与业务系统的数据粒度一致。
由该方法,得到一种数据仓库建设模型,包括
原始层,用于抽取的业务系统中的业务数据导入其对应的表中;
数据明细层,用于将业务数据按照业务主题进行分域处理;
汇总衍生层,用于将业务明细数据进行域间合并或衍生;
数据集市层,用于将业务合并或衍生数据根据需求和/或页面展示进行数据汇总。
在一种方案中,所述数据集市层,还用于对数据明细层的非需求的域间合并或衍生的业务明细数据,直接根据需求和/或页面展示进行数据汇总。
在一种方案中,数据仓库建设模型还包括监控层,监控不同结构层间的数据转换执行的过程、结果。
在一个实施例中,提供一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现任一项所述方法的步骤。
该方法是所述数据仓库建设的建模方法。
在一个实施例中,提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现权所述的方法的步骤,该方法是所述数据仓库建设的建模方法。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以
通过计算机程序来指令相关的硬件来完成,的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种数据仓库建设的建模方法,其特征在于,包括
将抽取的业务系统中的业务数据导入至原始层对应的表中;
转换业务数据至数据明细层,业务数据按照业务主题进行分域处理;
转换业务明细数据至汇总衍生层,业务明细数据进行域间合并或衍生;
转换业务合并或衍生数据至数据集市层,业务合并或衍生数据根据需求和/或页面展示进行数据汇总。
2.如权利要求1所述的数据仓库建设的建模方法,其特征在于,非需求的域间合并或衍生的业务明细数据,直接转换业务明细数据至数据集市层,将业务明细数据根据需求和/或页面展示进行数据汇总。
3.如权利要求1所述的数据仓库建设的建模方法,其特征在于,监控不同结构层间的数据转换执行的过程、结果。
4.如权利要求1所述的数据仓库建设的建模方法,其特征在于,原始层中的数据加载的范围包括业务表以及字典表,数据明细层进行数据转换中的编码转换及对数据质量校验,所述编码转换是对各业务系统的数据按照分析系统标准的字典表代码转换。
5.如权利要求1所述的数据仓库建设的建模方法,其特征在于,数据明细层的数据粒度与业务系统的数据粒度一致,汇总衍生层的数据粒度与业务系统的数据粒度一致。
6.一种数据仓库建设模型,其特征在于,包括
原始层,用于抽取的业务系统中的业务数据导入其对应的表中;
数据明细层,用于将业务数据按照业务主题进行分域处理;
汇总衍生层,用于将业务明细数据进行域间合并或衍生;
数据集市层,用于将业务合并或衍生数据根据需求和/或页面展示进行数据汇总。
7.如权利要求6所述的数据仓库建设模型,其特征在于,所述数据集市层,还用于对数据明细层的非需求的域间合并或衍生的业务明细数据,直接根据需求和/或页面展示进行数据汇总。
8.如权利要求6所述的数据仓库建设模型,其特征在于,还包括监控层,监控不同结构层间的数据转换执行的过程、结果。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至5中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至5中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010134023.7A CN111460045A (zh) | 2020-03-02 | 2020-03-02 | 数据仓库建设的建模方法、模型、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010134023.7A CN111460045A (zh) | 2020-03-02 | 2020-03-02 | 数据仓库建设的建模方法、模型、计算机设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111460045A true CN111460045A (zh) | 2020-07-28 |
Family
ID=71685121
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010134023.7A Pending CN111460045A (zh) | 2020-03-02 | 2020-03-02 | 数据仓库建设的建模方法、模型、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111460045A (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112084182A (zh) * | 2020-09-10 | 2020-12-15 | 重庆富民银行股份有限公司 | 一种用于数据集市和数据仓库的数据建模方法 |
CN112734281A (zh) * | 2021-01-21 | 2021-04-30 | 山东健康医疗大数据有限公司 | 一种医疗数据治理中质控和任务调度的解耦处理方法 |
CN112860659A (zh) * | 2021-01-18 | 2021-05-28 | 北京奇艺世纪科技有限公司 | 数据仓库的构建方法、装置、设备及存储介质 |
CN112988919A (zh) * | 2021-04-30 | 2021-06-18 | 广东电网有限责任公司 | 一种电网数据集市构建方法、系统、终端设备及存储介质 |
CN113742325A (zh) * | 2021-08-09 | 2021-12-03 | 广州市易工品科技有限公司 | 数据仓库建设方法、装置、系统、电子设备及存储介质 |
CN113779092A (zh) * | 2021-09-17 | 2021-12-10 | 平安科技(深圳)有限公司 | 基于数据仓库的实时数据展示方法、装置、设备及介质 |
CN113806618A (zh) * | 2021-09-22 | 2021-12-17 | 汉唐信通(北京)咨询股份有限公司 | 一种商标大数据治理方法、系统和计算机设备 |
CN114880405A (zh) * | 2022-03-31 | 2022-08-09 | 华能信息技术有限公司 | 一种基于数据湖的数据处理方法及系统 |
CN115422169A (zh) * | 2022-11-04 | 2022-12-02 | 暨南大学 | 基于商业广告场景的数据仓库构建方法及装置 |
CN116401325A (zh) * | 2023-05-15 | 2023-07-07 | 广州飞狮数字科技有限公司 | 一种基于数据仓库模型的数据处理方法及装置 |
CN117251633A (zh) * | 2023-10-08 | 2023-12-19 | 国任财产保险股份有限公司 | 一种客户数据管理系统 |
CN118152385A (zh) * | 2024-03-29 | 2024-06-07 | 西安几何数字信息技术有限公司 | 一种基于医疗的数据质量校验方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1225528A2 (en) * | 2001-01-19 | 2002-07-24 | Cognos Incorporated | Data warehouse system |
US20020099563A1 (en) * | 2001-01-19 | 2002-07-25 | Michael Adendorff | Data warehouse system |
CN109189764A (zh) * | 2018-09-20 | 2019-01-11 | 北京桃花岛信息技术有限公司 | 一种基于Hive的高校数据仓库分层设计方法 |
CN109669934A (zh) * | 2018-12-11 | 2019-04-23 | 江苏瑞中数据股份有限公司 | 一种切合电力客服业务的数据仓库系统及其构建方法 |
-
2020
- 2020-03-02 CN CN202010134023.7A patent/CN111460045A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1225528A2 (en) * | 2001-01-19 | 2002-07-24 | Cognos Incorporated | Data warehouse system |
US20020099563A1 (en) * | 2001-01-19 | 2002-07-25 | Michael Adendorff | Data warehouse system |
CN109189764A (zh) * | 2018-09-20 | 2019-01-11 | 北京桃花岛信息技术有限公司 | 一种基于Hive的高校数据仓库分层设计方法 |
CN109669934A (zh) * | 2018-12-11 | 2019-04-23 | 江苏瑞中数据股份有限公司 | 一种切合电力客服业务的数据仓库系统及其构建方法 |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112084182A (zh) * | 2020-09-10 | 2020-12-15 | 重庆富民银行股份有限公司 | 一种用于数据集市和数据仓库的数据建模方法 |
CN112860659B (zh) * | 2021-01-18 | 2023-09-01 | 北京奇艺世纪科技有限公司 | 数据仓库的构建方法、装置、设备及存储介质 |
CN112860659A (zh) * | 2021-01-18 | 2021-05-28 | 北京奇艺世纪科技有限公司 | 数据仓库的构建方法、装置、设备及存储介质 |
CN112734281A (zh) * | 2021-01-21 | 2021-04-30 | 山东健康医疗大数据有限公司 | 一种医疗数据治理中质控和任务调度的解耦处理方法 |
CN112988919A (zh) * | 2021-04-30 | 2021-06-18 | 广东电网有限责任公司 | 一种电网数据集市构建方法、系统、终端设备及存储介质 |
CN113742325A (zh) * | 2021-08-09 | 2021-12-03 | 广州市易工品科技有限公司 | 数据仓库建设方法、装置、系统、电子设备及存储介质 |
CN113779092B (zh) * | 2021-09-17 | 2024-03-01 | 平安科技(深圳)有限公司 | 基于数据仓库的实时数据展示方法、装置、设备及介质 |
CN113779092A (zh) * | 2021-09-17 | 2021-12-10 | 平安科技(深圳)有限公司 | 基于数据仓库的实时数据展示方法、装置、设备及介质 |
CN113806618A (zh) * | 2021-09-22 | 2021-12-17 | 汉唐信通(北京)咨询股份有限公司 | 一种商标大数据治理方法、系统和计算机设备 |
CN114880405A (zh) * | 2022-03-31 | 2022-08-09 | 华能信息技术有限公司 | 一种基于数据湖的数据处理方法及系统 |
CN115422169A (zh) * | 2022-11-04 | 2022-12-02 | 暨南大学 | 基于商业广告场景的数据仓库构建方法及装置 |
CN116401325A (zh) * | 2023-05-15 | 2023-07-07 | 广州飞狮数字科技有限公司 | 一种基于数据仓库模型的数据处理方法及装置 |
CN116401325B (zh) * | 2023-05-15 | 2024-03-05 | 广州飞狮数字科技有限公司 | 一种基于数据仓库模型的数据处理方法及装置 |
CN117251633A (zh) * | 2023-10-08 | 2023-12-19 | 国任财产保险股份有限公司 | 一种客户数据管理系统 |
CN117251633B (zh) * | 2023-10-08 | 2024-08-27 | 国任财产保险股份有限公司 | 一种客户数据管理系统 |
CN118152385A (zh) * | 2024-03-29 | 2024-06-07 | 西安几何数字信息技术有限公司 | 一种基于医疗的数据质量校验方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111460045A (zh) | 数据仓库建设的建模方法、模型、计算机设备和存储介质 | |
US9507807B1 (en) | Meta file system for big data | |
CN104933160B (zh) | 一种面向安全监测业务分析的etl框架设计方法 | |
CN105843867B (zh) | 基于元数据模型的检索方法和基于元数据模型的检索装置 | |
WO2023077971A1 (zh) | 事务处理方法、装置、计算设备及存储介质 | |
CN111475837B (zh) | 一种网络大数据隐私保护方法 | |
CN116266183A (zh) | 一种数据分析方法、装置、设备以及计算机存储介质 | |
CN105740383A (zh) | 一种大数据平台下数据库与缓存的数据一致性方法及系统 | |
CN106021308B (zh) | 一种面向时序大数据的查询事件识别与检测方法及系统 | |
CN106569896A (zh) | 一种数据分发及并行处理方法和系统 | |
CN110147376A (zh) | 一种基于领域本体的油气大数据查询和存储方法 | |
CN107122238B (zh) | 基于Hadoop云计算框架的高效迭代机制设计方法 | |
CN101546290A (zh) | 提高面向对象型软件中类阶层质量预测准确度的方法 | |
CN115391566A (zh) | 一种蜡模铸造生产线数据链构建方法及系统 | |
CN107341210A (zh) | Hadoop平台下的C‑DBSCAN‑K聚类算法 | |
Glava et al. | Information Systems Reengineering Approach Based on the Model of Information Systems Domains | |
CN103258047A (zh) | 一种面向药企作业成本控制数据仓库的数据组织方法 | |
Zhu et al. | Data modeling for big data | |
WO2010150750A1 (ja) | 属性付きキーバリューストアによるデータベース管理装置及び、そのキーバリューストア構造キャッシュ装置 | |
US20220222229A1 (en) | Automated database modeling | |
CN114816341A (zh) | 一种产品全生命周期模型构建方法及系统 | |
CN107168989A (zh) | 一种多源异构割裂结构化数据转化方法及系统 | |
Frey et al. | MaSQue: An Approach for Flexible Metadata Storage and Querying in RDF. | |
CN101876896A (zh) | 一种提升信息化技术的电子政务开发系统 | |
CN118796834A (zh) | 针对仿真的装备性能数据处理方法、装置、设备和介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200728 |