CN111460045A - 数据仓库建设的建模方法、模型、计算机设备和存储介质 - Google Patents

数据仓库建设的建模方法、模型、计算机设备和存储介质 Download PDF

Info

Publication number
CN111460045A
CN111460045A CN202010134023.7A CN202010134023A CN111460045A CN 111460045 A CN111460045 A CN 111460045A CN 202010134023 A CN202010134023 A CN 202010134023A CN 111460045 A CN111460045 A CN 111460045A
Authority
CN
China
Prior art keywords
data
service
layer
detail
business
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010134023.7A
Other languages
English (en)
Inventor
王兴维
邰丛越
武晓峰
陆兵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Senyint International Digital Medical System Dalian Co ltd
Original Assignee
Senyint International Digital Medical System Dalian Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Senyint International Digital Medical System Dalian Co ltd filed Critical Senyint International Digital Medical System Dalian Co ltd
Priority to CN202010134023.7A priority Critical patent/CN111460045A/zh
Publication of CN111460045A publication Critical patent/CN111460045A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28—Databases characterised by their database models, e.g. relational or object models
    • G06F16/283—Multi-dimensional databases or data warehouses, e.g. MOLAP or ROLAP
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G06F16/211—Schema design and management
    • G06F16/212—Schema design and management with details for data modelling support

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

数据仓库建设的建模方法、模型、计算机设备和存储介质，属于业务建模领域，为了解决维护以及扩展性比较差的问题，要点是将抽取的业务系统中的业务数据导入至原始层对应的表中；转换业务数据至数据明细层，业务数据按照业务主题进行分域处理；转换业务明细数据至汇总衍生层，业务明细数据进行域间合并或衍生；转换业务合并或衍生数据至数据集市层，业务合并或衍生数据根据需求和/或页面展示进行数据汇总，效果是综合考虑功能需求以及实际业务，建立后的模型不但便于扩展，也能满足功能需求。

Description

数据仓库建设的建模方法、模型、计算机设备和存储介质
技术领域
本发明属于业务建模领域，涉及一种数据仓库建设的建模方法及模型。
背景技术
业务建模是建设数据仓库过程中最为重要的难点之一，模型建立的好与坏直接影响到系统的稳定性、健壮性、可扩展型和是否拥有良好的性能。所谓模型就是数据仓库内容的基本库结构和数据处理流程，可以用数据模型的形式来描述和开发维护。对于注重数据利用的分析型系统来说，数据模型的重要性是显而易见的，数据模型基本决定了数据仓库的轮廓，模型构想的功能范围基本决定了数据仓库的功能范围，数据模型建立的成败基本决定了数据仓库建立的成败。
数据仓库建模体系指的是数据仓库从无到有的一整套建模方法，最常见的三种数据仓库建模体系分别为：规范化数据仓库，维度建模数据仓库，独立数据集市，这些建模体系各有优缺点，大致过程是根据业务需求去建立模型，分析整理数据快速适应需求，包括建立逻辑模型，物理建模等，最后得到一个基于需求的数据集市，这种方式是开发速度快，能完全满足需求，但是后期的维护以及扩展性比较差，如果面对的业务需求整体上是不确定的或很难确定的，那么就需要数据模型在提炼业务规则上要更加深入。
发明内容
为了解决上述问题，本发明提出如下技术方案：一种数据仓库建设的建模方法，包括
将抽取的业务系统中的业务数据导入至原始层对应的表中；
转换业务数据至数据明细层，业务数据按照业务主题进行分域处理；
转换业务明细数据至汇总衍生层，业务明细数据进行域间合并或衍生；
转换业务合并或衍生数据至数据集市层，业务合并或衍生数据根据需求和/或页面展示进行数据汇总。
进一步的，非需求的域间合并或衍生的业务明细数据，直接转换业务明细数据至数据集市层，将业务明细数据根据需求和/或页面展示进行数据汇总。
进一步的，监控不同结构层间的数据转换执行的过程、结果。
进一步的，原始层中的数据加载的范围包括业务表以及字典表，数据明细层进行数据转换中的编码转换及对数据质量校验，所述编码转换是对各业务系统的数据按照分析系统标准的字典表代码转换。
进一步的，数据明细层的数据粒度与业务系统的数据粒度一致，汇总衍生层的数据粒度与业务系统的数据粒度一致。
本发明还涉及一种数据仓库建设模型，包括
原始层，用于抽取的业务系统中的业务数据导入其对应的表中；
数据明细层，用于将业务数据按照业务主题进行分域处理；
汇总衍生层，用于将业务明细数据进行域间合并或衍生；
数据集市层，用于将业务合并或衍生数据根据需求和/或页面展示进行数据汇总。
进一步的，所述数据集市层，还用于对数据明细层的非需求的域间合并或衍生的业务明细数据，直接根据需求和/或页面展示进行数据汇总。
进一步的，所述的数据仓库建设模型还包括监控层，监控不同结构层间的数据转换执行的过程、结果。
本发明还涉及一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现任一项所述数据仓库建设的建模方法的步骤。
本发明还涉及一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现任一项所述的数据仓库建设的建模方法的步骤。
有益效果：本发明提出了上下结合的建模方法，在考虑了需求的基础上，从实际业务出发，根据业务去开发主题域，分为不同层架构，综合考虑功能需求以及实际业务，建立后的模型不但便于扩展，也能满足功能需求。
附图说明
图1是建模流程图。
具体实施方式
为了进一步阐述本发明，结合附图及具体实施例对本发明的数据仓库建设的建模方法及模型进一步说明，在该部分涉及的技术术语如表一词汇含义表所列。
表一
Figure BDA0002396659720000031
本发明实质是一种模型架构，属于计算机软件，模型分为STG层(原始层)、DWD层(数据明细层)、DWA层(汇总衍生层)、DM层(数据集市层)。数据流向由业务系统向DM层逐层转换形成数据仓库，数据仓库建设的建模方法的具体流程图1所示，包括如步骤：
1：将抽取的业务系统中的业务数据导入至原始层对应的表中，具体的，业务系统到STG层：STG层上的数据模型结构，与各业务系统中的基本保持一致，通过ETL工具，将业务系统中的数据直接导入STG对应的表中。数据加载的范围包括业务表以及字典表。
2：转换业务数据至数据明细层，业务数据按照业务主题进行分域处理，具体的STG层到DWD层：数据接入到STG层后，通过ETL工具，将业务数据转换至DWD层。DWD层的数据粒度与业务系统一致，并且DWD层的数据模型原则上保持稳定，为后续转换过程的产品化打好基础。数据转换中的编码转换，在该层完成。各业务系统的数据，需要按照分析系统标准的字典表代码进行转换。对于数据质量的校验，例如非空检验、唯一性校验等。
3：转换业务明细数据至汇总衍生层，业务明细数据进行域间合并或衍生，具体的，DWD层到DWA层：按照数据加工步骤和逻辑，继续进行加工，数据转换至DWA层后，数据粒度依然与原始数据保持一致，但进行了内部扩展和汇总。
4：转换业务合并或衍生数据至数据集市层，业务合并或衍生数据根据需求和/或页面展示进行数据汇总，具体的，DWA层到DM层：按照数据加工步骤和逻辑，将数据从DWA层转换至DM。DM层的数据粒度不再是明细数据，而是汇总的、满足对外提供分析的数据。
5：非需求的域间合并或衍生的业务明细数据，直接转换业务明细数据至数据集市层，将业务明细数据根据需求和/或页面展示进行数据汇总，具体的，DWD层到DM层：根据数据加工的需要，对于不需要加工到DWA的数据，可以直接从DWD层转换到DM。同时，将DWD层的字典表，在DM层建立视图。
6：监控不同结构层间的数据转换执行的过程、结果，具体的，ETL监控：各层数据转换过程，都需要将执行状态、结果、涉及数据行数等进行监控。
对于步骤1-4的具体数据转换实例，给出如下应用表格：表二是步骤1-4各层举例及说明，其中业务数据是医疗数据。
表二
Figure BDA0002396659720000041
Figure BDA0002396659720000051
由表二可知，本发明的业务数据是医疗数据，具有不同层架构，主要包括患者信息、住院信息、诊断信息及费用信息，在数据明细层，按照主题，将患者、住院、诊断及费用分为三个分域，能够方便域内拓展字段，便于扩展。并且通过不同域间合并和整理，能够得到合并域和衍生域，在业务数据基础上，将实体基本属性与实体业务分类属性分离，在实体分类属性发生变化时，只需要增加实体分类关系数据记录即可，对模型本身不产生影响。模型输出按照需求及页面展现要求，将合并的汇总域形成总表，根据需求展示。
由上述，该方案考虑了模型设计中所要考虑的关键因素，包括模型完整性、稳定性、扩展性、继承性、前瞻性。
模型完整性：包含两类：业务覆盖范围的完整性、模型设计的完整性
业务覆盖范围的完整性：通过对数据环境与应用环境的分析，对模型的域、子域和实体进行覆盖性测试，以保证模型覆盖到工程要求的数据整合范围。
模型设计的完整性包括：模型实体完整性、模型参照完整性。
稳定性：为保证模型的稳定性，将实体基本属性与实体业务分类属性分离，在实体分类属性发生变化时，只需要增加实体分类关系数据记录即可，对模型本身不产生影响。
扩展性：模型设计中实体内只保留最细粒度的基本维，粗粒度或上层的属性通过属性依赖关系实体来表现，这样在扩充属性或者扩充实体关系时，只增加表现属性依赖关系的实体即可。
继承性：数据仓库面对的外部数据环境往往是复杂的、多变的，如何在这样的环境下保持仓库结构的稳定一致，是需要考虑数据模型的继承性问题。通过数据模型的分层设计和业务逻辑抽象，用以屏蔽生产环境的变化，从而保证数据仓库模型的在变化前后的一致继承。
前瞻性：为保证模型的前瞻性，同时采用自底向上和自顶向下的方式设计模型，其中自顶向下主要基于业务需求进行模型设计，使其可以完全覆盖到所有需求，自底向上主要基于业务逻辑而非业务需求进行模型设计，模型设计为囊括企业运营的各种业务关系，保证在有新需求时，底层模型能够对其进行支撑。
在一种方案中，可以同时对于DWD层的非需求的域间合并或衍生的业务明细数据，直接转换业务明细数据至数据集市层，将业务明细数据根据需求和/或页面展示进行数据汇总，得到汇总表输出。
即如果数据集市中需要直接展现业务明细数据，可以直接从DWD层抽取到DM层，不需要进行DWD-DWA层的处理，这样保证数据完整性的同时，也能保证数据粒度不受影响，重点展现企业运营过程中的业务结果数据。在对业务进行衍生扩展的时候，需要将业务主题数据进行再加工，确保对基础数据按照业务规则进行扩充和转换处理，处理后的数据可直接由DWA层抽取到数据集市进行展现，也可进行关联形成业务事件。
本发明是对需求分析、概念模型设计、逻辑模型设计、物理模型设计。该方案具有分布性：模型业务支持范围涵盖核心业务。事实性：设计后的模型满足实际业务需求。主题划分：根据业务关系的耦合度进行主题域划分。是一种自上而下的设计和自下而上的验证。
能够解决现有方法的继承性差，不易于扩展。规范性差，不利于管理。未全局考虑，覆盖率差。分析质量、效率难以满足要求。为满足需求快速定制，后期维护成本大。不支持异构数据源的问题。
概况的说，本发明的数据仓库建设的建模方法，包括
将抽取的业务系统中的业务数据导入至原始层对应的表中；
转换业务数据至数据明细层，业务数据按照业务主题进行分域处理；
转换业务明细数据至汇总衍生层，业务明细数据进行域间合并或衍生；
转换业务合并或衍生数据至数据集市层，业务合并或衍生数据根据需求和/或页面展示进行数据汇总。
在一种方案中，非需求的域间合并或衍生的业务明细数据，直接转换业务明细数据至数据集市层，将业务明细数据根据需求和/或页面展示进行数据汇总。
在一种方案中，监控不同结构层间的数据转换执行的过程、结果。
在一种方案中，原始层中的数据加载的范围包括业务表以及字典表，数据明细层进行数据转换中的编码转换及对数据质量校验，所述编码转换是对各业务系统的数据按照分析系统标准的字典表代码转换。
在一种方案中，数据明细层的数据粒度与业务系统的数据粒度一致，汇总衍生层的数据粒度与业务系统的数据粒度一致。
由该方法，得到一种数据仓库建设模型，包括
原始层，用于抽取的业务系统中的业务数据导入其对应的表中；
数据明细层，用于将业务数据按照业务主题进行分域处理；
汇总衍生层，用于将业务明细数据进行域间合并或衍生；
数据集市层，用于将业务合并或衍生数据根据需求和/或页面展示进行数据汇总。
在一种方案中，所述数据集市层，还用于对数据明细层的非需求的域间合并或衍生的业务明细数据，直接根据需求和/或页面展示进行数据汇总。
在一种方案中，数据仓库建设模型还包括监控层，监控不同结构层间的数据转换执行的过程、结果。
在一个实施例中，提供一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现任一项所述方法的步骤。
该方法是所述数据仓库建设的建模方法。
在一个实施例中，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现权所述的方法的步骤，该方法是所述数据仓库建设的建模方法。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以
通过计算机程序来指令相关的硬件来完成，的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种数据仓库建设的建模方法，其特征在于，包括
将抽取的业务系统中的业务数据导入至原始层对应的表中；
转换业务数据至数据明细层，业务数据按照业务主题进行分域处理；
转换业务明细数据至汇总衍生层，业务明细数据进行域间合并或衍生；
转换业务合并或衍生数据至数据集市层，业务合并或衍生数据根据需求和/或页面展示进行数据汇总。
2.如权利要求1所述的数据仓库建设的建模方法，其特征在于，非需求的域间合并或衍生的业务明细数据，直接转换业务明细数据至数据集市层，将业务明细数据根据需求和/或页面展示进行数据汇总。
3.如权利要求1所述的数据仓库建设的建模方法，其特征在于，监控不同结构层间的数据转换执行的过程、结果。
4.如权利要求1所述的数据仓库建设的建模方法，其特征在于，原始层中的数据加载的范围包括业务表以及字典表，数据明细层进行数据转换中的编码转换及对数据质量校验，所述编码转换是对各业务系统的数据按照分析系统标准的字典表代码转换。
5.如权利要求1所述的数据仓库建设的建模方法，其特征在于，数据明细层的数据粒度与业务系统的数据粒度一致，汇总衍生层的数据粒度与业务系统的数据粒度一致。
6.一种数据仓库建设模型，其特征在于，包括
原始层，用于抽取的业务系统中的业务数据导入其对应的表中；
数据明细层，用于将业务数据按照业务主题进行分域处理；
汇总衍生层，用于将业务明细数据进行域间合并或衍生；
数据集市层，用于将业务合并或衍生数据根据需求和/或页面展示进行数据汇总。
7.如权利要求6所述的数据仓库建设模型，其特征在于，所述数据集市层，还用于对数据明细层的非需求的域间合并或衍生的业务明细数据，直接根据需求和/或页面展示进行数据汇总。
8.如权利要求6所述的数据仓库建设模型，其特征在于，还包括监控层，监控不同结构层间的数据转换执行的过程、结果。
9.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至5中任一项所述方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至5中任一项所述的方法的步骤。
CN202010134023.7A 2020-03-02 2020-03-02 数据仓库建设的建模方法、模型、计算机设备和存储介质 Pending CN111460045A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010134023.7A CN111460045A (zh) 2020-03-02 2020-03-02 数据仓库建设的建模方法、模型、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010134023.7A CN111460045A (zh) 2020-03-02 2020-03-02 数据仓库建设的建模方法、模型、计算机设备和存储介质

Publications (1)

Publication Number Publication Date
CN111460045A true CN111460045A (zh) 2020-07-28

Family

ID=71685121

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010134023.7A Pending CN111460045A (zh) 2020-03-02 2020-03-02 数据仓库建设的建模方法、模型、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN111460045A (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112084182A (zh) * 2020-09-10 2020-12-15 重庆富民银行股份有限公司 一种用于数据集市和数据仓库的数据建模方法
CN112734281A (zh) * 2021-01-21 2021-04-30 山东健康医疗大数据有限公司 一种医疗数据治理中质控和任务调度的解耦处理方法
CN112860659A (zh) * 2021-01-18 2021-05-28 北京奇艺世纪科技有限公司 数据仓库的构建方法、装置、设备及存储介质
CN112988919A (zh) * 2021-04-30 2021-06-18 广东电网有限责任公司 一种电网数据集市构建方法、系统、终端设备及存储介质
CN113742325A (zh) * 2021-08-09 2021-12-03 广州市易工品科技有限公司 数据仓库建设方法、装置、系统、电子设备及存储介质
CN113779092A (zh) * 2021-09-17 2021-12-10 平安科技（深圳）有限公司 基于数据仓库的实时数据展示方法、装置、设备及介质
CN113806618A (zh) * 2021-09-22 2021-12-17 汉唐信通(北京)咨询股份有限公司 一种商标大数据治理方法、系统和计算机设备
CN114880405A (zh) * 2022-03-31 2022-08-09 华能信息技术有限公司 一种基于数据湖的数据处理方法及系统
CN115422169A (zh) * 2022-11-04 2022-12-02 暨南大学 基于商业广告场景的数据仓库构建方法及装置
CN116401325A (zh) * 2023-05-15 2023-07-07 广州飞狮数字科技有限公司 一种基于数据仓库模型的数据处理方法及装置
CN117251633A (zh) * 2023-10-08 2023-12-19 国任财产保险股份有限公司 一种客户数据管理系统
CN118152385A (zh) * 2024-03-29 2024-06-07 西安几何数字信息技术有限公司 一种基于医疗的数据质量校验方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1225528A2 (en) * 2001-01-19 2002-07-24 Cognos Incorporated Data warehouse system
US20020099563A1 (en) * 2001-01-19 2002-07-25 Michael Adendorff Data warehouse system
CN109189764A (zh) * 2018-09-20 2019-01-11 北京桃花岛信息技术有限公司 一种基于Hive的高校数据仓库分层设计方法
CN109669934A (zh) * 2018-12-11 2019-04-23 江苏瑞中数据股份有限公司 一种切合电力客服业务的数据仓库系统及其构建方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1225528A2 (en) * 2001-01-19 2002-07-24 Cognos Incorporated Data warehouse system
US20020099563A1 (en) * 2001-01-19 2002-07-25 Michael Adendorff Data warehouse system
CN109189764A (zh) * 2018-09-20 2019-01-11 北京桃花岛信息技术有限公司 一种基于Hive的高校数据仓库分层设计方法
CN109669934A (zh) * 2018-12-11 2019-04-23 江苏瑞中数据股份有限公司 一种切合电力客服业务的数据仓库系统及其构建方法

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112084182A (zh) * 2020-09-10 2020-12-15 重庆富民银行股份有限公司 一种用于数据集市和数据仓库的数据建模方法
CN112860659B (zh) * 2021-01-18 2023-09-01 北京奇艺世纪科技有限公司 数据仓库的构建方法、装置、设备及存储介质
CN112860659A (zh) * 2021-01-18 2021-05-28 北京奇艺世纪科技有限公司 数据仓库的构建方法、装置、设备及存储介质
CN112734281A (zh) * 2021-01-21 2021-04-30 山东健康医疗大数据有限公司 一种医疗数据治理中质控和任务调度的解耦处理方法
CN112988919A (zh) * 2021-04-30 2021-06-18 广东电网有限责任公司 一种电网数据集市构建方法、系统、终端设备及存储介质
CN113742325A (zh) * 2021-08-09 2021-12-03 广州市易工品科技有限公司 数据仓库建设方法、装置、系统、电子设备及存储介质
CN113779092B (zh) * 2021-09-17 2024-03-01 平安科技（深圳）有限公司 基于数据仓库的实时数据展示方法、装置、设备及介质
CN113779092A (zh) * 2021-09-17 2021-12-10 平安科技（深圳）有限公司 基于数据仓库的实时数据展示方法、装置、设备及介质
CN113806618A (zh) * 2021-09-22 2021-12-17 汉唐信通(北京)咨询股份有限公司 一种商标大数据治理方法、系统和计算机设备
CN114880405A (zh) * 2022-03-31 2022-08-09 华能信息技术有限公司 一种基于数据湖的数据处理方法及系统
CN115422169A (zh) * 2022-11-04 2022-12-02 暨南大学 基于商业广告场景的数据仓库构建方法及装置
CN116401325A (zh) * 2023-05-15 2023-07-07 广州飞狮数字科技有限公司 一种基于数据仓库模型的数据处理方法及装置
CN116401325B (zh) * 2023-05-15 2024-03-05 广州飞狮数字科技有限公司 一种基于数据仓库模型的数据处理方法及装置
CN117251633A (zh) * 2023-10-08 2023-12-19 国任财产保险股份有限公司 一种客户数据管理系统
CN117251633B (zh) * 2023-10-08 2024-08-27 国任财产保险股份有限公司 一种客户数据管理系统
CN118152385A (zh) * 2024-03-29 2024-06-07 西安几何数字信息技术有限公司 一种基于医疗的数据质量校验方法

Similar Documents

Publication Publication Date Title
CN111460045A (zh) 数据仓库建设的建模方法、模型、计算机设备和存储介质
CN107391653B (zh) 一种分布式NewSQL数据库系统及图片数据储存方法
CN110019396B (zh) 一种基于分布式多维分析的数据分析系统及方法
CN107315776B (zh) 一种基于云计算的数据管理系统
CN103608809A (zh) 推荐数据富集
US20230024345A1 (en) Data processing method and apparatus, device, and readable storage medium
CN104239377A (zh) 跨平台的数据检索方法及装置
CN107491558B (zh) 元数据更新方法及装置
CN113849702B (zh) 一种确定目标数据的方法、装置、电子设备及存储介质
CN110019542B (zh) 企业关系的生成、生成组织成员数据库及识别同名成员
CN103455335A (zh) 一种多级分类的Web实现方法
CN114880405A (zh) 一种基于数据湖的数据处理方法及系统
CN114328681A (zh) 一种数据转换方法、装置、电子设备及存储介质
US20080294673A1 (en) Data transfer and storage based on meta-data
CN115132366A (zh) 基于健康医疗大数据标准库的多源数据处理方法与系统
CN114661832A (zh) 一种基于数据质量的多模态异构数据存储方法及系统
CN115664785A (zh) 一种大数据平台数据脱敏系统
CN117171108B (zh) 一种虚拟模型映射方法和系统
CN118152406A (zh) 索引推荐方法、装置、设备、存储介质和程序产品
CN112860659B (zh) 数据仓库的构建方法、装置、设备及存储介质
CN114385679A (zh) 一种表结构巡检方法、表结构巡检装置和电子设备
US9275059B1 (en) Genome big data indexing
CN116578614A (zh) 一种管道设备的数据管理方法、系统、介质及设备
CN116414854A (zh) 数据资产查询方法、装置、计算机设备和存储介质
CN114546982A (zh) 数据处理方法、装置、计算机可读介质及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination