CN107832313A - 石油专业软件数据格式转换方法 - Google Patents
石油专业软件数据格式转换方法 Download PDFInfo
- Publication number
- CN107832313A CN107832313A CN201710342279.5A CN201710342279A CN107832313A CN 107832313 A CN107832313 A CN 107832313A CN 201710342279 A CN201710342279 A CN 201710342279A CN 107832313 A CN107832313 A CN 107832313A
- Authority
- CN
- China
- Prior art keywords
- data
- professional software
- conversion method
- well
- oil
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 30
- 238000006243 chemical reaction Methods 0.000 claims abstract description 11
- 238000007689 inspection Methods 0.000 claims abstract description 10
- 238000012545 processing Methods 0.000 claims abstract description 9
- 238000004458 analytical method Methods 0.000 claims abstract description 5
- 238000013501 data transformation Methods 0.000 claims abstract description 4
- 238000010606 normalization Methods 0.000 claims abstract description 4
- 238000013461 design Methods 0.000 claims description 9
- 230000015572 biosynthetic process Effects 0.000 claims description 4
- 238000003786 synthesis reaction Methods 0.000 claims description 4
- 238000005553 drilling Methods 0.000 claims description 3
- 238000002474 experimental method Methods 0.000 claims description 3
- 238000013507 mapping Methods 0.000 claims description 3
- 238000005259 measurement Methods 0.000 claims description 3
- 238000013508 migration Methods 0.000 claims description 3
- 230000005012 migration Effects 0.000 claims description 3
- 238000012544 monitoring process Methods 0.000 claims description 3
- 239000011435 rock Substances 0.000 claims description 3
- 230000009471 action Effects 0.000 claims description 2
- 238000011156 evaluation Methods 0.000 claims description 2
- 238000011160 research Methods 0.000 abstract description 5
- 230000010354 integration Effects 0.000 abstract description 2
- 241001415846 Procellariidae Species 0.000 description 3
- 238000002360 preparation method Methods 0.000 description 3
- 238000012423 maintenance Methods 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 239000003208 petroleum Substances 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000013506 data mapping Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 239000009671 shengli Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/258—Data format conversion from or to a database
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/02—Agriculture; Fishing; Forestry; Mining
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Marine Sciences & Fisheries (AREA)
- General Health & Medical Sciences (AREA)
- Agronomy & Crop Science (AREA)
- Mining & Mineral Resources (AREA)
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- Animal Husbandry (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供一种石油专业软件数据格式转换方法，该石油专业软件数据格式转换方法包括：步骤1，以井为核心建立综合研究数据仓库并组织数据；步骤2，从各个专业数据库中抽取与综合研究相关的数据项；步骤3，进行数据规范化检查和数据预处理，根据专业软件对数据的要求编制数据检查和处理程序，实现数据的批量处理；步骤4，根据专业软件的数据接口开发数据转换模块。该石油专业软件数据格式转换方法将开发研究数据格式转换方法应用在工作中解决了数据中心数据与综合研究应用的无缝集成问题，实现综合研究数据的快速获取和辅助分析资料的集成展示，提高研究工作效率和质量。
Description
技术领域
本发明涉及石油行业数据处理技术领域，特别是涉及到一种石油专业软件数据格式转换方法。
背景技术
用户在使用Cyclolog、Direct、Petrel、Eclipse等软件进行研究工作之前首先需要按软件的要求收集各种数据，进行各种数据格式的转换工作。
传统的方式下用户根据软件需要从不同的查询系统中查找数据并下载数据，针对收集到的数据还要根据软件要求的格式进行数据整理，满足专业软件的读取要求，由人工整理数据效率低，数据的收集过程是机械的重复性工作。
对数据中心和专业软件来说，数据中心的数据结构是稳定的，应用软件所需文件格式也是在一定时期也是固定，数据准备工作是按照一定的规范进行数据格式的变换和整理方便专业软件识别，用户在进行综合研究工作之前为综合研究准备数据环节需要花费大量的时间。可以通过软件开发实现数据下载、数据整理、格式转换等工作，减轻用户工作。目前有OpenSprit软件实现了国外一些大型软件之间的数据接口，实现Landmark、GeoFrame、Petrel等软件之间数据的无缝对接，但该软件仅仅支持几个固定软件数据库之间的数据转换，不能完成胜利油田数据中心数据库和各种专业软件之间的数据转换。为此我们发明了一种新的石油专业软件数据格式转换方法，解决了以上技术问题。
发明内容
本发明的目的是提供一种针对用户为专业应用软件准备数据效率低的问题，提供数据转换方案，实现数据中心的数据到专业软件数据的格式转换的石油专业软件数据格式转换方法。
本发明的目的可通过如下技术措施来实现：石油专业软件数据格式转换方法，该石油专业软件数据格式转换方法包括：步骤1，以井为核心建立综合研究数据仓库并组织数据；步骤2，从各个专业数据库中抽取与综合研究相关的数据项；步骤3，进行数据规范化检查和数据预处理，根据专业软件对数据的要求编制数据检查和处理程序，实现数据的批量处理；步骤4，根据专业软件的数据接口开发数据转换模块。
本发明的目的还可通过如下技术措施来实现：
该石油专业软件数据格式转换方法还包括，在步骤1之前，围绕综合研究的工作内容和数据需求设计综合研究数据仓库结构。
在设计综合研究数据仓库结构的步骤中，数据仓库以井、油藏为核心对象，所有的数据与核心对象关联，数据仓库以满足综合研究工作需求为限，根据综合研究内容方便的扩展数据仓库结构满足数据的存储要求。
在步骤1中，数据中心存储的井号在不同的阶段井名标准不一致，在区块勘探和评价阶段井名是以汉字井名为准，钻井、录井、测井、实验专业数据的井名都是汉字井号，转开发后产生与汉字井名对应的标准井号，油藏地质、生产数据、作业数据、动态监测数据的井名为标准井号，为了从不同数据表中检索到对应的数据首先需要在数据仓库中维护好井号对应关系，井号对照关系包括单元、汉字井号、标准井号、曾用井号，利用对照关系表输入单元和井号检索各个数据库中的数据。
在步骤2中，抽取的综合研究相关的数据项包括井位复测坐标、岩心录井数据、测井曲线数据、岩心常规分析数据。
在步骤2中，首先根据井号利用主题设计工具建立综合研究工作需要的数据主题，然后建立主题和数据仓库之间的映射关系，设置数据库唯一性字段和数据迁移规则后，利用ETL工具，按业务对象从数据中心抓取数据，完成数据中心数据到数据仓库数据的集成。
在步骤3中，对数据进行规范化检查实现数据的逻辑检查和值域检查，将检查规则编制成软件处理逻辑，批量检查数据的质量。
在步骤4中，根据专业软件数据接口情况开发不同的软件接口，考虑软件开发成本、使用方便性和后期维护难易程度选择数据文件和数据库的方式开发专业软件的数据接口程序，实现专业软件数据的无缝集成。
本发明中的石油专业软件数据格式转换方法，是为了解决国内油田企业数据中心数据如何快速转换成专业软件所需数据格式的而提出的，主要用于石油行业专业应用软件数据格式公开，数据库结构公开和提供SDK的前提下的实现企业数据中心到专业软件数据格式的批量转换。可以为Cyclolog、ForWard、Direct、Petrel、Eclipse等软件准备数据，利用此方法还可以为其他同类型专业软件开发数据格式转换程序。本发明将开发研究数据格式转换方法应用在工作中解决了数据中心数据与综合研究应用的无缝集成问题，实现综合研究数据的快速获取和辅助分析资料的集成展示，提高研究工作效率和质量。根据实际工作测算，利用此方法下开展工作可以节省10-20％的间，显著的提高工作效率。
附图说明
图1为本发明的石油专业软件数据格式转换方法的一具体实施例的流程图；
图2为本发明的一具体实施例中按井组织数据原理示意图；
图3为本发明的一具体实施例中源数据组织图；
图4为本发明的一具体实施例中源库和目标库数据映射的示意图；
图5为本发明的一具体实施例中ETL过程设计图。
具体实施方式
为使本发明的上述和其他目的、特征和优点能更明显易懂，下文特举出较佳实施例，并配合附图所示，作详细说明如下。
如图1所示，图1为本发明的石油专业软件数据格式转换方法的流程图。
步骤101、首先围绕综合研究的工作内容和数据需求设计综合研究数据仓库结构，数据仓库以井、油藏为核心对象，所有的数据与核心对象关联，数据仓库以满足综合研究工作需求为限，根据综合研究内容可以方便的扩展数据仓库结构满足数据的存储要求；
步骤102、以井为核心建立综合研究数据仓库并组织数据。数据中心存储的井号在不同的阶段井名标准不一致，在区块勘探和评价阶段井名是以汉字井名为准，钻井、录井、测井、实验专业数据的井名都是汉字井号，转开发后产生与汉字井名对应的标准井号，油藏地质、生产数据、作业数据、动态监测数据的井名为标准井号，为了从不同数据表中检索到对应的数据首先需要在数据仓库中维护好井号对应关系，井号对照关系包括单元、汉字井号、标准井号、曾用井号,利用对照关系表可以输入单元和井号检索各个数据库中的数据，如图2所示。
步骤103、从各个专业数据库中抽取与综合研究相关的数据项，如井位复测坐标、岩心录井数据、测井曲线数据、岩心常规分析数据。如图3所示，首先根据井号利用主题设计工具建立综合研究工作需要的数据主题，然后建立主题和数据仓库之间的映射关系(如图4所示)，设置数据库唯一性字段和数据迁移规则后，利用ETL工具(如图5所示)，按业务对象从数据中心抓取数据，完成数据中心数据到数据仓库数据的集成。
步骤104、进行数据规范化检查和数据预处理，根据专业软件对数据的要求编制数据检查和处理程序，实现数据的批量处理。对数据进行规范化检查主要实现数据的逻辑检查和值域检查，如小层数据顶深小于小层底深，将检查规则编制成软件处理逻辑，批量检查数据的质量；
步骤105、根据专业软件的数据接口开发数据转换模块。根据专业软件数据接口情况开发不同的软件接口，考虑软件开发成本、使用方便性和后期维护难易程度建议选择数据文件和数据库的方式开发专业软件的数据接口程序，实现专业软件数据的无缝集成。
Claims (8)
1.石油专业软件数据格式转换方法，其特征在于，该石油专业软件数据格式转换方法包括：
步骤1，以井为核心建立综合研究数据仓库并组织数据；
步骤2，从各个专业数据库中抽取与综合研究相关的数据项；
步骤3，进行数据规范化检查和数据预处理，根据专业软件对数据的要求编制数据检查和处理程序，实现数据的批量处理；
步骤4，根据专业软件的数据接口开发数据转换模块。
2.根据权利要求1所述的石油专业软件数据格式转换方法，其特征在于，该石油专业软件数据格式转换方法还包括，在步骤1之前，围绕综合研究的工作内容和数据需求设计综合研究数据仓库结构。
3.根据权利要求2所述的石油专业软件数据格式转换方法，其特征在于，在设计综合研究数据仓库结构的步骤中，数据仓库以井、油藏为核心对象，所有的数据与核心对象关联，数据仓库以满足综合研究工作需求为限，根据综合研究内容方便的扩展数据仓库结构满足数据的存储要求。
4.根据权利要求1所述的石油专业软件数据格式转换方法，其特征在于，在步骤1中，数据中心存储的井号在不同的阶段井名标准不一致，在区块勘探和评价阶段井名是以汉字井名为准，钻井、录井、测井、实验专业数据的井名都是汉字井号，转开发后产生与汉字井名对应的标准井号，油藏地质、生产数据、作业数据、动态监测数据的井名为标准井号，为了从不同数据表中检索到对应的数据首先需要在数据仓库中维护好井号对应关系，井号对照关系包括单元、汉字井号、标准井号、曾用井号，利用对照关系表输入单元和井号检索各个数据库中的数据。
5.根据权利要求1所述的石油专业软件数据格式转换方法，其特征在于，在步骤2中，抽取的综合研究相关的数据项包括井位复测坐标、岩心录井数据、测井曲线数据、岩心常规分析数据。
6.根据权利要求1所述的石油专业软件数据格式转换方法，其特征在于，在步骤2中，首先根据井号利用主题设计工具建立综合研究工作需要的数据主题，然后建立主题和数据仓库之间的映射关系，设置数据库唯一性字段和数据迁移规则后，利用ETL工具，按业务对象从数据中心抓取数据，完成数据中心数据到数据仓库数据的集成。
7.根据权利要求1所述的石油专业软件数据格式转换方法，其特征在于，在步骤3中，对数据进行规范化检查实现数据的逻辑检查和值域检查，将检查规则编制成软件处理逻辑，批量检查数据的质量。
8.根据权利要求1所述的石油专业软件数据格式转换方法，其特征在于，在步骤4中，根据专业软件数据接口情况开发不同的软件接口，考虑软件开发成本、使用方便性和后期维护难易程度选择数据文件和数据库的方式开发专业软件的数据接口程序，实现专业软件数据的无缝集成。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710342279.5A CN107832313A (zh) | 2017-05-15 | 2017-05-15 | 石油专业软件数据格式转换方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710342279.5A CN107832313A (zh) | 2017-05-15 | 2017-05-15 | 石油专业软件数据格式转换方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN107832313A true CN107832313A (zh) | 2018-03-23 |
Family
ID=61643771
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710342279.5A Pending CN107832313A (zh) | 2017-05-15 | 2017-05-15 | 石油专业软件数据格式转换方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107832313A (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103984755A (zh) * | 2014-05-28 | 2014-08-13 | 中国地质大学（北京） | 基于多维度模型的油气资源数据要览系统实现方法及系统 |
| CN104504094A (zh) * | 2014-12-26 | 2015-04-08 | 中国石油集团工程设计有限责任公司北京分公司 | 一种用于油气田的多种数据源集成管理方法 |
| CN104574197A (zh) * | 2013-10-29 | 2015-04-29 | 中国石油天然气股份有限公司 | 一种用于油气藏研究与决策的数据链方法 |
| CN104699469A (zh) * | 2013-12-06 | 2015-06-10 | 中国石油天然气股份有限公司 | 一种适应数字化油藏研究与决策的专业软件集成方法 |
-
2017
- 2017-05-15 CN CN201710342279.5A patent/CN107832313A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104574197A (zh) * | 2013-10-29 | 2015-04-29 | 中国石油天然气股份有限公司 | 一种用于油气藏研究与决策的数据链方法 |
| CN104699469A (zh) * | 2013-12-06 | 2015-06-10 | 中国石油天然气股份有限公司 | 一种适应数字化油藏研究与决策的专业软件集成方法 |
| CN103984755A (zh) * | 2014-05-28 | 2014-08-13 | 中国地质大学（北京） | 基于多维度模型的油气资源数据要览系统实现方法及系统 |
| CN104504094A (zh) * | 2014-12-26 | 2015-04-08 | 中国石油集团工程设计有限责任公司北京分公司 | 一种用于油气田的多种数据源集成管理方法 |
Non-Patent Citations (2)
| Title |
|---|
| 崔志忠，李薇薇，李大伟，等: "中国石油AI系统勘探开发协同工作环境建设探索与实践", 《信息技术与信息化》 * |
| 赵贵菊: "勘探开发数据仓库的模型研究和应用", 《中国博士学位论文全文数据库 信息科技辑》 * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7707169B2 (en) | Specification-based automation methods for medical content extraction, data aggregation and enrichment | |
| CN101739390B (zh) | 基于技术设计文档的数据转换 | |
| US8122045B2 (en) | Method for mapping a data source to a data target | |
| US7720873B2 (en) | Dynamic data discovery of a source data schema and mapping to a target data schema | |
| CN101271475B (zh) | 一种商业智能系统 | |
| Heer et al. | Interactive analysis of big data | |
| US6996268B2 (en) | System and method for gathering, indexing, and supplying publicly available data charts | |
| CN103186541B (zh) | 一种映射关系生成方法及装置 | |
| US7299452B1 (en) | System and method for testing the compatibility of a computer application with a foreign character set | |
| US20090259670A1 (en) | Apparatus and Method for Conditioning Semi-Structured Text for use as a Structured Data Source | |
| US20070040094A1 (en) | Method and system for handling large data sets in a statistical language | |
| CN109558393B (zh) | 一种数据模型构建方法、装置、设备及存储介质 | |
| US20140075278A1 (en) | Spreadsheet schema extraction | |
| CN103412853A (zh) | 一种针对文档转换器的测试用例自动生成方法 | |
| US10255261B2 (en) | Method and apparatus for extracting areas | |
| WO2021253641A1 (zh) | 着色语言翻译方法 | |
| EP3633529A1 (en) | Systemc model generation method and systemc model generation program | |
| CN117112806B (zh) | 一种基于知识图谱的信息结构化方法和装置 | |
| CN111400323A (zh) | 数据检索方法、系统、设备及存储介质 | |
| CN111930731A (zh) | 数据转储方法、装置、设备及存储介质 | |
| CN111061828A (zh) | 一种数字图书馆知识检索方法及装置 | |
| Mather | University of Hull | |
| US20130268527A1 (en) | Processing acquisition data into deliverable format | |
| EP4030313A1 (en) | Sql statement generator | |
| Bengtsson | aroma-an R object-oriented microarray analysis environment |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180323 |