CN106227857A - 数据推送和加载方法和装置 - Google Patents
数据推送和加载方法和装置 Download PDFInfo
- Publication number
- CN106227857A CN106227857A CN201610608622.1A CN201610608622A CN106227857A CN 106227857 A CN106227857 A CN 106227857A CN 201610608622 A CN201610608622 A CN 201610608622A CN 106227857 A CN106227857 A CN 106227857A
- Authority
- CN
- China
- Prior art keywords
- data
- geological
- file
- write
- index
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Geophysics And Detection Of Objects (AREA)
Abstract
本发明提供了一种数据推送和加载方法和装置,其中,该方法包括:从基于数据库管理的地震数据系统中获取地震数据;对所述地震数据进行处理,得到预定数据结构的QC数据;将所述QC数据自动推送至项目质量控制系统,以使所述项目质量控制系统按照与所述预定数据结构对应的方式读取QC数据并实时交互调显QC数据。本发明实施例解决了现有的地震数据传送和数据加载方式所存在的耗费大量人力,且效率低下的技术问题,达到了有效提高数据传送加载效率的技术效果。
Description
技术领域
本发明涉及地震数据处理技术领域,特别涉及一种数据推送和加载方法和装置。
背景技术
“交互处理项目质量控制系统(ISQC)”是一套不依赖于任何地震数据处理系统的独立运行的地震数据分析与质量控制系统。该系统接收来自GeoEast处理系统不同处理环节的需要进行质量控制的地震数据。
利用该系统可以实现多种类型数据的实时拆分与叠合交互显示,同构数据多种方式对比,三维数据体实时切片显示和数据平面属性分析等多项质量监控和过程评价功能。由于该系统中进行质量控制的数据不再进行多域数据分选,只按使用者提供的数据类型进行质量监控,因此该系统是一套不涉及数据库管理的地震数据分析与质量控制系统。
GeoEast地震处理与解释一体化系统是基于ORACLE数据库管理的。每一个外部的地震数据都要经过输入模块按不同的数据类型建立数据索引,通过数据库统一管理来实现。使用地震数据时,按数据索引抽取出不同类型的地震数据。数据库对于地震数据的管理虽然复杂繁琐,但对于高效分选不同类型的地震数据却是行之有效的好方法。如何实现地震数据从GeoEast处理系统到ISQC质量控制系统的准确、高效、自动的数据推送,并且保证地震数据在ISQC质量控制系统中实时、高效地进行交互调显是制约这套处理项目质量控制系统推广应用的关键瓶颈技术。
通常情况下,采用FTP方式将GeoEast格式的地震数据传送到ISQC质量控制系统,为了保证GeoEast格式的地震数据在ISQC质量控制系统中可以实时交互调显,要先进行数据加载,预读整体数据建立数据索引。这种传统的地震数据传送和数据加载方式均要花费大量人工且效率低下,严重影响生产周期,尤其对海量地震数据处理无疑要耗费巨大的人工工作量,是没有任何实际意义和应用价值的。
针对上述问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种数据推送和加载方法,以解决现有的地震数据传送和数据加载方式需要耗费大量人力,且效率低下的技术问题,该方法包括:
从基于数据库管理的地震数据系统中获取地震数据;
对所述地震数据进行处理,得到预定数据结构的QC数据;
将所述QC数据自动推送至项目质量控制系统,以使所述项目质量控制系统按照与所述预定数据结构对应的方式读取所述QC数据并实时交互调显所述QC数据。
在一个实施方式中,对所述地震数据进行处理,得到预定数据结构的QC数据,包括:
确定所述地震数据是否为三维数据体并获取数据关键字;
如果是三维数据体,则根据所述数据关键字创建QC索引文件、QC地震数据文件和QC切片数据文件并输出QC卷信息文件,作为QC数据;
根据所述数据关键字,按道提取索引信息,并将索引信息写入所述QC索引文件;
对所述地震数据进行转换,将转换后的数据的道头和数据道写入所述QC地震数据文件;
读取所述QC地震数据文件中的数据,并将读取的数据转换为切片数据,写入所述QC切片数据文件。
在一个实施方式中,所述QC地震数据文件和QC切片数据文件按照以下方式中的任意一种方式存储数据:8位整型、16位整型和32位IEEE浮点型。
在一个实施方式中,对所述地震数据进行处理,得到预定数据结构的QC数据,包括:
确定所述地震数据是否为二维数据或三维监控线数据并获取数据关键字;
如果是二维数据或三维监控线数据,则根据所述数据关键字创建QC索引文件和QC地震数据文件并输出QC卷信息文件,作为QC数据;
根据所述数据关键字,按道提取索引信息,并将索引信息写入所述QC索引文件;
对所述地震数据进行转换,将转换后的数据的道头和数据道写入所述QC地震数据文件。
在一个实施方式中,所述项目质量控制系统按照与所述预定数据结构对应的方式读取所述QC数据并实时交互调显所述QC数据,包括:
基于所述QC索引文件,按照地震数据在所述QC数据中的存放顺序自动读取符合范围的数据。
在一个实施方式中,将所述QC数据自动推送至项目质量控制系统,包括:
自动将所述预定数据结构的QC数据写入至所述项目质量控制系统的数据磁盘上。
在一个实施方式中,从基于数据库管理的地震数据系统中获取地震数据,包括:
通过执行控制子系统接口,从所述基于数据库管理的地震数据系统中获取所述地震数据。
本发明实施例还提供了一种数据推送和加载装置,以解决现有的地震数据传送和数据加载方式需要耗费大量人力,且效率低下的技术问题,该装置包括:
获取模块,用于从基于数据库管理的地震数据系统中获取地震数据;
处理模块,用于对所述地震数据进行处理,得到预定数据结构的QC数据;
推送模块,用于将所述QC数据自动推送至项目质量控制系统,以使所述项目质量控制系统按照与所述预定数据结构对应的方式读取所述QC数据并实时交互调显所述QC数据。
在一个实施方式中,所述处理模块包括:
第一确定单元,用于确定所述地震数据是否为三维数据体并获取数据关键字;
第一输出单元,用于在确定是三维数据体的情况下,根据所述数据关键字创建QC索引文件、QC地震数据文件和QC切片数据文件并输出QC卷信息文件,作为QC数据;
第一写入单元,用于根据所述数据关键字,按道提取索引信息,并将索引信息写入所述QC索引文件;
第一转换单元,用于对所述地震数据进行转换,将转换后的数据的道头和数据道写入所述QC地震数据文件;
读取单元,用于读取所述QC地震数据文件中的数据,并将读取的数据转换为切片数据,写入所述QC切片数据文件。
在一个实施方式中,所述QC索引文件、所述QC地震数据文件和QC切片数据文件按照以下方式中的任意一种方式存储数据:8位整型、16位整型和32位IEEE浮点型。
在一个实施方式中,所述处理模块包括:
第二确定单元,用于确定所述地震数据是否为二维数据或三维监控线数据并获取数据关键字;
第二输出单元,用于在确定是二维数据或三维监控线数据的情况下,根据所述数据关键字创建QC索引文件和QC地震数据文件并输出QC卷信息文件,作为QC数据;
第二写入单元,用于根据所述数据关键字,按道提取索引信息,并将索引信息写入所述QC索引文件;
第二转换单元,用于对所述地震数据进行转换,将转换后的数据的道头和数据道写入所述QC地震数据文件。
在一个实施方式中,所述项目质量控制系统具体用于基于所述索引文件,按照地震数据在所述QC数据中的存放顺序自动读取符合范围的数据。
在一个实施方式中,所述推送模块具体用于自动将所述预定数据结构的QC数据写入至所述项目质量控制系统的数据磁盘上。
在一个实施方式中,所述获取模块具体用于通过执行控制子系统接口,从所述基于数据库管理的地震数据系统中获取所述地震数据。
在本发明实施例中,先将地震数据按照预定规则转换为预定数据结构的QC数据,并将QC数据自动推送至项目质量控制系统,然后采用与该预定规则对应的读取方式就可以根据用户所需范围读取QC数据,借助QC数据中的索引文件,无需遍历整个数据,就可以交互显示数据,从而达到实时高效交互显示数据的目的,实现了从基于数据库管理的地震数据处理系统到非数据库管理的处理项目质量控制系统之间转换,从而有效解决了现有的地震数据传送和数据加载方式所存在的耗费大量人力,且效率低下的技术问题,达到了有效提高数据传送加载效率的技术效果。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,并不构成对本发明的限定。在附图中:
图1是根据本发明实施例的数据推送和加载方法的方法流程图;
图2是根据本发明实施例的基于异构系统的QC数据自动推送和加载示意图;
图3是根据本发明实施例的“QC数据”数据结构示意图;
图4是根据本发明实施例的QC数据输出批量模块(QCOut)的数据流程图;
图5是根据本发明实施例的数据推送和加载装置的结构框图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,下面结合实施方式和附图,对本发明做进一步详细说明。在此,本发明的示意性实施方式及其说明用于解释本发明,但并不作为对本发明的限定。
在本例中,提供了一种数据推送和加载方法,如图1所示,可以包括以下步骤:
步骤101:从基于数据库管理的地震数据系统中获取地震数据;
具体地,可以通过执行控制子系统接口,从基于数据库管理的地震数据系统中获取地震数据,该地震数据可以是三维数据体,也可以是二维数据或三维监控线数据,对于不同维度的数据后续进行结构转换的时候所采用的方式也是不同的。当该基于数据库管理的地震数据系统为GeoEast处理系统时,地震数据就是GeoEast格式地震数据。
步骤102:对所述地震数据进行处理,得到预定数据结构的QC(Quality Control,质量控制)数据;
正如前述提到的地震数据可以有三维数据体也可以有二维数据或三维监控线数据,对于不同维度的数据采用不同的方式,主要的不同在于是否需要转换出切片数据等等,具体的,下面分别对二维数据或三维监控线数据和三维数据体进行说明:
1)二维数据或三维监控线数据:
具体实现的时候,可以先确定地震数据是否为体数据并获取数据关键字,如果是二维数据或三维监控线数据,则根据数据关键字创建QC索引文件和QC地震数据文件并输出QC卷信息文件,作为QC数据;然后,根据数据关键字,按道提取索引信息,并将索引信息写入所述QC索引文件;进一步的,对地震数据进行转换,将转换后的数据的道头和数据道写入QC地震数据文件。
即,先创建各种类型的文件,然后将对应的数据、信息等写至对应的文件中。
2)三维数据体:
具体实现的时候,可以先确定地震数据是否为体数据并获取数据关键字,如果是三维数据体,则根据数据关键字创建QC索引文件、QC地震数据文件和QC切片数据文件并输出QC卷信息文件,作为QC数据;然后,根据数据关键字,按道提取索引信息,并将索引信息写入所述QC索引文件,对地震数据进行转换,将转换后的数据的道头和数据道写入所述QC地震数据文件,读取QC地震数据文件中的数据,并将读取的数据转换为切片数据,写入QC切片数据文件。
进一步的,由于质量控制系统中的数据只做数据质量监控和评价使用,为了节省磁盘空间,加快数据推送速度,对于QC地震数据文件和QC切片数据文件,可以提供三种存储样值的格式依次为:8位整型、16位整型、32位IEEE浮点,在具体实现的时候,用户可以根据实际情况自主选择采用某种存储格式对数据进行存储。
具体地,提出了一种“QC数据”数据结构,从GeoEast格式地震数据到QC数据的转换也是通过QC数据输出批量模块(QCOut)实现的,该QC数据的数据结构可以包括如下四个部分:
1)QC卷信息文件:用来存放整个QC数据的公共参数部分,所谓的公共参数可以包括:地震数据格式类型、极性类型、采样间隔、采样点数等;
2)QC索引文件:可以是存放基于关键字的数据索引,以备在ISQC质量控制系统中省略数据加载过程,直接高效交互调显数据;
3)QC地震数据文件:可以存储的是一道一道的记录,其中,每道数据由道头和该道数据样值组成;
4)QC切片数据文件:对于三维数据体,同时还生成时间切片数据文件,格式与QC地震数据文件相同。
步骤103:将所述QC数据自动推送至项目质量控制系统,以使所述项目质量控制系统按照与所述预定数据结构对应的方式读取所述QC数据并实时交互调显所述QC数据。
在进行数据推送的时候,可以是将预定数据结构的数据推送至项目质量控制系统的数据磁盘上,即,自动将预定数据结构的QC数据写入至项目质量控制系统的数据磁盘上。
在本例中,以GeoEast处理系统作为基于数据库管理的地震数据系统,以ISQC质量控制系统作为项目质量控制系统,为了实现基于异构系统之间的地震数据可全自动、准确推送和高效加载的目的,大大简化从GeoEast处理系统到ISQC质量控制系统的数据推送和加载,显著提升海量地震数据推送和交互调显效率,减轻使用者的工作量,提高质量控制的工作效率,提供了一种数据推送方法,以实现“基于数据库管理的地震数据处理系统(GeoEast)”到“交互处理项目质量控制系统(ISQC)”的地震数据自动推送和数据加载。
在本例中,如图2所示左虚框中为数据处理系统,在该数据处理系统中,从GeoEast处理系统到ISQC质量控制系统的数据自动推送和加载的过程中,摒弃了异构系统之间传统的地震数据传送和数据加载方式,将需要进行质量控制的GeoEast格式地震数据通过“QC数据输出批量模块(QCOut)”转换生成自定义数据结构的QC数据并同时完成数据索引建立、数据压缩及数据推送等一系列繁琐却不可省缺的步骤。
基于步骤102中的QC数据,本例中可以按照以下方式实现异构系统之间地震数据的自动推送:
通过GeoEast处理系统中的地震数据输入批量模块读取GeoEast格式的地震数据,按照ISQC质量控制系统中数据交互调显所需的类型,由“QC数据输出批量模块(QCOut)”建立数据索引并生成自定义数据结构的QC数据,并通过高速网络将该数据直接快速地写到独立的ISQC质量控制系统的数据磁盘上。
在QC数据生成和推送的过程出现异常均会报错终止,错误信息可通过LIST文件查看,以此保证QC数据自动、准确、高效地被推送。
为了能在ISQC质量控制系统中实时交互显示QC数据,根据“QC数据”的数据结构,可以设计相应的I/O软件,实现读取数据通用接口及三维数据体读取接口,读取数据通用接口可以按照QC数据体的存放顺序来读取符合范围的数据,且需要保证关键字连续出现在QC数据体中,否则停止读取。
三维数据体接口有以下三类:
1)提供针对line或cmp为第一关键字的单一值,来获取该道集的数据接口;
2)提供针对任意对line、cmp值获取数据道的接口;
3)提供针对数据样值位置获取时间切片数据的接口。
通过上述基于异构系统之间的地震数据自动推送和加载,可以大大简化数据推送、加载的步骤,同时提供了一种简洁、准确的跨异构系统之间数据推送、加载和实时高效交互显示工具,对于海量数据,可以有效减轻使用者的工作量,提高质量控制工作效率。
下面结合一个具体实施例对上述QC数据结构和所需的接口等进行说明,然而值得注意的是,该具体实施例仅是为了更好地说明本发明,并不构成对本发明的不当限定。
如图3所述,QC数据的数据结构可以包括如下四个部分:
1)QC卷信息文件:用于存放整个QC磁盘数据公共参数部分,例如,可以共计128个字,存储在名称为“数据名.vol”的磁盘文件中;
2)QC索引文件:创建QC数据的第一、二关键字的索引,数据接口程序只针对三维数据体进行分选排序,因此其它的数据要保证是按关键字的从小到大的顺序存储。数据索引可以存储在名称为“数据名.index”的磁盘文件中;
3)QC地震数据文件:即,数据文件,一道一道的记录,每道由道头和该道数据样值组成,道头共计192个字。可以存储在名称为“数据名”的磁盘文件中。
4)QC切片数据文件:对于三维数据体,在生成QC卷信息文件、QC索引文件和QC地震数据文件的同时还可以生成QC切片数据文件。QC切片数据文件的格式可以与QC地震数据文件的格式相同。可以存储在名称为“数据名.slice”的磁盘文件中。
如图2所示的“QC数据输出批量模块(QCOut)”为GeoEast处理系统提供了用于自动推送地震数据到ISQC质量控制系统目录下的新工具,GeoEast处理系统中由输入模块指定数据类型和数据范围,并通过数据平台接口,读取GeoEast格式地震数据,借助执行控制子系统接口对道头和数据操作,按照用户指定的数据类型,建立数据索引,最终生成自定义数据结构的QC数据并通过高速网络将该数据直接快速地写到独立的ISQC质量控制系统的数据磁盘上,由此完成地震数据自动、准确、高效地推送。
如图4所示为“QC数据输出批量模块(QCOut)”的数据流程示意图,QCOut模块的分析阶段对编码参数进行译码分析。在执行阶段,首先获取数据关键字并判断是三维数据体,则创建如下三个文件:QC索引文件、QC地震数据文件和QC切片数据文件;否则,只创建QC索引文件和QC地震数据文件。然后,创建并一次输出数据的公共参数部分至QC卷信息文件,接着通过执行控制子系统一道道获取地震数据道提取第一、二关键字的索引,写到QC索引文件中;同时,转换地震数据将道头和数据道写到QC地震数据文件中,直到数据的最后一道。当数据为三维数据体时,通过读取QC地震数据文件中的数据并且转换为切片数据写到QC切片数据文件。
由于ISQC质量控制系统中的数据只做数据质量监控和评价使用,为了节省磁盘空间,加快数据推送速度,对于QC地震数据文件和QC切片数据文件,QCOut模块提供三种存储样值的格式依次为:8位整型、16位整型、32位IEEE浮点,用户可根据实际情况自主选择。
例如,QCOut模块编码参数可以按照以下方式设定:
Output File Name:输出QC数据文件名。
Data format:输出QC数据的记录格式,目前支持三种记录格式。
IEEE float point:IEEE(32位浮点)(缺省)
16bit-integer(SPI):16位数据类型,进行归一处理
8bit-integer(SBI):8位数据类型,进行归一处理
Repeated filename:如果已有同名数据(和Output File Name参数定义的数据同名)的处理方式。
Job abort:作业失败返回(缺省)
Override file:覆盖同名数据
根据QC数据的数据结构和存储方式自主设计了读取数据通用接口及三维数据体读取接口并完成相应接口程序开发,下面对读取数据通用接口和三维数据体接口说明如下:
1)读取数据通用接口:
根据需求不随机读取QC数据,对使用第一关键字和第二关键字值的范围获取数据的情况,进行了限制处理,并不是按照接口参数值的先后顺序读取数据,而是按照QC数据体存放的顺序来读取符合范围的数据,且第一关键字连续出现在QC数据体中,否则停止读取。
2)三维数据体接口:
提供针对line或cmp为第一关键字的单一值,来获取该道集的数据道,读取的数据道顺序是第二关键字从小到大的顺序。提供针对任意对line、cmp值获取数据道的接口,按照用户给出的集合中的先后顺序读取数据道。获取时间切片数据,通过指定数据样值的位置来获得某一时刻的所有道的该时间点的数据样值、line、cmp、x、y信息。
下面给出几种主要的接口实例:
bool is3DStacked(){return m_b3DStacked;}:检查是否为三维数据体
string getDataName(){return m_strFileName;}:得到数据文件名
void getKeyInfo(string&strKey1,string&strKey2):得到数据关键字信息
void getKeyCode(int&key1,int&key2):得到数据关键字代码
void getKey1Range(double&fMin,double&fMax):得到数据第一关键字范围
void getKey2Range(double&fMin,double&fMax):得到数据第二关键字范围
bool getVol(char*pVol):得到数据文件头信息
bool getAllIndex(vector<KeyIndex>&v):得到数据卷信息关键字索引
bool getFirstKeyIndex(set<double>&sFirstKey):得到数据第一关键字索引
bool isSameType(const string&strFile):检查和另一个QC数据是否域类型、关键字显示类型、道数相同
RangeType checkRangeType(const string&strFile):检查和另一个QC数据是否范围相同或错位等
bool getData(double fKey1Min,double fKey1Max,double fKey2Min,doublefKey2Max,char*&buf,int&nTraces):用第一关键字和第二关键字值的范围读取数据
bool getLineData(int nLine,char*&buf,int&nTraces):针对三维数据体用第一关键字line读取数据
bool getCmpData(int nCmp,char*&buf,int&nTraces):针对三维数据体用第一关键字cmp读取数据
bool getData(const vector<CmpLine>&v,char*&buf,int&nTraces):针对三维数据体用任意对line、cmp值读取数据
bool getSliceData(vector<SliceInfo>&v,int nWhichSample):针对三维数据体指定样值位置读取某一时刻的所有道的该时间点的数据。
在上例中,提出了跨异构系统之间数据推送技术和数据加载方法,是一种基于数据库管理的地震数据处理系统到非数据库管理的处理项目质量控制系统之间的自动、高效、准确的数据推送新方法。提高了数据传输效率和质量控制效率,确保了数据传输准确性。
基于同一发明构思,本发明实施例中还提供了一种数据推送和加载装置,如下面的实施例所述。由于数据推送和加载装置解决问题的原理与数据推送和加载方法相似,因此数据推送和加载装置的实施可以参见数据推送和加载方法的实施,重复之处不再赘述。以下所使用的,术语“单元”或者“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。图5是本发明实施例的数据推送和加载装置的一种结构框图,如图5所示可以包括:获取模块501、处理模块502和推送模块503,下面对该结构进行说明。
获取模块501,用于从基于数据库管理的地震数据系统中获取地震数据;
处理模块502,用于对所述地震数据进行处理,得到预定数据结构的QC数据;
推送模块503,用于将所述QC数据自动推送至项目质量控制系统,以使所述项目质量控制系统按照与所述预定数据结构对应的方式读取所述QC数据并实时交互调显所述QC数据。
在一个实施方式中,处理模块502可以包括:第一确定单元,用于确定所述地震数据是否为三维数据体并获取数据关键字;第一输出单元,用于在确定是三维数据体的情况下,根据所述数据关键字创建QC索引文件、QC地震数据文件和QC切片数据文件并输出QC卷信息文件,作为QC数据;第一写入单元,用于根据所述数据关键字,按道提取索引信息,并将索引信息写入所述QC索引文件;第一转换单元,用于对所述地震数据进行转换,将转换后的数据的道头和数据道写入所述QC地震数据文件;读取单元,用于读取所述QC地震数据文件中的数据,并将读取的数据转换为切片数据,写入所述QC切片数据文件。
在一个实施方式中,所述QC地震数据文件和QC切片数据文件可以但不限于按照以下方式中的任意一种存储数据:8位整型、16位整型和32位IEEE浮点型。
在一个实施方式中,处理模块502可以包括:第二确定单元,用于确定所述地震数据是否为二维数据或三维监控线数据并获取数据关键字;第二输出单元,用于在确定是二维数据或三维监控线数据的情况下,根据所述数据关键字创建QC索引文件和QC地震数据文件并输出QC卷信息文件,作为QC数据;第二写入单元,用于根据所述数据关键字,按道提取索引信息,并将索引信息写入所述QC索引文件;第二转换单元,用于对所述地震数据进行转换,将转换后的数据的道头和数据道写入所述QC地震数据文件。
在一个实施方式中,推送模块503具体可以用于自动将所述预定数据结构的QC数据写入至所述项目质量控制系统的数据磁盘上。
在一个实施方式中,上述项目质量控制系统可以基于所述索引文件,按照地震数据在所述QC数据中的存放顺序自动读取符合范围的数据。
在一个实施方式中,获取模块501具体可以用于通过执行控制子系统接口,从所述基于数据库管理的地震数据系统中获取所述地震数据。
从以上的描述中,可以看出,本发明实施例实现了如下技术效果:先将地震数据按照预定规则转换为预定数据结构的QC数据,并将QC数据自动推送至项目质量控制系统,然后采用与该预定规则对应的读取方式就可以根据用户所需范围高效读取QC数据,借助QC数据中的索引文件,无需遍历整个数据,就可以交互显示数据,从而达到实时高效交互显示数据的目的,实现了从基于数据库管理的地震数据处理系统到非数据库管理的处理项目质量控制系统之间转换,从而有效解决了现有的地震数据传送和数据加载方式所存在的耗费大量人力,且效率低下的技术问题,达到了有效提高数据传送加载效率的技术效果。
显然,本领域的技术人员应该明白,上述的本发明实施例的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明实施例不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明实施例可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (14)
1.一种数据推送和加载方法,其特征在于,包括:
从基于数据库管理的地震数据系统中获取地震数据;
对所述地震数据进行处理,得到预定数据结构的QC数据;
将所述QC数据自动推送至项目质量控制系统,以使所述项目质量控制系统按照与所述预定数据结构对应的方式读取所述QC数据并实时交互调显所述QC数据。
2.根据权利要求1所述的方法,其特征在于,对所述地震数据进行处理,得到预定数据结构的QC数据,包括:
确定所述地震数据是否为三维数据体并获取数据关键字;
如果是三维数据体,则根据所述数据关键字创建QC索引文件、QC地震数据文件和QC切片数据文件并输出QC卷信息文件,作为QC数据;
根据所述数据关键字,按道提取索引信息,并将索引信息写入所述QC索引文件;
对所述地震数据进行转换,将转换后的数据的道头和数据道写入所述QC地震数据文件;
读取所述QC地震数据文件中的数据,并将读取的数据转换为切片数据,写入所述QC切片数据文件。
3.根据权利要求2所述的方法,其特征在于,所述QC地震数据文件和QC切片数据文件按照以下方式中的任意一种方式存储数据:8位整型、16位整型和32位IEEE浮点型。
4.根据权利要求1所述的方法,其特征在于,对所述地震数据进行处理,得到预定数据结构的QC数据,包括:
确定所述地震数据是否为二维数据或三维监控线数据并获取数据关键字;
如果是二维数据或三维监控线数据,则根据所述数据关键字创建QC索引文件和QC地震数据文件并输出QC卷信息文件,作为QC数据;
根据所述数据关键字,按道提取索引信息,并将索引信息写入所述QC索引文件;
对所述地震数据进行转换,将转换后的数据的道头和数据道写入所述QC地震数据文件。
5.根据权利要求4所述的方法,其特征在于,所述项目质量控制系统按照与所述预定数据结构对应的方式读取所述QC数据并实时交互调显所述QC数据,包括:
基于所述QC索引文件,按照地震数据在所述QC数据中的存放顺序自动读取符合范围的数据。
6.根据权利要求1至5中任一项所述的方法,其特征在于,将所述QC数据自动推送至项目质量控制系统,包括:
自动将所述预定数据结构的QC数据写入至所述项目质量控制系统的数据磁盘上。
7.根据权利要求1至5中任一项所述的方法,其特征在于,从基于数据库管理的地震数据系统中获取地震数据,包括:
通过执行控制子系统接口,从所述基于数据库管理的地震数据系统中获取所述地震数据。
8.一种数据推送和加载装置,其特征在于,包括:
获取模块,用于从基于数据库管理的地震数据系统中获取地震数据;
处理模块,用于对所述地震数据进行处理,得到预定数据结构的QC数据;
推送模块,用于将所述QC数据自动推送至项目质量控制系统,以使所述项目质量控制系统按照与所述预定数据结构对应的方式读取所述QC数据并实时交互调显所述QC数据。
9.根据权利要求8所述的装置,其特征在于,所述处理模块包括:
第一确定单元,用于确定所述地震数据是否为三维数据体并获取数据关键字;
第一输出单元,用于在确定是三维数据体的情况下,根据所述数据关键字创建QC索引文件、QC地震数据文件和QC切片数据文件并输出QC卷信息文件,作为QC数据;
第一写入单元,用于根据所述数据关键字,按道提取索引信息,并将索引信息写入所述QC索引文件;
第一转换单元,用于对所述地震数据进行转换,将转换后的数据的道头和数据道写入所述QC地震数据文件;
读取单元,用于读取所述QC地震数据文件中的数据,并将读取的数据转换为切片数据,写入所述QC切片数据文件。
10.根据权利要求9所述的装置,其特征在于,所述QC索引文件、所述QC地震数据文件和QC切片数据文件按照以下方式中的任意一种方式存储数据:8位整型、16位整型和32位IEEE浮点型。
11.根据权利要求8所述的装置,其特征在于,所述处理模块包括:
第二确定单元,用于确定所述地震数据是否为二维数据或三维监控线数据并获取数据关键字;
第二输出单元,用于在确定是二维数据或三维监控线数据的情况下,根据所述数据关键字创建QC索引文件和QC地震数据文件并输出QC卷信息文件,作为QC数据;
第二写入单元,用于根据所述数据关键字,按道提取索引信息,并将索引信息写入所述QC索引文件;
第二转换单元,用于对所述地震数据进行转换,将转换后的数据的道头和数据道写入所述QC地震数据文件。
12.根据权利要求11所述的装置,其特征在于,所述项目质量控制系统具体用于基于所述索引文件,按照地震数据在所述QC数据中的存放顺序自动读取符合范围的数据。
13.根据权利要求8至12中任一项所述的装置,其特征在于,所述推送模块具体用于自动将所述预定数据结构的QC数据写入至所述项目质量控制系统的数据磁盘上。
14.根据权利要求8至12中任一项所述的装置,其特征在于,所述获取模块具体用于通过执行控制子系统接口,从所述基于数据库管理的地震数据系统中获取所述地震数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610608622.1A CN106227857B (zh) | 2016-07-28 | 2016-07-28 | 数据推送和加载方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610608622.1A CN106227857B (zh) | 2016-07-28 | 2016-07-28 | 数据推送和加载方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106227857A true CN106227857A (zh) | 2016-12-14 |
CN106227857B CN106227857B (zh) | 2019-07-09 |
Family
ID=57535277
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610608622.1A Active CN106227857B (zh) | 2016-07-28 | 2016-07-28 | 数据推送和加载方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106227857B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112241426A (zh) * | 2019-07-16 | 2021-01-19 | 中国石油天然气集团有限公司 | 基于动态道头的地震数据转换方法及装置 |
CN117519610A (zh) * | 2024-01-05 | 2024-02-06 | 中国石油集团东方地球物理勘探有限责任公司 | 一种叠后地震数据创建cmp数据体的方法、装置及介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102073727A (zh) * | 2011-01-12 | 2011-05-25 | 中国石油集团川庆钻探工程有限公司 | 一种用于描述地震资料数据的方法 |
CN103310061A (zh) * | 2013-06-19 | 2013-09-18 | 安徽省煤田地质局物探测量队 | 煤田地震勘探绘图系统 |
CN105301652A (zh) * | 2014-07-31 | 2016-02-03 | 中国石油化工股份有限公司 | 一种三维地震数据固定轴向切片动态判断体绘制方法 |
CN105320513A (zh) * | 2014-07-31 | 2016-02-10 | 中国石油化工股份有限公司 | 一种适于任何seg-y地震数据的i/o方法 |
-
2016
- 2016-07-28 CN CN201610608622.1A patent/CN106227857B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102073727A (zh) * | 2011-01-12 | 2011-05-25 | 中国石油集团川庆钻探工程有限公司 | 一种用于描述地震资料数据的方法 |
CN103310061A (zh) * | 2013-06-19 | 2013-09-18 | 安徽省煤田地质局物探测量队 | 煤田地震勘探绘图系统 |
CN105301652A (zh) * | 2014-07-31 | 2016-02-03 | 中国石油化工股份有限公司 | 一种三维地震数据固定轴向切片动态判断体绘制方法 |
CN105320513A (zh) * | 2014-07-31 | 2016-02-10 | 中国石油化工股份有限公司 | 一种适于任何seg-y地震数据的i/o方法 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112241426A (zh) * | 2019-07-16 | 2021-01-19 | 中国石油天然气集团有限公司 | 基于动态道头的地震数据转换方法及装置 |
CN117519610A (zh) * | 2024-01-05 | 2024-02-06 | 中国石油集团东方地球物理勘探有限责任公司 | 一种叠后地震数据创建cmp数据体的方法、装置及介质 |
CN117519610B (zh) * | 2024-01-05 | 2024-03-22 | 中国石油集团东方地球物理勘探有限责任公司 | 一种叠后地震数据创建cmp数据体的方法、装置及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN106227857B (zh) | 2019-07-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104361018B (zh) | 电子档案信息整编方法及装置 | |
CN103218402B (zh) | 通用的数据库数据结构与数据迁移系统及其方法 | |
CN111586091B (zh) | 一种实现算力组配的边缘计算网关系统 | |
CN105718528A (zh) | 基于论文间引用关系的学术地图展示方法 | |
CN111159180A (zh) | 一种基于数据资源目录构建的数据处理方法及系统 | |
CN114379608A (zh) | 一种城市轨道交通工程的多源异构数据集成处理方法 | |
CN103838847A (zh) | 一种面向海云协同网络计算环境的数据组织方法 | |
CN113656021B (zh) | 一种面向业务场景的油气大数据分析系统及方法 | |
CN112115611B (zh) | 一种协同仿真管理系统 | |
CN101894129B (zh) | 基于在线视频分享网站结构及视频描述文本信息的视频主题发现的方法 | |
CN108519876A (zh) | 一种图形化数据流建模和处理系统及方法 | |
CN112347071A (zh) | 一种配电网云平台数据融合方法及配电网云平台 | |
Hutchison et al. | From NoSQL Accumulo to NewSQL Graphulo: Design and utility of graph algorithms inside a BigTable database | |
CN109582837A (zh) | 一种基于云的可视化数据处理方法及系统 | |
CN106294805A (zh) | 数据处理方法及装置 | |
CN102722368B (zh) | 一种基于文档树和消息泵的插件式软件设计方法 | |
CN106227857A (zh) | 数据推送和加载方法和装置 | |
AL-Msie'deen et al. | Detecting commonality and variability in use-case diagram variants | |
Hu et al. | Research on modeling of power grid information system based on knowledge graph | |
CN116523328A (zh) | 一种航空装备协同制造产业链协作智能决策方法 | |
CN110096773A (zh) | 用于核电站虚拟仿真开发的三维模型批量处理方法和系统 | |
KR101629395B1 (ko) | 데이터 분석 장치, 데이터 분석 방법 및 데이터를 분석하는 프로그램을 저장하는 저장매체 | |
CN114003774A (zh) | 一种用于智慧城市的电力大数据信息采集系统 | |
CN112559894A (zh) | 一种计算机用的人工智能信息过滤系统 | |
Wu et al. | The design of distributed power big data analysis framework and its application in residential electricity analysis |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |