CN107886286A - 地震数据处理作业流方法及系统 - Google Patents

地震数据处理作业流方法及系统 Download PDF

Info

Publication number
CN107886286A
CN107886286A CN201610867881.6A CN201610867881A CN107886286A CN 107886286 A CN107886286 A CN 107886286A CN 201610867881 A CN201610867881 A CN 201610867881A CN 107886286 A CN107886286 A CN 107886286A
Authority
CN
China
Prior art keywords
stream
file
job stream
job
seismic data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610867881.6A
Other languages
English (en)
Inventor
杨文广
庞世明
宋志翔
许自龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Petroleum and Chemical Corp
Sinopec Geophysical Research Institute
Original Assignee
China Petroleum and Chemical Corp
Sinopec Geophysical Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Petroleum and Chemical Corp, Sinopec Geophysical Research Institute filed Critical China Petroleum and Chemical Corp
Priority to CN201610867881.6A priority Critical patent/CN107886286A/zh
Publication of CN107886286A publication Critical patent/CN107886286A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/103Workflow collaboration or project management

Landscapes

  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Engineering & Computer Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Operations Research (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Data Mining & Analysis (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Stored Programmes (AREA)

Abstract

公开了一种地震数据处理作业流方法及系统。该方法可以包括:基于地震资料,通过作业流编辑器调整连接,获得作业流信息;基于作业流信息,通过解析,获得作业流文件;基于作业流文件与源代码模板,通过提取嵌入,获得作业流模块文件;基于作业流模块文件,通过编译,获得可执行文件与动态库文件;以及基于可执行文件与动态库文件,通过作业流引擎,运行作业流。本发明通过作业流编辑器与作业流引擎的事务隔离,实现快捷方便的作业流编辑环境。

Description

地震数据处理作业流方法及系统
技术领域
本发明涉及油气地球物理勘探领域,更具体地,涉及一种地震数据处理作业流方法及系统。
背景技术
在油气地球物理勘探领域,地震处理软件具有很多模块,需要提供便利的用户界面,选择模块及其参数,形成作业。现有的地球物理软件一般使用UNIX shell或专门的脚本来描述处理流程。需要命令行的方式提交作业,作业流交互方式不友好,作业发送时后端事务繁琐,耦合紧密,用户体验不好。因此,有必要开发一种地震数据处理作业流方法及系统。
公开于本发明背景技术部分的信息仅仅旨在加深对本发明的一般背景技术的理解,而不应当被视为承认或以任何形式暗示该信息构成已为本领域技术人员所公知的现有技术。
发明内容
本发明提出了一种地震数据处理作业流方法及系统,其能够通过作业流编辑器与作业流引擎的事务隔离,实现快捷方便的作业流编辑环境。
根据本发明的一方面,提出了一种地震数据处理作业流方法。所述方法可以包括:基于地震资料,通过作业流编辑器调整连接,获得作业流信息;基于所述作业流信息,通过解析,获得作业流文件;基于所述作业流文件与源代码模板,通过提取嵌入,获得作业流模块文件;基于所述作业流模块文件,通过编译,获得可执行文件与动态库文件;以及基于所述可执行文件与所述动态库文件,通过作业流引擎,运行作业流。
根据本发明的另一方面,提出了一种地震数据处理作业流系统,所述系统可以包括:作业流编辑器,基于地震资料,通过作业流编辑器调整连接,获得作业流信息,进而通过解析与编译,获得可执行文件与动态库文件;作业流引擎,基于所述可执行文件与所述动态库文件,通过作业流引擎,发送至作业流服务器;以及作业流服务器,基于所述可执行文件与所述动态库文件,通过所述作业流服务器分配,运行作业流。
本发明的方法和装置具有其它的特性和优点,这些特性和优点从并入本文中的附图和随后的具体实施方式中将是显而易见的,或者将在并入本文中的附图和随后的具体实施方式中进行详细陈述,这些附图和具体实施方式共同用于解释本发明的特定原理。
附图说明
通过结合附图对本发明示例性实施方式进行更详细的描述,本发明的上述以及其它目的、特征和优势将变得更加明显,其中,在本发明示例性实施方式中,相同的参考标号通常代表相同部件。
图1示出了根据本发明的地震数据处理作业流方法的步骤的流程图。
具体实施方式
下面将参照附图更详细地描述本发明。虽然附图中显示了本发明的优选实施方式,然而应该理解,可以以各种形式实现本发明而不应被这里阐述的实施方式所限制。相反,提供这些实施方式是为了使本发明更加透彻和完整,并且能够将本发明的范围完整地传达给本领域的技术人员。
实施方式1
图1示出了地震数据处理作业流方法的步骤的流程图。
在该实施方式中,根据本发明的地震数据处理作业流方法可以包括:步骤101,基于地震资料,通过作业流编辑器调整连接,获得作业流信息;步骤102,基于作业流信息,通过解析,获得作业流文件;步骤103,基于作业流文件与源代码模板,通过提取嵌入,获得作业流模块文件;步骤104,基于作业流模块文件,通过编译,获得可执行文件与动态库文件;以及步骤105,基于可执行文件与动态库文件,通过作业流引擎,运行作业流。
该实施方式通过作业流编辑器与作业流引擎的事务隔离,实现快捷方便的作业流编辑环境。
下面详细说明根据本发明的地震数据处理作业流方法的具体步骤。
在一个示例中,基于地震资料,通过作业流编辑器调整连接,可以获得作业流信息。
在一个示例中,获得作业流信息可以包括:通过作业流编辑器,选择待处理模块,填写参数信息;以及调整待处理模块的顺序并连接,获得作业流信息。
具体地,基于地震资料,通过作业流编辑器的模块选择区,选择待处理模块,并将其拖放到作业流编辑区中,填写各个模块的参数信息,调整待处理模块的先后循序并用单向箭头线连接各个模块,获得作业流信息。
在一个示例中,通过解析,可以获得作业流文件。
具体地,基于作业流信息,通过作业流编辑器的作业流文件解析器进行解析,将作业流信息正向解析成字符串,并以文件的形式保存,获得作业流文件。其中,解析分为正向解析和逆向解析,正向解析是将作业流编辑区可视化的作业流信息转化为作业流文件,逆向解析是将已存在的作业流文件解析为可视化的作业流信息,本领域技术人员可以根据具体情况选择解析的方式。
在一个示例中,基于作业流文件与源代码模板,通过提取嵌入,可以获得作业流模块文件。
在一个示例中,获得作业流模块文件可以包括:提取作业流文件的作业流信息,载入源代码模板;以及将作业流信息嵌入到源代码模板中,获得作业流模块文件。
具体地,通过作业流编辑器的作业流代码生成器,读取作业流文件,并提取作业流文件中的作业流信息,同时载入作业流源代码模板,将作业流信息按一定规则嵌入到作业流模板中,包括作业相关的头文件的信息,模块类,参数类,元数据类信息等。在作业流源代码模版中依次初始化各模块类及其参数类,按作业流文件提供的参数信息对参数类进行赋值,同时调用模块基类提供的方法将参数类实例传递给相应的模块类实例,获得作业流模块文件。
在一个示例中,基于作业流模块文件,通过编译,可以获得可执行文件与动态库文件。
具体地,基于作业流模块文件,通过作业流编辑器的作业流代码编译器将作业流模块文件编译成动态库文件,同时生成可执行文件。
在一个示例中,基于可执行文件与动态库文件,通过作业流引擎,可以运行作业流。
在一个示例中,运行作业流可以包括:基于可执行文件与动态库文件,通过作业流引擎,发送至作业流服务器,由作业流服务器分配,运行作业流。
具体地,通过作业流引擎,将可执行文件与动态库文件,发送至作业服务器,由服务器分发到集群各个节点,执行作业流的运行。
应用示例
为便于理解本发明实施方式的方案及其效果,以下给出一个具体应用示例。本领域技术人员应理解,该示例仅为了便于理解本发明,其任何具体细节并非意在以任何方式限制本发明。
用户从作业流编辑器的模块选择区选择待处理模块,并将其拖放到作业流编辑区中,填写各个模块的参数信息,调整各个模块的先后循序,并用单向箭头线连接,获得作业流信息。
基于作业流信息,通过作业流编辑器的作业流文件解析器进行解析,将作业流信息正向解析成Json格式的字符串,并保存为Json文件,获得作业流文件。
作业流代码生成器读取作业流Json文件,提取文件中的作业流信息,同时载入作业流源代码模板,将作业流信息按一定规则嵌入到作业流模板中,包括作业相关的头文件的信息,模块类,参数类,元数据类信息等,在源代码模版中依次初始化各模块类及其参数类,按作业流文件提供的参数信息对参数类进行赋值,同时调用模块基类提供的方法将参数类实例传递给相应的模块类实例,最后保存生成的cpp文件,获得作业流模块文件。
作业流代码编译器将作业流模块cpp文件编译成动态库文件,同时生成MapReduce可执行文件。
作业流引擎将动态库文件与MapReduce可执行文件,发送到作业服务器,由服务器分发到集群各个节点,执行作业流的运行。
综上所述,本方法通过作业流编辑器与作业流引擎的事务隔离,实现快捷方便的作业流编辑环境。
本领域技术人员应理解,上面对本发明的实施方式的描述的目的仅为了示例性地说明本发明的实施方式的有益效果,并不意在将本发明的实施方式限制于所给出的任何示例。
实施方式2
根据本发明的实施方式,提供了一种地震数据处理作业流系统,所述系统可以包括:作业流文件解析器,基于作业流信息,通过解析,获得作业流文件;作业流代码生成器,基于作业流文件与源代码模板,通过提取嵌入,获得作业流模块文件;以及作业流代码编译器,基于作业流模块文件,通过编译,获得可执行文件与动态库文件。
该实施方式通过作业流编辑器与作业流引擎的事务隔离,实现快捷方便的作业流编辑环境。
在一个示例中,作业流编辑器可以包括:作业流文件解析器,基于作业流信息,通过解析,获得作业流文件;作业流代码生成器,基于作业流文件与源代码模板,通过提取嵌入,获得作业流模块文件;以及作业流代码编译器,基于作业流模块文件,通过编译,获得可执行文件与动态库文件。。
在一个示例中,获得作业流信息可以包括:通过作业流编辑器,选择待处理模块,填写参数信息;以及调整待处理模块的顺序并连接,获得作业流信息。
在一个示例中,获得作业流模块文件可以包括:提取作业流文件的作业流信息,载入源代码模板;以及将作业流信息嵌入到源代码模板中,获得作业流模块文件。
本领域技术人员应理解,上面对本发明的实施方式的描述的目的仅为了示例性地说明本发明的实施方式的有益效果,并不意在将本发明的实施方式限制于所给出的任何示例。
以上已经描述了本发明的各实施方式,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施方式。在不偏离所说明的各实施方式的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施方式的原理、实际应用或对市场中的技术的改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施方式。

Claims (8)

1.一种地震数据处理作业流方法,包括:
基于地震资料,通过作业流编辑器调整连接,获得作业流信息;
基于所述作业流信息,通过解析,获得作业流文件;
基于所述作业流文件与源代码模板,通过提取嵌入,获得作业流模块文件;
基于所述作业流模块文件,通过编译,获得可执行文件与动态库文件;以及
基于所述可执行文件与所述动态库文件,通过作业流引擎,运行作业流。
2.根据权利要求1所述的地震数据处理作业流方法,其中,获得所述作业流信息包括:
通过作业流编辑器,选择待处理模块,填写参数信息;以及
调整所述待处理模块的顺序并连接,获得所述作业流信息。
3.根据权利要求1所述的地震数据处理作业流方法,其中,获得所述作业流模块文件包括:
提取所述作业流文件的所述作业流信息,载入所述源代码模板;以及
将所述作业流信息嵌入到所述源代码模板中,获得所述作业流模块文件。
4.根据权利要求1所述的地震数据处理作业流方法,其中,运行所述作业流包括:基于所述可执行文件与所述动态库文件,通过作业流引擎,发送至作业流服务器,由所述作业流服务器分配,运行作业流。
5.一种地震数据处理作业流系统,包括:
作业流编辑器,基于地震资料,通过作业流编辑器调整连接,获得作业流信息,进而通过解析与编译,获得可执行文件与动态库文件;
作业流引擎,基于所述可执行文件与所述动态库文件,通过作业流引擎,发送至作业流服务器;以及
作业流服务器,基于所述可执行文件与所述动态库文件,通过所述作业流服务器分配,运行作业流。
6.根据权利要求5所述的地震数据处理作业流系统,其中,所述作业流编辑器包括:
作业流文件解析器,基于所述作业流信息,通过解析,获得作业流文件;
作业流代码生成器,基于所述作业流文件与源代码模板,通过提取嵌入,获得作业流模块文件;以及
作业流代码编译器,基于所述作业流模块文件,通过编译,获得所述可执行文件与动态库文件。
7.根据权利要求6所述的地震数据处理作业流系统,其中,获得所述作业流信息包括:
通过作业流编辑器,选择待处理模块,填写参数信息;以及
调整所述待处理模块的顺序并连接,获得所述作业流信息。
8.根据权利要求6所述的地震数据处理作业流系统,其中,获得所述作业流模块文件包括:
提取所述作业流文件的所述作业流信息,载入所述源代码模板;以及
将所述作业流信息嵌入到所述源代码模板中,获得所述作业流模块文件。
CN201610867881.6A 2016-09-29 2016-09-29 地震数据处理作业流方法及系统 Pending CN107886286A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610867881.6A CN107886286A (zh) 2016-09-29 2016-09-29 地震数据处理作业流方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610867881.6A CN107886286A (zh) 2016-09-29 2016-09-29 地震数据处理作业流方法及系统

Publications (1)

Publication Number Publication Date
CN107886286A true CN107886286A (zh) 2018-04-06

Family

ID=61769102

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610867881.6A Pending CN107886286A (zh) 2016-09-29 2016-09-29 地震数据处理作业流方法及系统

Country Status (1)

Country Link
CN (1) CN107886286A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111858778A (zh) * 2020-08-18 2020-10-30 天津速越科技有限公司 基于蓝牙ic卡的服务器端数据读写方法及动态库使能器

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102033748A (zh) * 2010-12-03 2011-04-27 中国科学院软件研究所 一种数据处理流程代码的生成方法
CN104133678A (zh) * 2014-07-22 2014-11-05 中国石油天然气股份有限公司 构建、运行交互地震解释系统的方法及装置
CN104699469A (zh) * 2013-12-06 2015-06-10 中国石油天然气股份有限公司 一种适应数字化油藏研究与决策的专业软件集成方法
CN105045602A (zh) * 2015-08-24 2015-11-11 北京金山安全软件有限公司 一种构建Hadoop应用开发框架的方法、装置及电子装置
US20150356162A1 (en) * 2012-12-27 2015-12-10 Tencent Technology (Shenzhen) Company Limited Method and system for implementing analytic function based on mapreduce
CN105407122A (zh) * 2014-09-15 2016-03-16 中国石油天然气股份有限公司 地质研究系统和方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102033748A (zh) * 2010-12-03 2011-04-27 中国科学院软件研究所 一种数据处理流程代码的生成方法
US20150356162A1 (en) * 2012-12-27 2015-12-10 Tencent Technology (Shenzhen) Company Limited Method and system for implementing analytic function based on mapreduce
CN104699469A (zh) * 2013-12-06 2015-06-10 中国石油天然气股份有限公司 一种适应数字化油藏研究与决策的专业软件集成方法
CN104133678A (zh) * 2014-07-22 2014-11-05 中国石油天然气股份有限公司 构建、运行交互地震解释系统的方法及装置
CN105407122A (zh) * 2014-09-15 2016-03-16 中国石油天然气股份有限公司 地质研究系统和方法
CN105045602A (zh) * 2015-08-24 2015-11-11 北京金山安全软件有限公司 一种构建Hadoop应用开发框架的方法、装置及电子装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111858778A (zh) * 2020-08-18 2020-10-30 天津速越科技有限公司 基于蓝牙ic卡的服务器端数据读写方法及动态库使能器
CN111858778B (zh) * 2020-08-18 2023-11-10 天津速越科技有限公司 基于蓝牙ic卡的服务器端数据读写方法及动态库使能器

Similar Documents

Publication Publication Date Title
CN107665233B (zh) 数据库数据处理方法、装置、计算机设备和存储介质
CN103597469B (zh) 集成开发环境中的实况浏览器工具
CN104598902A (zh) 一种用于识别截图的方法、装置和浏览器
CA3152829A1 (en) Method and apparatus for processing business data
CN107329861A (zh) 一种多接口测试方法及装置
CN104484216A (zh) 服务接口文档和在线测试工具生成方法、装置
KR101628314B1 (ko) 애플리케이션의 구조와 메소드 호출 시퀀스를 시각적으로 표현하는 비주얼 스프링 개발 환경 시스템
CN107168695B (zh) 一种excel数据解析方法及系统
WO2014197475A1 (en) Automated graph-based programming
CN110275831A (zh) 协议接口的mock数据校验方法和装置
US20170293550A1 (en) Apparatus and method for testing interoperability of robot software
CN108376544B (zh) 一种信息处理方法、装置、设备及计算机可读存储介质
CN111581567B (zh) 一种页面生成方法及装置
CN110399306B (zh) 软件模块自动化测试方法及装置
CN110019835A (zh) 资源编排方法、装置以及电子设备
CN107797823A (zh) 业务规则管理方法、装置、存储介质和计算机设备
CN108614978A (zh) 压缩包的校验方法、装置、存储介质以及终端
CN107886286A (zh) 地震数据处理作业流方法及系统
CN103440197B (zh) 一种基于对比测试自动生成差异测试报告的方法
CN106649121B (zh) 一种测试结果分析方法及装置
CN103218413B (zh) 一种电子文件合成方法及装置
CA2498377A1 (en) An apparatus and method for processing web service descriptions
CN106776277A (zh) 一种跨进程测试的方法、装置及电子设备
CN103927341B (zh) 一种获取场景信息的方法及装置
CN104992379A (zh) 一种电力行业大数据动态文本交换格式管理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180406

RJ01 Rejection of invention patent application after publication