WO2022104596A1 - 分子动力学力场参数拟合工作流控制系统及其控制方法 - Google Patents

分子动力学力场参数拟合工作流控制系统及其控制方法 Download PDF

Info

Publication number
WO2022104596A1
WO2022104596A1 PCT/CN2020/129777 CN2020129777W WO2022104596A1 WO 2022104596 A1 WO2022104596 A1 WO 2022104596A1 CN 2020129777 W CN2020129777 W CN 2020129777W WO 2022104596 A1 WO2022104596 A1 WO 2022104596A1
Authority
WO
WIPO (PCT)
Prior art keywords
workflow
task
control system
input
cluster
Prior art date
Application number
PCT/CN2020/129777
Other languages
English (en)
French (fr)
Inventor
蒋瑞
温书豪
马健
赖力鹏
Original Assignee
深圳晶泰科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 深圳晶泰科技有限公司 filed Critical 深圳晶泰科技有限公司
Priority to PCT/CN2020/129777 priority Critical patent/WO2022104596A1/zh
Publication of WO2022104596A1 publication Critical patent/WO2022104596A1/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N10/00Quantum computing, i.e. information processing based on quantum-mechanical phenomena
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16CCOMPUTATIONAL CHEMISTRY; CHEMOINFORMATICS; COMPUTATIONAL MATERIALS SCIENCE
    • G16C10/00Computational theoretical chemistry, i.e. ICT specially adapted for theoretical aspects of quantum chemistry, molecular mechanics, molecular dynamics or the like

Definitions

  • the invention belongs to the technical field of molecular dynamics simulation, and in particular relates to a molecular dynamics force field parameter fitting workflow control system and a control method thereof.
  • the purpose of the present invention is to provide a molecular dynamics force field parameter fitting workflow control system and a control method thereof, which can realize complex molecular force field fitting by mixing local computer resources and high-performance computing cluster resources On-demand resource allocation and process control system for workflow multi-step computing tasks.
  • This system can automatically generate the input of step-by-step tasks, collect the output, and continue to run the task at any interruption point, improving the efficiency of the molecular force field fitting process.
  • the present invention provides the following technical solutions:
  • the workflow control system runs on a local host and mainly includes the following modules:
  • the central control module is responsible for interacting with the user, managing input and output, actually executing the workflow, and calling the other two modules on demand;
  • the local computing module is responsible for calling all the computing codes or software running on the local machine, standardizing and modularizing its input and output, and embedding it into the workflow;
  • the cluster task module is responsible for invoking the high-performance computing cluster to perform specific computing tasks.
  • the workflow control system has built-in one or more workflow templates customized for the actual needs of researchers, including step-by-step sub-task definitions of computing tasks, input parameters of each step, and outputs that need to be collected and submitted to the next step;
  • workflow template process the initial input and intermediate output provided by the user, and generate the input of each step of the computing task, including the input of the cluster task;
  • the corresponding output is obtained and temporarily stored locally after formatting.
  • the local computing module includes:
  • the specific workflow of the cluster task module is as follows:
  • the central control module calls and executes the cluster computing steps, it submits the prepared inputs to the cluster in batches, and records the task index returned by the cluster;
  • the workflow control system executes each step in turn: first, check whether the result of the task has been saved, if the result already exists, execute the next step, if the result does not exist, generate the input according to the result of the previous step. file, choose to compute locally or submit it to the computing cluster according to the task type, and collect and save the results when the computation is complete;
  • WCS realizes the modularization and flow of molecular force field fitting, which reduces the difficulty for researchers to obtain customized force field parameters.
  • Fig. 1 is the control flow chart of the present invention.
  • control method of the molecular dynamics force field parameter fitting workflow control system includes the following steps:
  • the user enters a specified batch of molecules and specifies the template to use "scan all".
  • Submit task According to the input file, submit each subtask to the cluster to run.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Evolutionary Computation (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Computational Mathematics (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Data Mining & Analysis (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种分子动力学力场参数拟合工作流控制系统及其控制方法,所述的工作流控制系统运行于本地主机,包括:中央控制模块,负责与用户交互、管理输入输出、实际执行工作流、按需调用另外两个模块;本机运算模块,负责调用所有在本机上运行的计算代码或软件,将其输入输出标准化与模块化,并嵌入到工作流中;集群任务模块,负责调用高性能计算集群来执行特定计算任务。本发明通过混合本地计算机资源和高性能计算集群资源,来实现复杂的分子力场拟合工作流多步计算任务的按需分配资源以及流程控制系统。此系统可以自动生成分步任务的输入,收集输出,并可以在任意中断点处继续运行任务,提高了进行分子力场拟合流程的效率。

Description

分子动力学力场参数拟合工作流控制系统及其控制方法 技术领域
本发明属于分子动力学模拟技术领域,具体涉及一种分子动力学力场参数拟合工作流控制系统及其控制方法。
背景技术
在进行分子动力学模拟计算时,公开可用的分子力场参数可能会出现表现不佳、参数缺失等情况,这时需要用户针对进行需要计算的分子拟合定制化的力场参数。科学家通常需要手动执行分子碎片化、进行量子力学计算、拟合分子动力学力场、参数验证分析等步骤,才能最终得到需要的力场参数。现有方法存在以下缺点:
(1)在拟合力场参数的工作流中,不同步骤所用工具通常分布在不同的软件套件/生态环境中,同时其输入输出标准不统一,需要进行额外处理才能将各步骤串接在一起,同时其结果将会分散在不同的存储位置,不利于后续利用。
(2)当需要拟合的分子数量不断增加时,基于本地资源的计算工具将无法处理大规模的量子化学计算。
发明内容
针对上述技术问题,本发明的目的在于提供一种分子动力学力场参数拟合工作流控制系统及其控制方法,通过混合本地计算机资源和高性能计算集群资源,来实现复杂的分子力场拟合工作流多步计算任务的按需分配资源以及流程控制系统。此系统可以自动生成分步任务的输入,收集输出,并可以在任意中断点处继续运行任务,提高了进行分子力场拟合流程的效率。
为实现上述目的,本发明提供如下技术方案:
分子动力学力场参数拟合工作流控制系统,所述的工作流控制系统运行于本地主机,主要包括以下模块:
中央控制模块,负责与用户交互、管理输入输出、实际执行工作流、按需调用另外两个模块;
本机运算模块,负责调用所有在本机上运行的计算代码或软件,将其输入输出标准化与模块化,并嵌入到工作流中;
集群任务模块,负责调用高性能计算集群来执行特定计算任务。
具体的:
所述的中央控制模块,具体的工作流程为:
(1)工作流模板
工作流控制系统内置一个或多个针对研究人员的实际需要定制的工作流模板,包括运算任务的分步子任务定义、每步的输入参数、需要收集并提交给下一步的输出;
(2)输入输出准备
根据工作流模板的定义,处理用户提供的最初输入以及中间输出,产生计算任务各分步的输入,包括集群任务的输入;
(3)结果获取
当分步计算任务结束时,获取相应输出,格式化后暂存在本地。
所述的本机运算模块,包括:
(1)标准化接口,用于执行计算代码;
(2)标准化沙盒,用于调用本机上运行的其它计算软件。
所述的集群任务模块,具体的工作流程为:
(1)任务提交
当中央控制模块调用执行集群计算步骤时,将准备好的输入批量提交到集群,并记录集群返回的任务索引;
(2)状态监控
每隔一段时间请求任务的最新状态,直到所有任务结束运行;
(3)结果收集
收集所有成功的任务结果以及失败的任务日志,返回给中央控制模块。
基于上述分子动力学力场参数拟合工作流控制系统的控制方法,包括以下步骤:
当用户输入指令并指定本地输入时,工作流控制系统开始运行;
对于选定工作流模板,工作流控制系统依次执行每个步骤:首先检查是否已有该任务的结果保存,若结果已存在则执行下一步,若结果不存在则根据上一步任务的结果生成输入文件,根据任务类型选择在本地运算或提交至计算集群,并且当计算完成后收集结果并保存;
重复上述过程,直至运行到工作流的最后一步。
与现有技术相比,本发明的有益效果是:
(1)通过在同一环境下打通不同的工具和计算方式,WCS实现了分子力场拟合的模块化、流程化,降低了研究人员获得定制力场参数的难度。
(2)将各步骤乃至最终的力场参数结果收集在统一位置,方便了后续进行管理及再 利用。
(3)实现了本地与集群运算资源的对接,在不浪费资源的情况下提高了大规模运算的效率。
附图说明
图1为本发明的控制流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,分子动力学力场参数拟合工作流控制系统的控制方法,包括以下步骤:
1.用户输入
用户输入指定的一批分子,并指定使用“全部扫描”的模板。
2.初始化工作目录
在用户指定的工作目录中,保存用户输入的分子以及参数。
3.步骤:分子切片
a)准备下一步计算:格式化用户输入的分子,准备进行切片操作。
b)判断:此步骤尚未运行,且应于本地运行。
c)调用本地的切片代码,并获取输出,格式化后保存于工作目录中。
d)判断:工作流未结束,进行下一步骤。
4.步骤:量子力学计算
a)准备下一步计算:获取格式化的上一步骤的输出,并拆分为多个量子力学计算的子任务,准备相应的输入文件。
b)判断:此步骤尚未运行,且应于集群运行。
c)提交任务:根据输入文件,将每个子任务提交到集群运行。
d)等待任务运行、查询任务状态:反复进行,确保任务结束、子任务全部完成。
e)从集群下载计算结果,格式化后保存于工作目录中。
f)判断:工作流未结束,进行下一步骤。
5.步骤:力场拟合
a)准备下一步计算:合并量子力学计算结果,生成力场拟合的输入文件。
b)判断:此步骤尚未运行,且应于本地运行。
c)调用本地的拟合代码,并获取输出,格式化后保存于工作目录中。
d)判断:工作流结束,退出循环。
6.输出最终结果
将生成的拟合力场文件输出给用户。

Claims (5)

  1. 分子动力学力场参数拟合工作流控制系统,其特征在于,所述的工作流控制系统运行于本地主机,主要包括以下模块:
    中央控制模块,负责与用户交互、管理输入输出、实际执行工作流、按需调用另外两个模块;
    本机运算模块,负责调用所有在本机上运行的计算代码或软件,将其输入输出标准化与模块化,并嵌入到工作流中;
    集群任务模块,负责调用高性能计算集群来执行特定计算任务。
  2. 根据权利要求1所述的分子动力学力场参数拟合工作流控制系统,其特征在于,所述的中央控制模块,具体的工作流程为:
    (1)工作流模板
    工作流控制系统内置一个或多个针对研究人员的实际需要定制的工作流模板,包括运算任务的分步子任务定义、每步的输入参数、需要收集并提交给下一步的输出;
    (2)输入输出准备
    根据工作流模板的定义,处理用户提供的最初输入以及中间输出,产生计算任务各分步的输入,包括集群任务的输入;
    (3)结果获取
    当分步计算任务结束时,获取相应输出,格式化后暂存在本地。
  3. 根据权利要求1所述的分子动力学力场参数拟合工作流控制系统,其特征在于,所述的本机运算模块,包括:
    (1)标准化接口,用于执行计算代码;
    (2)标准化沙盒,用于调用本机上运行的其它计算软件。
  4. 根据权利要求1所述的分子动力学力场参数拟合工作流控制系统,其特征在于,所述的集群任务模块,具体的工作流程为:
    (1)任务提交
    当中央控制模块调用执行集群计算步骤时,将准备好的输入批量提交到集群,并记录集群返回的任务索引;
    (2)状态监控
    每隔一段时间请求任务的最新状态,直到所有任务结束运行;
    (3)结果收集
    收集所有成功的任务结果以及失败的任务日志,返回给中央控制模块。
  5. 根据权利要求1到4任一项所述的分子动力学力场参数拟合工作流控制系统的控制方法,其特征在于,包括以下步骤:
    当用户输入指令并指定本地输入时,工作流控制系统开始运行;
    对于选定工作流模板,工作流控制系统依次执行每个步骤:首先检查是否已有该任务的结果保存,若结果已存在则执行下一步,若结果不存在则根据上一步任务的结果生成输入文件,根据任务类型选择在本地运算或提交至计算集群,并且当计算完成后收集结果并保存;
    重复上述过程,直至运行到工作流的最后一步。
PCT/CN2020/129777 2020-11-18 2020-11-18 分子动力学力场参数拟合工作流控制系统及其控制方法 WO2022104596A1 (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/CN2020/129777 WO2022104596A1 (zh) 2020-11-18 2020-11-18 分子动力学力场参数拟合工作流控制系统及其控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2020/129777 WO2022104596A1 (zh) 2020-11-18 2020-11-18 分子动力学力场参数拟合工作流控制系统及其控制方法

Publications (1)

Publication Number Publication Date
WO2022104596A1 true WO2022104596A1 (zh) 2022-05-27

Family

ID=81708087

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2020/129777 WO2022104596A1 (zh) 2020-11-18 2020-11-18 分子动力学力场参数拟合工作流控制系统及其控制方法

Country Status (1)

Country Link
WO (1) WO2022104596A1 (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101131707A (zh) * 2006-08-25 2008-02-27 屹昂计算化学软件(上海)有限公司 分子力学力场参数的自动化生成方法
WO2015021540A1 (en) * 2013-08-15 2015-02-19 Zymeworks Inc. Systems and methods for in silico evaluation of polymers
CN107203421A (zh) * 2016-08-28 2017-09-26 深圳晶泰科技有限公司 一种云计算环境中自适应的组合工作流方法
KR20170114179A (ko) * 2016-04-05 2017-10-13 한국과학기술연구원 액체 상태 수소 저장 물질 개발 방법, 이를 지원하는 컴퓨팅 전자 장치와 이를 통해 생성된 유기 화합물
CN109637592A (zh) * 2018-12-21 2019-04-16 深圳晶泰科技有限公司 分子力场参数生成的计算任务管理分析系统及其运行方法
CN111653320A (zh) * 2020-04-21 2020-09-11 深圳晶泰科技有限公司 分子力场拟合方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101131707A (zh) * 2006-08-25 2008-02-27 屹昂计算化学软件(上海)有限公司 分子力学力场参数的自动化生成方法
WO2015021540A1 (en) * 2013-08-15 2015-02-19 Zymeworks Inc. Systems and methods for in silico evaluation of polymers
KR20170114179A (ko) * 2016-04-05 2017-10-13 한국과학기술연구원 액체 상태 수소 저장 물질 개발 방법, 이를 지원하는 컴퓨팅 전자 장치와 이를 통해 생성된 유기 화합물
CN107203421A (zh) * 2016-08-28 2017-09-26 深圳晶泰科技有限公司 一种云计算环境中自适应的组合工作流方法
CN109637592A (zh) * 2018-12-21 2019-04-16 深圳晶泰科技有限公司 分子力场参数生成的计算任务管理分析系统及其运行方法
CN111653320A (zh) * 2020-04-21 2020-09-11 深圳晶泰科技有限公司 分子力场拟合方法

Similar Documents

Publication Publication Date Title
US7634756B2 (en) Method and apparatus for dataflow creation and execution
CN107632845B (zh) 一种转轮叶片多轴铣削加工的集成知识云服务方法和系统
US8132184B2 (en) Complex event processing (CEP) adapters for CEP systems for receiving objects from a source and outputing objects to a sink
WO2015058578A1 (zh) 一种分布式计算框架参数优化方法、装置及系统
CN102521024B (zh) 基于生物信息云平台的作业调度方法
US20090319835A1 (en) Processor system optimization supporting apparatus and supporting method
CN112882828B (zh) 基于slurm作业调度系统的昇腾处理器管理和调度方法
CN111367681A (zh) 面向云计算集群的高负载状态下的桥梁设计系统
CN108664314B (zh) 大数据处理流程模块化管理方法及装置
CN113780536A (zh) 一种云端深度学习模型转换方法、系统、设备及介质
WO2021097917A1 (zh) 一种数值预报的集合耦合同化系统及方法
CN112115611A (zh) 一种协同仿真管理系统
CN109885584A (zh) 分布式数据分析平台的实现方法及终端设备
CN115277692B (zh) 边缘网络计算终端设备自动运维方法、装置和系统
CN115061809A (zh) 基于安卓的rpa多任务调度方法及系统
CN113326123A (zh) 一种基于容器技术的生物信息分析计算系统及方法
CN108459900B (zh) 基于云的抗辐射加固协同设计-仿真系统及方法
CN114036183A (zh) 一种数据etl处理方法、装置、设备及介质
TWI739111B (zh) 使用方塊式工作流程的限制編程的方法、系統及電腦可讀取媒體
WO2022104596A1 (zh) 分子动力学力场参数拟合工作流控制系统及其控制方法
CN115794355B (zh) 任务处理方法、装置、终端设备及存储介质
CN111274667B (zh) 一种跨尺度材料计算软件集成计算系统及方法
CN112347080B (zh) 一种数据迁移方法及相关装置
CN112447267A (zh) 分子动力学力场参数拟合工作流控制系统及其控制方法
CN113742125A (zh) 一种轻量级高通量计算模式及其容错方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20961887

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIHGTS PURSUANT TO RULE 112(1) EPC

122 Ep: pct application non-entry in european phase

Ref document number: 20961887

Country of ref document: EP

Kind code of ref document: A1