CN112181511B - 一种可执行的情报分析流交互配置生成方法 - Google Patents
一种可执行的情报分析流交互配置生成方法 Download PDFInfo
- Publication number
- CN112181511B CN112181511B CN202010870764.1A CN202010870764A CN112181511B CN 112181511 B CN112181511 B CN 112181511B CN 202010870764 A CN202010870764 A CN 202010870764A CN 112181511 B CN112181511 B CN 112181511B
- Authority
- CN
- China
- Prior art keywords
- analysis
- node
- flow
- data
- engine
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/445—Program loading or initiating
- G06F9/44505—Configuring for program initiating, e.g. using registry, configuration files
- G06F9/4451—User profiles; Roaming
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/901—Indexing; Data structures therefor; Storage structures
- G06F16/9024—Graphs; Linked lists
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/34—Graphical or visual programming
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/38—Creation or generation of source code for implementing user interfaces
Abstract
本发明公开了一种可执行的情报分析流交互配置生成方法,其步骤包括:1)根据目标情报分析任务的顺序,通过流程图形化设计器依次选取情报分析构件作为情报分析流中的节点组件并建立连接,生成多个顺执行的过程定义;2)对于当前生成的每一过程定义,引擎根据该过程定义对应的有向图D中各分析节点进行分解,生成分析流控制数据;3)引擎创建流程实例,按该有向图D的定义顺序启动分析节点;4)当引擎收到分析节点的元数据后,检查该流程实例的当前活动任务的启动条件,如果启动条件满足,则引擎调用对应的分析节点中的方法、数据;5)当一个活动任务执行完成后,如果没有后续分析节点,则该流程实例已经执行完毕,记录执行结果及日志。
Description
技术领域
本发明涉及计算机情报处理领域,涉及情报分析流生成的方法,尤其涉及一种可执行的情报分析流交互配置生成方法。
背景技术
数据的丰富带来了对强有力的数据分析工具的需求,情报分析人员越来越倾向借助新兴信息技术和分析工具来完成情报任务。其中,情报分析人员除了依赖于规范化的分析流程完成情报任务,面对日渐复杂的任务内容或情报问题的不确定性,当前缺乏一种自动化、可配置参数的管理方法来辅助情报分析人员设计情报分析流程。同时在情报分析中还存在以下问题:(1)情报分析流程的本质是存储在数据库中的图结构,如何有效的构建这种图结构,需要解决的问题包括规范图中的各种组成元素的关键属性,包括数据的结构、方法的应用原理、适用范围、使用流程、前置条件和后续结果,其中以前置条件和后续结果最为重要,只有将上述属性得以规范,可配置流中节点组件之间的组配才有逻辑上的合理性。(2)如何构建情报流程,这里包括基于拖拽式的流程构建方法、交互式的节点组件选择以及基于模型的感知式自动组件推荐等。(3)如何自动执行情报分析流程。当构建图结构以后,这种图结构仅是一种符号化描述,本身不具有可执行的功能。若要执行情报分析流程,还需要解决如何将符号化的情报分析流程进行解析并转换成可执行程序这一问题。
发明内容
为了克服上述缺陷,本发明提出一种可执行的情报分析流交互配置生成方法。
首先可配置参数的情报分析流技术中的节点组件包含数据和方法。可配置参数的情报分析流技术中的数据使用表的形式进行存储。在表中,每一列为一个字段,字段具有自己的名称、类型、长度限制等属性,每一行数据为一条记录,记录可以包含所有的字段数据,也可以仅包含字段中的一个子集。在具体存储的内容中,主要分为字符串型、数值型、布尔型、日期时间型、向量型、二进制型。可配置参数的情报分析流技术中的方法包括应用原理、适用范围、使用流程、前置条件和后续结果,应用原理、适用范围和使用流程属于方法的非结构化属性,可以通过文本描述的形式进行存储,而前置条件和后续结果是结构化属性,需要综合利用数值、字符串和数据结构进行规范。
情报分析流程是一个由若干分析方法所组成的、并且人和计算机都能够理解的情报分析流程的描述。因此,对情报分析流建模就是获得情报分析流程的自然描述,并将它进一步转换成计算机可执行的表示形式的一个过程,它跨越情报分析流程的整个生命周期。其中,情报分析流模型的配置阶段主要是完成分析过程的计算机化定义。在这个流程配置阶段,利用不同的情报方法组件,完成实际的分析过程到计算机可处理的形式化定义的转化,所得到的形式化定义被称为过程模板完成过程模板的定义后,所生成的分析流程将由分析流引擎进行流程的解析和转换并生成执行过程。引擎对分析流模型描述的过程进行初始化、调度和监控,过程中每个活动的执行,在需要人工介入的场合完成计算机应用软件与操作人员的交互。这样就实现了在模型中定义的分析过程与现实世界中实际过程的连接。情报分析流模型除了完成过程的配置、删除、活动的执行与控制外,它的另一个重要的功能是完成与分析软件及操作人员的交互。在实际应用中,分析软件和操作人员是完成情报分析任务的主体,而情报分析流模型通过过程定义和活动之间的控制来实现这些独立的功能实体间的集成,从而使整个情报分析活动成为一个协调运行的整体。
如图1所示,设计层是直接面向用户,用于情报任务分析流程的设计,所以该层主要是过程定义子系统在前端UI上实现对情报分析构件的拖拽和连线,完成具体情报分析任务的过程定义。当情报分析任务的过程定义完毕后,过程数据就会进入到展示层,该层是采用可视化和交互的方式将情报分析的过程展现给用户。设计层的过程定义数据会进入展示层的分析流运行服务子系统,该子系统中的关键为分析流引擎,它将过程数据分解为不同的计算步骤、计算方法和所需数据,展现给用户,并与计算层的计算分析子系统和数据存储子系统进行交互。除此之外,本层的监督管理子系统的主要作用是为用户提供系统运行状态的可视化监控。计算层中的数据存储子系统和计算分析子系统实现了整个情报分析过程中的方法应用和数据保存与加载。两个子系统的信息传递和信息匹配策略由设计层的过程定义子系统所制定,由展示层的分析流运行服务子系统所解析,其执行的过程和计算的结果也由分析流运行服务子系统所控制和展示。
如图2所示,在系统的流程结构方面,对用户来说,整个情报分析流系统是一个黑盒系统,用户所产生的操作和看到的结果都发生在用户界面。在用户界面用户在任务表管理器中生成、加载和修改分析任务项(任务项即情报分析构件,对应于可执行情报分析流中的“节点组件”),在分析流建模器中建立情报分析任务的流程模型,即定义具体情报分析任务的过程。之后分析任务项的具体过程定义进入到分析流引擎。分析流引擎作为情报分析系统的核心而存在,它负责流程的调度,保证流程按事先确定的顺序正确流转。
分析流引擎进行流程的解析和转换并生成执行过程:
Step1:情报分析流应用建模人员通过使用流程图形化设计器完成应用系统的建模,即实际情报分析流程的定义。建模结果保存在数据库中,并可反复修改;
Step2:客户端用户通过浏览器登录到Web服务器,此时可以启动新的流程、处理其分析任务项等。每个分析任务项都与一个活动对应。在活动中以各种不同的方式表示需要处理的数据。用户可以通过客户端的Web服务器对这些数据进行处理。在此过程中可以与数据库系统进行交互,如查询数据库信息,或将某些应用数据保存到数据库等。
Step3:当用户利用情报分析流系统进行任务分析时,会触发情报分析方法控制台和情报分析流引擎。其中情报分析方法控制台是不同情报分析方法在系统中实现的各模块功能的集成,用于实现流程的运行和协调各模块的工作。控制台是情报分析任务实际运行中与用户交互的接口,不处理任何流程的内容,具体表现为每个步骤的执行页面。而情报分析流引擎主要是提供对流程的转移逻辑和内容的处理,当情报分析流引擎开始运作时,其执行的过程如下:
情报分析流程的过程定义为一个包括多个分析节点的有向图D,其中V(D)是分析节点集合{d1,d2,d3,…dn},E(D)为分析节点之间有向边的集合,ψ(D)为分析节点启动条件集合。第n个分析节点dn中包括分析节点的元信息{方法,数据,分析节点dn的启动条件ψn,下一个分析节点dn+1的方向(dn->dn+1)…}。
1)引擎收到用户发出的启动指令,向分析流建模器发出请求,得到当前过程定义。
2)得到过程定义后,引擎将过程定义有向图D装载入内存,对过程定义对应有向图D中各分析节点进行分解,按照分析节点的元信息进行配置,生成分析流控制数据。
3)引擎创建流程实例,进入实例调度,按分析节点有向图D的定义顺序启动分析节点。
4)当引擎收到分析节点dn元数据后,会检查该流程实例的当前活动任务的启动条件,也就是当前活动任务和其他活动任务的数据和控制依赖关系,如果启动条件满足,引擎调用对应的分析节点中的方法、数据。
5)用户可通过引擎对当前活动任务进行交互操作,查看执行状态。
6)当一个活动任务执行完成后,引擎根据过程定义对应的有向图D的信息,得到该活动任务的后续分析节点,对列表中的每一个节点检查转移条件是否满足,如果满足创建该节点对应的活动实例则转到步骤4);如果后续列表为空转到步骤7)。
7)一旦当前流程实例的结束节点结束,该流程实例已经执行完毕,记录执行结果及日志。
当这一系列的过程完成之后,就实现了用户在实际中的情报分析任务到情报分析系统的自动化运行的映射。
与现有技术相比,本发明的积极效果为:
1、分析的过程更加智能化,本方法能够将用户提交的复杂的情报分析任务需求在极少人为工干预的情况下自动转化为机器可以理解、可执行的分析过程,极大的提升了复杂情报分析任务的智能化水平;
2、分析的方法能够根据数据的特性、分析的任务进行自动的匹配并推荐最佳的分析方法,本方法可以为待分析的数据提供最佳的方法匹配,解决了传统分析方法依赖于分析人员的经验去选择适用的方法;
3、分析任务中不同的分析方法之间会进行自动的合规性检查,系统会对不合规的分析方法进行提示,辅助用户修正分析流程。
附图说明
图1为情报分析流交互配置原理图。
图2为情报分析流系统的流程图。
图3为本发明实施例配置流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
在图1中,设计层是直接面向用户,用于情报任务分析流程的设计配置,所以该层主要是过程定义子系统在前端UI上实现对情报分析组件的拖拽和连线,完成具体情报分析任务的过程定义。当情报分析任务的过程定义完毕后,过程数据就会进入到展示层,该层是采用可视化和交互的方式将情报分析的过程展现给用户。设计层的过程定义数据会进入展示层的分析流运行服务子系统,该子系统中的关键为分析流引擎,它将过程数据分解为不同的计算步骤、计算方法和所需数据,展现给用户,并与计算层的计算分析子系统和数据存储子系统进行交互。除此之外,本层的监督管理子系统的主要作用是为用户提供系统运行状态的可视化监控。计算层中的数据存储子系统和计算分析子系统实现了整个情报分析过程中的方法应用和数据保存与加载。两个子系统的信息传递和信息匹配策略由设计层的过程定义子系统所制定,由展示层的分析流运行服务子系统所解析,其执行的过程和计算的结果也由分析流运行服务子系统所控制和展示。
实施例
采用Medline生物医学数据进行实验,目的是揭示生物医学领域的研究主题现状并发现生物医学领域的研究热点。
在具体的分析方式上,本研究采用共词分析。抽取DescriptorName字段(即Mesh主题词),基于每条记录(文章)中主题词形成共词关系。利用该共词关系,可形成共词网络,基于该共词网络,可以进行点度中心度分析和连通分支分析。首先进入系统的情报任务功能,点击添加分析任务。
添加分析任务后,确定保存。
任务添加成功后,点击设计流程。
在流程设计页面,通过点击鼠标右键实现添加分析组件。
成功添加的组件可以通过右键进行配置。
在组件配置界面,可以将组件设置成不同的类型,比如设置成可以从hadoop中读取XML文件。
通过配置,最终本实验流程在系统上的任务设计如图3所示。系统自动生成情报分析流程并执行。
本发明方案所公开的技术手段不仅限于上述实施方式所公开的技术手段,还包括由以上技术特征任意组合所组成的技术方案。
Claims (3)
1.一种可执行的情报分析流交互配置生成方法,其步骤包括:
1)根据目标情报分析任务的顺序,通过流程图形化设计器依次选取情报分析构件作为情报分析流中的节点组件并建立连接,生成多个顺序执行的过程定义;所述过程定义为一个包括多个分析节点的有向图D,其中V(D)是有向图D中的分析节点集合{d1,d2,d3,…dn},E(D)为有向图D中的分析节点之间有向边的集合,ψ(D)为分析节点启动条件集合;第n个分析节点dn中包括分析节点的元信息{方法,数据,分析节点dn的启动条件ψn,下一个分析节点dn+1的方向(dn->dn+1)…};所述节点组件的类型为数据或方法,方法类型的节点组件包括应用原理、适用范围、使用流程、前置条件和后续结果,应用原理、适用范围和使用流程通过文本描述的形式进行存储,前置条件和后续结果综合利用数值、字符串和数据结构进行规范;
2)对于当前生成的每一过程定义,引擎根据该过程定义对应的有向图D中各分析节点进行分解,按照分析节点的元信息进行配置,生成分析流控制数据;
3)引擎创建流程实例,进入实例调度,按该有向图D的定义顺序启动分析节点;
4)当引擎收到分析节点dn的元数据后,检查该流程实例的当前活动任务的启动条件,如果启动条件满足,则引擎调用对应的分析节点中的方法、数据;
5)当一个活动任务执行完成后,引擎根据该有向图D得到该活动任务的后续分析节点,并检查其转移条件是否满足,如果满足则创建该后续分析节点对应的活动实例并转到步骤4);如果没有后续分析节点,则该流程实例已经执行完毕,记录执行结果及日志。
2.如权利要求1所述的方法,其特征在于,对数据类型的节点组件使用表的形式进行存储;其中在表中每一列为一个字段,字段具有名称、类型和长度限制,每一行数据为一条记录。
3.如权利要求2所述的方法,其特征在于,所述记录包含对应行中所有的字段数据,或仅包含字段中的一个子集。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010870764.1A CN112181511B (zh) | 2020-08-26 | 2020-08-26 | 一种可执行的情报分析流交互配置生成方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010870764.1A CN112181511B (zh) | 2020-08-26 | 2020-08-26 | 一种可执行的情报分析流交互配置生成方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112181511A CN112181511A (zh) | 2021-01-05 |
CN112181511B true CN112181511B (zh) | 2021-09-14 |
Family
ID=73923938
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010870764.1A Active CN112181511B (zh) | 2020-08-26 | 2020-08-26 | 一种可执行的情报分析流交互配置生成方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112181511B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116931888B (zh) * | 2023-09-14 | 2023-12-01 | 大尧信息科技(湖南)有限公司 | 基于软件定义的教学实验构建方法、系统、设备和介质 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102880927A (zh) * | 2011-07-14 | 2013-01-16 | 国际商业机器公司 | 用于企业情报架构中的企业情报管理的方法和设备 |
CN104572929A (zh) * | 2014-12-26 | 2015-04-29 | 深圳市科漫达智能管理科技有限公司 | 数据挖掘方法及装置 |
CN105678522A (zh) * | 2016-01-12 | 2016-06-15 | 华东电网有限公司 | 工作流引擎和基于工作流的项目管理系统 |
CN105700888A (zh) * | 2016-01-14 | 2016-06-22 | 国网山东省电力公司物资公司 | 一种基于jbpm工作流引擎的可视化快速开发平台 |
CN106959990A (zh) * | 2016-08-30 | 2017-07-18 | 智器云南京信息科技有限公司 | 基于分析模型的情报可视化分析方法、装置及终端 |
CN107391611A (zh) * | 2017-07-04 | 2017-11-24 | 南京国电南自电网自动化有限公司 | 一种基于工作流的通用etl工具的过程模型生成方法 |
CN109741030A (zh) * | 2018-12-28 | 2019-05-10 | 杭州当虹科技股份有限公司 | 一种可自定义配置的简单工作流引擎及工作流执行方法 |
CN106557457B (zh) * | 2016-11-28 | 2020-01-17 | 中国电子科技集团公司第二十八研究所 | 一种基于qt的自动生成跨平台复杂流程图的系统 |
CN110717656A (zh) * | 2019-09-18 | 2020-01-21 | 武汉空心科技有限公司 | 工作平台工作流构建系统及构建方法 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2479757A1 (en) * | 2002-03-25 | 2003-10-09 | Data Quality Solutions, Inc. | Method and system for enterprise business process management |
CN101819659A (zh) * | 2010-04-16 | 2010-09-01 | 浙江工商大学 | 一种将工作流技术应用于管理过程控制的方法 |
CN104573063A (zh) * | 2015-01-23 | 2015-04-29 | 四川中科腾信科技有限公司 | 一种基于大数据的数据分析方法 |
CN109710215B (zh) * | 2018-12-25 | 2022-05-27 | 福建南威软件有限公司 | 分布式流计算的可视化流程处理引擎及其使用方法 |
-
2020
- 2020-08-26 CN CN202010870764.1A patent/CN112181511B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102880927A (zh) * | 2011-07-14 | 2013-01-16 | 国际商业机器公司 | 用于企业情报架构中的企业情报管理的方法和设备 |
CN104572929A (zh) * | 2014-12-26 | 2015-04-29 | 深圳市科漫达智能管理科技有限公司 | 数据挖掘方法及装置 |
CN105678522A (zh) * | 2016-01-12 | 2016-06-15 | 华东电网有限公司 | 工作流引擎和基于工作流的项目管理系统 |
CN105700888A (zh) * | 2016-01-14 | 2016-06-22 | 国网山东省电力公司物资公司 | 一种基于jbpm工作流引擎的可视化快速开发平台 |
CN106959990A (zh) * | 2016-08-30 | 2017-07-18 | 智器云南京信息科技有限公司 | 基于分析模型的情报可视化分析方法、装置及终端 |
CN106557457B (zh) * | 2016-11-28 | 2020-01-17 | 中国电子科技集团公司第二十八研究所 | 一种基于qt的自动生成跨平台复杂流程图的系统 |
CN107391611A (zh) * | 2017-07-04 | 2017-11-24 | 南京国电南自电网自动化有限公司 | 一种基于工作流的通用etl工具的过程模型生成方法 |
CN109741030A (zh) * | 2018-12-28 | 2019-05-10 | 杭州当虹科技股份有限公司 | 一种可自定义配置的简单工作流引擎及工作流执行方法 |
CN110717656A (zh) * | 2019-09-18 | 2020-01-21 | 武汉空心科技有限公司 | 工作平台工作流构建系统及构建方法 |
Non-Patent Citations (1)
Title |
---|
元数据驱动的工作流引擎技术;熊道德等;《元数据驱动的工作流引擎技术》;20150731;第143-145页 * |
Also Published As
Publication number | Publication date |
---|---|
CN112181511A (zh) | 2021-01-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111861020A (zh) | 模型部署方法、装置、设备及存储介质 | |
US8307339B2 (en) | Software reuse in model based software systems | |
CN113656021B (zh) | 一种面向业务场景的油气大数据分析系统及方法 | |
CN112558931A (zh) | 一种面向用户工作流模式的智能模型构建及运行方法 | |
CN111736821A (zh) | 可视化建模分析方法、系统、计算机设备和可读存储介质 | |
US8819619B2 (en) | Method and system for capturing user interface structure in a model based software system | |
CN112181511B (zh) | 一种可执行的情报分析流交互配置生成方法 | |
Borroek et al. | Analysis on Knowledge Layer Application for Knowledge Based System | |
CN112148926A (zh) | 一种图数据流的处理方法、处理装置和存储介质 | |
CN116860985A (zh) | 一种基于知识图谱的自然语言交互软件框架及其构建方法 | |
CN115469860B (zh) | 基于指令集的需求到软件领域模型的自动生成方法及系统 | |
CN116521778A (zh) | 基于人工智能的一站式数据分析工具、方法及终端设备 | |
CN115033212A (zh) | 航电系统图元模型一体化构建方法、装置、计算机设备 | |
Li et al. | A product line systems engineering process for variability identification and reduction | |
Lu et al. | Toward the Automatic Construction of Task Models from Object-Oriented Diagrams | |
Janssen et al. | Custom Digital workflows with user-defined data transformations via property graphs | |
Dolk et al. | Toward a symbiotic expert system for econometric modeling | |
Kaur et al. | Notice of Retraction: Development and analysis of 3C-Model for software development lifecycle | |
Pisano | Plugin-based workflow integration for QHAna | |
CN114860805A (zh) | 用于物联网设备的数据挖掘分析系统和分析方法 | |
Aveiro et al. | DEMO Model based Rapid REST API Management in a low code platform | |
Wang et al. | Process-Product-Resource based Requirement Model for Discrete Manufacturing Systems | |
Buda et al. | PDM suitability study for CAE data management | |
Sun et al. | Scientific Workflow: Modeling Methods and Management System | |
CN117111894A (zh) | 基于低代码开发的etl模块进行数据转换的方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |