CN114861447B - 一种评估性实验仿真实验因子的筛选方法和装置 - Google Patents
一种评估性实验仿真实验因子的筛选方法和装置 Download PDFInfo
- Publication number
- CN114861447B CN114861447B CN202210535964.0A CN202210535964A CN114861447B CN 114861447 B CN114861447 B CN 114861447B CN 202210535964 A CN202210535964 A CN 202210535964A CN 114861447 B CN114861447 B CN 114861447B
- Authority
- CN
- China
- Prior art keywords
- experimental
- simulation
- factor
- experiment
- design space
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000002474 experimental method Methods 0.000 title claims abstract description 202
- 238000004088 simulation Methods 0.000 title claims abstract description 194
- 238000012216 screening Methods 0.000 title claims abstract description 74
- 238000011156 evaluation Methods 0.000 title claims abstract description 40
- 238000000034 method Methods 0.000 title claims abstract description 29
- 238000013461 design Methods 0.000 claims abstract description 149
- 238000013401 experimental design Methods 0.000 claims abstract description 119
- 238000010219 correlation analysis Methods 0.000 claims abstract description 22
- 238000010206 sensitivity analysis Methods 0.000 claims abstract description 22
- 230000035945 sensitivity Effects 0.000 claims description 29
- 230000000694 effects Effects 0.000 claims description 17
- 238000005192 partition Methods 0.000 claims description 14
- 238000013507 mapping Methods 0.000 claims description 12
- 238000012163 sequencing technique Methods 0.000 claims description 6
- 239000000758 substrate Substances 0.000 claims 1
- 238000004458 analytical method Methods 0.000 description 6
- 230000009191 jumping Effects 0.000 description 4
- 238000012217 deletion Methods 0.000 description 3
- 230000037430 deletion Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 238000007619 statistical method Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000000875 corresponding effect Effects 0.000 description 1
- 238000012854 evaluation process Methods 0.000 description 1
- 238000012804 iterative process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000004451 qualitative analysis Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/20—Design optimisation, verification or simulation
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/30—Computing systems specially adapted for manufacturing
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Evolutionary Computation (AREA)
- Geometry (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本申请涉及一种评估性实验仿真实验因子的筛选方法和装置,方法包括:获取仿真实验设计需求,选择实验因子,形成实验设计空间;实验设计空间包括:实验因子、因子取值、取值水平数及取值水平;对实验设计空间进行因子筛选实验设计,得到第一实验设计空间;当第一实验因子是离散型实验因子时,对第一实验设计空间进行局部敏感性分析实验设计,得到第二实验设计空间;当第一实验因子是连续型实验因子时,对第一实验设计空间进行相关性分析实验设计,得到第三实验设计空间;输出第二实验设计空间或第三实验设计空间为最优的实验设计空间。本方法筛选速度快,可以筛选出合理的实验因子。
Description
技术领域
本申请涉及仿真实验技术领域,特别是涉及一种评估性实验仿真实验因子的筛选方法和装置。
背景技术
在分析性仿真实验设计过程中,要生成合理的实验设计空间,需要经过多轮实验设计迭代,进而筛选出满足筛选阈值要求的实验因子以及因子取值水平(称为预实验)。为后续的仿真实验,在具有显著影响的实验因子以及取值水平下研究具体的实验问题(称为评估性实验)提升实验效率,减少实验成本。
现有技术中,对少量实验因子做实验设计时通常采用全因子实验设计或部分因子实验设计,对大量实验因子做实验设计时采用序贯分支实验设计等方法一定程度上可以减少实验样本空间,提升一定的仿真实验速度。
然而,在分析性仿真实验当中,针对大量实验因子参与的仿真实验时,首先因子的本身定位查找存在困难,需要解决如何通过实验因素快速定位到关注的实验因子,其次,在确定一定范围内实验因子的情况下,如何筛选具有显著影响的实验因子以及取值水平,提升评估性实验的效率还存在“如何进行效能指标与实验因子以及取值水平的影响关系定量计算与定性分析”的问题。
发明内容
基于此,有必要针对上述技术问题,提供一种实验因子的筛选方法和装置,能够提高实验因子的选择速度,同时可以筛选出对效能指标具有显著影响的实验因子以及取值水平。
一种评估性实验仿真实验因子的筛选方法,包括:
获取仿真实验设计需求,选择与所述仿真实验设计需求相关的实验因子,形成实验设计空间;所述实验设计空间包括:实验因子、因子取值、取值水平数及取值水平;
对所述实验设计空间进行因子筛选实验设计并进行第一仿真,根据第一仿真的效能评估结果得到第一实验设计空间,所述第一实验设计空间包括具有显著影响效果的第一实验因子、第一因子取值、第一取值水平数及第一取值水平;
当所述第一实验因子是离散型实验因子时,对所述第一实验设计空间进行局部敏感性分析实验设计并进行第二仿真,得到对预设效能指标的局部敏感系数,筛选所述局部敏感系数满足预设的第二阈值要求的第一实验因子,得到第二实验设计空间;所述第二实验设计空间包括第二实验因子、第二因子取值、第二取值水平数及第二取值水平;
当所述第一实验因子是连续型实验因子时,对所述第一实验设计空间进行相关性分析实验设计并进行第三仿真,得到对预设效能指标的相关系数,筛选所述相关系数满足预设的第三阈值要求的第一实验因子,得到第三实验设计空间;所述第三实验设计空间包括第三实验因子、第三因子取值、第三取值水平数及第三取值水平;
输出所述第二实验设计空间或所述第三实验设计空间为最优的实验设计空间。
在其中一个实施例中,
进行因子筛选实验设计并进行第一仿真包括:一次实验选取部分实验因子并进行第一仿真,剩余的实验因子进行次数迭代并进行第一仿真,直至所有的实验因子都完成因子筛选实验时,停止迭代;
对所述第一实验设计空间进行局部敏感性分析实验设计并进行第二仿真包括:一次实验选取部分第一实验因子的取值水平并进行第二仿真,剩余的第一实验因子的取值水平进行次数迭代并进行第二仿真,直至所有的第一实验因子的取值水平都完成局部敏感性分析实验时,停止迭代;
对所述第一实验设计空间进行相关性分析实验设计并进行第三仿真包括:一次实验选取部分第一实验因子的取值区间并进行第三仿真,剩余的第一实验因子的取值区间进行次数迭代并进行第三仿真,直至所有的第一实验因子的取值区间都完成相关性分析实验时,停止迭代。
在其中一个实施例中,对所述实验设计空间进行因子筛选实验设计并进行第一仿真,根据第一仿真的效能评估结果得到第一实验设计空间包括:
对所述实验设计空间进行因子筛选实验设计并进行第一仿真;
根据第一仿真的效能评估结果得到所有的实验因子对预设效能指标的因子筛选评估分析结果;
根据所述因子筛选评估分析结果对所述实验因子进行排序,并筛选出满足第一阈值要求的实验因子,得到具有显著影响效果的第一实验因子,并得到第一实验设计空间。
在其中一个实施例中,当所述第一实验因子是离散型实验因子时,对所述第一实验设计空间进行局部敏感性分析实验设计并进行第二仿真,得到对预设效能指标的局部敏感系数,筛选所述局部敏感系数满足预设的第二阈值要求的第一实验因子,得到第二实验设计空间包括:
当所述第一实验因子是离散型实验因子时,对第一实验设计空间的所有第一因子取值水平进行局部敏感性分析实验设计并进行第二仿真;
根据第二仿真结果,得到每个第一因子取值水平对预设效能指标的局部敏感系数;
根据局部敏感系数对所有第一因子取值水平进行排序,并筛选出局部敏感系数满足第二阈值要求的第一因子取值水平,得到第二因子取值水平,并得到第二实验设计空间。
在其中一个实施例中,当所述第一实验因子是连续型实验因子时,对所述第一实验设计空间进行相关性分析实验设计并进行第三仿真,得到对预设效能指标的相关系数,筛选所述相关系数满足预设的第三阈值要求的第一实验因子,得到第三实验设计空间包括:
当所述第一实验因子是连续型实验因子时,对第一实验因子的连续区间划分分区,对任意第一实验因子的所有分区进行相关性分析实验设计并进行第三仿真;
根据第三仿真结果,得到所有分区对预设效能指标的相关系数;
根据相关系数,对所有分区进行排序,并筛选出相关系数满足第三阈值要求的分区,得到第三因子取值水平数,并得到第三实验设计空间。
在其中一个实施例中,获取仿真实验设计需求,选择与所述仿真实验设计需求相关的实验因子包括:
获取仿真实验设计需求,对所述仿真实验设计需求中的仿真对象参数进行分类,按类型划分得到实验因素,根据实验因素的类型和相互包含关系进行组合,得到实验因素的分层层次结构,并根据所述分层层次结构建立所述仿真实体参数与所述实验因素之间的关联关系;
根据所述关联关系,以及所述仿真实体参数与所述实验因子的继承关系,得到所述实验因素与所述实验因子之间的映射关系;
根据仿真实验设计需求和所述映射关系,选择与所述仿真实验设计需求相关的实验因子。
一种评估性实验仿真实验因子的筛选装置,包括:
获取模块,用于获取仿真实验设计需求,选择与所述仿真实验设计需求相关的实验因子,形成实验设计空间;所述实验设计空间包括:实验因子、因子取值、取值水平数及取值水平;
第一仿真模块,用于对所述实验设计空间进行因子筛选实验设计并进行第一仿真,根据第一仿真的效能评估结果得到第一实验设计空间,所述第一实验设计空间包括具有显著影响效果的第一实验因子、第一因子取值、第一取值水平数及第一取值水平;
第二仿真模块,用于当所述第一实验因子是离散型实验因子时,对所述第一实验设计空间进行局部敏感性分析实验设计并进行第二仿真,得到对预设效能指标的局部敏感系数,筛选所述局部敏感系数满足预设的第二阈值要求的第一实验因子,得到第二实验设计空间;所述第二实验设计空间包括第二实验因子、第二因子取值、第二取值水平数及第二取值水平;
第三仿真模块,用于当所述第一实验因子是连续型实验因子时,对所述第一实验设计空间进行相关性分析实验设计并进行第三仿真,得到对预设效能指标的相关系数,筛选所述相关系数满足预设的第三阈值要求的第一实验因子,得到第三实验设计空间;所述第三实验设计空间包括第三实验因子、第三因子取值、第三取值水平数及第三取值水平;
输出模块,输出所述第二实验设计空间或所述第三实验设计空间为最优的实验设计空间。
上述一种评估性实验仿真实验因子的筛选方法和装置,首先选择实验设计需求相关的实验因子,对实验因子进行因子筛选实验设计,以便初步筛选出具有显著影响效果的第一实验因子;然后根据第一实验因子的类型,进行局部敏感性分析实验设计或相关性分析实验设计,以便进一步筛选出对预设效能指标具有较高敏感度或具有较强相关性的第二实验因子或第三实验因子,从而得到最优的实验设计空间。本方法在大量实验因子参与仿真时,因子选择速度快,并结合仿真以及评估分析可以筛选出合理的实验设计空间(包括敏感有效的实验因子以及合适的因子取值水平),在对仿真对象做评估分析实验时,能够有效减少仿真运行的样本空间和时间,大量节约仿真运行成本。
附图说明
图1为一个实施例中一种评估性实验仿真实验因子的筛选方法的流程示意图;
图2为一个实施例中实验因子的举例示意图;
图3为一个实施例中实验迭代流程的示意图;
图4为一个实施例中包含实验迭代流程的实验因子筛选方法的流程示意图;
图5为一个实施例中一种实验因子的筛选装置的结构框图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
如图1所示,本申请提供的一种实验因子的筛选方法,在一个实施例中,包括以下步骤:
步骤102,获取仿真实验设计需求,选择与所述仿真实验设计需求相关的实验因子,形成实验设计空间;所述实验设计空间包括:实验因子、因子取值、取值水平数及取值水平。
实验因子是指进行实验的不同因素或参数,如:武器装备种类、数量、装备性能参数等。
因子取值是指实验因子的取值项(离散型实验因子)或取值范围(连续型实验因子)。
取值水平数是指在进行实验时,选取的实验因子的取值的数量。
取值水平是指选取的取值水平数在因子取值内的具体取值。
步骤104,对所述实验设计空间进行因子筛选实验设计并进行第一仿真,根据第一仿真的效能评估结果得到第一实验设计空间,所述第一实验设计空间包括具有显著影响效果的第一实验因子、第一因子取值、第一取值水平数及第一取值水平。
具体的,对所述实验设计空间进行因子筛选实验设计并进行第一仿真;根据第一仿真的效能评估结果得到所有的实验因子对预设效能指标的因子筛选评估分析结果;根据所述因子筛选评估分析结果对所述实验因子进行排序,并筛选出满足第一阈值要求的实验因子,得到具有显著影响效果的第一实验因子,并得到第一实验设计空间。
预设的效能指标是指在实验之前预先设置的评估指标,如:作战对抗仿真中对红蓝双方毁伤能力、机动能力、侦察能力等要素。
第一阈值可以是显著敏感度排在前50%的那些实验因子,其余的实验因子可以用颜色告警,提醒用户考虑删除,以后实验可以不考虑。
步骤106,当所述第一实验因子是离散型实验因子时,对所述第一实验设计空间进行局部敏感性分析实验设计并进行第二仿真,得到对预设效能指标的局部敏感系数,筛选所述局部敏感系数满足预设的第二阈值要求的第一实验因子,得到第二实验设计空间;所述第二实验设计空间包括第二实验因子、第二因子取值、第二取值水平数及第二取值水平。
具体的,当所述第一实验因子是离散型实验因子时,对第一实验设计空间的所有第一因子取值水平进行局部敏感性分析实验设计并进行第二仿真;根据第二仿真结果,得到每个第一因子取值水平对预设效能指标的局部敏感系数;根据局部敏感系数对所有第一因子取值水平进行排序,并筛选出局部敏感系数满足第二阈值要求的第一因子取值水平,得到第二因子取值水平,并得到第二实验设计空间。
第二阈值要求包括:局部敏感系数取值的排名靠前占比设定值或者系数取值大于等于设定值,可以对数值微分值排在后50%的取值水平数进行告警,提示用户可以考虑删除。
步骤108,当所述第一实验因子是连续型实验因子时,对所述第一实验设计空间进行相关性分析实验设计并进行第三仿真,得到对预设效能指标的相关系数,筛选所述相关系数满足预设的第三阈值要求的第一实验因子,得到第三实验设计空间;所述第三实验设计空间包括第三实验因子、第三因子取值、第三取值水平数及第三取值水平。
具体的,当所述第一实验因子是连续型实验因子时,对第一实验因子的连续区间划分分区,对任意第一实验因子的所有分区进行相关性分析实验设计并进行第三仿真;根据第三仿真结果,得到所有分区对预设效能指标的相关系数;根据相关系数,对所有分区进行排序,并筛选出相关系数满足第三阈值要求的分区,得到第三因子取值水平数,并得到第三实验设计空间。
第三阈值可以是相关系数排在前50%的分区,其余的分区可以进行告警,提示用户考虑删除。
步骤110,输出所述第二实验设计空间或所述第三实验设计空间为最优的实验设计空间。
在本实施例中,通过因子筛选实验设计进行实验因子的选择,通过局部敏感性分析实验设计、相关性分析实验设计进行因子取值水平的选择,从而可以筛选出最优的实验设计空间,提高了评估性实验的效率。
上述一种评估性实验仿真实验因子的筛选方法和装置,首先选择实验设计需求相关的实验因子,对实验因子进行因子筛选实验设计,以便初步筛选出具有显著影响效果的第一实验因子;然后根据第一实验因子的类型,进行局部敏感性分析实验设计或相关性分析实验设计,以便进一步筛选出对预设效能指标具有较高敏感度或具有较强相关性的第二实验因子或第三实验因子,从而得到最优的实验设计空间。本方法在大量实验因子参与仿真时,因子选择速度快,并结合仿真以及评估分析可以筛选出合理的实验设计空间(包括敏感有效的实验因子以及合适的因子取值水平),在对仿真对象做评估分析实验时,能够有效减少仿真运行的样本空间和时间,大量节约仿真运行成本。
应该理解的是,虽然图1的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图1中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,获取仿真实验设计需求,选择与所述仿真实验设计需求相关的实验因子包括:
获取仿真实验设计需求,对所述仿真实验设计需求中的仿真对象参数进行分类,按类型划分得到实验因素,根据实验因素的类型和相互包含关系进行组合,得到实验因素的分层层次结构,并根据所述分层层次结构建立所述仿真实体参数与所述实验因素之间的关联关系;
根据所述关联关系,以及所述仿真实体参数与所述实验因子的继承关系,得到所述实验因素与所述实验因子之间的映射关系;
根据仿真实验设计需求和所述映射关系,选择与所述仿真实验设计需求相关的实验因子。
在实验设计过程中,需要读取仿真想定中的实验因子,然后生成实验设计空间。在实际应用中,一个仿真想定通常包含大量的实验因子,想要在大量的实验因子中选择自己需要的实验因子,往往比较困难,困难体现在两方面:一是数据量大,而实验设计人员知道要做哪些方面的设计,但不一定明确这些方面包含哪些实验因子,搜索功能不太适用;二是实验因子的名称并一定是完全按照需求来命名的,甚至可能完全不同,导致因子选择很困难甚至选择错误。
为解决实验因子本身的选取问题,主要是做两方面的设计:
第一方面是对模型模板中的参数(即仿真对象参数)按照需求进行分类,这些分类称为实验因素,仿真想定中的实验因子是从模型模板参数继承而来,只要对模型模板参数划好分类,在仿真想定解析的时候就能根据继承关系把实验因子自动关联到实验因素分类下面,可以根据仿真行业来设计实验因素的分类,比如对于军事类仿真,可设置实验因素分类情况举例如图2所示。
第二方面的设计,就是实验因素与模型模板参数的关联设计,可通过开放接口,支持自定义设置实验因素与模型模板参数的关联关系。建立关联关系的过程,会同时展示实验因素与模型模板参数列表,通过可视化的操作界面来降低设置的难度。
结合这两方面的设计,只要在仿真实验之前,完成实验因素分类设计以及与模型模板参数的关联关系建设,在解析仿真想定时,根据两者的映射关系自动建立实验因素与仿真实验因子的映射关系,就能减少后续仿真实验设计空间的生成的复杂度。
对于一套实验设计系统来说,实验因素与模型模板参数的映射关系一旦确定,即可复用到后续所有的仿真实验当中。
在生成实验设计空间时,根据实验因素的分类,逐级定位到关注的下级实验因素,从而关联查询到实验因素下的所有关联实验因子,再结合搜索功能,实现快速选择实验因子的能力,避免了实验因子选择困难的问题。
在一个实施例中,
进行因子筛选实验设计并进行第一仿真包括:一次实验选取部分实验因子并进行第一仿真,剩余的实验因子进行次数迭代并进行第一仿真,直至所有的实验因子都完成因子筛选实验时,停止迭代;
对所述第一实验设计空间进行局部敏感性分析实验设计并进行第二仿真包括:一次实验选取部分第一实验因子的取值水平并进行第二仿真,剩余的第一实验因子的取值水平进行次数迭代并进行第二仿真,直至所有的第一实验因子的取值水平都完成局部敏感性分析实验时,停止迭代;
对所述第一实验设计空间进行相关性分析实验设计并进行第三仿真包括:一次实验选取部分第一实验因子的取值区间并进行第三仿真,剩余的第一实验因子的取值区间进行次数迭代并进行第三仿真,直至所有的第一实验因子的取值区间都完成相关性分析实验时,停止迭代。
也就是说,对于因子筛选实验设计,一次实验可以选取部分实验因子,其余的实验因子进行迭代,也可以一次选取全部的实验因子(如果实验条件满足的话),直至所有的实验因子都完成一次实验设计,则该实验可以停止迭代。对于局部敏感性分析实验设计,一次实验都可以选取部分实验因子取值水平,其余的实验因子取值水平进行迭代,也可以一次选取全部的实验因子取值水平(如果实验条件满足的话),直至所有的实验因子取值水平都完成一次实验设计,则该实验可以停止迭代。对于相关性分析实验设计,一次实验都可以选取部分实验因子取值区间,其余的实验因子取值区间进行迭代,也可以一次选取全部的实验因子取值区间(如果实验条件满足的话),直至所有的实验因子取值区间都完成一次实验设计,则该实验可以停止迭代。
也可以根据实际情况,设定其他的迭代方式,也就是每个实验因子不止进行一次实验设计。
如图3所示,图中节点表示实验流程环节,一个实验设计环节表示一次完整的设计评估过程,包括实验设计、仿真运行以及效能评估等。
从开始节点沿着箭头实施实验设计流程,首次进入迭代流程的迭代次数为1,从因子筛选节点跳跃的流程迭代次数从2开始,每跳跃1个节点迭代次数自增1,在跳跃到结束节点之前,可以沿着任意箭头方向重复跳跃,跳跃到结束节点表示实验流程结束。
图中实验迭代流程任意一条路线都可以形成一次完整的实验。实验人员也可以根据实验评估效果对流程路线进行扩展实验,直到根据终止条件完成预实验结果。终止条件就是所有因子或者所有取值水平完成了实验。
完成迭代为后续的评估性实验选取了代表性的实验因子以及取值水平,排除了影响不大/对实验效果不明显的实验因子以及取值水平,缩减了样本空间,明显地降低了仿真实验的成本,提升了仿真实验效率。
实验设计的目标是通过科学合理的实验过程,以较少的成本,最大限度地减少误差,得到高效的统计分析仿真数据,再结合专业的统计设计,获得可靠的评估性分析结果。其中,一个重要的场景是通过各种实验因子以及取值水平组合,分析哪些因子对评估效果有较大影响,找出影响较大的因子之后,再通过评估实验来验证这些因子是如何影响评估效果的。
为满足以上目标,即以较少的实验成本,最大限度获得统计分析结果,可把实验设计过程设计为两个阶段:预实验阶段、评估性实验阶段。第一个预实验阶段,目的是找到具有显著影响效果的实验因素以及取值水平,再辅以专业的实验设计方法,得到缩减的具有代表性的实验样本空间。第二个评估性实验设计阶段,以第一阶段得到的实验样本空间,经仿真运行后得到仿真结果数据,基于该数据做的评估分析可以明确得出这些实验因子是如何影响评估效果的。
预实验阶段对应本申请中的根据设计需求选择实验因子,评估性实验设计阶段对应本申请中的实验设计的迭代过程。
如图5所示,本申请还提供一种评估性实验仿真实验因子的筛选装置,在一个实施例中,包括:获取模块502、第一仿真模块504、第二仿真模块506、第三仿真模块508和输出模块510,其中:
获取模块502,用于获取仿真实验设计需求,选择与所述仿真实验设计需求相关的实验因子,形成实验设计空间;所述实验设计空间包括:实验因子、因子取值、取值水平数及取值水平;
第一仿真模块504,用于对所述实验设计空间进行因子筛选实验设计并进行第一仿真,根据第一仿真的效能评估结果得到第一实验设计空间,所述第一实验设计空间包括具有显著影响效果的第一实验因子、第一因子取值、第一取值水平数及第一取值水平;
第二仿真模块506,用于当所述第一实验因子是离散型实验因子时,对所述第一实验设计空间进行局部敏感性分析实验设计并进行第二仿真,得到对预设效能指标的局部敏感系数,筛选所述局部敏感系数满足预设的第二阈值要求的第一实验因子,得到第二实验设计空间;所述第二实验设计空间包括第二实验因子、第二因子取值、第二取值水平数及第二取值水平;
第三仿真模块508,用于当所述第一实验因子是连续型实验因子时,对所述第一实验设计空间进行相关性分析实验设计并进行第三仿真,得到对预设效能指标的相关系数,筛选所述相关系数满足预设的第三阈值要求的第一实验因子,得到第三实验设计空间;所述第三实验设计空间包括第三实验因子、第三因子取值、第三取值水平数及第三取值水平;
输出模块510,输出所述第二实验设计空间或所述第三实验设计空间为最优的实验设计空间。
关于一种评估性实验仿真实验因子的筛选装置的具体限定可以参见上文中对于一种评估性实验仿真实验因子的筛选方法的限定,在此不再赘述。上述装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (6)
1.一种评估性实验仿真实验因子的筛选方法,其特征在于,用于军事类仿真领域,包括:
获取仿真实验设计需求,选择与所述仿真实验设计需求相关的实验因子,形成实验设计空间;所述实验设计空间包括:实验因子、因子取值、取值水平数及取值水平;获取仿真实验设计需求,选择与所述仿真实验设计需求相关的实验因子包括:获取仿真实验设计需求,对所述仿真实验设计需求中的仿真对象参数进行分类,按类型划分得到实验因素,根据实验因素的类型和相互包含关系进行组合,得到实验因素的分层层次结构,并根据所述分层层次结构建立所述仿真实体参数与所述实验因素之间的关联关系;根据所述关联关系,以及所述仿真实体参数与所述实验因子的继承关系,得到所述实验因素与所述实验因子之间的映射关系;根据仿真实验设计需求和所述映射关系,选择与所述仿真实验设计需求相关的实验因子;
对所述实验设计空间进行因子筛选实验设计并进行第一仿真,根据第一仿真的效能评估结果得到第一实验设计空间,所述第一实验设计空间包括具有显著影响效果的第一实验因子、第一因子取值、第一取值水平数及第一取值水平;
当所述第一实验因子是离散型实验因子时,对所述第一实验设计空间进行局部敏感性分析实验设计并进行第二仿真,得到对预设效能指标的局部敏感系数,筛选所述局部敏感系数满足预设的第二阈值要求的第一实验因子,得到第二实验设计空间;所述第二实验设计空间包括第二实验因子、第二因子取值、第二取值水平数及第二取值水平;
当所述第一实验因子是连续型实验因子时,对所述第一实验设计空间进行相关性分析实验设计并进行第三仿真,得到对预设效能指标的相关系数,筛选所述相关系数满足预设的第三阈值要求的第一实验因子,得到第三实验设计空间;所述第三实验设计空间包括第三实验因子、第三因子取值、第三取值水平数及第三取值水平;
输出所述第二实验设计空间或所述第三实验设计空间为最优的实验设计空间。
2.根据权利要求1所述的方法,其特征在于,
进行因子筛选实验设计并进行第一仿真包括:一次实验选取部分实验因子并进行第一仿真,剩余的实验因子进行次数迭代并进行第一仿真,直至所有的实验因子都完成因子筛选实验时,停止迭代;
对所述第一实验设计空间进行局部敏感性分析实验设计并进行第二仿真包括:一次实验选取部分第一实验因子的取值水平并进行第二仿真,剩余的第一实验因子的取值水平进行次数迭代并进行第二仿真,直至所有的第一实验因子的取值水平都完成局部敏感性分析实验时,停止迭代;
对所述第一实验设计空间进行相关性分析实验设计并进行第三仿真包括:一次实验选取部分第一实验因子的取值区间并进行第三仿真,剩余的第一实验因子的取值区间进行次数迭代并进行第三仿真,直至所有的第一实验因子的取值区间都完成相关性分析实验时,停止迭代。
3.根据权利要求1或2所述的方法,其特征在于,对所述实验设计空间进行因子筛选实验设计并进行第一仿真,根据第一仿真的效能评估结果得到第一实验设计空间包括:
对所述实验设计空间进行因子筛选实验设计并进行第一仿真;
根据第一仿真的效能评估结果得到所有的实验因子对预设效能指标的因子筛选评估分析结果;
根据所述因子筛选评估分析结果对所述实验因子进行排序,并筛选出满足第一阈值要求的实验因子,得到具有显著影响效果的第一实验因子,并得到第一实验设计空间。
4.根据权利要求1或2所述的方法,其特征在于,当所述第一实验因子是离散型实验因子时,对所述第一实验设计空间进行局部敏感性分析实验设计并进行第二仿真,得到对预设效能指标的局部敏感系数,筛选所述局部敏感系数满足预设的第二阈值要求的第一实验因子,得到第二实验设计空间包括:
当所述第一实验因子是离散型实验因子时,对第一实验设计空间的所有第一因子取值水平进行局部敏感性分析实验设计并进行第二仿真;
根据第二仿真结果,得到每个第一因子取值水平对预设效能指标的局部敏感系数;
根据局部敏感系数对所有第一因子取值水平进行排序,并筛选出局部敏感系数满足第二阈值要求的第一因子取值水平,得到第二因子取值水平,并得到第二实验设计空间。
5.根据权利要求1或2所述的方法,其特征在于,当所述第一实验因子是连续型实验因子时,对所述第一实验设计空间进行相关性分析实验设计并进行第三仿真,得到对预设效能指标的相关系数,筛选所述相关系数满足预设的第三阈值要求的第一实验因子,得到第三实验设计空间包括:
当所述第一实验因子是连续型实验因子时,对第一实验因子的连续区间划分分区,对任意第一实验因子的所有分区进行相关性分析实验设计并进行第三仿真;
根据第三仿真结果,得到所有分区对预设效能指标的相关系数;
根据相关系数,对所有分区进行排序,并筛选出相关系数满足第三阈值要求的分区,得到第三因子取值水平数,并得到第三实验设计空间。
6.一种评估性实验仿真实验因子的筛选装置,其特征在于,包括:
获取模块,用于获取仿真实验设计需求,选择与所述仿真实验设计需求相关的实验因子,形成实验设计空间;所述实验设计空间包括:实验因子、因子取值、取值水平数及取值水平;获取仿真实验设计需求,选择与所述仿真实验设计需求相关的实验因子包括:获取仿真实验设计需求,对所述仿真实验设计需求中的仿真对象参数进行分类,按类型划分得到实验因素,根据实验因素的类型和相互包含关系进行组合,得到实验因素的分层层次结构,并根据所述分层层次结构建立所述仿真实体参数与所述实验因素之间的关联关系;根据所述关联关系,以及所述仿真实体参数与所述实验因子的继承关系,得到所述实验因素与所述实验因子之间的映射关系;根据仿真实验设计需求和所述映射关系,选择与所述仿真实验设计需求相关的实验因子;
第一仿真模块,用于对所述实验设计空间进行因子筛选实验设计并进行第一仿真,根据第一仿真的效能评估结果得到第一实验设计空间,所述第一实验设计空间包括具有显著影响效果的第一实验因子、第一因子取值、第一取值水平数及第一取值水平;
第二仿真模块,用于当所述第一实验因子是离散型实验因子时,对所述第一实验设计空间进行局部敏感性分析实验设计并进行第二仿真,得到对预设效能指标的局部敏感系数,筛选所述局部敏感系数满足预设的第二阈值要求的第一实验因子,得到第二实验设计空间;所述第二实验设计空间包括第二实验因子、第二因子取值、第二取值水平数及第二取值水平;
第三仿真模块,用于当所述第一实验因子是连续型实验因子时,对所述第一实验设计空间进行相关性分析实验设计并进行第三仿真,得到对预设效能指标的相关系数,筛选所述相关系数满足预设的第三阈值要求的第一实验因子,得到第三实验设计空间;所述第三实验设计空间包括第三实验因子、第三因子取值、第三取值水平数及第三取值水平;
输出模块,输出所述第二实验设计空间或所述第三实验设计空间为最优的实验设计空间。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210535964.0A CN114861447B (zh) | 2022-05-17 | 2022-05-17 | 一种评估性实验仿真实验因子的筛选方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210535964.0A CN114861447B (zh) | 2022-05-17 | 2022-05-17 | 一种评估性实验仿真实验因子的筛选方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114861447A CN114861447A (zh) | 2022-08-05 |
CN114861447B true CN114861447B (zh) | 2024-07-09 |
Family
ID=82637444
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210535964.0A Active CN114861447B (zh) | 2022-05-17 | 2022-05-17 | 一种评估性实验仿真实验因子的筛选方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114861447B (zh) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108647414A (zh) * | 2018-04-27 | 2018-10-12 | 北京华如科技股份有限公司 | 基于仿真实验的作战计划适应性分析方法及存储介质 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10535422B2 (en) * | 2018-04-22 | 2020-01-14 | Sas Institute Inc. | Optimal screening designs |
US11216603B2 (en) * | 2018-04-22 | 2022-01-04 | Sas Institute Inc. | Transformation and evaluation of disallowed combinations in designed experiments |
-
2022
- 2022-05-17 CN CN202210535964.0A patent/CN114861447B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108647414A (zh) * | 2018-04-27 | 2018-10-12 | 北京华如科技股份有限公司 | 基于仿真实验的作战计划适应性分析方法及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114861447A (zh) | 2022-08-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6212669B1 (en) | Method for verifying and representing hardware by decomposition and partitioning | |
Pretorius et al. | Tasks for multivariate network analysis | |
JP2004213619A (ja) | 回路検査 | |
CN114124567A (zh) | 基于大数据漏洞挖掘的云服务处理方法及人工智能系统 | |
CN110287104A (zh) | 测试用例生成方法、装置、终端及计算机可读存储介质 | |
Pett et al. | Stability of product-line samplingin continuous integration | |
CN114157507A (zh) | 采用大数据分析的云服务漏洞分析方法及人工智能系统 | |
CN118363932B (zh) | 基于无人机的智能巡逻方法及系统 | |
CN116560984A (zh) | 一种基于调用依赖图的测试用例聚类分组方法 | |
CN115098389A (zh) | 一种基于依赖模型的rest接口测试用例生成方法 | |
CN114706761A (zh) | 一种基于约束分割的混合执行测试优化方法及装置 | |
CN117421565B (zh) | 基于马尔可夫毯的装备评估方法、装置和计算机设备 | |
JP2020004409A (ja) | 情報処理プラットフォーム上でのソフトウェアアプリケーションの実行パラメータの自動かつ自己最適化型決定 | |
CN114861447B (zh) | 一种评估性实验仿真实验因子的筛选方法和装置 | |
CN111177311B (zh) | 一种事件处理结果的数据分析模型及分析方法 | |
CN111949530A (zh) | 测试结果的预测方法、装置、计算机设备及存储介质 | |
Constantinou et al. | An automated approach for noise identification to assist software architecture recovery techniques | |
CN115796228B (zh) | 算子融合方法、装置、设备以及存储介质 | |
CN114090442B (zh) | 一种电力云测试管理平台自动化测试方法及系统 | |
CN115994093A (zh) | 测试用例推荐方法和装置 | |
CN114780443A (zh) | 微服务应用自动化测试方法、装置、电子设备及存储介质 | |
CN114253853A (zh) | 一种基于网络谱的软件故障定位方法 | |
Vareille et al. | Evaluating Explanation Methods of Multivariate Time Series Classification through Causal Lenses | |
Hinojosa et al. | Data driven predictive model to compact a production stop-on-fail test set for an electronic device | |
CN113806205A (zh) | 软件性能测试方法、装置、电子设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |