CN103971023B - 研发过程质量自动评估系统和方法 - Google Patents
研发过程质量自动评估系统和方法 Download PDFInfo
- Publication number
- CN103971023B CN103971023B CN201410224889.1A CN201410224889A CN103971023B CN 103971023 B CN103971023 B CN 103971023B CN 201410224889 A CN201410224889 A CN 201410224889A CN 103971023 B CN103971023 B CN 103971023B
- Authority
- CN
- China
- Prior art keywords
- assessment
- evaluation
- assessment models
- evaluation points
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Abstract
本发明提供一种研发过程质量自动评估系统和方法。本发明的方法包括:步骤1:根据评估对象,建立评估模型;步骤2:接收所述评价因子的数值,并将所述评价因子的数值存储于评价因子数据库中;步骤3:调用评估模型并获取评价因子的数值,计算评估结果;步骤4:对计算得到的评估结果进行输出。本发明基于成熟的人、机、料、法、环境、测量、改进分析模型,将影响研发过程质量波动的因素进行总结与概括,并利用信息化手段,将这些波动因素定义为可自动获取数值的评价指标,从而为企业提供快捷方便的研发过程质量实时而非事后,基于客观数据而非主观的评价系统和方法。
Description
技术领域
本发明涉及计算机应用技术领域,具体涉及一种支持多维度、多层级的研发过程质量自动评估系统和方法。
背景技术
随着企业质量管理信息化的不断发展与深化,越来越多的先进企业选择以计算机技术为基础,以先进的质量管理技术为支撑,不断提高对研发过程质量的管理效率,加强对研发过程规范性与符合性的有效控制,以期达到提高设计效率,降低不良成本的目的。
在企业面临研发周期大幅度压缩,产品质量要求精益求精,以及研发队伍越发年轻化等诸多挑战下,管理者如何快捷方便地综合掌握影响研发过程质量波动的因素,从而决策与监督具体的改进方向与效果,将变得尤为重要;但是对于企业,特别是针对研制复杂系统产品的企业来说,通过传统人工的评估与统计手段,无法及时及有效地收集研发过程的质量信息,也难以避免人为操作中的误差。
基于上述考虑,本发明提出了一种研发过程质量自动评估系统和方法,其基于成熟的人、机、料、法、环境、测量、改进分析模型,将影响研发过程质量波动的因素进行总结与概括,并利用信息化手段,将这些波动因素定义为可自动获取数值的评价指标,从而为企业提供快捷方便的研发过程质量实时而非事后,基于客观数据而非主观的评价系统和方法。
发明内容
有鉴于此,本发明提出的一种研发过程质量自动评估系统和方法,可对某一具体科研活动的质量进行评估,亦可对整个研发过程中的同一类型群组(如总体设计组、结构设计组等)的执行质量进行评估。
本发明提出的一种研发过程质量自动评估系统,包括评估模型搭建模块、数据输入模块、数据存储模块、评估运算模块以及评估结果输出模块,其中,
所述评估模型搭建模块,用于根据评估对象建立评估模型,所述评估模型包括一个或多个评价指标项,以及对应各评价指标项的系数因子;所述评价指标项由多个评价因子及其之间的函数关系确定;
所述数据输入模块,用于接收所述评价因子的数值,并存储于所述数据存储模块;
所述数据存储模块,用于存储评价因子的数值;
所述评估运算模块,用于调用所述评估模型,并从所述数据存储模块中提取所述评估模型中的评价因子的数值,根据所述多个评价因子构成的函数关系计算评价指标项,进而根据评价指标项的系数因子计算评估结果;
所述评估结果输出模块,用于对评估运算模块计算得到的评估结果进行输出。
所述数据存储模块,包括评价因子数据库和评估模型数据库,其中,所述评价因子数据库存储有各类评价因子数值;所述评估模型数据库存储有各类用于对评估对象进行质量评估的评估模型。
所述评估模型搭建模块,还用于在评估模型搭建完成后,将评估模型存储于评估模型数据库中;所述评估运算模块,从所述评估模型数据库中调用评估模型。
所述数据输入模块以覆盖方式将同一类评价因子的数值存储于所述评价因子数据库中以实现对评价因子数值的更新。
所述评估模型搭建模块以覆盖方式将用于对同一评估对象进行评估的评估模型存储于所述评估模型数据库中以实现对评估模型的更新。
所述评估结果输出模块,还用于对所述评估运算模块计算得到的评估结果进行水平化对比分析,并进行图形化展示。
本发明还提供一种研发过程质量自动评估方法,包括:
步骤1:根据评估对象,建立评估模型,其中,所述评估模型包括一个或多个评价指标项,以及对应各评价指标项的系数因子;所述评价指标项由多个评价因子之间的函数关系确定;
步骤2:接收所述评价因子的数值,并将所述评价因子的数值存储于评价因子数据库中;
步骤3:调用评估模型并获取评价因子的数值,计算评估结果;
步骤4:对计算得到的评估结果进行输出。
所述步骤1还包括,在评估模型搭建完成后,将评估模型存储于评估模型数据库中。
在所述步骤3中,从所述评估模型数据库中调用所述评估模型,从所述评价因子数据库获取相应的评价因子的数值。
在所述步骤3中,计算评估结果,包括:
步骤a:根据获取的评价因子的数值以及评价因子之间的函数关系确定评价指标项的值;
步骤b:根据确定的各项评价指标项的值以及对应各评价指标项的系数因子确定评估结果。
所述方法还包括:以覆盖方式将同一评价因子的数值存储于所述评价因子数据库中以实现对评价因子数值的更新。
所述方法还包括:以覆盖方式将用于对同一评估对象进行评估的评估模型存储于所述评估模型数据库中以实现对评估模型的更新。
在所述步骤4中,对计算得到的评估结果进行水平化对比分析,并进行图形化展示输出。
所述评价因子具有通用性,即不同的评价指标项可以包括一个或多个相同的评价因子。
综上所述,本发明的研发过程质量自动评估系统和方法,通过对评估模型进行建模和存储,以及对评估指标项拆分成评估因子,从而通过获取评估因子计算评估指标,进而通过评估模型自动对研发过程质量进行评估,实现了评估的实时性和准确性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的方案,下面将对实施例中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一实施例提供的研发过程质量自动评估方法逻辑示意图;
图2为本发明一实施例提供的研发过程质量自动评估方法流程示意图;
图3为本发明一实施例提供的研发过程质量自动评估系统结构流程图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
研发过程包括产品的方案设计、建模、试验、计算校核以及各类设计文件的编写与审签等关键环节,如图1所示,本发明所提出的研发过程质量自动评估系统和方法既可适用于完整的研发过程评估,亦可适用于研发过程的某一类关键节点活动的评估。如图2所示,以设计文件编写与审签过程作为本发明的具体实施例,其过程质量评估方法包括下列步骤:
步骤1:根据评估对象,建立评估模型,综合考虑影响文件质量的因素,确立反映文件质量的指标项,此时指标项可为定性指标,亦可为定量化指标。
定量化指标描述如:Y1:文件不合理变更的频率;
定性化指标描述如:Y2:文件编制人员资质满足程度;
评价因子是构成各项评价指标项评分公式的数值变量,无论定性指标还是定量指标均可转化为由评价因子构建的公式实现定量化表达;由于构成指标项的评价因子具有一定的通用性,因此在一定程度上又保证了指标项定义的可扩展性。基于成熟的人、机、料、法、环境、测量、改进分析模型,将影响设计文件编写与审签过程质量波动的因素进行总结与概括,如表1所示;
如Y1(文件不合理变更频率)可表达为:Y1=pi/pj(其中,pi:不合理变更次数;pj:变更的时间间隔)
如Y2(文件编制人员资质满足程度),可表达为:Y2=pl-pm(其中,pl:文件编制人员能力系数;pm:文件难度系数);可选地,pm=文件继承性*文件影响范围;
如Y3(文件检查结果)可表达为:Y3=pt-γpm(其中,pt:文件检查错误数量;γ为常量;pm:文件难度系数);可选地,pm=文件继承性*文件影响范围;
如Y4(文件被驳回次数)可表达为:Y4=ps(其中,ps:文件累计驳回次数)。
表1评价指标表达示例
评估模型支持针对指标项的多层级分解,而最底层级的指标项,其评分公式由若干评价因子间的逻辑运算组成,其评分标准,则可根据公式计算结果所属的区间范围,分级定义可获得的分值。
多层级指标的分解与评分规则的建立,如:
指标项X1(文件审签状况)可分解成Y3,Y4两个子指标,其得分结果A=αZ3+βZ4;其中α,β为常量,α+β=1,Z3,Z4分别为Y3,Y4的评分结果:Z3=pt-γpm;Z4=ps;
步骤2:接收所述评价因子的数值,并将所述评价因子的数值存储于评价因子数据库中;以上pk(k=1,2,3……)的数值均可自动采集,其中Y2,Y3表达公式中均涉及了pm这一评价因子,体现了指标项定义的可扩展性。
步骤3:调用评估模型并获取评价因子的数值,计算评估结果;
步骤4:对计算得到的评估结果进行输出。
所述1还包括,在评估模型搭建完成后,将评估模型存储于评估模型数据库中。
在所述步骤3中,从所述评估模型数据库中调用所述评估模型,从所述评价因子数据库获取相应的评价因子的数值。
在所述步骤3中,计算评估结果,包括:
步骤a:根据获取的评价因子的数值以及评价因子之间的函数关系确定评价指标项的值;
步骤b:根据确定的各项评价指标项的值以及对应各评价指标项的系数因子确定评估结果。
所述方法还包括:以覆盖方式将同一评价因子的数值存储于所述评价因子数据库中以实现对评价因子数值的更新。
所述方法还包括:以覆盖方式将用于对同一评估对象进行评估的评估模型存储于所述评估模型数据库中以实现对评估模型的更新。可根据实际关注重点,保存/调整各维度、各层级指标项的权重以及指标项的评分规则。
在所述步骤4中,对计算得到的评估结果进行水平化对比分析,并进行图形化展示输出。
基于所建立的评估模型,并依据科研项目、时间、部门等维度设置评估范围,即可实现该范围下文件编制及审签过程的自动评估,并生成多元、直观的质量评估报告;
推动文件编制及审签过程质量的持续改进:基于评估结果及系统展现的统计分析视图,用户可以快捷地了解过程潜在薄弱环节,并从管理与技术两个方面,推动该过程质量的持续改进。
如图3所示,本发明的一种研发过程质量自动评估系统,包括评估模型搭建模块、数据输入模块、数据存储模块、评估运算模块以及评估结果输出模块,其中,
所述评估模型搭建模块,用于根据评估对象建立评估模型,所述评估模型包括一个或多个评价指标项,以及对应各评价指标项的系数因子;所述评价指标项由多个评价因子及其之间的函数关系确定;
所述数据输入模块,用于接收所述评价因子的数值,并存储于所述数据存储模块;
所述数据存储模块,用于存储评价因子的数值;
所述评估运算模块,用于调用所述评估模型,并从所述数据存储模块中提取所述评估模型中的评价因子的数值,根据所述多个评价因子构成的函数关系计算评价指标项,进而根据评价指标项的系数因子计算评估结果;
所述评估结果输出模块,用于对评估运算模块计算得到的评估结果进行输出。
所述数据存储模块,包括评价因子数据库和评估模型数据库,其中,所述评价因子数据库存储有各类评价因子数值;所述评估模型数据库存储有各类用于对评估对象进行质量评估的评估模型。
所述评估模型搭建模块,还用于在评估模型搭建完成后,将评估模型存储于评估模型数据库中;所述评估运算模块,从所述评估模型数据库中调用评估模型。
所述数据输入模块以覆盖方式将同一类评价因子的数值存储于所述评价因子数据库中以实现对评价因子数值的更新。
所述评估模型搭建模块以覆盖方式将用于对同一评估对象进行评估的评估模型存储于所述评估模型数据库中以实现对评估模型的更新。
所述评估结果输出模块,还用于对所述评估运算模块计算得到的评估结果进行水平化对比分析,并进行图形化展示。
综上所述,本发明的研发过程质量自动评估系统和方法,通过对评估模型进行建模和存储,以及对评估指标项拆分成评估因子,从而通过获取评估因子计算评估指标,进而通过评估模型自动对研发过程质量进行评估,实现了评估的实时性和准确性。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换,而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (14)
1.一种研发过程质量自动评估系统,其特征在于,所述系统包括评估模型搭建模块、数据输入模块、数据存储模块、评估运算模块以及评估结果输出模块,其中,
所述评估模型搭建模块,用于根据评估对象建立评估模型,所述评估模型包括一个或多个评价指标项,以及对应各评价指标项的系数因子;所述评价指标项由多个评价因子及其之间的函数关系确定;其中,所述评价指标项包括以下至少之一:编制人员资质评估、校对人员资质评估、所选用工具、软件选取规范性评估、输入有效性评估、流程的规范性评估、过程合规性评估、文件不合理变更及换版频率、文件被驳回次数、文件检查结果;
所述数据输入模块,用于接收所述评价因子的数值,并存储于所述数据存储模块;
所述数据存储模块,用于存储评价因子的数值;
所述评估运算模块,用于调用所述评估模型,并从所述数据存储模块中提取所述评估模型中的评价因子的数值,根据所述多个评价因子构成的函数关系计算评价指标项,进而根据评价指标项的系数因子计算评估结果;
所述评估结果输出模块,用于对评估运算模块计算得到的评估结果进行输出。
2.根据权利要求1所述的研发过程质量自动评估系统,其特征在于,所述数据存储模块,包括评价因子数据库和评估模型数据库,其中,所述评价因子数据库存储有各类评价因子数值;所述评估模型数据库存储有各类用于对评估对象进行质量评估的评估模型。
3.根据权利要求2所述的研发过程质量自动评估系统,其特征在于,所述评估模型搭建模块,还用于在评估模型搭建完成后,将评估模型存储于评估模型数据库中;所述评估运算模块,从所述评估模型数据库中调用评估模型。
4.根据权利要求3所述的研发过程质量自动评估系统,其特征在于,所述数据输入模块以覆盖方式将同一类评价因子的数值存储于所述评价因子数据库中以实现对评价因子数值的更新。
5.根据权利要求3所述的研发过程质量自动评估系统,其特征在于,所述评估模型搭建模块以覆盖方式将用于对同一评估对象进行评估的评估模型存储于所述评估模型数据库中以实现对评估模型的更新。
6.根据权利要求4或5所述的研发过程质量自动评估系统,其特征在于,所述评估结果输出模块,还用于对所述评估运算模块计算得到的评估结果进行水平化对比分析,并进行图形化展示。
7.一种研发过程质量自动评估方法,其特征在于,所述方法包括:
步骤1:根据评估对象,建立评估模型,其中,所述评估模型包括一个或多个评价指标项,以及对应各评价指标项的系数因子;所述评价指标项由多个评价因子之间的函数关系确定;其中,所述评价指标项包括以下至少之一:编制人员资质评估、校对人员资质评估、所选用工具、软件选取规范性评估、输入有效性评估、流程的规范性评估、过程合规性评估、文件不合理变更及换版频率、文件被驳回次数、文件检查结果;
步骤2:接收所述评价因子的数值,并将所述评价因子的数值存储于评价因子数据库中;
步骤3:调用所述评估模型,并从所述评价因子数据库中提取所述评估模型中的评价因子的数值,根据所述多个评价因子构成的函数关系计算评价指标项,进而根据评价指标项的系数因子计算评估结果;
步骤4:对计算得到的评估结果进行输出。
8.根据权利要求7所述的研发过程质量自动评估方法,其特征在于,所述步骤1还包括,在评估模型搭建完成后,将评估模型存储于评估模型数据库中。
9.根据权利要求8所述的研发过程质量自动评估方法,其特征在于,在所述步骤3中,从所述评估模型数据库中调用所述评估模型,从所述评价因子数据库获取相应的评价因子的数值。
10.根据权利要求7-9之一所述的研发过程质量自动评估方法,其特征在于,在所述步骤3中,计算评估结果,包括:
步骤a:根据获取的评价因子的数值以及评价因子之间的函数关系确定评价指标项的值;
步骤b:根据确定的各项评价指标项的值以及对应各评价指标项的系数因子确定评估结果。
11.根据权利要求10所述的研发过程质量自动评估方法,其特征在于,所述方法还包括:以覆盖方式将同一评价因子的数值存储于所述评价因子数据库中以实现对评价因子数值的更新。
12.根据权利要求10所述的研发过程质量自动评估方法,其特征在于,所述方法还包括:以覆盖方式将用于对同一评估对象进行评估的评估模型存储于评估模型数据库中以实现对评估模型的更新。
13.根据权利要求10所述的研发过程质量自动评估方法,其特征在于,在所述步骤4中,对计算得到的评估结果进行水平化对比分析,并进行图形化展示输出。
14.根据权利要求10所述的研发过程质量自动评估方法,其特征在于,所述评价因子具有通用性,即不同的评价指标项可以包括一个或多个相同的评价因子。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410224889.1A CN103971023B (zh) | 2014-05-26 | 2014-05-26 | 研发过程质量自动评估系统和方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410224889.1A CN103971023B (zh) | 2014-05-26 | 2014-05-26 | 研发过程质量自动评估系统和方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103971023A CN103971023A (zh) | 2014-08-06 |
CN103971023B true CN103971023B (zh) | 2017-11-14 |
Family
ID=51240511
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410224889.1A Active CN103971023B (zh) | 2014-05-26 | 2014-05-26 | 研发过程质量自动评估系统和方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103971023B (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104156593B (zh) * | 2014-08-08 | 2017-04-19 | 中国石油大学(华东) | 密闭体系下页岩油气产率评价模型建立及参数标定方法 |
CN106021931A (zh) * | 2016-05-23 | 2016-10-12 | 尹铭 | 一种健康测试结果的评估装置、系统及方法 |
CN107505126B (zh) * | 2017-08-02 | 2020-02-07 | 中国航空工业集团公司西安飞机设计研究所 | 一种机载产品飞行试验测试性评估方法 |
CN107688969B (zh) * | 2017-08-25 | 2022-01-28 | 中科钢研节能科技有限公司 | 一种新技术产品研发管理信息系统及管理信息方法 |
CN108053106A (zh) * | 2017-12-07 | 2018-05-18 | 天津大学 | 用于重型机床研发过程质量风险的自动评价与控制方法 |
CN112446584A (zh) * | 2020-10-16 | 2021-03-05 | 北京仿真中心 | 一种基于可重用评估资源构建的分析评估系统和方法 |
CN112328490A (zh) * | 2020-11-18 | 2021-02-05 | 恩亿科(北京)数据科技有限公司 | 软件系统研发质量的评价方法、系统、存储介质及电子设备 |
CN112561331A (zh) * | 2020-12-16 | 2021-03-26 | 北京仿真中心 | 一种可视化的试验分析评估指标构建方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101540011A (zh) * | 2008-03-17 | 2009-09-23 | 亿维讯软件(北京)有限公司 | 一种质量管理显示系统及方法 |
CN102096633A (zh) * | 2010-12-10 | 2011-06-15 | 东华大学 | 一种面向应用领域的软件质量基准测评方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101533487A (zh) * | 2008-03-17 | 2009-09-16 | 安世亚太科技(北京)有限公司 | 精益研发系统和精益研发方法 |
CN101540012A (zh) * | 2008-03-17 | 2009-09-23 | 亿维讯软件(北京)有限公司 | 一种产品研发质量控制系统及方法 |
CN102592010A (zh) * | 2011-12-30 | 2012-07-18 | 四川大学 | 创新设计网络平台构建和应用方法 |
-
2014
- 2014-05-26 CN CN201410224889.1A patent/CN103971023B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101540011A (zh) * | 2008-03-17 | 2009-09-23 | 亿维讯软件(北京)有限公司 | 一种质量管理显示系统及方法 |
CN102096633A (zh) * | 2010-12-10 | 2011-06-15 | 东华大学 | 一种面向应用领域的软件质量基准测评方法 |
Also Published As
Publication number | Publication date |
---|---|
CN103971023A (zh) | 2014-08-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103971023B (zh) | 研发过程质量自动评估系统和方法 | |
JP2022518887A (ja) | 大規模・中規模企業の技術標準体系化実施の利益評価方法 | |
CN105868373B (zh) | 电力业务信息系统关键数据处理方法及装置 | |
CN107545349A (zh) | 一种面向电力大数据的数据质量分析评价模型 | |
CN102708149A (zh) | 数据质量管理方法和系统 | |
CN113807747A (zh) | 一种企业预算管理成熟度测评系统 | |
CN114723287A (zh) | 一种基于企业特征和经营行为对风险形成的量化统计方法 | |
CN107944745B (zh) | 一种风险信息评估方法及系统 | |
CN111340606B (zh) | 一种全流程收入稽核方法和装置 | |
CN112700319A (zh) | 基于政务数据的企业授信额度确定方法及装置 | |
CN107766500A (zh) | 固定资产卡片的审计方法 | |
CN107633030A (zh) | 基于数据模型的信用评估方法及装置 | |
CN106384256A (zh) | 基于指标体系动态变化的供电服务满意度动态测评系统 | |
WO2017071369A1 (zh) | 一种预测用户离网的方法和设备 | |
CN109146611A (zh) | 一种电商产品质量信用指数分析方法及系统 | |
CN113450009A (zh) | 一种企业成长性评价的方法及系统 | |
CN114638498A (zh) | Esg评价方法、系统、电子设备及存储设备 | |
CN113283673A (zh) | 一种模型性能衰减评价方法、模型训练方法及装置 | |
CN113628024A (zh) | 基于大数据平台系统的财务数据智能稽核系统及方法 | |
CN115759864A (zh) | 基于质量安全检测的工程监管系统 | |
Qiang et al. | Relationship model between human resource management activities and performance based on LMBP algorithm | |
CN113919609A (zh) | 一种配电网模型质量综合评估方法和系统 | |
CN112633660A (zh) | 一种多角度的失业风险预警装置及方法 | |
Dai et al. | A data quality management and control framework and model for health decision support | |
Teng et al. | Algorithm for quickly improving quantitative analysis of risk assessment of large-scale enterprise information systems |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |