CN101079030A - 质量分析系统中的数据处理方法 - Google Patents

质量分析系统中的数据处理方法 Download PDF

Info

Publication number
CN101079030A
CN101079030A CNA200610026874XA CN200610026874A CN101079030A CN 101079030 A CN101079030 A CN 101079030A CN A200610026874X A CNA200610026874X A CN A200610026874XA CN 200610026874 A CN200610026874 A CN 200610026874A CN 101079030 A CN101079030 A CN 101079030A
Authority
CN
China
Prior art keywords
data
data source
analysis
quality analysis
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA200610026874XA
Other languages
English (en)
Inventor
樊小华
朱从峰
沈琦
李之夏
孔德洋
曾炜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Baosight Software Co Ltd
Original Assignee
Shanghai Baosight Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Baosight Software Co Ltd filed Critical Shanghai Baosight Software Co Ltd
Priority to CNA200610026874XA priority Critical patent/CN101079030A/zh
Publication of CN101079030A publication Critical patent/CN101079030A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30Computing systems specially adapted for manufacturing

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种质量分析系统中的数据处理方法,包括如下步骤:将采集数据的源数据信息统一整理到系统数据库中;根据采集数据的源数据信息,配置出可进行质量分析的源数据,以及源数据之间的关联关系;对源数据的过滤条件进行配置;对源数据的各种质量分析进行配置;在界面层选择数据源、过滤条件以及质量分析,即可进行简单的质量分析。本发明可实现显示逻辑和质量分析逻辑的剥离,满足显示的逻辑要求。本发明是对数据的一种可配置处理方式,可应用于对关系型数据需要集中处理的领域,以质量分析系统最为典型。

Description

质量分析系统中的数据处理方法
技术领域
本发明涉及一种动态网页的设置方法,特别是涉及一种在质量分析系统中对数据进行整理、分析以及显示的方法。
背景技术
质量代表了一个国家的科学技术水平、生产水平、管理水平和知识文化水平。产品质量的提高,意味着经济效益的提高。当今世界经济的发展正经历着由数量型增长向质量型增长的转变过程,市场竞争也由价格竞争为主转向质量竞争为主。
而对市场开放、生产全球化和加入WTO的挑战,持续改进产品质量成为工业企业的永恒主题,也是开拓更广泛的发展空间,抢占更大的市场份额的关键。随着顾客需求的日益提高和市场竞争的日益激烈,企业在战略上越来越侧重于过程质量的改进。在工业生产中,由于设备失效、人员疏忽、参数异常、原材料差异、环境波动等因素而导致的质量偏离,引起质量等级和缺陷损失非常巨大,特别是在工艺流程复杂的大型钢铁企业,尤其需要“及时发现和预测异常,迅速控制和分析质量异常的原因”。
对于质量分析最终的显示,需要进行规范,以统一且友好风格的显示,方便并且灵活的配置和管理,以实现显示逻辑和质量分析逻辑的剥离。
在质量分析系统中,一个完整的分析的流程为:数据准备、数据查询、数据分析,最后到统一的展现。实现的方法是:对关系型数据进行建模,在数据建模的基础上,实现通用的数据查询和统一展现。这样可以用统一的方式进行数据准备、数据查询和数据的展现。添加新的数据分析方式,只需编写专属于要分析的那部分的逻辑。系统中数据准备、数据查询、统一展现的模块可重复使用。
发明内容
本发明要解决的技术问题是提供一种质量分析系统中的数据处理方法,它可实现显示逻辑和质量分析逻辑的剥离,满足显示的逻辑要求。
为解决上述技术问题,本发明的质量分析系统中的数据处理方法,包括如下步骤:
步骤1、将采集数据的数据源信息统一整理到系统数据库中;根据采集数据的数据源信息,配置出可进行质量分析的数据源,以及数据源之间的关联关系;
步骤2、对数据源的过滤条件进行配置;
步骤3、对数据源的各种质量分析进行配置;
步骤4、在界面层选择数据源、过滤条件以及质量分析,即可进行简单的质量分析,定义一个动态查询、分析网页。
由于采用上述方法,本发明的有益效果是:
1、兼容性强。对原始数据无任何要求,经过简单的配置,即可使用到这种质量分析系统中。
2、易扩展。有新的质量分析类型,以及数据来源方式(如实时数据),都可方便的扩充。
3、责任可剥离。负责数据采集、负责数据查询、负责数据展示、负责数据分析的人员可分别进行设计、部署、实施。
4、用户友好。显示逻辑的剥离,用户可以选择更友好的界面进行显示。
5、易转向智能系统。通过对用户操作的采集和数据挖掘,可开发出更友好更个性化的用户界面。
附图说明
下面结合附图与具体实施方式对本发明作进一步详细的说明:
图1是本发明数据源的配置流程图;
图2是本发明对数据源的过滤条件配置流程图;
图3是本发明分析图的配置流程图;
图4是本发明动态查询、分析网页的配置流程图;
图5是本发明动态查询网页的控制流程图;
图6是本发明动态分析网页的控制流程图。
具体实施方式
本发明质量分析系统中的数据处理方法包括如下步骤:
步骤1、将采集数据的数据源信息统一整理到系统数据库中;根据采集数据的数据源信息,配置出可进行质量分析的数据源,以及数据源之间的关联关系。
如图1所示,数据源的具体配置流程是:打开配置界面,等待用户配置;为新建数据源选择一个数据库表或者视图;对数据源进行命名、描述;给数据源的每个字段配置(显示)名称、描述和类型;添加一个或多个表或者视图作为本数据源的子频率数据源;点击保存,保存至系统数据库中。
步骤2、对数据源的过滤条件进行配置。
如图2所示,对过滤条件进行配置的具体控制流程是:打开配置界面,等待用户配置;新建查询,选择一个数据源;添加查询过滤条件,选择数据源的一个字段;为查询过滤条件配置过滤方式和某些必要参数;点击保存,保存至系统数据库。
采集数据并存储至数据库的表中,这些表通过视图关联,再对其进行建模,产生可供分析的数据源。所述的建模包括,定义数据源的名称,其字段的建模类型和显示名称,数据源之间的关系(主频率和子频率的关系)。
每个主频率数据源可有多个查询,一个查询由多个过滤条件组成,过滤条件是对数据源字段的某些约束(如:等于某个值,介于某个最小值和最大值之间,属于某个集合等等)。配置查询的方式,就是选择数据源,然后选择字段配置一个或多个过滤条件。
步骤3、对源数据的各种质量分析进行配置。
分析图的配置流程图如图3所示。打开配置界面,等待用户配置;新建分析图,选择一个数据源;分别选择一个或多个字段作为分析变量、显示变量、钻取变量,或选择一个或多个指标;点击保存,保存至系统数据库。
不同的分析图将有不同的质量分析配置,常见的配置有:分析图的标题和脚注,分析图中点或线的形状、大小、颜色,一个或多个分析变量、钻取变量、信息表变量,一个或多个分析指标等等。
步骤4、在界面层选择数据源、过滤条件以及质量分析,即可进行简单的质量分析(包括数据查询子模块,数据展示子模块,质量分析子模块,数据钻取子模块等),定义一个动态查询、分析网页。
把步骤1~3所作的配置整合起来,即可定义一个动态查询、分析网页,配置很简单,即选择数据源,数据查询和数据分析图。
在图4中给出了动态查询、分析网页的配置流程。打开一个网页的配置界面,等待用户操作;选择一个数据源作为分析网页的数据源;选择该数据源下一个数据查询,或选择该数据源下一个数据分析图;点击保存,进入分析网页初始页面,开始查询分析。
在实施阶段,动态查询网页生成的控制流程是(参见图5):首先用户打开一个动态网页,动态网页引擎开始处理;
当获取当前网页的数据分析图后,在网页上显示所有的分析变量,等待用户选择;然后添加该分析图的专属过滤条件至网页,添加分析图的分析参数编辑控件至网页;
当读取当前网页的数据源后,在网页上显示数据源的所有频率,等待选择其中一个频率;
当获取当前网页的数据查询后,添加数据查询中的过滤条件至网页,等待录入条件参数;
最后,用户在界面中输入查询参数后,点击查询。
动态分析网页生成的控制流程是(参见图6):首先,用户点击查询,进入查询分析结果展示页面;
当获得用户选择的查询频率时,获得该频率所对应的数据库表或视图;
当获得用户输入的过滤条件参数时,动态生成SQL语句中的条件字句;
当获得用户选择的分析图的各种变量时,动态生成SQL语句中的字段选择字句;
然后,组成SQL语句,进行查询,产生查询结果集;
获得用户输入的分析参数;
调用分析图的科学分析算法,获得分析结果;
将分析结果和查询结果使用图或数据标的方式展示在页面上。
本发明是对数据的一种可配置处理方式,可应用于对关系型数据需要集中处理(如:查询,分析,展现等)的领域,以质量分析系统最为典型。

Claims (10)

1、一种质量分析系统中的数据处理方法,其特征在于包括如下步骤:
步骤1、将采集数据的数据源信息统一整理到系统数据库中;根据采集数据的数据源信息,配置出可进行质量分析的数据源,以及数据源之间的关联关系;
步骤2、对数据源的过滤条件进行配置;
步骤3、对数据源的各种质量分析进行配置;
步骤4、在界面层选择数据源、过滤条件以及质量分析,即可进行简单的质量分析,定义一个动态查询、分析网页。
2、如权利要求1所述的质量分析系统中的数据处理方法,其特征在于:
步骤1所述的数据源的具体配置流程是:打开配置界面,等待用户配置;为新建数据源选择一个数据库表或者视图;对数据源进行命名、描述;给数据源的每个字段配置名称、描述和类型;添加一个或多个表或者视图作为本数据源的子频率数据源:点击保存,保存至系统数据库中。
3、如权利要求1所述的质量分析系统中的数据处理方法,其特征在于:
步骤2所述的对过滤条件进行配置的具体控制流程是:打开配置界面,等待用户配置;新建查询,选择一个数据源;添加查询过滤条件,选择数据源的一个字段;为查询过滤条件配置过滤方式和某些必要参数;点击保存,保存至系统数据库。
4、如权利要求2或3所述的质量分析系统中的数据处理方法,其特征在于:采集数据并存储至数据库的表中,这些表通过视图关联,再对其进行建模,产生可供分析的数据源。
5、如权利要求4所述的质量分析系统中的数据处理方法,其特征在于:
所述的建模包括,定义数据源的名称,其字段的建模类型和显示名称,数据源之间的关系,即主频率和子频率的关系。
6、如权利要求5所述的质量分析系统中的数据处理方法,其特征在于:
每个主频率数据源可有多个查询,一个查询由多个过滤条件组成,过滤条件是对数据源字段的某些约束。
7、如权利要求1所述的质量分析系统中的数据处理方法,其特征在于:
步骤3所述对质量分析进行配置的流程是:打开配置界面,等待用户配置;新建分析图,选择一个数据源;分别选择一个或多个字段作为分析变量、显示变量、钻取变量,或选择一个或多个指标;点击保存,保存至系统数据库。
8、如权利要求1所述的质量分析系统中的数据处理方法,其特征在于:
步骤4所述的动态查询、分析网页的配置流程。打开一个网页的配置界面,等待用户操作;选择一个数据源作为分析网页的数据源;选择该数据源下一个数据查询,或选择该数据源下一个数据分析图;点击保存,进入分析网页初始页面,开始查询分析。
9、如权利要求1或8所述的质量分析系统中的数据处理方法,其特征在于:所述动态查询网页生成的控制流程是:首先用户打开一个动态网页,动态网页引擎开始处理;
当获取当前网页的数据分析图后,在网页上显示所有的分析变量,等待用户选择;然后添加该分析图的专属过滤条件至网页,添加分析图的分析参数编辑控件至网页;
当读取当前网页的数据源后,在网页上显示数据源的所有频率,等待选择其中一个频率;
当获取当前网页的数据查询后,添加数据查询中的过滤条件至网页,等待录入条件参数;
最后,用户在界面中输入查询参数后,点击查询。
10、如权利要求1或8所述的质量分析系统中的数据处理方法,其特征在于:所述动态分析网页生成的控制流程是:
首先,用户点击查询,进入查询分析结果展示页面;
当获得用户选择的查询频率时,获得该频率所对应的数据库表或视图;
当获得用户输入的过滤条件参数时,动态生成SQL语句中的条件字句;
当获得用户选择的分析图的各种变量时,动态生成SQL语句中的字段选择字句;
然后,组成SQL语句,进行查询,产生查询结果集;
获得用户输入的分析参数;
调用分析图的科学分析算法,获得分析结果;
将分析结果和查询结果使用图或数据标的方式展示在页面上。
CNA200610026874XA 2006-05-25 2006-05-25 质量分析系统中的数据处理方法 Pending CN101079030A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNA200610026874XA CN101079030A (zh) 2006-05-25 2006-05-25 质量分析系统中的数据处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNA200610026874XA CN101079030A (zh) 2006-05-25 2006-05-25 质量分析系统中的数据处理方法

Publications (1)

Publication Number Publication Date
CN101079030A true CN101079030A (zh) 2007-11-28

Family

ID=38906509

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA200610026874XA Pending CN101079030A (zh) 2006-05-25 2006-05-25 质量分析系统中的数据处理方法

Country Status (1)

Country Link
CN (1) CN101079030A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102023865A (zh) * 2010-12-15 2011-04-20 中兴通讯股份有限公司 一种产品生产过程能力分析系统及方法
CN103279573A (zh) * 2013-06-20 2013-09-04 天脉聚源(北京)传媒科技有限公司 一种数据搜索的方法和系统
CN103988078A (zh) * 2011-09-22 2014-08-13 生物辐射实验室股份有限公司 用于生化数据分析的系统和方法
CN104715078A (zh) * 2015-04-10 2015-06-17 中国地质大学(武汉) 基于手持平板电脑的勘探钻孔数据数字化编录方法及系统
CN106156361A (zh) * 2016-08-01 2016-11-23 浪潮软件集团有限公司 一种执法监督方法及装置
CN108733740A (zh) * 2018-02-12 2018-11-02 石化盈科信息技术有限责任公司 对非结构化的产品标准数据进行查询的方法及系统

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102023865A (zh) * 2010-12-15 2011-04-20 中兴通讯股份有限公司 一种产品生产过程能力分析系统及方法
CN103988078A (zh) * 2011-09-22 2014-08-13 生物辐射实验室股份有限公司 用于生化数据分析的系统和方法
CN103988078B (zh) * 2011-09-22 2016-11-02 生物辐射实验室股份有限公司 用于生化数据分析的系统和方法
US9792548B2 (en) 2011-09-22 2017-10-17 Bio-Rad Laboratories, Inc. Systems and methods for biochemical data analysis
CN103279573A (zh) * 2013-06-20 2013-09-04 天脉聚源(北京)传媒科技有限公司 一种数据搜索的方法和系统
CN103279573B (zh) * 2013-06-20 2016-06-29 天脉聚源(北京)传媒科技有限公司 一种数据搜索的方法和系统
CN104715078A (zh) * 2015-04-10 2015-06-17 中国地质大学(武汉) 基于手持平板电脑的勘探钻孔数据数字化编录方法及系统
CN104715078B (zh) * 2015-04-10 2016-08-17 中国地质大学(武汉) 基于手持平板电脑的勘探钻孔数据数字化编录方法及系统
CN106156361A (zh) * 2016-08-01 2016-11-23 浪潮软件集团有限公司 一种执法监督方法及装置
CN108733740A (zh) * 2018-02-12 2018-11-02 石化盈科信息技术有限责任公司 对非结构化的产品标准数据进行查询的方法及系统
CN108733740B (zh) * 2018-02-12 2021-02-12 石化盈科信息技术有限责任公司 对非结构化的产品标准数据进行查询的方法及系统

Similar Documents

Publication Publication Date Title
CN101079030A (zh) 质量分析系统中的数据处理方法
US9460188B2 (en) Data warehouse compatibility
CN106777108A (zh) 一种基于混合存储架构的数据查询方法和装置
CA2751295C (en) Analysis of object structures such as benefits and provider contracts
CN100590621C (zh) 本体模式与关系数据库模式之间语义映射信息的编辑方法
Yu et al. The evolution of" Technological and Economic Development of Economy “: a bibliometric analysis
CN103927331B (zh) 数据查询方法、装置及系统
US8626729B2 (en) Database index monitoring system
Ollion et al. High-throughput detection and tracking of cells and intracellular spots in mother machine experiments
CN107145558A (zh) 一种基于数据集的自助式可视化数据分析方法
US20170177792A1 (en) Methods and systems for knowledge discovery using biological data
CN106687955A (zh) 简化将数据从数据源转移到数据目标的导入过程的调用
US20210255760A1 (en) Data Preparation User Interface with Coordinated Pivots
Paton Automating data preparation: Can we? should we? must we?
US20100138449A1 (en) Forests of dimension trees
CN112286957A (zh) 基于结构化查询语言的bi系统的api应用方法及系统
Gao et al. Big data processing and application research
Macura Integration of data from heterogeneous sources using ETL technology
López et al. A component-based approach for engineering enterprise mashups
US20080313153A1 (en) Apparatus and method for abstracting data processing logic in a report
CN1812339A (zh) 网站群的信息管理方法
CN103383679A (zh) 多语统一的it运维知识库实现方法
CN102054008A (zh) 网络信息获取方法和装置
CN114528009A (zh) 一种前端表单配置化显示系统及其方法
CN102196244A (zh) 基于服务的视频信号调用系统及其实现方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication