CN113420080A - 一种毒理学实验数据管理系统 - Google Patents
一种毒理学实验数据管理系统 Download PDFInfo
- Publication number
- CN113420080A CN113420080A CN202110599426.3A CN202110599426A CN113420080A CN 113420080 A CN113420080 A CN 113420080A CN 202110599426 A CN202110599426 A CN 202110599426A CN 113420080 A CN113420080 A CN 113420080A
- Authority
- CN
- China
- Prior art keywords
- data
- unit
- setting
- database
- experimental
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000002474 experimental method Methods 0.000 title claims abstract description 73
- 231100000027 toxicology Toxicity 0.000 title claims abstract description 61
- 238000013523 data management Methods 0.000 title claims abstract description 14
- 238000012545 processing Methods 0.000 claims abstract description 76
- 238000012800 visualization Methods 0.000 claims abstract description 20
- 230000000007 visual effect Effects 0.000 claims abstract description 19
- 238000007726 management method Methods 0.000 claims abstract description 12
- 238000012544 monitoring process Methods 0.000 claims description 42
- 238000000034 method Methods 0.000 claims description 31
- 238000013500 data storage Methods 0.000 claims description 28
- 230000008569 process Effects 0.000 claims description 20
- 241001465754 Metazoa Species 0.000 claims description 16
- 230000006870 function Effects 0.000 claims description 15
- 230000010354 integration Effects 0.000 claims description 15
- 239000000126 substance Substances 0.000 claims description 15
- 238000005452 bending Methods 0.000 claims description 14
- 238000012216 screening Methods 0.000 claims description 11
- 230000002110 toxicologic effect Effects 0.000 claims description 11
- 238000005034 decoration Methods 0.000 claims description 7
- 230000002452 interceptive effect Effects 0.000 claims description 7
- 238000012360 testing method Methods 0.000 claims description 7
- 238000012795 verification Methods 0.000 claims description 7
- 238000007405 data analysis Methods 0.000 claims description 6
- 230000000694 effects Effects 0.000 claims description 6
- 230000003993 interaction Effects 0.000 claims description 6
- 238000012986 modification Methods 0.000 claims description 6
- 230000004048 modification Effects 0.000 claims description 6
- 238000000605 extraction Methods 0.000 claims description 5
- 238000013075 data extraction Methods 0.000 claims description 4
- 238000006243 chemical reaction Methods 0.000 claims description 3
- 239000000203 mixture Substances 0.000 claims description 3
- 238000010276 construction Methods 0.000 claims description 2
- 238000013480 data collection Methods 0.000 claims 2
- 230000009286 beneficial effect Effects 0.000 abstract description 13
- 238000004458 analytical method Methods 0.000 description 6
- 238000013461 design Methods 0.000 description 6
- 238000001514 detection method Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 3
- 241000894007 species Species 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000013499 data model Methods 0.000 description 1
- 238000013079 data visualisation Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 231100000048 toxicity data Toxicity 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/26—Visual data mining; Browsing structured data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24564—Applying rules; Deductive queries
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明提供一种毒理学实验数据管理系统,包括:原始记录管理模块:用于生成电子表单,并通过所述电子表单记录毒理学实验的类型数据;数据采集与存储模块:用于根据所述类型数据,建立数据库,并通过数据库存储记录在所述电子表单中的毒理学实验数据;数据处理模块:用于将所述数据库中的数据进行可视化处理,并生成可视化的毒理学实验数据调用界面。本发明有益效果为:本发明帮助研究人员在不出错的情况下完成复杂的数据处理工作,解决了毒理学实验数据庞大、处理效率低的问题,提高了实验室研究人员的工作效率,还会在数据处理之后,生成可视化的图表,便于实验人员观察图表。
Description
技术领域
本发明涉及一种毒理学实验数据管理系统,适用于毒理学实验机构对于电子化实验室数据进行管理。
背景技术
目前,对实验数据进行汇总和分析一般是人工操作从电子表单中读取数据,实验室数据管理系统仅提供电子表单用于记录数据,只实现了实验记录的电子化,对数据的处理工作仍然需要人工完成,对于动辄数千页的实验记录,需要耗费大量的精力而且极易出错,无法有效解决毒理学实验数据庞大、处理效率低的问题,从而验证影响实验室研究人员的工作效率。同时,电子版记录在查看时不如纸质记录灵活且易于翻阅的问题也导致了一些实验机构放缓了毒理学实验信息化建设的进程。
发明内容
本发明目的之一在于提供了一种毒理学实验数据管理系统,通过合理的组态设计实现毒理学实验过程中数据记录、存储、汇总分析的自动化,帮助研究人员在不出错的情况下完成复杂的数据处理工作,解决了毒理学实验数据庞大、处理效率低的问题,提高了实验室研究人员的工作效率;同时,研究人员可以直接搜索和查阅实验数据,解决了电子版记录不如纸质记录易于查阅的问题,提高了研究人员查阅实验数据的便捷性。
本发明实施例提供的一种毒理学实验数据管理系统,包括:
原始记录管理模块:用于生成电子表单,并通过所述电子表单记录毒理学实验的类型数据;
数据采集与存储模块:用于根据所述类型数据,建立数据库,并通过数据库存储记录在所述电子表单中的毒理学实验数据;
数据处理模块:用于将所述数据库中的数据进行可视化处理,并生成可视化的毒理学实验数据调用界面。
作为本发明的一种实施例:所述原始记录管理模块包括:
表单显示单元:用于接收用户输入的试验类型,自动生成对应的电子表单框架;
表单定义单元:用于对所述电子表单框架的样式进行定义,确定电子表单的字体、内容和格式;
种类设置单元:用于对所述电子表单框架对应的试验的动物种类进行设定,生成电子表单,并确定电子表单中数据采集对象;
加载单元:用于将所述电子表单框架和数据源进行关联,设置数据的加载地址,并进行自动加载实验数据;
存储单元:用于通过SQL的方式,设置所述实验数据的展示范围和存储范围;
展示单元:用于根据所述试验类型,确定所述电子表单进行展示的实验活动。
作为本发明的一种实施例:所述原始记录管理模块还包括:
表单特性设置单元:用于设定表单主题、表单简介、表单分享设定和表单语言;
表单项目添加单元:用于根据类型数据,确定表单定义的表单项,并进行表单项的添加;其中,
所述表单项包括:单行文本、段落文本、单选框、复选框和图表框;
表单特性设定单元:用于根据所述类型数据,对表单特性进行设定;其中,
所述表单特性包括:表单填写规则、表单可视权限和表单内容范围;
表单编辑单元:用于设定电子表单的修改规则和可视装饰;其中,
所述可视装饰包括:表单标志设置、表单背景设置、表单边框设置、表单阴影设置和表单点击设置。
作为本发明的一种实施例:所述数据采集和存储模块包括:
采集单元:用于根据所述类型数据,确定不同类型的数据的采集方式,并根据所述采集方式进行数据采集;
数据库搭建单元:用于根据所述类型数据,确定不同类性的数据的存储方式,并根据所述存储方式进行数据库搭建;
存储单元:用于在数据库搭建完成后,按照数据的类型和每种类型的数据在数据库中的位置进行数据存储;
数据库设置单元:用于在所述数据库中建立table对,并将毒理学实验中的动物作为所述table对的主键;
主键设置单元:用于根据所述table对的主键,在数据存储时,对不同类型的毒理学实验数据进行存储;
电子签名设置单元:用于根据实验数据,设置电子标签,并通过电子标签对实验数据进行确认。
作为本发明的一种实施例:所述数据库搭建单元包括:
基础数据设置子单元:用于根据所述类型数据,确定所述毒理学实验过程中的数据源,并将所述数据源作为数据源节点,构成数据库的底层架构;其中,
所述数据源节点相互独立;
数据存储方式设定单元:用于根据所述数据源节点,确定每个数据源的数据格式,并根据所述数据格式确定数据存储方式;
数据集成设置子单元:用于根据所述数据存储方式,在所述底层架构上设置数据服务规则,并根据所述数据服务规则构成数据集成服务架构;其中,
所述数据服务规则包括:数据综合规则、数据提取规则、数据转换规则、数据抽象化规则、数据存储规则;
应用设置子单元:用于根据所述数据集成服务架构,设置不同类型数据的访问接口,并根据所述数据访问接口生成数据应用服务综合接口。
作为本发明的一种实施例:所述数据采集和存储模块包括:
指令验证单元:用于在进行数据采集时,对数据采集客户端的采集指令进行验证,确定指令有效性;
身份信息验证单元:用于根据所述指令有效性,对采集客户端的身份信息和加密进行通过电子标签进行认证;
数据核对单元:用于对数据库中不同类型的数据进行监测,判断数据是否存在缺失;
遍历单云:用于根据所述类型数据和预设的遍历规则,对采集的数据进行遍历,并将遍历结果生成遍历日志。
7、如权利要求6所述的一种毒理学实验数据管理系统,其特征在于,所述数据核对单元判断数据是否存在缺失,包括以下步骤:
步骤1:获取不同类型的数据的监测数据,构建监测模型:
其中,N表示监测数据的种类总数;δi表示第i个监测数据的权重;ΔV表示监测数据的能力参数;表示监测数据对应数据接口的协议参数;s表示监测数据对应的数据接口的接口类型的类型参数;βi表示第i个监测数据的带宽;P(i|s)表示高斯混合模型中第i个监测数据的数据接口的数据筛选规则函数;i=1,2,3……N;
步骤2:获取不同类型的数据的采集数据,构建采集模型:
其中,Sj表示第j个采集数据的内容特征;wj表示第j个采集数据的数据位置;Tj表示第j个采集数据的数据格式;Mj表示第j个采集数据的形式;Yj表示第j个采集数据的数据期望;j=1,2,3……m;m表示采集的数据的数目;
步骤3:分别确定监测模型和采集模型分别的数学期望,并基于数学期望的相关性,判断数据是否存在缺失:
其中,fi表示第i个监测数据的期望参数;Pi表示第i个监测数据的判断参数,Ri表示第i个监测数据的期望内容;PX=1时,表示数据没有缺失;当PX<1时,表示数据存在缺失。
作为本发明的一种实施例:所述数据处理模块包括:
判断单元:判断该数据是否需要进行处理,并选择数据处理模型;
提取转换单元:对需要处理得数据从数据库中提取,利用动态组装的方式进行转换;
归类单元:根据数据所属实验代号,对转换好的数据进行归类;
筛选单元:根据实验所属动物信息,对数据进行筛选;
处理单元:对实验指标和实验时间进行计算和拼接;
交互配置单元:用JSP页面对处理后数据结果进行展现,并配置交互展示的调用界面。
作为本发明的一种实施例:所述数据处理模块还包括:
数据分类单元:用于将所述数据库中的数据进行分类,并分别对每类数据建立基于平行坐标系的线性线段;
聚簇单元:用于根据每类数据中数据的权重,设置数据关键点,并基于所述数据关键点控制所述线性线段在预设阈值内弯曲,计算弯曲后线性线段的交互关系,形成簇;
显示模块,用于根据所述簇,生成聚簇的可视化数据图表。
作为本发明的一种实施例:所述数据处理模块还包括如下步骤:
步骤S1:获取弯曲后线性线段的关键点和弯曲前线性线段的关键点的坐标,确定曲率:
其中,ρ′lk表示弯曲后第l条线性线段上数据关键点的坐标参数;ρl表示弯曲前第l条线性线段上数据关键点的坐标参数;l=1,2,3……L;L表示线性线段的数量;k=1,2,3……K;K表示数据关键点的数量;
步骤S2:根据所述弯曲后线段的交互关系,确定相关系数:
其中,ηlk表示第l条线性线段与第k个数据关键点的相关值;
步骤S3:获取所述线性线段的权重,并根据所述相关系数和曲率,确定聚簇可视化的显示函数:
JC=alq+(1-al)ξ
其中,al表示第l条线性线段的权重系数;
步骤S4:将所述聚簇可视化的显示函数导入对话求解器,生成可视化数据图表。
本发明有益效果为:本发明实施例通过原始记录管理模块、数据采集与存储模块和数据处理模块的组态设计实现毒理学实验过程中数据记录、存储、汇总分析的自动化,帮助研究人员在不出错的情况下完成复杂的数据处理工作,解决了毒理学实验数据庞大、处理效率低的问题,提高了实验室研究人员的工作效率,还会在数据处理之后,生成可视化的图表,便于实验人员观察图表。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例中一种毒理学实验数据管理系统的示意图。
图2为本发明实施例中一种毒理学实验数据管理系统的系统流程图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
本发明实施例提供了一种毒理学实验数据管理系统,如图1和图2所示,包括:
原始记录管理模块:用于生成电子表单,并通过所述电子表单记录毒理学实验的类型数据;
数据采集与存储模块:用于根据所述类型数据,建立数据库,并通过数据库存储记录在所述电子表单中的毒理学实验数据;
数据处理模块:用于将所述数据库中的数据进行可视化处理,并生成可视化的毒理学实验数据调用界面。
上述技术方案的工作原理为:
例如:本发明实施例的毒理学实验数据管理系统应用在毒理学实验室的计算机软件上,实验研究人员通过操作计算机在软件生成电子表单,并输入实验过程中的数据。原始记录管理模块接收实验研究人员输入的电子表单实验数据,接着,数据采集与存储模块就可以在电子表单实验数据中提取并存储需要进行存储的数据获得实验类型数据,当实验研究人员在软件界面上搜索需要使用的数据时,数据处理模块就会将实验研究人员需要的数据从实验类型数据中提取出来进行处理后获得显示数据,实验研究人员就可以直接看到自己需要的实验数据。
上述技术方案的有益效果为:本发明通过生成电子表单,不仅设计实现毒理学实验过程中数据记录、存储、汇总分析的自动化,帮助研究人员在不出错的情况下完成复杂的数据处理工作,解决了毒理学实验数据庞大、处理效率低的问题,提高了实验室研究人员的工作效率,还会在数据处理之后,生成可视化的图表,便于实验人员观察图表。
本发明实施例提供了一种毒理学实验数据管理系统,还包括:
所述原始记录管理模块包括:
表单显示单元:用于接收用户输入的试验类型,自动生成对应的电子表单框架;
表单定义单元:用于对所述电子表单框架的样式进行定义,确定电子表单的字体、内容和格式;
种类设置单元:用于对所述电子表单框架对应的试验的动物种类进行设定,生成电子表单,并确定电子表单中数据采集对象;
加载单元:用于将所述电子表单框架和数据源进行关联,设置数据的加载地址,并进行自动加载实验数据;
存储单元:用于通过SQL的方式,设置所述实验数据的展示范围和存储范围;
展示单元:用于根据所述试验类型,确定所述电子表单进行展示的实验活动。
上述技术方案的工作原理为:
实验室的实验研究人员可以通过计算机根据用户输入的实验类型,设置电子表单表单样式、字体、格式和需要自动加载或存储的数据类型,输入实验的类型、实验的内容、实验适用的动物种类等;数据采集与存储模块中具有预设数据存储结构,提取电子表单实验数据中的实验类型数据后,将实验类型数据按预设数据存储结构进行存储;其中,实验类型数据具体为:实验种类、需要进行结构化存储的数据和动物种类等;数据处理模块中具有预设数据处理模型,在获取实验类型数据中的实验数据时,选择预设数据处理模型,对所述实验数据进行处理;其中,实验数据具体为:实验代号、实验动物、实验时间和试验指标;实验研究人员可以在数据查询界面输入想要查看的数据,数据处理模块3就会提取出对应的数据处理后显示出来。
上述技术方案的有益效果为:本发明实施例为用户提供电子表单配置界面和数据查询,帮助用户录入实验数据和查询处理后的数据,通过合理的组态设计实现毒理学实验过程中数据记录、存储、汇总分析的自动化,帮助研究人员在不出错的情况下完成复杂的数据处理工作,解决了毒理学实验数据庞大、处理效率低的问题,提高了实验室研究人员的工作效率;同时,研究人员可以直接搜索和查阅实验数据,解决了电子版记录不如纸质记录易于查阅的问题,提高了研究人员查阅实验数据的便捷性。
作为本发明实施例:所述原始记录管理模块还包括:
表单特性设置单元:用于设定表单主题、表单简介、表单分享设定和表单语言;
表单项目添加单元:用于根据类型数据,确定表单定义的表单项,并进行表单项的添加;其中,
所述表单项包括:单行文本、段落文本、单选框、复选框和图表框;
表单特性设定单元:用于根据所述类型数据,对表单特性进行设定;其中,
所述表单特性包括:表单填写规则、表单可视权限和表单内容范围;
表单编辑单元:用于设定电子表单的修改规则和可视装饰;其中,
所述可视装饰包括:表单标志设置、表单背景设置、表单边框设置、表单阴影设置和表单点击设置。
实验研究人员通过操作计算机输入SQL命令对数据进行操作,设置电子表单的数据来源、显示内容和存储范围,所以需要对表单进行设置。
上述技术方案的有益效果为:本发明实施例为用户提供定义电子表单的数据来源、显示内容和存储范围,帮助用户便捷地录入实验数据,实现毒理学实验过程中数据记录和存储的自动化,解决了毒理学实验数据庞大、处理效率低的问题,提高了实验室研究人员的工作效率。表单特性能够使得客户又多种表单选择,以及表单的谈写规则。最后基于装饰,实现数据标志、背景、边框、阴影和表单设计。
作为本发明实施例:所述数据采集和存储模块包括:
采集单元:用于根据所述类型数据,确定不同类型的数据的采集方式,并根据所述采集方式进行数据采集;
数据库搭建单元:用于根据所述类型数据,确定不同类性的数据的存储方式,并根据所述存储方式进行数据库搭建;
存储单元:用于在数据库搭建完成后,按照数据的类型和每种类型的数据在数据库中的位置进行数据存储;
数据库设置单元:用于在所述数据库中建立table对,并将毒理学实验中的动物作为所述table对的主键;
主键设置单元:用于根据所述table对的主键,在数据存储时,对不同类型的毒理学实验数据进行存储;
电子签名设置单元:用于根据实验数据,设置电子标签,并通过电子标签对实验数据进行确认。
上述技术方案的工作原理为:
:实验研究人员可以在计算机软件界面选择电子表单实验数据的应用类型,控制电子表单在哪种实验活动中进行展示,因此,每种实验活动都有对应的电子表单,这样更有利于区分。但是电子表单也需要数据库进行存储,因此,本发明搭建了数据库,并以文件类型进行数据搭建。并在数据库中建立表格标签(table)的和主键,实现对数据的定点标记和数据确认,防止数据缺失。
上述技术方案的有益效果为:本发明实施例为用户提供定义电子表单的应用类型,帮助用户更全面地录入实验数据,实现了毒理学实验过程中数据记录和存储的自动化,解决了毒理学实验数据庞大、处理效率低的问题,提高了实验室研究人员的工作效率。所述原始记录模块支持用户定义电子表单中的需要反向存储的数据;
所述数据采集与存储模块2建立Table将所述需要向存储的数据以动物种类为主要关键词进行存储。一个SQL数据库是Table的集合,它由一个或多个SQL模式定义;一个Table由行集构成,一行是列的序列,每列与行对应一个数据项;
所述数据采集与存储模块2建立Table将所述需要向存储的数据以动物种类为主要关键词进行存储;
例如:实验研究人员可以在计算机软件界面选择需要反向存储的数据,所述数据采集与存储模块2就会通过建立Table将实验研究人员选择的需要进行反向存储的数据按动物种类名称为关键词进行储存。
上述技术方案的有益效果为:本发明实施例为用户提供定义电子表单中的需要反向存储的数据,帮助用户更全面地录入实验数据,实现了毒理学实验过程中数据记录和存储的自动化,解决了毒理学实验数据庞大、处理效率低的问题,提高了实验室研究人员的工作效率。
作为本发明实施例:所述数据库搭建单元包括:
基础数据设置子单元:用于根据所述类型数据,确定所述毒理学实验过程中的数据源,并将所述数据源作为数据源节点,构成数据库的底层架构;其中,
所述数据源节点相互独立;
数据存储方式设定单元:用于根据所述数据源节点,确定每个数据源的数据格式,并根据所述数据格式确定数据存储方式;
数据集成设置子单元:用于根据所述数据存储方式,在所述底层架构上设置数据服务规则,并根据所述数据服务规则构成数据集成服务架构;其中,
所述数据服务规则包括:数据综合规则、数据提取规则、数据转换规则、数据抽象化规则、数据存储规则;
应用设置子单元:用于根据所述数据集成服务架构,设置不同类型数据的访问接口,并根据所述数据访问接口生成数据应用服务综合接口。
上述技术方案原理在于:基础数据设置子单元是用于对数据源的节点作为数据的提取节点,因此,可以进行分布式的数据提取,底层架构也是分布式数据架构,便于进行数据访问提取。而应用设置子单元是为了实现普通用户进行数据访问。
上述技术方案的有益效果为:本发明实施例记录实验数据对应的实验代号、实验种类和操作人员,并以电子签名的方式对数据完成确认,确保了数据在录入时为原始数据,使得系统的组态设计更加合理化,实现了毒理学实验过程中数据记录、存储、汇总分析的自动化,帮助研究人员在不出错的情况下完成复杂的数据处理工作,解决了毒理学实验数据庞大、处理效率低的问题,提高了实验室研究人员的工作效率。
作为本发明实施例:所述数据采集和存储模块包括:
指令验证单元:用于在进行数据采集时,对数据采集客户端的采集指令进行验证,确定指令有效性;
身份信息验证单元:用于根据所述指令有效性,对采集客户端的身份信息和加密进行通过电子标签进行认证;
数据核对单元:用于对数据库中不同类型的数据进行监测,判断数据是否存在缺失;
遍历单云:用于根据所述类型数据和预设的遍历规则,对采集的数据进行遍历,并将遍历结果生成遍历日志。
上述技术方案的原理和有益效果在于:本发明的指令验证单元,适用于对授权客户端进行有效验证,而电子标签的实现数据在传输调用的时候也能对数据进行检测,遍历是为了实现数据类型进而赌,逐个防止数据缺失。
所述数据核对单元判断数据是否存在缺失,包括以下步骤:
步骤1:获取不同类型的数据的监测数据,构建监测模型:
其中,N表示监测数据的种类总数;δi表示第i个监测数据的权重;ΔV表示监测数据的能力参数;表示监测数据对应数据接口的协议参数;s表示监测数据对应的数据接口的接口类型的类型参数;βi表示第i个监测数据的带宽;P(i|s)表示高斯混合模型中第i个监测数据的数据接口的数据筛选规则函数;i=1,2,3……N;
在步骤1中,因为需要计算的是监测模型,其实用于对毒理学数据的检测,是为检测数据的权重占比分析,判断第i个监测数据的权重占比;是为了判断在数据接口的数据祖杭太,也是对数据的初次筛选,防止存在引起误差的数据。是为了判断第i个监测数据数据传输状况,防止数据带宽不足和协议缺失。
步骤2:获取不同类型的数据的采集数据,构建采集模型:
其中,Sj表示第j个采集数据的内容特征;wj表示第j个采集数据的数据位置;Tj表示第j个采集数据的数据格式;Mj表示第j个采集数据的形式;Yj表示第j个采集数据的数据期望;j=1,2,3……m;m表示采集的数据的数目;
在步骤2中,本发明通过三段式求和相加,确定了数据内容的采集参数、数据形式的采集参数和数据期望的采集参数,三者都设计数据采集,并且能以数据采集作为数据模型,判断数据是否采集完全。
步骤3:分别确定监测模型和采集模型分别的数学期望,并基于数学期望的相关性,判断数据是否存在缺失:
其中,fi表示第i个监测数据的期望参数;Pi表示第i个监测数据的判断参数,Ri表示第i个监测数据的期望内容;PX=1时,表示数据没有缺失;当PX<1时,表示数据存在缺失。
在步骤3中,本发明分别分析检测数据和采集模型,并且连立两者的指数函数模型,基于指数函数模型计算相关度,进而确定诗句是否缺失。其作用是有效的分析数据进而使得数据在进行采集的时候没有缺陷,进而更换数据采集方式。
作为本发明实施例:所述数据处理模块包括:
判断单元:判断该数据是否需要进行处理,并选择数据处理模型;
提取转换单元:对需要处理得数据从数据库中提取,利用动态组装的方式进行转换;
归类单元:根据数据所属实验代号,对转换好的数据进行归类;
筛选单元:根据实验所属动物信息,对数据进行筛选;
处理单元:对实验指标和实验时间进行计算和拼接;
交互配置单元:用JSP页面对处理后数据结果进行展现,并配置交互展示的调用界面。
上述技术方案的工作原理和有益效果为:本发明在进行数据处理的时候是要以可视化的形式展示数据,本发明会在数据需要进行处理的时候(有些数据是错误所以不需要处理)选择对应的数据处理模型,这个数据处理模型是通过数据库进行数据处理部件得领取,然后数据按照实验代号进行处理。根据实验代号和动物信息进行分类就会更加分析,进而在可视化得时候生成的可视化图像的调节界面就更加清楚。本发明的调节界面为JSP界面。
JSP页面具体为:一种动态网页技术标准,JSP部署于网络服务器上,可以响应客户端发送的请求,并根据请求内容动态生成HTML、XML等格式的Web网页,然后返回给请求终端。
例如:数据处理模块处理实验数据时,先判断实验数据是否符合实验研究人员输入的查询对象,确定是否对实验数据进行处理;若需要对实验数据进行处理,将需要处理的实验数据从数据库中提取出来,并利用动态组装方式进行转换;根据数据所属的实验代号,对转换好的数据进行归类;根据实验所属动物信息,对归类好的数据进行筛选;对实验指标和实验时间进行计算和拼接;用JSP页面对处理后的数据结构进行显示,并在终端前台配置可交互按钮。
上述技术方案的有益效果为:本发明实施例的数据处理模块基于用户查看请求筛选并显示处理后的数据,帮助研究人员在不出错的情况下完成复杂的数据处理工作,解决了毒理学实验数据庞大、处理效率低的问题,提高了实验室研究人员的工作效率;同时,研究人员可以直接搜索和查阅实验数据,解决了电子版记录不如纸质记录易于查阅的问题,提高了研究人员查阅实验数据的便捷性。
本发明实施例所述数据处理模块还包括:
数据分类单元:用于将所述数据库中的数据进行分类,并分别对每类数据建立基于平行坐标系的线性线段;
聚簇单元:用于根据每类数据中数据的权重,设置数据关键点,并基于所述数据关键点控制所述线性线段在预设阈值内弯曲,计算弯曲后线性线段的交互关系,形成簇;数据关键点就是数据线性化之后,体现数据重要性的数据。
显示模块,用于根据所述簇,生成聚簇的可视化数据图表。
上述技术方案的工作原理和有益效果为:本发明在进行数据可视化的时候采用的聚簇可视化的方式,因为本发明都是实验数据,所以在进行可视化的时候因为要提高数据的查询效率和连续性,所以本发明的聚簇数据处理最后可视化,就是为了实现数据处理的快速性。
本发明实施例:所述数据处理模块还包括如下步骤:
步骤S1:获取弯曲后线性线段的关键点和弯曲前线性线段的关键点的坐标,确定曲率:
其中,ρ′lk表示弯曲后第l条线性线段上数据关键点的坐标参数;ρl表示弯曲前第l条线性线段上数据关键点的坐标参数;l=1,2,3……L;L表示线性线段的数量;k=1,2,3……K;K表示数据关键点的数量;
步骤S2:根据所述弯曲后线段的交互关系,确定相关系数:
其中,ηlk表示第l条线性线段与第k个数据关键点的相关值;
步骤S3:获取所述线性线段的权重,并根据所述相关系数和曲率,确定聚簇可视化的显示函数:
JC=alq+(1-al)ξ
其中,al表示第l条线性线段的权重系数;
步骤S4:将所述聚簇可视化的显示函数导入对话求解器,生成可视化数据图表。
上述技术方案的工作原理和有益效果:本发明在进行聚簇可视化的过程中,首先确定曲率,就是计算线性短线在弯曲后和弯曲前弯曲的状态系数;步骤2是为了计算数据关键点和线性短线的相关性,是为了确定可视化图表中每一条线段代表的数据的含义。最后步骤3中列出聚簇可视化的显示函数,这个显示函数通过预设的对话求解器生成图表,对话求解器就是预先设置的,可以识别函数的,对函数进行线性可视化的转化器。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种毒理学实验数据管理系统,其特征在于,包括:
原始记录管理模块:用于生成电子表单,并通过所述电子表单记录毒理学实验的类型数据;
数据采集与存储模块:用于根据所述类型数据,建立数据库,并通过数据库存储记录在所述电子表单中的毒理学实验数据;
数据处理模块:用于将所述数据库中的数据进行可视化处理,并生成可视化的毒理学实验数据调用界面。
2.如权利要求1所述的一种毒理学实验数据管理系统,其特征在于,所述原始记录管理模块包括:
表单显示单元:用于接收用户输入的实验类型,自动生成对应的电子表单框架;
表单定义单元:用于对所述电子表单框架的样式进行定义,确定电子表单的字体、内容和格式;
种类设置单元:用于对所述电子表单框架对应的试验的动物种类进行设定,生成电子表单,并确定电子表单中数据采集对象;
加载单元:用于将所述电子表单框架和数据源进行关联,设置数据的加载地址,并进行自动加载实验数据;
存储单元:用于通过SQL的方式,设置所述实验数据的展示范围和存储范围;
展示单元:用于根据所述试验类型,确定所述电子表单进行展示的实验活动。
3.如权利要求1所述的一种毒理学实验数据管理系统,其特征在于,所述原始记录管理模块还包括:
表单特性设置单元:用于设定表单主题、表单简介、表单分享设定和表单语言;
表单项目添加单元:用于根据类型数据,确定表单定义的表单项,并进行表单项的添加;其中,
所述表单项包括:单行文本、段落文本、单选框、复选框和图表框;
表单特性设定单元:用于根据所述类型数据,对表单特性进行设定;其中,
所述表单特性包括:表单填写规则、表单可视权限和表单内容范围;
表单编辑单元:用于设定电子表单的修改规则和可视装饰;其中,
所述可视装饰包括:表单标志设置、表单背景设置、表单边框设置、表单阴影设置和表单点击设置。
4.如权利要求1所述的一种毒理学实验数据管理系统,其特征在于,所述数据采集和存储模块包括:
采集单元:用于根据所述类型数据,确定不同类型的数据的采集方式,并根据所述采集方式进行数据采集;
数据库搭建单元:用于根据所述类型数据,确定不同类性的数据的存储方式,并根据所述存储方式进行数据库搭建;
存储单元:用于在数据库搭建完成后,按照数据的类型和每种类型的数据在数据库中的位置进行数据存储;
数据库设置单元:用于在所述数据库中建立table对,并将毒理学实验中的动物作为所述table对的主键;
主键设置单元:用于根据所述table对的主键,在数据存储时,对不同类型的毒理学实验数据进行存储;
电子签名设置单元:用于根据实验数据,设置电子标签,并通过电子标签对实验数据进行确认。
5.如权利要求4所述的一种毒理学实验数据管理系统,其特征在于,所述数据库搭建单元包括:
基础数据设置子单元:用于根据所述类型数据,确定所述毒理学实验过程中的数据源,并将所述数据源作为数据源节点,构成数据库的底层架构;其中,
所述数据源节点相互独立;
数据存储方式设定单元:用于根据所述数据源节点,确定每个数据源的数据格式,并根据所述数据格式确定数据存储方式;
数据集成设置子单元:用于根据所述数据存储方式,在所述底层架构上设置数据服务规则,并根据所述数据服务规则构成数据集成服务架构;其中,
所述数据服务规则包括:数据综合规则、数据提取规则、数据转换规则、数据抽象化规则、数据存储规则;
应用设置子单元:用于根据所述数据集成服务架构,设置不同类型数据的访问接口,并根据所述数据访问接口生成数据应用服务综合接口。
6.如权利要求1所述的一种毒理学实验数据管理系统,其特征在于,所述数据采集和存储模块包括:
指令验证单元:用于在进行数据采集时,对数据采集客户端的采集指令进行验证,确定指令有效性;
身份信息验证单元:用于根据所述指令有效性,对采集客户端的身份信息和加密进行通过电子标签进行认证;
数据核对单元:用于对数据库中不同类型的数据进行监测,判断数据是否存在缺失;
遍历单云:用于根据所述类型数据和预设的遍历规则,对采集的数据进行遍历,并将遍历结果生成遍历日志。
7.如权利要求6所述的一种毒理学实验数据管理系统,其特征在于,所述数据核对单元判断数据是否存在缺失,包括以下步骤:
步骤1:获取不同类型的数据的监测数据,构建监测模型:
其中,N表示监测数据的种类总数;δi表示第i个监测数据的权重;ΔV表示监测数据的能力参数;表示监测数据对应数据接口的协议参数;s表示监测数据对应的数据接口的接口类型的类型参数;βi表示第i个监测数据的带宽;P(i|s)表示高斯混合模型中第i个监测数据的数据接口的数据筛选规则函数;i=1,2,3……N;
步骤2:获取不同类型的数据的采集数据,构建采集模型:
其中,Sj表示第j个采集数据的内容特征;wj表示第j个采集数据的数据位置;Tj表示第j个采集数据的数据格式;Mj表示第j个采集数据的形式;Yj表示第j个采集数据的数据期望;j=1,2,3……m;m表示采集的数据的数目;
步骤3:分别确定监测模型和采集模型分别的数学期望,并基于数学期望的相关性,判断数据是否存在缺失:
其中,fi表示第i个监测数据的期望参数;Pi表示第i个监测数据的判断参数,Ri表示第i个监测数据的期望内容;PX=1时,表示数据没有缺失;当PX<1时,表示数据存在缺失。
8.如权利要求1所述的一种毒理学实验数据管理系统,其特征在于,所述数据处理模块包括:
判断单元:判断该数据是否需要进行处理,并选择数据处理模型;
提取转换单元:对需要处理得数据从数据库中提取,利用动态组装的方式进行转换;
归类单元:根据数据所属实验代号,对转换好的数据进行归类;
筛选单元:根据实验所属动物信息,对数据进行筛选;
处理单元:对实验指标和实验时间进行计算和拼接;
交互配置单元:用JSP页面对处理后数据结果进行展现,并配置交互展示的调用界面。
9.如权利要求1所述的一种毒理学实验数据管理系统,其特征在于,所述数据处理模块还包括:
数据分类单元:用于将所述数据库中的数据进行分类,并分别对每类数据建立基于平行坐标系的线性线段;
聚簇单元:用于根据每类数据中数据的权重,设置数据关键点,并基于所述数据关键点控制所述线性线段在预设阈值内弯曲,计算弯曲后线性线段的交互关系,形成簇;
显示模块,用于根据所述簇,生成聚簇的可视化数据图表。
10.如权利要求9所述的一种毒理学实验数据管理系统,其特征在于,所述数据处理模块还包括如下步骤:
步骤S1:获取弯曲后线性线段的关键点和弯曲前线性线段的关键点的坐标,确定曲率:
其中,ρ′lk表示弯曲后第l条线性线段上数据关键点的坐标参数;ρl表示弯曲前第l条线性线段上数据关键点的坐标参数;l=1,2,3……L;L表示线性线段的数量;k=1,2,3……K;K表示数据关键点的数量;
步骤S2:根据所述弯曲后线段的交互关系,确定相关系数:
其中,ηlk表示第l条线性线段与第k个数据关键点的相关值;
步骤S3:获取所述线性线段的权重,并根据所述相关系数和曲率,确定聚簇可视化的显示函数:
JC=alq+(1-al)ξ
其中,al表示第l条线性线段的权重系数;
步骤S4:将所述聚簇可视化的显示函数导入对话求解器,生成可视化数据图表。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110599426.3A CN113420080A (zh) | 2021-05-31 | 2021-05-31 | 一种毒理学实验数据管理系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110599426.3A CN113420080A (zh) | 2021-05-31 | 2021-05-31 | 一种毒理学实验数据管理系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113420080A true CN113420080A (zh) | 2021-09-21 |
Family
ID=77713305
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110599426.3A Pending CN113420080A (zh) | 2021-05-31 | 2021-05-31 | 一种毒理学实验数据管理系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113420080A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114036919A (zh) * | 2021-11-23 | 2022-02-11 | 北京三维天地科技股份有限公司 | 一种电子实验记录本管理方法及系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103226768A (zh) * | 2013-05-13 | 2013-07-31 | 深圳市检验检疫科学研究院 | 一种实验室原始记录单的实时自动生成系统及方法 |
CN103778107A (zh) * | 2012-10-25 | 2014-05-07 | 上海宝信软件股份有限公司 | 一种基于excel快速动态生成表单的方法与平台 |
CN110751451A (zh) * | 2019-09-11 | 2020-02-04 | 北京戴纳实验科技有限公司 | 一种实验室大数据管理系统 |
CN111949689A (zh) * | 2020-07-22 | 2020-11-17 | 北京三维天地科技股份有限公司 | 一种毒理学实验数据管理系统 |
-
2021
- 2021-05-31 CN CN202110599426.3A patent/CN113420080A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103778107A (zh) * | 2012-10-25 | 2014-05-07 | 上海宝信软件股份有限公司 | 一种基于excel快速动态生成表单的方法与平台 |
CN103226768A (zh) * | 2013-05-13 | 2013-07-31 | 深圳市检验检疫科学研究院 | 一种实验室原始记录单的实时自动生成系统及方法 |
CN110751451A (zh) * | 2019-09-11 | 2020-02-04 | 北京戴纳实验科技有限公司 | 一种实验室大数据管理系统 |
CN111949689A (zh) * | 2020-07-22 | 2020-11-17 | 北京三维天地科技股份有限公司 | 一种毒理学实验数据管理系统 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114036919A (zh) * | 2021-11-23 | 2022-02-11 | 北京三维天地科技股份有限公司 | 一种电子实验记录本管理方法及系统 |
CN114036919B (zh) * | 2021-11-23 | 2022-05-24 | 北京三维天地科技股份有限公司 | 一种电子实验记录本管理方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6826724B1 (en) | Document processor, document classification device, document processing method, document classification method, and computer-readable recording medium for recording programs for executing the methods on a computer | |
CN110292775B (zh) | 获取差异数据的方法及装置 | |
US7293031B1 (en) | Report specification generators and interfaces | |
US20120246170A1 (en) | Managing compliance of data integration implementations | |
US11341319B2 (en) | Visual data mapping | |
CN101976394A (zh) | 数据采集和统计系统及方法 | |
CN113420080A (zh) | 一种毒理学实验数据管理系统 | |
US11675756B2 (en) | Data complementing system and data complementing method | |
CN114419631A (zh) | 一种基于rpa的网管虚拟系统 | |
CN116894152B (zh) | 一种多源数据调研与实时分析方法 | |
CN110826306B (zh) | 数据采集的方法、装置、计算机可读存储介质及电子设备 | |
CN112364145A (zh) | 一种工单处理方法、装置、电子设备及存储介质 | |
CN116089490A (zh) | 数据分析方法、装置、终端和存储介质 | |
CN115510834A (zh) | 一种实验室数据数字化管理系统和方法 | |
CN115035044A (zh) | 一种应用于工业质检的智能ai平台 | |
CN115631374A (zh) | 控件操作方法、控件检测模型的训练方法、装置和设备 | |
CN110674196B (zh) | 一种grapes区域集合预报检验显示系统及显示方法 | |
US20080001959A1 (en) | System, Method and Computer Program Product for Performing Information Transfer Using a Virtual Operator | |
CN113010611A (zh) | 一种自动生成关系型数据库表间关系的方法和系统 | |
US11816112B1 (en) | Systems and methods for automated process discovery | |
CN116662274A (zh) | 一种表格文件导出方法,系统及电子设备 | |
CN114297729A (zh) | 一种配置管理数据库的审计方法、系统及相关装置 | |
CN117688040A (zh) | 字段核验方法 | |
TR202016901A2 (tr) | Eti̇ket yöneti̇m si̇stemi̇ | |
CN116126721A (zh) | 测试用例文档的格式转换方法、装置、计算机设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210921 |
|
RJ01 | Rejection of invention patent application after publication |