CN117935915A - 一种基因表达量的检测数据管理方法及装置 - Google Patents
一种基因表达量的检测数据管理方法及装置 Download PDFInfo
- Publication number
- CN117935915A CN117935915A CN202410072107.0A CN202410072107A CN117935915A CN 117935915 A CN117935915 A CN 117935915A CN 202410072107 A CN202410072107 A CN 202410072107A CN 117935915 A CN117935915 A CN 117935915A
- Authority
- CN
- China
- Prior art keywords
- tag information
- information
- data
- label
- tag
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 163
- 230000014509 gene expression Effects 0.000 title claims abstract description 96
- 238000000034 method Methods 0.000 title claims abstract description 68
- 238000013523 data management Methods 0.000 title description 3
- 238000012216 screening Methods 0.000 claims abstract description 55
- 238000012545 processing Methods 0.000 claims description 24
- 108090000623 proteins and genes Proteins 0.000 claims description 21
- 238000012549 training Methods 0.000 claims description 19
- 238000004590 computer program Methods 0.000 claims description 14
- 238000007726 management method Methods 0.000 description 71
- 238000010586 diagram Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 9
- 230000006872 improvement Effects 0.000 description 8
- 230000008569 process Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 230000003993 interaction Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 238000007405 data analysis Methods 0.000 description 3
- 238000002955 isolation Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000002068 genetic effect Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 229920001296 polysiloxane Polymers 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 239000010979 ruby Substances 0.000 description 1
- 229910001750 ruby Inorganic materials 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16B—BIOINFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR GENETIC OR PROTEIN-RELATED DATA PROCESSING IN COMPUTATIONAL MOLECULAR BIOLOGY
- G16B25/00—ICT specially adapted for hybridisation; ICT specially adapted for gene or protein expression
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16B—BIOINFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR GENETIC OR PROTEIN-RELATED DATA PROCESSING IN COMPUTATIONAL MOLECULAR BIOLOGY
- G16B40/00—ICT specially adapted for biostatistics; ICT specially adapted for bioinformatics-related machine learning or data mining, e.g. knowledge discovery or pattern finding
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16B—BIOINFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR GENETIC OR PROTEIN-RELATED DATA PROCESSING IN COMPUTATIONAL MOLECULAR BIOLOGY
- G16B50/00—ICT programming tools or database systems specially adapted for bioinformatics
- G16B50/30—Data warehousing; Computing architectures
Landscapes
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Medical Informatics (AREA)
- Biophysics (AREA)
- General Health & Medical Sciences (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Evolutionary Biology (AREA)
- Biotechnology (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioethics (AREA)
- Databases & Information Systems (AREA)
- Public Health (AREA)
- Software Systems (AREA)
- Evolutionary Computation (AREA)
- Epidemiology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Artificial Intelligence (AREA)
- Genetics & Genomics (AREA)
- Molecular Biology (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
在本说明书提供的一种基因表达量的检测数据管理方法及装置中，响应于用户的管理请求，通过提取该管理请求携带的存储基因表达量检测值的源文件中的各第一标签信息，以及针对每个第一标签信息，从第一数据仓库中检索该第一标签信息，确定有效性，当有效性为有效时，将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，并按照预设规则，存入第二数据仓库，通过该第二数据仓库中的检测数据，确定管理信息返回给用户。将第一标签信息的有效性为有效作为筛选标准，确定符合该筛选标准的检测数据，并按照预设规则存入第二数据仓库，实现了对源文件中基因表达量检测值的筛选，以及实现了存储方式的统一，便于用户后续管理。
Description
技术领域
本说明书涉及生物细胞数据分析领域，尤其涉及一种基因表达量的检测数据管理方法及装置。
背景技术
基于机器学习等依托于大数据的生物细胞数据分析技术广泛应用于科研和工程领域。
目前，为了训练生物细胞数据分析相关的机器模型，往往需要获取大量的存储基因表达量检测值的源文件，并从每个源文件中筛选出所需的基因表达量检测值，作为训练集或测试集，用以训练该机器模型。但是不同的检测数据源文件，所用的存储方式也不同，因此需要逐一从各检测数据源文件按照筛选标准筛选基因表达量检测值。而这种逐一筛选的方式筛选效率低。
基于此，本说明书提供了一种基因表达量的检测数据管理方法及装置。
发明内容
本说明书提供一种基因表达量的检测数据管理方法及装置，以部分的解决现有技术存在的上述问题。
本说明书采用下述技术方案：
本说明书提供了一种基因表达量的检测数据管理方法，所述方法包括：
响应于用户的管理请求，获取所述管理请求携带的存储基因表达量检测值的源文件；
从所述源文件中提取各基因表达量检测值的第一标签信息，其中，所述基因表达量检测值和所述第一标签信息为一一对应关系；
针对每个第一标签信息，从预设的第一数据仓库中检索该第一标签信息，并根据检索结果，确定该第一标签信息的有效性；
若该第一标签信息的有效性为有效，则将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，并按照预设规则，将该检测数据存入预设的第二数据仓库；
根据所述第二数据仓库中的各检测数据，确定管理信息，所述管理信息用于返回给所述用户。
可选地，在针对每个第一标签信息，从预设的第一数据仓库中检索该第一标签信息，并根据检索结果，确定该第一标签信息的有效性之前，所述方法还包括：
响应于用户的标签管理请求，获取所述标签管理请求携带的第二标签信息，并根据所述第二标签信息，更新预设的第一数据仓库。
可选地，所述第一标签信息包括基因标签和性状标签；
从预设的第一数据仓库中检索该第一标签信息，并根据检索结果，确定该第一标签信息的有效性，具体包括：
在预设的第一数据仓库中检索该第一标签信息的基因标签是否存在；
若是，则确定该基因标签对应的各性状标签，作为检索结果，并将该第一标签信息的性状标签与所述检索结果进行匹配，并根据匹配结果，确定该第一标签信息的有效性；
若否，则确定该第一标签信息的有效性为非有效。
可选地，将该第一标签信息的性状标签与所述检索结果进行匹配，并根据匹配结果，确定该第一标签信息的有效性，具体包括：
判断该第一标签信息的性状标签与所述检索结果是否匹配；
若是，则确定该第一标签信息的有效性为有效；
若否，则确定该第一标签信息的有效性为非有效。
可选地，所述方法还包括：
若该第一标签信息的有效性为非有效，则将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，并按照所述预设规则，将该检测数据存入预设的第三数据仓库。
可选地，所述方法还包括：
确定所述第一数据仓库中当前存储的各筛选标签信息；
针对每个筛选标签信息，从所述第三数据仓库中确定与该筛选标签信息一致的第一标签信息，并将该第一标签信息所属的检测数据移入所述第二数据仓库中。
可选地，在按照预设规则，将该检测数据存入预设的第二数据仓库之后，所述方法还包括：
将所述第二数据仓库中的各检测数据，作为训练数据，所述训练数据用于训练机器模型。
本说明书提供了一种基因表达量的检测数据管理系统，所述系统包括标签管理单元、源文件处理单元以及信息管理单元；其中：
所述标签管理单元响应于用户的标签管理请求，获取所述标签管理请求携带的第二标签信息，并根据所述第二标签信息，更新预设的第一数据仓库；接收所述源文件处理单元发送的第一标签信息后，针对每个第一标签信息，从预设的第一数据仓库中检索该第一标签信息，并根据检索结果，确定该第一标签信息的有效性；将各第一标签信息的有效性返回给所述源文件处理单元；
所述源文件处理单元响应于用户的管理请求，获取所述管理请求携带的存储基因表达量检测值的源文件；从所述源文件中提取各基因表达量检测值的第一标签信息，其中，所述基因表达量检测值和所述第一标签信息为一一对应关系；将所述第一标签信息发送给所述标签管理单元；接收所述标签管理单元返回的各第一标签信息的有效性，并针对每个第一标签信息，若该第一标签信息的有效性为有效，则将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，并按照预设规则，将该检测数据存入预设的第二数据仓库；
所述信息管理单元根据所述第二数据仓库中的各检测数据，确定管理信息，所述管理信息用于返回给所述用户。
本说明书提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序被处理器执行时实现一种基因表达量的检测数据管理方法。
本说明书提供了一种电子设备，所述电子设备包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现一种基因表达量的检测数据管理方法。
本说明书采用的上述至少一个技术方案能够达到以下有益效果：在本说明书提供的一种基因表达量的检测数据管理方法，响应于用户的管理请求，获取该管理请求携带的存储基因表达量检测值的源文件，并从源文件中提取各基因表达量检测值的第一标签信息，以及针对每个第一标签信息，从第一数据仓库中检索该第一标签信息，确定该第一标签信息的有效性，当有效性为有效时，将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，按照预设规则存入预设的第二数据仓库，根据该第二数据仓库中的各检测数据，确定管理信息，并将该管理信息用于返回给用户。
从上述方法可以看出，在第一数据仓库中检索并确定各第一标签信息的有效性，将第一标签信息的有效性为有效作为筛选标准，确定符合该筛选标准的检测数据，实现了对源文件中基因表达量检测值的筛选，以及将检测数据通过预设规则存入第二数据仓库，实现了基因表达量检测值存储方式的统一，便于用户后续管理。
附图说明
此处所说明的附图用来提供对本说明书的进一步理解，构成本说明书的一部分，本说明书的示意性实施例及其说明用于解释本说明书，并不构成对本说明书的不当限定。在附图中：
图1为本说明书中提供的一种基因表达量的检测数据管理方法的流程示意图；
图2为本说明书中提供的检测数据存入的示意图；
图3为本说明书中提供的系统中各单元信息交互的示意图；
图4为本说明书提供的一种基因表达量的检测数据管理装置的示意图；
图5为本说明书提供的用于实现一种基因表达量的检测数据管理方法对应的电子设备结构示意图。
具体实施方式
为使本说明书的目的、技术方案和优点更加清楚，下面将结合本说明书具体实施例及相应的附图对本说明书技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本说明书一部分实施例，而不是全部的实施例。基于本说明书中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本说明书保护的范围。
目前，一般通过获取源文件中存储的基因表达量检测值，并按照筛选标准，进行基因表达量检测值的筛选，筛选出的基因表达量检测值用于训练机器模型。当训练不同的机器模型或机器模型的训练方向发生变化时，即训练数据的筛选标准也会变化，那么就需要重新对源文件中存储的基因表达量检测值进行筛选。这种筛选方式的筛选效率较低。
基于此，本说明书提供了一种基因表达量的检测数据管理方法，在本说明书提供的技术方案中，首先，在第一数据仓库中检索并确定各第一标签信息的有效性，将第一标签信息的有效性为有效作为筛选标准，确定符合该筛选标准的检测数据，实现了对源文件中各基因表达量检测值的统一筛选。其次，通过用户的标签管理请求携带的第二标签信息，对该第一数据仓库进行更新，可更改筛选标准，以及将非有效的检测数据存入第三数据仓库，并可通过当前的第一数据仓库，将符合当前的筛选标准的检测数据从第三数据仓库中移入第二数据仓库。避免了重复读取源文件的工作量，以及通过第二数据仓库和第三数据仓库，实现了有效和非有效的检测数据的数据隔离。最后，将第二数据仓库中筛选出的检测数据，用于训练机器模型。
以下结合附图，详细说明本说明书各实施例提供的技术方案。
图1为本说明书中提供的一种基因表达量的检测数据管理方法的流程示意图，包括以下步骤：
S100：响应于用户的管理请求，获取所述管理请求携带的存储基因表达量检测值的源文件。
在本说明书一个或多个实施例中，不限制具体由何种设备实行一种基因表达量的检测数据管理方法的过程，例如，个人电脑、移动终端以及服务器等。但由于后续步骤涉及到数据处理等操作，而这种对计算资源的要求较高的操作一般都由服务器来执行，因此本说明书后续也以服务器实现一种基因表达量的检测数据管理方法为例进行描述。其中，该服务器可以是单独的一台设备，或者由多台设备组成，例如，分布式服务器，本说明书对此不做限制。
在本说明书一个或多个实施例中，如前所述，为了在后续步骤实现对源文件中存储基因表达量检测值进行统一管理，在本步骤中需获取存储基因表达量检测值的源文件。
具体的，服务器可响应于用户的管理请求，获取该管理请求携带的存储基因表达量检测值的源文件。其中，源文件可以是文本文件、数据库文件等，以及源文件可为多个存储基因表达量检测值的文件，本说明书并不限制源文件的类型以及数量。
S102：从所述源文件中提取各基因表达量检测值的第一标签信息，其中，所述基因表达量检测值和所述第一标签信息为一一对应关系。
在本说明书一个或多个实施例中，为了在后续步骤中从第一数据仓库中检索并确定第一标签信息的有效性，在本步骤需提取各基因表达量检测值的第一标签信息。
具体的，服务器可读取源文件，并从该源文件中提取各基因表达量检测值的第一标签信息，其中，基因表达量检测值和第一标签信息为一一对应关系，第一标签信息包括基因标签和性状标签，表征了第一标签信息对应的基因表达量检测值的基因来源和性状表现。
S104：针对每个第一标签信息，从预设的第一数据仓库中检索该第一标签信息，并根据检索结果，确定该第一标签信息的有效性。
在本说明书一个或多个实施例中，为了在后续步骤中根据第一标签信息有效性，对各基因表达量检测值进行筛选，在本步骤需确定各第一标签信息的有效性。
具体的，服务器可针对每个第一标签信息，若从预设的第一数据仓库中检索该第一标签信息的基因标签存在，则在该第一数据仓库中确定该基因标签对应的各性状标签，作为检索结果，并将该第一标签信息的性状标签与该检索结果进行匹配，若该第一标签信息的性状标签与该检索结果匹配，则该第一标签信息的有效性为有效，若该第一标签信息的性状标签与该检索结果不匹配，则该第一标签信息的有效性为非有效。若从预设的第一数据仓库中检索该第一标签信息的基因标签不存在，则该第一标签信息的有效性为非有效。其中，第一数据仓库内存储着各筛选标签信息，该筛选标签信息包括基因标签和性状标签，第一数据仓库可根据实际需求设置。
可选的，首先，服务器可确定当前机器模型的训练数据的筛选标准，并根据该筛选标准，确定预设的第一数据仓库内存储的各筛选标签信息，其中，筛选标签信息包括基因标签和性状标签。以及更新第一数据仓库具体内容包括：服务器可响应于用户的标签管理请求，获取该标签管理请求携带的第二标签信息，并根据该第二标签信息，对预设的第一数据仓库内存储的筛选标签信息进行更新，确定更新后的第一数据仓库。本说明书并不限制对预设的第一数据仓库内存储的筛选标签信息进行更新的具体操作，不限于增、删、改等操作。
其次，服务器可针对每个第一标签信息，若从预设的第一数据仓库中检索到与该第一标签信息的基因标签一致的筛选标签信息存在，则将该筛选标签信息作为该第一标签信息的匹配标签信息，在该第一数据仓库中确定各匹配标签信息分别对应的性状标签，作为检索结果。并将该第一标签信息的性状标签与该检索结果进行匹配，若该第一标签信息的性状标签与该检索结果匹配，则该第一标签信息的有效性为有效，若该第一标签信息的性状标签与该检索结果不匹配，则该第一标签信息的有效性为非有效。若从预设的第一数据仓库中检索该第一标签信息的基因标签不存在，则该第一标签信息的有效性为非有效。
S106：若该第一标签信息的有效性为有效，则将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，并按照预设规则，将该检测数据存入预设的第二数据仓库。
在本说明书一个或多个实施例中，在本步骤需根据步骤S104中确定的各第一标签信息的有效性，对源文件中存储的各基因表达量检测值进行筛选，并按照预设规则，将筛选出的基因表达量检测值存入预设的第二数据仓库。
具体的，服务器可针对每个第一标签信息，当该第一标签信息的有效性为有效时，将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，并按照预设规则，将该检测数据存入预设的第二数据仓库。当该第一标签信息的有效性为非有效时，则将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，并按照该预设规则，将该检测数据存入预设的第三数据仓库。本说明书并不限制存入的预设规则，可根据实际需求设置。例如，基因标签和性状标签为一对一或一对多的对应关系，则第一标签信息中的基因标签作为键，以第一标签信息中的性状标签作为域，以该第一标签信息的基因表达量检测值作为值，写入预设的第二数据仓库，避免了基因标签的重复写入。
需要说明的是，如步骤S104中，若预设的第一数据仓库内存储的各筛选标签信息，是根据当前机器模型的训练数据的筛选标准确定的，那么“第一标签信息的有效性为有效”就是作为筛选标准，使符合筛选标准的检测数据存入第二数据仓库，以及使不符合筛选标准的检测数据存入第三数据仓库，通过第一数据仓库内存储的筛选标签信息设置筛选标准，实现了对源文件内的各基因表达量检测值进行的统一筛选。为了达到“有效”检测数据和“非有效”检测数据之间数据隔离的效果，将“非有效”检测数据按照预设规则存入第三数据仓库，以及将“有效”检测数据按照该预设规则存入第二数据仓库，实现对源文件内的基因表达量检测值的统一存储，便于后续管理。
S108：根据所述第二数据仓库中的各检测数据，确定管理信息，所述管理信息用于返回给所述用户。
具体的，服务器可根据第二数据仓库中的各检测数据，确定管理信息，并将该管理信息返回给用户，其中，管理信息至少包括第二数据仓库中的检测数据的数据量信息，使该用户通过管理信息了解筛选出的检测数据的情况。可将第三数据仓库中的检测数据的数据量信息或第一数据仓库中的筛选标签信息的数据量信息，作为管理信息，返回给用户，本说明书并不限制管理信息的具体内容，可根据实际需求设置。
在上述方法中，服务器响应于用户的管理请求，获取所述管理请求携带的存储基因表达量检测值的源文件，并从源文件中提取各基因表达量检测值的第一标签信息，针对每个第一标签信息，确定该第一标签信息的有效性，并基于有效性为有效，将该第一标签信息所属的检测数据，按照预设规则存入第二数据仓库。通过在第一数据仓库中检索并确定各第一标签信息的有效性，将第一标签信息的有效性为有效作为筛选标准，确定符合该筛选标准的检测数据，按照预设规则存入第二数据仓库，确定不符合该筛选标准的检测数据，按照预设规则存入第三数据仓库。在实现对源文件中各基因表达量检测值进行筛选的同时，将源文件的所有基因表达量检测值以统一的存储方式保存下来，便于用户后续管理以及数据复用。服务器通过响应于用户的标签管理请求，根据该标签管理请求携带的第二标签信息实现第一数据仓库的更新，即改变了存入第二数据仓库的筛选标准。如图2所示，为针对每个检测数据，通过在第一数据仓库中检索该检测数据的第一标签信息，确定该第一标签信息的有效性，当该有效性为有效时写入第二数据仓库，当该有效性为非有效时，写入第三数据仓库的示意图。
除此之外，在本说明书的实施例中，在步骤S104中更新第一数据仓库，以及步骤S106中第二数据仓库和第三数据仓库实现检测数据的数据隔离的基础上，即在已经将源文件的各基因表达量检测值，按照预设规则存入第二数据仓库或第三数据仓库后，再更新第一数据仓库，那么由于筛选标准的改变，可能导致第二数据仓库中“有效”检测数据可能变得“非有效”，第三数据仓库中“非有效”检测数据可能变得“有效”，为此，可在第一数据仓库更新后，可根据第一数据仓库内存储的筛选标签信息，重新筛选已存入的各检测数据。
具体的，当服务器检测到第一数据仓库发生变化时，确定该第一数据仓库当前存储的各筛选标签信息，针对每个筛选标签信息，从第三数据仓库中确定与该筛选标签信息一致的第一标签信息，并将该第一标签信息所属的检测数据移入第二数据仓库中。针对第二数据仓库中各检测数据，从第一数据仓库中检索该检测数据的第一标签信息是否存在，将不存在的第一标签信息所属的检测数据移入第三数据仓库。
在上述中，当训练不同的机器模型或机器模型的训练方向发生变化时，即训练数据的筛选标准变化时，由于无需重新从源文件中获取检测数据，直接从第二数据仓库和第三数据仓库中实现数据转移，提高了训练数据的选取的灵活性，避免了重复读取源文件的工作量，提高了筛选效率。
以上为本说明书的一个或多个实施例中提供的一种基因表达量的检测数据管理方法，基于同样的思路，本说明书提供了一种基因表达量的检测数据管理系统，该系统中包括标签管理单元、源文件处理单元以及信息管理单元，具体如下：
在本说明书实施例中，标签管理单元用于响应用户的标签管理请求，根据该标签管理请求携带的第二标签信息，更新预设的第一数据仓库。接收源文件处理单元发送的第一标签信息后，针对每个第一标签信息，从预设的第一数据仓库中检索该第一标签信息，并根据检索结果，确定该第一标签信息的有效性。将各第一标签信息的有效性返回给所述源文件处理单元。其中，可通过数据库服务实现第一标签信息的检索。例如，按集合类型的数据库交互接口的对应格式封装各第一标签信息，针对每个第一标签信息，以该第一标签信息的基因标签作为键，以该第一标签信息的性状标签作为值，在第一数据仓库中检索该键值信息在数据库当中是否存在，确定该第一标签信息的有效性。
源文件处理单元用于响应用户的管理请求，获取该管理请求携带的存储基因表达量检测值的源文件，并从该源文件中提取各基因表达量检测值的第一标签信息，其中，基因表达量检测值和第一标签信息为一一对应关系。将第一标签信息发送给标签管理单元。接收标签管理单元返回的各第一标签信息的有效性，并针对每个第一标签信息，若该第一标签信息的有效性为有效，则将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，并按照预设规则，将该检测数据存入预设的第二数据仓库。其中，可通过数据库服务实现检测数据的存入。例如，通过字典类型的数据库交互接口，以该第一标签信息的性状标签作为值，以该第一标签信息的性状标签作为域，将该第一标签信息的基因表达量检测值，写入第二数据仓库。
信息管理单元根据第二数据仓库中的各检测数据，确定管理信息，并将该管理信息返回给用户。其中，标签管理单元与源文件处理单元的信息交互，通过数据库服务的发布订阅通道实现。如图3所示，为系统中标签管理单元、源文件处理单元以及信息管理单元间的信息交互示意图，其中，源文件处理单元通过将提取的第一标签信息发布到第二通道，标签管理单元通过订阅该第二通道接收各第一标签信息，并在第一数据仓库中确定各第一标签信息的有效性，发布到第一通道，使源文件处理单元订阅该第一通道，接收各第一标签信息的有效性，并根据各有效性将检测数据存入第二数据仓库或第三数据仓库，信息管理单元根据第二数据仓库内的检测数据，确定管理信息。
在上述系统中，标签管理单元、源文件处理单元以及信息管理单元以独立进程的形式运行，这种强解耦减少单元间的依赖关系，通过数据库的发布/订阅服务实现进程间通信，使得各个功能子模块可以独立开发和维护，提高系统的可维护性和可扩展性。
以上为本说明书的一个或多个实施例中提供的一种基因表达量的检测数据管理方法，基于同样的思路，本说明书还提供了相应的一种基因表达量的检测数据管理装置，如图4所示。
源文件模块500，响应于用户的管理请求，获取所述管理请求携带的存储基因表达量检测值的源文件；
提取模块501，从所述源文件中提取各基因表达量检测值的第一标签信息，其中，所述基因表达量检测值和所述第一标签信息为一一对应关系；
检索模块502，针对每个第一标签信息，从预设的第一数据仓库中检索该第一标签信息，并根据检索结果，确定该第一标签信息的有效性；
存入模块503，若该第一标签信息的有效性为有效，则将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，并按照预设规则，将该检测数据存入预设的第二数据仓库；
管理模块504，根据所述第二数据仓库中的各检测数据，确定管理信息，所述管理信息用于返回给所述用户。
可选地，所述检索模块502，具体用于所述第一标签信息包括基因标签和性状标签；在预设的第一数据仓库中检索该第一标签信息的基因标签是否存在；若是，则确定该基因标签对应的各性状标签，作为检索结果，并将该第一标签信息的性状标签与所述检索结果进行匹配，并根据匹配结果，确定该第一标签信息的有效性；若否，则确定该第一标签信息的有效性为非有效。
可选地，所述检索模块502，还可用于判断该第一标签信息的性状标签与所述检索结果是否匹配；若是，则确定该第一标签信息的有效性为有效；若否，则确定该第一标签信息的有效性为非有效。
可选地，所述存入模块503，还可用于若该第一标签信息的有效性为非有效，则将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，并按照所述预设规则，将该检测数据存入预设的第三数据仓库。
可选地，该装置还包括更新模块505，所述更新模块505具体用于响应于用户的标签管理请求，获取所述标签管理请求携带的第二标签信息，并根据所述第二标签信息，更新预设的第一数据仓库。
可选地，该装置还包括转移模块506，所述转移模块506具体用于确定所述第一数据仓库中当前存储的各筛选标签信息；针对每个筛选标签信息，从所述第三数据仓库中确定与该筛选标签信息一致的第一标签信息，并将该第一标签信息所属的检测数据移入所述第二数据仓库中。
本说明书还提供了一种计算机可读存储介质，该存储介质存储有计算机程序，计算机程序可用于执行上述图1提供的一种基因表达量的检测数据管理方法。
本说明书还提供了图5所示的电子设备的示意结构图。如图5所述，在硬件层面，该设备包括处理器、内部总线、网络接口、内存以及非易失性存储器，当然还可能包括其他业务所需要的硬件。处理器从非易失性存储器中读取对应的计算机程序到内存中然后运行，以实现上述图1所述一种基因表达量的检测数据管理方法。当然，除了软件实现方式之外，本说明书并不排除其他实现方式，比如逻辑器件抑或软硬件结合的方式等等，也就是说以下处理流程的执行主体并不限定于各个逻辑单元，也可以是硬件或逻辑器件。
在20世纪90年代，对于一个技术的改进可以很明显地区分是硬件上的改进(例如，对二极管、晶体管、开关等电路结构的改进)还是软件上的改进(对于方法流程的改进)。然而，随着技术的发展，当今的很多方法流程的改进已经可以视为硬件电路结构的直接改进。设计人员几乎都通过将改进的方法流程编程到硬件电路中来得到相应的硬件电路结构。因此，不能说一个方法流程的改进就不能用硬件实体模块来实现。例如，可编程逻辑器件(Programmable Logic Device,PLD)(例如现场可编程门阵列(Field Programmable GateArray，FPGA))就是这样一种集成电路，其逻辑功能由用户对器件编程来确定。由设计人员自行编程来把一个数字系统“集成”在一片PLD上，而不需要请芯片制造厂商来设计和制作专用的集成电路芯片。而且，如今，取代手工地制作集成电路芯片，这种编程也多半改用“逻辑编译器(logic compiler)”软件来实现，它与程序开发撰写时所用的软件编译器相类似，而要编译之前的原始代码也得用特定的编程语言来撰写，此称之为硬件描述语言(Hardware Description Language，HDL)，而HDL也并非仅有一种，而是有许多种，如ABEL(Advanced Boolean Expression Language)、AHDL(Altera Hardware DescriptionLanguage)、Confluence、CUPL(Cornell University Programming Language)、HDCal、JHDL(Java Hardware Description Language)、Lava、Lola、MyHDL、PALASM、RHDL(RubyHardware Description Language)等，目前最普遍使用的是VHDL(Very-High-SpeedIntegrated Circuit Hardware Description Language)与Verilog。本领域技术人员也应该清楚，只需要将方法流程用上述几种硬件描述语言稍作逻辑编程并编程到集成电路中，就可以很容易得到实现该逻辑方法流程的硬件电路。
控制器可以按任何适当的方式实现，例如，控制器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(Application Specific Integrated Circuit，ASIC)、可编程逻辑控制器和嵌入微控制器的形式，控制器的例子包括但不限于以下微控制器：ARC 625D、Atmel AT91SAM、Microchip PIC18F26K20以及Silicone Labs C8051F320，存储器控制器还可以被实现为存储器的控制逻辑的一部分。本领域技术人员也知道，除了以纯计算机可读程序代码方式实现控制器以外，完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件，而对其内包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至，可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
上述实施例阐明的系统、装置、模块或单元，具体可以由计算机芯片或实体实现，或者由具有某种功能的产品来实现。一种典型的实现设备为计算机。具体的，计算机例如可以为个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任何设备的组合。
为了描述的方便，描述以上装置时以功能分为各种单元分别描述。当然，在实施本说明书时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本说明书可以在由计算机执行的计算机可执行指令的一般上下文中描述，例如程序模块。一般地，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本说明书，在这些分布式计算环境中，由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中，程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本说明书的实施例而已，并不用于限制本说明书。对于本领域技术人员来说，本说明书可以有各种更改和变化。凡在本说明书的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本说明书的权利要求范围之内。
Claims (10)
1.一种基因表达量的检测数据管理方法，其特征在于，包括：
响应于用户的管理请求，获取所述管理请求携带的存储基因表达量检测值的源文件；
从所述源文件中提取各基因表达量检测值的第一标签信息，其中，所述基因表达量检测值和所述第一标签信息为一一对应关系；
针对每个第一标签信息，从预设的第一数据仓库中检索该第一标签信息，并根据检索结果，确定该第一标签信息的有效性；
若该第一标签信息的有效性为有效，则将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，并按照预设规则，将该检测数据存入预设的第二数据仓库；
根据所述第二数据仓库中的各检测数据，确定管理信息，所述管理信息用于返回给所述用户。
2.如权利要求1所述方法，其特征在于，在针对每个第一标签信息，从预设的第一数据仓库中检索该第一标签信息，并根据检索结果，确定该第一标签信息的有效性之前，所述方法还包括：
响应于用户的标签管理请求，获取所述标签管理请求携带的第二标签信息，并根据所述第二标签信息，更新预设的第一数据仓库。
3.如权利要求1所述方法，其特征在于，所述第一标签信息包括基因标签和性状标签；
从预设的第一数据仓库中检索该第一标签信息，并根据检索结果，确定该第一标签信息的有效性，具体包括：
在预设的第一数据仓库中检索该第一标签信息的基因标签是否存在；
若是，则确定该基因标签对应的各性状标签，作为检索结果，并将该第一标签信息的性状标签与所述检索结果进行匹配，并根据匹配结果，确定该第一标签信息的有效性；
若否，则确定该第一标签信息的有效性为非有效。
4.如权利要求3所述方法，其特征在于，将该第一标签信息的性状标签与所述检索结果进行匹配，并根据匹配结果，确定该第一标签信息的有效性，具体包括：
判断该第一标签信息的性状标签与所述检索结果是否匹配；
若是，则确定该第一标签信息的有效性为有效；
若否，则确定该第一标签信息的有效性为非有效。
5.如权利要求1所述方法，其特征在于，所述方法还包括：
若该第一标签信息的有效性为非有效，则将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，并按照所述预设规则，将该检测数据存入预设的第三数据仓库。
6.如权利要求5所述方法，其特征在于，所述方法还包括：
确定所述第一数据仓库中当前存储的各筛选标签信息；
针对每个筛选标签信息，从所述第三数据仓库中确定与该筛选标签信息一致的第一标签信息，并将该第一标签信息所属的检测数据移入所述第二数据仓库中。
7.如权利要求1所述方法，其特征在于，在按照预设规则，将该检测数据存入预设的第二数据仓库之后，所述方法还包括：
将所述第二数据仓库中的各检测数据，作为训练数据，所述训练数据用于训练机器模型。
8.一种基因表达量的检测数据管理系统，其特征在于，所述系统包括标签管理单元、源文件处理单元以及信息管理单元；其中：
所述标签管理单元响应于用户的标签管理请求，获取所述标签管理请求携带的第二标签信息，并根据所述第二标签信息，更新预设的第一数据仓库；接收所述源文件处理单元发送的第一标签信息后，针对每个第一标签信息，从预设的第一数据仓库中检索该第一标签信息，并根据检索结果，确定该第一标签信息的有效性；将各第一标签信息的有效性返回给所述源文件处理单元；
所述源文件处理单元响应于用户的管理请求，获取所述管理请求携带的存储基因表达量检测值的源文件；从所述源文件中提取各基因表达量检测值的第一标签信息，其中，所述基因表达量检测值和所述第一标签信息为一一对应关系；将所述第一标签信息发送给所述标签管理单元；接收所述标签管理单元返回的各第一标签信息的有效性，并针对每个第一标签信息，若该第一标签信息的有效性为有效，则将该第一标签信息以及该第一标签信息的基因表达量检测值，作为检测数据，并按照预设规则，将该检测数据存入预设的第二数据仓库；
所述信息管理单元根据所述第二数据仓库中的各检测数据，确定管理信息，所述管理信息用于返回给所述用户。
9.一种计算机可读存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述权利要求1～7任一项所述的方法。
10.一种电子设备，其特征在于，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现上述权利要求1～7任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202410072107.0A CN117935915A (zh) | 2024-01-17 | 2024-01-17 | 一种基因表达量的检测数据管理方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202410072107.0A CN117935915A (zh) | 2024-01-17 | 2024-01-17 | 一种基因表达量的检测数据管理方法及装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN117935915A true CN117935915A (zh) | 2024-04-26 |
Family
ID=90769719
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202410072107.0A Pending CN117935915A (zh) | 2024-01-17 | 2024-01-17 | 一种基因表达量的检测数据管理方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117935915A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US12095862B1 (en) * | 2023-04-06 | 2024-09-17 | Zhejiang Lab | Data processing system and method |
-
2024
- 2024-01-17 CN CN202410072107.0A patent/CN117935915A/zh active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US12095862B1 (en) * | 2023-04-06 | 2024-09-17 | Zhejiang Lab | Data processing system and method |
| US20240340341A1 (en) * | 2023-04-06 | 2024-10-10 | Zhejiang Lab | Data processing system and method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108848244B (zh) | 一种分页显示的方法及装置 | |
| CN111400681B (zh) | 数据权限处理方法、装置及设备 | |
| CN117935915A (zh) | 一种基因表达量的检测数据管理方法及装置 | |
| CN110399359B (zh) | 一种数据回溯方法、装置及设备 | |
| CN115756449B (zh) | 一种页面复用方法、装置、存储介质及电子设备 | |
| CN112015569B (zh) | 消息提醒处理方法及装置 | |
| CN117828360A (zh) | 一种模型训练、代码生成方法、装置、存储介质及设备 | |
| CN116502633A (zh) | 一种业务执行的方法、装置、存储介质及电子设备 | |
| CN117828064A (zh) | 一种问答系统及问答系统的构建方法 | |
| CN117252183B (zh) | 一种基于语义的多源表格自动匹配方法、装置及存储介质 | |
| CN116303625B (zh) | 一种数据查询的方法、装置、存储介质及电子设备 | |
| CN117478725A (zh) | 一种微服务api的管理方法、装置、介质及电子设备 | |
| CN115905266B (zh) | 图结构数据的处理方法和用于图结构数据的存储引擎 | |
| CN116010419A (zh) | 一种创建唯一索引和优化逻辑删除的方法及装置 | |
| CN115017915B (zh) | 一种模型训练、任务执行的方法及装置 | |
| CN115994252A (zh) | 数据处理方法、装置及设备 | |
| CN115878654A (zh) | 一种数据查询的方法、装置、设备及存储介质 | |
| CN111339117B (zh) | 数据处理方法、装置及设备 | |
| CN113344197A (zh) | 一种识别模型的训练方法、业务执行的方法以及装置 | |
| CN117349401B (zh) | 一种非结构化数据的元数据存储方法、装置、介质及设备 | |
| CN117743809B (zh) | 一种细胞检测数据预处理方法、装置及存储介质 | |
| CN109033201A (zh) | 一种文件差异数据的获取方法、装置及电子设备 | |
| CN112527387B (zh) | 应用处理方法和装置 | |
| CN110659328B (zh) | 数据查询方法、装置、设备及计算机可读存储介质 | |
| CN118709692A (zh) | 一种业务执行的方法、装置、存储介质及电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |