CN117649108B - 遥感卫星数据预处理监控方法、装置及存储介质 - Google Patents
遥感卫星数据预处理监控方法、装置及存储介质 Download PDFInfo
- Publication number
- CN117649108B CN117649108B CN202410117639.1A CN202410117639A CN117649108B CN 117649108 B CN117649108 B CN 117649108B CN 202410117639 A CN202410117639 A CN 202410117639A CN 117649108 B CN117649108 B CN 117649108B
- Authority
- CN
- China
- Prior art keywords
- current flow
- flow
- data
- output
- branch
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 121
- 238000012544 monitoring process Methods 0.000 title claims abstract description 68
- 238000007781 pre-processing Methods 0.000 title claims abstract description 62
- 238000003860 storage Methods 0.000 title claims abstract description 15
- 238000012545 processing Methods 0.000 claims abstract description 85
- 238000012806 monitoring device Methods 0.000 claims abstract description 9
- 230000008569 process Effects 0.000 claims description 68
- 238000012937 correction Methods 0.000 claims description 21
- 230000006837 decompression Effects 0.000 claims description 20
- 230000002776 aggregation Effects 0.000 claims description 19
- 238000004220 aggregation Methods 0.000 claims description 19
- 238000004590 computer program Methods 0.000 claims description 13
- 230000005855 radiation Effects 0.000 claims description 12
- 238000013523 data management Methods 0.000 claims description 7
- 238000000926 separation method Methods 0.000 claims description 7
- 238000004458 analytical method Methods 0.000 abstract description 10
- 238000000354 decomposition reaction Methods 0.000 description 13
- 239000000047 product Substances 0.000 description 13
- 238000004891 communication Methods 0.000 description 6
- 230000000977 initiatory effect Effects 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000013067 intermediate product Substances 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000011031 large-scale manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000013441 quality evaluation Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0633—Workflow analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
- G06Q10/103—Workflow collaboration or project management
Landscapes
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Engineering & Computer Science (AREA)
- Strategic Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Economics (AREA)
- General Business, Economics & Management (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Development Economics (AREA)
- Educational Administration (AREA)
- Game Theory and Decision Science (AREA)
- Monitoring And Testing Of Transmission In General (AREA)
Abstract
本发明提供一种遥感卫星数据预处理监控方法、装置及存储介质，属于电数字数据处理技术领域，所述方法包括：对当前流程的输入数据进行处理，得到所述当前流程的输出数据；从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件；生成所述当前流程的下一流程对应的分支控制信息记录文件；监控所述当前流程以及所述当前流程的兄弟流程的执行情况。本申请实施例提供的遥感卫星数据预处理监控方法、装置及存储介质，可以将所述当前流程的下一流程分解为一个或多个分支流程，并对各级流程的执行状态进行监控和汇聚，进而可以实现整轨数据的处理状态监控与处理情况分析。
Description
技术领域
本发明涉及电数字数据处理技术领域，尤其涉及一种遥感卫星数据预处理监控方法、装置及存储介质。
背景技术
卫星遥感是采集地球数据信息的重要技术手段，具有无国界限制、覆盖面积广、观测具有周期性、数据客观等诸多特点。卫星遥感发展迅速，目前各型遥感卫星发射近300颗。遥感卫星数据预处理系统是卫星地面系统的重要组成部分之一，是获取卫星遥感产品数据的重要环节。
卫星预处理具有数据量大、流程复杂、算法复杂等特点，一般采用作业调度、工作流组合等高性能技术进行批量化处理。目前的批处理的方式在满足卫星预处理规模化生产的前提下，带来了并发处理任务分散、处理环节回溯复杂、整体流程闭环困难、局部处理失败不易被发现等问题。
发明内容
针对现有技术存在的问题，本发明提供一种遥感卫星数据预处理监控方法、装置及存储介质。
第一方面，本发明提供一种遥感卫星数据预处理监控方法，包括：
对当前流程的输入数据进行处理，得到所述当前流程的输出数据；
从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件；
基于所述当前流程的输出数据的数据级别和数据数量，以及所述当前流程的下一流程期望输出的数据级别和数据数量，将所述当前流程的下一流程分解为一个或多个分支流程，并生成所述当前流程的下一流程对应的分支控制信息记录文件；
基于所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况。
在一些实施例中，所述基于所述当前流程的输出数据的数据级别和数据数量，以及所述当前流程的下一流程期望输出的数据级别和数据数量，将所述当前流程的下一流程分解为一个或多个分支流程，包括：
基于所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别的比较结果，以及所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量的比较结果，将所述当前流程的下一流程分解为一个或多个分支流程。
在一些实施例中，所述基于所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别的比较结果，以及所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量的比较结果，将所述当前流程的下一流程分解为一个或多个分支流程，包括：
在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别相同，并且，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量相同的情况下，将所述当前流程的下一流程分解为一个分支流程；
在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别不同，和/或，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量不同的情况下，将所述当前流程的下一流程分解为多个分支流程。
在一些实施例中，所述将所述当前流程的下一流程分解为一个或多个分支流程，包括：
基于所述当前流程对应的分支控制信息记录文件将所述当前流程的下一流程分解为一个或多个分支流程。
在一些实施例中，所述方法还包括：
在从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件之前，确定所述当前流程的兄弟流程中是否已生成汇聚标志文件；
所述当前流程的兄弟流程中已生成所述汇聚标志文件，表示所述当前流程的兄弟流程已监控所述当前流程的执行情况。
在一些实施例中，所述基于所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况，包括：
在所述当前流程的兄弟流程中未生成所述汇聚标志文件的情况下，从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况，并生成所述汇聚标志文件。
在一些实施例中，所述对当前流程的输入数据进行处理，包括：
对所述当前流程的输入数据进行以下至少一项操作：
帧同步、解扰、译码、解格式、解压缩、通道分离、电荷耦合器件CCD拼接、分景编目、相对辐射校正、系统几何校正和数据管理。
第二方面，本发明还提供一种遥感卫星数据预处理监控装置，包括：
第一处理模块，用于对当前流程的输入数据进行处理，得到所述当前流程的输出数据；
第一获取模块，用于从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件；
第一生成模块，用于基于所述当前流程的输出数据的数据级别和数据数量，以及所述当前流程的下一流程期望输出的数据级别和数据数量，将所述当前流程的下一流程分解为一个或多个分支流程，并生成所述当前流程的下一流程对应的分支控制信息记录文件；
第一监控模块，用于基于所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况。
在一些实施例中，所述第一生成模块包括：
第一分解子模块，用于基于所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别的比较结果，以及所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量的比较结果，将所述当前流程的下一流程分解为一个或多个分支流程。
在一些实施例中，所述第一分解子模块包括：
第一分解单元，用于在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别相同，并且，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量相同的情况下，将所述当前流程的下一流程分解为一个分支流程；
第二分解单元，用于在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别不同，和/或，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量不同的情况下，将所述当前流程的下一流程分解为多个分支流程。
在一些实施例中，所述第一生成模块包括：
第二分解子模块，用于基于所述当前流程对应的分支控制信息记录文件将所述当前流程的下一流程分解为一个或多个分支流程。
在一些实施例中，所述遥感卫星数据预处理监控装置还包括：
第一确定模块，用于在从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件之前，确定所述当前流程的兄弟流程中是否已生成汇聚标志文件；
所述当前流程的兄弟流程中已生成所述汇聚标志文件，表示所述当前流程的兄弟流程已监控所述当前流程的执行情况。
在一些实施例中，所述第一监控模块包括：
第一获取子模块，用于在所述当前流程的兄弟流程中未生成所述汇聚标志文件的情况下，从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况，并生成所述汇聚标志文件。
在一些实施例中，所述第一处理模块包括：
第一处理子模块，用于对所述当前流程的输入数据进行以下至少一项操作：
帧同步、解扰、译码、解格式、解压缩、通道分离、电荷耦合器件CCD拼接、分景编目、相对辐射校正、系统几何校正、数据管理。
第三方面，本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上所述第一方面所述的遥感卫星数据预处理监控方法。
第四方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上所述第一方面所述的遥感卫星数据预处理监控方法。
第五方面，本发明还提供一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现如上述任一种所述遥感卫星数据预处理监控方法。
本申请实施例提供的遥感卫星数据预处理监控方法、装置及存储介质，可以根据当前流程的输出数据的数据级别和数据数量与下一流程期望输出的数据级别和数据数量的对应关系，将所述当前流程的下一流程分解为一个或多个分支流程，并对各级流程的执行状态进行监控和汇聚，进而可以实现整轨数据的处理状态监控与处理情况分析。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的遥感卫星数据预处理监控方法的流程示意图；
图2是本申请实施例提供的分支控制模块的执行流程图；
图3是本申请实施例提供的状态汇聚模块的执行流程图；
图4是本申请实施例提供的遥感卫星数据预处理监控装置的结构示意图；
图5是本申请实施例提供的电子设备的实体结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
图1是本申请实施例提供的遥感卫星数据预处理监控方法的流程示意图，如图1所示，本申请实施例提供一种遥感卫星数据预处理监控方法，包括：
步骤101，对当前流程的输入数据进行处理，得到所述当前流程的输出数据。
具体地，目前卫星数据处理系统在多数据、多级别、大批量、并发处理中因处理流程复杂、并发任务分散而存在不易获取整轨数据处理状态的问题。
为解决上述技术问题，本申请实施例提供的遥感卫星数据预处理监控方法可以先对当前流程的输入数据进行处理。
其中，将预处理的算法模块分为数据处理模块、分支控制模块和状态汇聚模块，方便对处理过程进行控制。
数据处理模块指对卫星数据进行解格式、解压缩、分景、辐射校正、几何校正等处理操作的算法模块，这些模块在预处理过程中必须存在，缺一不可。
分支控制模块指在卫星数据预处理过程进行辅助控制，将卫星预处理的整个过程按业务需求分解为多个可执行的分支流程。分支控制模块，位于每一个遥感卫星处理流程的末尾。分支控制模块不做具体的卫星数据处理工作，它负责发起下一级别的分支流程，并记录分支流程的输入数据名称以及任务单号，以便后续分支流程的回溯。它虽然不直接对卫星数据进行处理，但在整个卫星预处理过程中起着不可或缺的作用。它在关键节点，比如数据对应关系发生改变或者下一步骤适合并发处理时，把复杂的预处理过程分解为多个功能相对单一的分支流程，降低了卫星预处理的复杂程度。
状态汇聚模块指在卫星预处理过程中，对各分支流程进行结果汇聚与检查的辅助模块。分支控制模块不做具体的卫星数据处理工作，它依据上级分支控制模块记录的信息，统计本级别流程（自己以及其它兄弟流程）的执行情况，包括是否完成、是否失败等状态。状态汇聚模块可以说是分支控制模块的结果检验与汇总，它依赖于分支控制模块。单独的状态汇聚模块没有实际意义。
步骤102，从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件。
具体地，分支流程的描述，通过分支控制信息记录文件实现。在分支控制信息记录文件中，描述了分支流程的数据输入级别、工作流编号、工作流描述、算法模块及执行顺序、分支信息记录文件名称等。而分支控制模块，通过解析输入数据，进而读取不同产品级别对应的分支流程描述信息，进而发起一个或者多个的下一级分支流程。
步骤103，基于所述当前流程的输出数据的数据级别和数据数量，以及所述当前流程的下一流程期望输出的数据级别和数据数量，将所述当前流程的下一流程分解为一个或多个分支流程，并生成所述当前流程的下一流程对应的分支控制信息记录文件。
具体地，由于流程众多，经常会在计算模块中出现输入数据与输出数据对应关系发生改变情况，所以可以根据当前流程的输出数据的数据级别和数据数量，以及当前流程的下一流程期望输出的数据级别和数据数量的对应关系，将当前流程的下一流程分解为一个或多个分支流程。
例如，在当前流程的输出数据的数据级别和数据数量，以及当前流程的下一流程期望输出的数据级别和数据数量的对应关系无变化的情况下，将当前流程的下一流程分解为一个分支流程。
再例如，在当前流程的输出数据的数据级别和数据数量，以及当前流程的下一流程期望输出的数据级别和数据数量的对应关系有变化的情况下，将当前流程的下一流程分解为多个分支流程。
步骤104，基于所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况。
具体地，根据当前流程对应的分支控制信息记录文件统计本级别流程（自己以及其它兄弟流程）的执行情况，包括是否完成、是否失败等状态。
值得一提的是，在所有级别的分支流程完成后，可以汇总各级数据的发起情况和完成情况，形成整轨数据完成状态。
整轨完成状态统计时，按照产品级别，形成一个树状结构。从分支控制信息记录文件中，可以获取发起的下一级别产品生产的个数；从状态汇聚信息文件中，可以获取本级产品的成功失败个数。综合分支信息与状态汇聚信息，可获取整轨数据的完成情况。
进一步地，当整轨数据未完成时，仍然可以形成树状结构的整轨完成状态，只是其中的某些数据处于正在处理状态。
进一步地，整轨完成状态统计结果可以进一步发挥，将其中处理失败的数据可以单独生产一个统计结果文件，用于日常的生产结果错误排除。
本申请实施例提供的遥感卫星数据预处理监控方法，可以根据当前流程的输出数据的数据级别和数据数量与下一流程期望输出的数据级别和数据数量的对应关系，将所述当前流程的下一流程分解为一个或多个分支流程，并对各级流程的执行状态进行监控和汇聚，进而可以实现整轨数据的处理状态监控与处理情况分析。
在一些实施例中，所述基于所述当前流程的输出数据的数据级别和数据数量，以及所述当前流程的下一流程期望输出的数据级别和数据数量，将所述当前流程的下一流程分解为一个或多个分支流程，包括：
基于所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别的比较结果，以及所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量的比较结果，将所述当前流程的下一流程分解为一个或多个分支流程。
具体地，在当前流程的输出数据与当前流程的下一流程期望输出的数据的对应关系发生改变或者下一流程适合并发处理时，由分支控制模块开启下一级别的分支流程，并记录分支流程与数据对应关系。
在预处理流程中，由于流程众多，经常会在计算模块中出现输入数据与输出数据对应关系发生改变情况。比如，解格式解压缩流程执行完后，后续应该执行条带生成模块。解压缩模块输入一般为原始码流数据或者进一步解格式的数据，一般为两个文件；而解压缩后生成多个载荷的解压缩CCD文件，载荷个数依据卫星不同，每个载荷对应的解压缩CCD文件个数也不同。后续条带生成及分景流程执行时，输入一般为某一载荷的CCD文件组。从解格式解压缩流程到条带生成流程，不但产品级别由解压缩产品变成了长条带产品，模块输入的文件个数也因卫星、载荷的不同而发生了变化。此时，如果将解压缩模块的输出作为条带生成模块的输入，则势必造成条带生成模块要解析多个载荷的输入，在模块内部要兼顾多个载荷的处理，不利于模块程序的开发。分支控制模块则将这种变化关系简单化，将同一载荷的解压缩CCD文件作为一组输入，发起多个条带生成分支流程。每一个条带生成分支流程的输入为一组通载荷的解压缩CCD文件，使得每一个条带分支流程只处理自己分配的载荷，而不用兼顾其他载荷的解压缩CCD文件。
本申请实施例提供的遥感卫星数据预处理监控方法，可以根据当前流程的输出数据的数据级别和数据数量与下一流程期望输出的数据级别和数据数量的对应关系，将所述当前流程的下一流程分解为一个或多个分支流程，并对各级流程的执行状态进行监控和汇聚，进而可以实现整轨数据的处理状态监控与处理情况分析。
在一些实施例中，所述基于所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别的比较结果，以及所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量的比较结果，将所述当前流程的下一流程分解为一个或多个分支流程，包括：
在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别相同，并且，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量相同的情况下，将所述当前流程的下一流程分解为一个分支流程；
在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别不同，和/或，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量不同的情况下，将所述当前流程的下一流程分解为多个分支流程。
具体地，根据在当前流程的输出数据与当前流程的下一流程期望输出的数据的对应关系可以确定将当前流程的下一流程分解为一个还是多个分支流程。
在预处理流程中，由于整个处理时间较长，有些相对独立的处理过程，一般都采用并发的形式同时进行，以缩短整个处理时间。比如，在分景流程中，逻辑分景模块的输出是多个景描述文件（一般为几十乃至上百景），其下一流程是辐射校正流程，输入为景描述文件，而且各景的辐射校正处理都相互独立。此时，如果多景的辐射校正如果在一个流程中处理，则单次处理耗时太少。但如果把辐射校正按景描述文件单独处理，分解为多个独立的分支流程去并发处理，则会大大降低整体处理时间。
分支流程是一组有先后顺序的算法模块组成的工作流，下一模块的输入对应上一级模块的输出。组成分支流程的算法模块包括上文提到的数据处理模块、分支控制模块和状态汇聚模块。一般而言，除去最低级别的分支流程，其它分支流程均以分支控制模块结尾，以便能灵活的发起下一级别的分支流程。
本申请实施例提供的遥感卫星数据预处理监控方法，可以根据当前流程的输出数据的数据级别和数据数量与下一流程期望输出的数据级别和数据数量的对应关系，将所述当前流程的下一流程分解为一个或多个分支流程，并对各级流程的执行状态进行监控和汇聚，进而可以实现整轨数据的处理状态监控与处理情况分析。
在一些实施例中，所述将所述当前流程的下一流程分解为一个或多个分支流程，包括：
基于所述当前流程对应的分支控制信息记录文件将所述当前流程的下一流程分解为一个或多个分支流程。
具体地，下一级分支流程的输入数据由上一级分支流程的输出数据决定，但对应关系可能发生变化。其中的对应关系由分支控制模块掌握，并把下一级分支流程的输入数据和发起的任务单号记录到分支控制信息记录文件中，由同一分支控制模块发起的下一级分支流程为兄弟流程。如：解格式解压缩流程输出为多组解压缩后的CCD文件，其下一级流程为分景编目，每一个分景编目的输入为同一组的解压后CCD文件。解格式解压缩流程的分支控制模块，根据分支流程的描述信息，根据CCD文件的组别发起不同传感器的分支流程，这些不同传感器的分景编目流程互为兄弟流程。从上例也可看出，分支流程的输入数据与上一级别的流程输出数据对应关系发生了改变。
分支流程发起后，预处理系统通过作业调度软件依次调度分支流程中的算法模块，进而逐步完成该分支流程。
本申请实施例提供的遥感卫星数据预处理监控方法，可以根据分支控制信息记录文件中的相关数据，将所述当前流程的下一流程分解为一个或多个分支流程，并对各级流程的执行状态进行监控和汇聚，进而可以实现整轨数据的处理状态监控与处理情况分析。
在一些实施例中，所述方法还包括：
在从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件之前，确定所述当前流程的兄弟流程中是否已生成汇聚标志文件；
所述当前流程的兄弟流程中已生成所述汇聚标志文件，表示所述当前流程的兄弟流程已监控所述当前流程的执行情况。
具体地，当分支流程结束后，由状态汇聚模块统计本级分支流程的完成情况。
状态汇聚模块是分支流程的一个算法模块。当一个分支流程执行到状态汇聚模块时，状态汇聚模块立刻在指定位置按约定格式创建标志文件并锁定该文件，表示自己要进行状态汇聚工作。
状态汇聚模块执行状态汇聚工作时，首先解析自己的输入数据名称，进而获取上一级分支控制模块生成的分支控制信息记录文件，并从中获取兄弟流程的数据名称和任务单号，进而在运行数据库中查找这些任务单的执行情况。对于已经完成的任务单（包括成功和失败），记录其完成状态。对于处于执行状态的任务单，继续查询，直至所有兄弟任务单完成。完成状态汇聚工作后，状态汇聚模块将自己的任务单号写入标志文件，表明本次汇聚由自己完成，以备后续查询。
而其它兄弟流程中的状态汇聚模块，在执行时发现已经存在汇聚标志文件，则主动退出模块执行，依据分支流程的配置，结束该分支流程或者进行下一个模块。
通过创建和锁定标志文件，保证了状态汇聚工作只由一个状态汇聚模块完成。
本申请实施例提供的遥感卫星数据预处理监控方法，通过状态汇聚模块可以将多个分支流程汇聚在一起，并对各级流程的执行状态进行监控和汇聚，进而可以实现整轨数据的处理状态监控与处理情况分析。
在一些实施例中，所述基于所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况，包括：
在所述当前流程的兄弟流程中未生成所述汇聚标志文件的情况下，从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况，并生成所述汇聚标志文件。
具体地，可以解析自己的输入数据名称，进而获取上一级分支控制模块生成的分支控制信息记录文件，并从中获取兄弟流程的数据名称和任务单号，进而在运行数据库中查找这些任务单的执行情况。对于已经完成的任务单（包括成功和失败），记录其完成状态。对于处于执行状态的任务单，继续查询，直至所有兄弟任务单完成。完成状态汇聚工作后，状态汇聚模块将自己的任务单号写入标志文件，表明本次汇聚由自己完成，以备后续查询。
本申请实施例提供的遥感卫星数据预处理监控方法，通过状态汇聚模块可以将多个分支流程汇聚在一起，并对各级流程的执行状态进行监控和汇聚，进而可以实现整轨数据的处理状态监控与处理情况分析。
在一些实施例中，所述对当前流程的输入数据进行处理，包括：
对所述当前流程的输入数据进行以下至少一项操作：
帧同步、解扰、译码、解格式、解压缩、通道分离、电荷耦合器件CCD拼接、分景编目、相对辐射校正、系统几何校正、数据管理。
具体地，因为整个卫星预处理过程较为复杂，从原始数据到系统几何校正产品，中间经历了帧同步、解扰、译码、解格式、解压缩、通道分离、CCD拼接、分景编目、相对辐射校正、系统几何校正、数据管理等处理环节。这些处理环节均由数据处理模块完成，会产生不同级别的正式产品或中间产品。为了更好的对数据预处理过程进行控制，需要分解遥感卫星预处理过程，将整个预处理流程分解为若干级别的分支流程，并建立产品与分支流程的对应关系。
在流程分解时，如果分解粒度过大，分支流程包含多个数据处理模块，则因处理步骤过长，不易控制和发现问题；如果分解粒度小，比如按照数据处理模块建立分支流程，这样虽然容易控制，但因为分支流程太多，在控制过程中会过多的浪费调度资源。因此，一般在数据对应关系发生改变或者下一步骤适合并发处理时，再进行流程分解，形成功能相对单一的分支流程。分支流程的结尾，一般是分支控制模块或者状态汇聚模块，由这两类模块根据分支流程的业务特点来决定是发起下级的分支流程还是进行本级分支流程的状态汇总。
本申请实施例提供的遥感卫星数据预处理监控方法，可以根据当前流程的输出数据的数据级别和数据数量与下一流程期望输出的数据级别和数据数量的对应关系，将所述当前流程的下一流程分解为一个或多个分支流程，并对各级流程的执行状态进行监控和汇聚，进而可以实现整轨数据的处理状态监控与处理情况分析。
下面以具体的例子，对上述实施例中的方法进行进一步说明。
本申请实施例提供的遥感卫星数据预处理监控方法主要过程包含：算法模块分类、遥感卫星预处理过程分解、分支控制与转态汇聚和整轨完成状态统计。
算法模块分类用于将预处理的算法模块分为数据处理模块、分支控制模块和状态汇聚模块，方便对处理过程进行控制。
例如，GF07_UNPACK，GF07_UNZIP属于数据处理模块，分别负责高分七号卫星的解格式、解压缩；AUTOPRODUCT是分支控制模块，TASKMONITOR是状态汇聚模块。
遥感卫星预处理过程分解可以根据遥感卫星处理的不同，将遥感卫星处理大致分为原始数据处理、条带数据处理、产品生产等环节，每个环节用分支控制模块结束。不同的环节并是不低粒度的运行程序，而是介于整轨处理流程和单独运行程序之间的子流程。合适的划分粒度，可以方便对任务优先级的控制，也不会导致因控制模块的增多而增加额外的插销。
解压缩解格式和条带生成是两个处理过程，两者是上下游的关系。一个解压缩解格式流程输出是多个载荷的解压缩CCD文件，通过分支控制模块AUTOPRODUCT可以按照分组载荷数据，分出多个条带生成分支流程。
图2是本申请实施例提供的分支控制模块的执行流程图，如图2所示，在输入数据与输出数据对应关系发生改变或者下一步骤适合并发处理时，由分支控制模块开启下一级别的分支流程进行并发处理，并记录分支流程与数据对应关系。
图3是本申请实施例提供的状态汇聚模块的执行流程图，如图3所示，当分支流程结束后，由状态汇聚模块统计该流程的完成情况。可以通过FIN文件记录最终的汇聚缩略信息。
当整轨任务完成后，对整轨状态进行统计，按应完成和实际完成等标准，给出整轨处理的处理结果进行定量评判。对于处理没有完成成功的卫星，单独生成错误统计文件，方便进行排查。
值得一提的是，本申请实施例不局限于卫星数据处理领域，对于卫星数据质量评价、卫星数据深加工等数据逐级处理的领域同样适用。
本发明提供的遥感卫星数据预处理监控方法，可以根据当前流程的输出数据的数据级别和数据数量与下一流程期望输出的数据级别和数据数量的对应关系，将所述当前流程的下一流程分解为一个或多个分支流程，并对各级流程的执行状态进行监控和汇聚，进而可以实现整轨数据的处理状态监控与处理情况分析。
图4是本申请实施例提供的遥感卫星数据预处理监控装置的结构示意图，如图4所示，本申请实施例提供的遥感卫星数据预处理监控装置，包括第一处理模块401，第一获取模块402，第一生成模块403，第一监控模块404，其中：
第一处理模块401，用于对当前流程的输入数据进行处理，得到所述当前流程的输出数据；
第一获取模块402，用于从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件；
第一生成模块403，用于基于所述当前流程的输出数据的数据级别和数据数量，以及所述当前流程的下一流程期望输出的数据级别和数据数量，将所述当前流程的下一流程分解为一个或多个分支流程，并生成所述当前流程的下一流程对应的分支控制信息记录文件；
第一监控模块404，用于基于所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况。
在一些实施例中，所述第一生成模块包括：
第一分解子模块，用于基于所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别的比较结果，以及所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量的比较结果，将所述当前流程的下一流程分解为一个或多个分支流程。
在一些实施例中，所述第一分解子模块包括：
第一分解单元，用于在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别相同，并且，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量相同的情况下，将所述当前流程的下一流程分解为一个分支流程；
第二分解单元，用于在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别不同，和/或，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量不同的情况下，将所述当前流程的下一流程分解为多个分支流程。
在一些实施例中，所述第一生成模块包括：
第二分解子模块，用于基于所述当前流程对应的分支控制信息记录文件将所述当前流程的下一流程分解为一个或多个分支流程。
在一些实施例中，所述遥感卫星数据预处理监控装置还包括：
第一确定模块，用于在从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件之前，确定所述当前流程的兄弟流程中是否已生成汇聚标志文件；
所述当前流程的兄弟流程中已生成所述汇聚标志文件，表示所述当前流程的兄弟流程已监控所述当前流程的执行情况。
在一些实施例中，所述第一监控模块包括：
第一获取子模块，用于在所述当前流程的兄弟流程中未生成所述汇聚标志文件的情况下，从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况，并生成所述汇聚标志文件。
在一些实施例中，所述第一处理模块包括：
第一处理子模块，用于对所述当前流程的输入数据进行以下至少一项操作：
帧同步、解扰、译码、解格式、解压缩、通道分离、电荷耦合器件CCD拼接、分景编目、相对辐射校正、系统几何校正、数据管理。
具体地，本申请实施例提供的上述遥感卫星数据预处理监控装置，能够实现上述遥感卫星数据预处理监控方法实施例所实现的所有方法步骤，且能够达到相同的技术效果，在此不再对本实施例中与方法实施例相同的部分及有益效果进行具体赘述。
图5是本申请实施例提供的电子设备的实体结构示意图，如图5所示，该电子设备可以包括：处理器（processor）510、通信接口（Communications Interface）520、存储器（memory）530和通信总线540，其中，处理器510，通信接口520，存储器530通过通信总线540完成相互间的通信。处理器510可以调用存储器530中的逻辑指令，以执行遥感卫星数据预处理监控方法，该方法包括：
对当前流程的输入数据进行处理，得到所述当前流程的输出数据；
从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件；
基于所述当前流程的输出数据的数据级别和数据数量，以及所述当前流程的下一流程期望输出的数据级别和数据数量，将所述当前流程的下一流程分解为一个或多个分支流程，并生成所述当前流程的下一流程对应的分支控制信息记录文件；
基于所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况。
此外，上述的存储器530中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器（Read-Only Memory，ROM）、随机存取存储器（Random Access Memory，RAM）、磁碟或者光盘等各种可以存储程序代码的介质。
在一些实施例中，所述基于所述当前流程的输出数据的数据级别和数据数量，以及所述当前流程的下一流程期望输出的数据级别和数据数量，将所述当前流程的下一流程分解为一个或多个分支流程，包括：
基于所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别的比较结果，以及所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量的比较结果，将所述当前流程的下一流程分解为一个或多个分支流程。
在一些实施例中，所述基于所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别的比较结果，以及所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量的比较结果，将所述当前流程的下一流程分解为一个或多个分支流程，包括：
在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别相同，并且，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量相同的情况下，将所述当前流程的下一流程分解为一个分支流程；
在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别不同，和/或，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量不同的情况下，将所述当前流程的下一流程分解为多个分支流程。
在一些实施例中，所述将所述当前流程的下一流程分解为一个或多个分支流程，包括：
基于所述当前流程对应的分支控制信息记录文件将所述当前流程的下一流程分解为一个或多个分支流程。
在一些实施例中，所述方法还包括：
在从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件之前，确定所述当前流程的兄弟流程中是否已生成汇聚标志文件；
所述当前流程的兄弟流程中已生成所述汇聚标志文件，表示所述当前流程的兄弟流程已监控所述当前流程的执行情况。
在一些实施例中，所述基于所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况，包括：
在所述当前流程的兄弟流程中未生成所述汇聚标志文件的情况下，从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况，并生成所述汇聚标志文件。
在一些实施例中，所述对当前流程的输入数据进行处理，包括：
对所述当前流程的输入数据进行以下至少一项操作：
帧同步、解扰、译码、解格式、解压缩、通道分离、电荷耦合器件CCD拼接、分景编目、相对辐射校正、系统几何校正、数据管理。
具体地，本申请实施例提供的上述电子设备，能够实现上述执行主体为电子设备的方法实施例所实现的所有方法步骤，且能够达到相同的技术效果，在此不再对本实施例中与方法实施例相同的部分及有益效果进行具体赘述。
另一方面，本发明还提供一种计算机程序产品，所述计算机程序产品包括计算机程序，计算机程序可存储在非暂态计算机可读存储介质上，所述计算机程序被处理器执行时，计算机能够执行上述各方法所提供的遥感卫星数据预处理监控方法，该方法包括：
对当前流程的输入数据进行处理，得到所述当前流程的输出数据；
从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件；
基于所述当前流程的输出数据的数据级别和数据数量，以及所述当前流程的下一流程期望输出的数据级别和数据数量，将所述当前流程的下一流程分解为一个或多个分支流程，并生成所述当前流程的下一流程对应的分支控制信息记录文件；
基于所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况。
又一方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各方法提供的遥感卫星数据预处理监控方法，该方法包括：
对当前流程的输入数据进行处理，得到所述当前流程的输出数据；
从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件；
基于所述当前流程的输出数据的数据级别和数据数量，以及所述当前流程的下一流程期望输出的数据级别和数据数量，将所述当前流程的下一流程分解为一个或多个分支流程，并生成所述当前流程的下一流程对应的分支控制信息记录文件；
基于所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行各个实施例或者实施例的某些部分所述的方法。
另外需要说明的是：本申请实施例中术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的术语在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”所区别的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。
本申请实施例中术语“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
本申请实施例中术语“多个”是指两个或两个以上，其它量词与之类似。
本申请中的“基于A确定B”表示确定B时要考虑A这个因素。并不限于“只基于A就可以确定出B”，还应包括：“基于A和C确定B”、“基于A、C和E确定B”、基于“A确定C，基于C进一步确定B”等。另外还可以包括将A作为确定B的条件，例如，“当A满足第一条件时，使用第一方法确定B”；再例如，“当A满足第二条件时，确定B”等；再例如，“当A满足第三条件时，基于第一参数确定B”等。当然也可以是将A作为确定B的因素的条件，例如，“当A满足第一条件时，使用第一方法确定C，并进一步基于C确定B”等。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (7)
1.一种遥感卫星数据预处理监控方法，其特征在于，包括：
对当前流程的输入数据进行处理，得到所述当前流程的输出数据；
从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件；
在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别相同，并且，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量相同的情况下，基于所述当前流程对应的分支控制信息记录文件将所述当前流程的下一流程分解为一个分支流程；
在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别不同，和/或，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量不同的情况下，基于所述当前流程对应的分支控制信息记录文件将所述当前流程的下一流程分解为多个分支流程；
基于所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况。
2.根据权利要求1所述的遥感卫星数据预处理监控方法，其特征在于，所述方法还包括：
在从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件之前，确定所述当前流程的兄弟流程中是否已生成汇聚标志文件；
所述当前流程的兄弟流程中已生成所述汇聚标志文件，表示所述当前流程的兄弟流程已监控所述当前流程的执行情况。
3.根据权利要求2所述的遥感卫星数据预处理监控方法，其特征在于，所述基于所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况，包括：
在所述当前流程的兄弟流程中未生成所述汇聚标志文件的情况下，从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况，并生成所述汇聚标志文件。
4.根据权利要求1至3任一项所述的遥感卫星数据预处理监控方法，其特征在于，所述对当前流程的输入数据进行处理，包括：
对所述当前流程的输入数据进行以下至少一项操作：
帧同步、解扰、译码、解格式、解压缩、通道分离、电荷耦合器件CCD拼接、分景编目、相对辐射校正、系统几何校正、数据管理。
5.一种遥感卫星数据预处理监控装置，其特征在于，包括：
第一处理模块，用于对当前流程的输入数据进行处理，得到所述当前流程的输出数据；
第一获取模块，用于从所述当前流程的上一流程中获取所述当前流程对应的分支控制信息记录文件；
第一生成模块，用于在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别相同，并且，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量相同的情况下，基于所述当前流程对应的分支控制信息记录文件将所述当前流程的下一流程分解为一个分支流程；
在所述当前流程的输出数据的数据级别与所述当前流程的下一流程期望输出的数据级别不同，和/或，所述当前流程的输出数据的数据数量与所述当前流程的下一流程期望输出的数据数量不同的情况下，基于所述当前流程对应的分支控制信息记录文件将所述当前流程的下一流程分解为多个分支流程；
第一监控模块，用于基于所述当前流程对应的分支控制信息记录文件，监控所述当前流程以及所述当前流程的兄弟流程的执行情况。
6.一种电子设备，包括存储器、处理器及存储在所述存储器上并在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至4任一项所述的遥感卫星数据预处理监控方法。
7.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至4任一项所述的遥感卫星数据预处理监控方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202410117639.1A CN117649108B (zh) | 2024-01-29 | 2024-01-29 | 遥感卫星数据预处理监控方法、装置及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202410117639.1A CN117649108B (zh) | 2024-01-29 | 2024-01-29 | 遥感卫星数据预处理监控方法、装置及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN117649108A CN117649108A (zh) | 2024-03-05 |
| CN117649108B true CN117649108B (zh) | 2024-04-16 |
Family
ID=90049899
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202410117639.1A Active CN117649108B (zh) | 2024-01-29 | 2024-01-29 | 遥感卫星数据预处理监控方法、装置及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117649108B (zh) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104063835A (zh) * | 2014-04-02 | 2014-09-24 | 中国人民解放军第二炮兵指挥学院 | 一种卫星遥感图像实时并行处理系统及处理方法 |
| CN105278960A (zh) * | 2015-10-27 | 2016-01-27 | 航天恒星科技有限公司 | 一种遥感应用中的流程自动化方法及系统 |
| CN109150281A (zh) * | 2017-06-27 | 2019-01-04 | 航天恒星科技有限公司 | 卫星地面站自动化运行方法 |
| CN110599119A (zh) * | 2019-08-27 | 2019-12-20 | 南凌科技股份有限公司 | 一种面向业务可定制的工作流引擎算法 |
| CN114461357A (zh) * | 2021-12-22 | 2022-05-10 | 中国科学院空天信息创新研究院 | 一种遥感卫星原始数据实时处理流程调度引擎 |
| CN114764629A (zh) * | 2021-01-14 | 2022-07-19 | 新智数字科技有限公司 | 基于损失正则化的安全示险在线持续学习系统 |
-
2024
- 2024-01-29 CN CN202410117639.1A patent/CN117649108B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104063835A (zh) * | 2014-04-02 | 2014-09-24 | 中国人民解放军第二炮兵指挥学院 | 一种卫星遥感图像实时并行处理系统及处理方法 |
| CN105278960A (zh) * | 2015-10-27 | 2016-01-27 | 航天恒星科技有限公司 | 一种遥感应用中的流程自动化方法及系统 |
| CN109150281A (zh) * | 2017-06-27 | 2019-01-04 | 航天恒星科技有限公司 | 卫星地面站自动化运行方法 |
| CN110599119A (zh) * | 2019-08-27 | 2019-12-20 | 南凌科技股份有限公司 | 一种面向业务可定制的工作流引擎算法 |
| CN114764629A (zh) * | 2021-01-14 | 2022-07-19 | 新智数字科技有限公司 | 基于损失正则化的安全示险在线持续学习系统 |
| CN114461357A (zh) * | 2021-12-22 | 2022-05-10 | 中国科学院空天信息创新研究院 | 一种遥感卫星原始数据实时处理流程调度引擎 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN117649108A (zh) | 2024-03-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7200588B1 (en) | Method and mechanism for analyzing trace data using a database management system | |
| CN110471913A (zh) | 一种数据清洗方法及装置 | |
| CN110895506B (zh) | 测试数据的构造方法和构造系统 | |
| CN110781231A (zh) | 基于数据库的批量导入方法、装置、设备及存储介质 | |
| US8209297B2 (en) | Data processing device and method | |
| CN110471945B (zh) | 活跃数据的处理方法、系统、计算机设备和存储介质 | |
| CN106980497A (zh) | 网页网站性能优化方法和装置 | |
| US20060106702A1 (en) | Method and apparatus for extracting and visualizing execution patterns from web services | |
| CN113326131A (zh) | 一种数据处理方法、装置、设备及存储介质 | |
| CN117251563A (zh) | 故障工单的质检方法、设备及存储介质 | |
| CN116126929A (zh) | 对象为中心的协同式流程挖掘方法与系统 | |
| CN117649108B (zh) | 遥感卫星数据预处理监控方法、装置及存储介质 | |
| CN113139712B (zh) | 一种基于机器学习的流程日志活动属性残缺规则提取方法 | |
| CN113962397B (zh) | 一种单比特多量子门融合优化的方法 | |
| CN111984826B (zh) | 基于xml的数据自动入库方法、系统、装置和存储介质 | |
| CN115905353A (zh) | 关联数据导出、导入方法、装置、设备及存储介质 | |
| CN114465875B (zh) | 故障处理方法及装置 | |
| US20220365812A1 (en) | Method and system for sustainability measurement | |
| CN115796228A (zh) | 算子融合方法、装置、设备以及存储介质 | |
| CN114579809A (zh) | 事件分析方法、装置、电子设备及存储介质 | |
| CN112181511B (zh) | 一种可执行的情报分析流交互配置生成方法 | |
| CN113259878B (zh) | 话单结算方法、系统、电子设备及计算机可读存储介质 | |
| CN109754131B (zh) | 一种基于nxd的scd文件配置方法及装置 | |
| CN110096260B (zh) | 一种基于业务流程的信息系统架构自动构造方法及系统 | |
| CN113342861B (zh) | 业务场景下数据治理方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |