CN117332134A - 遥感卫星原始数据处理和管理方法、装置、设备及介质 - Google Patents
遥感卫星原始数据处理和管理方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN117332134A CN117332134A CN202311394118.2A CN202311394118A CN117332134A CN 117332134 A CN117332134 A CN 117332134A CN 202311394118 A CN202311394118 A CN 202311394118A CN 117332134 A CN117332134 A CN 117332134A
- Authority
- CN
- China
- Prior art keywords
- remote sensing
- original data
- segmentation
- sensing satellite
- satellite
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007726 management method Methods 0.000 title abstract description 17
- 238000003672 processing method Methods 0.000 title abstract description 12
- 230000011218 segmentation Effects 0.000 claims abstract description 225
- 238000012545 processing Methods 0.000 claims abstract description 46
- 238000000034 method Methods 0.000 claims abstract description 43
- 238000013523 data management Methods 0.000 claims description 5
- 230000005540 biological transmission Effects 0.000 abstract description 8
- 238000010586 diagram Methods 0.000 description 12
- 230000015654 memory Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 239000002699 waste material Substances 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/907—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/13—File access structures, e.g. distributed indices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/172—Caching, prefetching or hoarding of files
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B7/00—Radio transmission systems, i.e. using radiation field
- H04B7/14—Relay systems
- H04B7/15—Active relay systems
- H04B7/185—Space-based or airborne stations; Stations for satellite systems
- H04B7/1851—Systems using a satellite or space-based relay
- H04B7/18513—Transmission in a satellite or space-based system
Abstract
本公开提供一种遥感卫星原始数据处理和管理方法、装置、电子设备及介质，该方法包括：采集原始卫星数据的码流；定义数据的分段模式，所述数据的分段方式包括数据是否分段，数据的分段方式以及每种分段方式的具体分段参数值；对于分段的卫星数据，根据所述数据的分段方式以及每种分段方式的具体分段参数值，对所述卫星数据进行分段处理，生成分段遥感卫星原始数据；生成每个分段遥感卫星原始数据的元数据信息，所述元数据信息用于对所述卫星数据进行管理与查询。基于本公开提供的遥感卫星原始数据处理和管理方法，可以解决现有管理遥感卫星数据时，单轨、单通道、单数据文件的处理方式导致的传输不便、耗时长、浪费带宽且导致其他卫星数据的传输时效性降低的问题。
Description
技术领域
本公开涉及卫星数据管理技术领域，尤其涉及一种遥感卫星原始数据处理和管理方法、装置、电子设备及介质。
背景技术
随着信息技术的发展，卫星设备种类不断增加，代表卫星状态的遥测参数类型也多种多样，现有的卫星地面接收站处理系统对于接收到的卫星原始数据采用的是单轨、单通道、单数据文件的处理方式，即将同一轨道或同一通道的卫星原始数据存储于一个数据文件中，形成超大数据文件。
然而，随着卫星码速率的增高以及静轨卫星长时间任务的增多，越来越多的超大数据文件随之产生。而单个数据文件过大，对于数据的传输、使用都极为不便，尤其当单个数据文件中某部分数据例如某轨数据其中一小段或者某几帧数据质量有问题，需要对该部分有质量问题的数据重新传输时，必须重新传输整个超大数据文件，耗时较长且严重浪费带宽。且由于接收站的带宽有限，浪费带宽也会导致其他卫星数据的传输时效性降低。
发明内容
鉴于上述问题，本公开提供了一种遥感卫星原始数据处理和管理方法、装置、电子设备及介质，以解决现有技术中单轨、单通道、单数据文件的处理方式导致的传输不便、耗时长、浪费带宽且导致其他卫星数据的传输时效性降低的问题。
本公开的第一方面提供了一种遥感卫星原始数据处理和管理方法，包括：
在卫星过境同时，实时采集遥感卫星原始数据的码流；
定义遥感卫星原始数据的分段模式，所述遥感卫星原始数据的分段方式包括遥感卫星原始数据是否分段，遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值；
对于分段的遥感卫星原始数据，根据所述数据的分段方式以及每种分段方式的具体分段参数值，对所述遥感卫星原始数据进行分段处理，生成分段遥感卫星原始数据；
生成每个分段遥感卫星原始数据的元数据信息，所述元数据信息用于对所述分段遥感卫星原始数据进行管理与查询。
根据本公开的实施例，所述定义数据的分段模式包括：
定义遥感卫星原始数据是否分段以及分段类型，所述分段类型包括按数据量分段、按时间分段、按帧数分段以及按卫星虚拟信道标识号分段中的至少一种；
在遥感卫星原始数据需要分段的情况下，根据所述分段类型定义每种分段方式的具体分段参数值。
根据本公开的实施例，所述根据所述分段类型定义每种分段方式的具体分段参数值包括：
在所述分段方式为按数据量分段的情况下，具体分段参数值的单位为Mbps；
在所述分段方式为按时间分段的情况下，具体分段参数值的单位为秒；
在所述分段方式为按帧数分段的情况下，具体分段参数值的单位为帧数；
在所述分段方式为按卫星虚拟信道标识号的情况下，具体分段参数值为卫星虚拟信道标识号。
根据本公开的实施例，所述根据所述遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值，对所述遥感卫星原始数据进行分段处理，生成分段遥感卫星原始数据包括：
在所述分段方式为按数据量分段的情况下，每达到所述具体分段参数值指定的数据量，则按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据；
在所述分段方式为按时间分段的情况下，按照卫星原始数据格式解析每帧数据的时间码标识位，计算出时间量，每达到所述时间量，则按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据；
在所述分段方式为按帧数分段的情况下，每达到所述具体分段参数值指定的帧数，则按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据；
在所述分段方式为按卫星虚拟信道标识号的情况下，按照卫星原始数据格式解析每帧数据的虚拟信道标识号，同一个卫星虚拟信道标识号的数据按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据。
根据本公开的实施例，所述元数据信息包括所述分段遥感卫星原始数据的基本属性信息和专有属性信息；
所述基本属性信息包括卫星、轨道号、通道号和任务单号；
所述专有属性信息包括分段遥感卫星原始数据文件名、分段遥感卫星原始数据文件大小、分段遥感卫星原始数据的分段序号、分段遥感卫星原始数据的开始时间、分段遥感卫星原始数据的结束时间、分段遥感卫星原始数据第一帧在所述原始卫星数据中的帧数、分段遥感卫星原始数据最后一帧在所述原始卫星数据中的帧数以及分段遥感卫星原始数据的虚拟信道标识号。
根据本公开的实施例，所述方法还包括：
将一个数据文件下分段得到的每组分段遥感卫星原始数据存储于一个文件夹。
根据本公开的实施例，所述方法还包括：
解析所述分段遥感卫星原始数据的元数据信息；
将所述分段遥感卫星原始数据及所述分段遥感卫星原始数据的元数据信息注入数据库，并提供查询检索接口，所述查询检索接口支持按分段遥感卫星原始数据文件名、文件大小、文件序号、数据起始时间、数据帧计数以及虚拟信道号的至少之一进行查找。
本公开的第二方面提供了一种数据管理装置，包括：
采集模块，用于在卫星过境同时，实时采集遥感卫星原始数据的码流；
数据分段模式定义模块，用于定义遥感卫星原始数据的分段模式，所述遥感卫星原始数据的分段方式包括遥感卫星原始数据是否分段，遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值；
数据分段记录处理模块，用于对于分段的遥感卫星原始数据，根据所述遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值，对所述遥感卫星原始数据进行分段处理，生成分段遥感卫星原始数据；
分段遥感卫星原始数据元数据文件生成模块，用于生成每个分段遥感卫星原始数据的元数据信息，所述元数据信息用于对所述遥感卫星原始数据进行管理与查询。
本公开的第三方面提供了一种电子设备，包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
其中，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器执行上述第一方面所述的方法。
本公开的第四方面还提供了一种计算机可读存储介质，其上存储有可执行指令，该指令被处理器执行时使处理器执行上述第一方面所述的方法。
本公开通过将单个遥感卫星原始数据大文件分段成多个小数据文件，利用多种分段方式，可以满足用户使用业务需求，便于数据的精准选择、传输与使用，有效节约时间、资源与网络带宽。
附图说明
通过以下参照附图对本公开实施例的描述，本公开的上述内容以及其他目的、特征和优点将更为清楚，在附图中：
图1示意性示出了根据本公开实施例的遥感卫星原始数据处理和管理方法、系统、电子设备及介质的应用场景图。
图2示意性示出了根据本公开实施例的一种遥感卫星原始数据处理和管理方法的流程示意图；
图3示意性示出了根据本公开实施例的另一种遥感卫星原始数据处理和管理方法的流程示意图；
图4示意性示出了根据本公开实施例的一种遥感卫星原始数据处理和管理装置的结构框图；以及
图5示意性示出了根据本公开实施例的适用于实现遥感卫星原始数据处理和管理方法的电子设备的方框图。
具体实施方式
以下，将参照附图来描述本公开的实施例。但是应该理解，这些描述只是示例性的，而并非要限制本公开的范围。在下面的详细描述中，为便于解释，阐述了许多具体的细节以提供对本公开实施例的全面理解。然而，明显地，一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外，在以下说明中，省略了对公知结构和技术的描述，以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例，而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在，但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义，除非另外定义。应注意，这里使用的术语应解释为具有与本说明书的上下文相一致的含义，而不应以理想化或过于刻板的方式来解释。
图1示意性示出了根据本公开实施例的遥感卫星原始数据处理和管理方法、系统、电子设备及介质的应用场景图。
如图1所示，网络102用以在遥感卫星101和服务器103之间提供通信链路的介质。网络102可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。
服务器103可以是提供各种服务的服务器，例如地面基站利用网络102获取遥感卫星101的数据，服务器103对接收到数据进行分析等处理，并将处理结果通过网络102反馈给地面基站。
需要说明的是，本公开实施例所提供的遥感卫星原始数据处理和管理方法一般可以由服务器103执行。相应地，本公开实施例所提供的数据管理装置一般可以设置于服务器103中。本公开实施例所提供的遥感卫星原始数据处理和管理方法也可以由不同于服务器103且能够与遥感卫星101和/或服务器103通信的服务器或服务器集群执行。相应地，本公开实施例所提供的数据管理装置也可以设置于不同于服务器103且能够遥感卫星101和/或服务器103通信的服务器或服务器集群中。
应该理解，图1中的遥感卫星、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的遥感卫星、网络和服务器。
以下将基于图1描述的场景，通过图2对本公开实施例的遥感卫星原始数据处理和管理方法进行详细描述。
图2示意性示出了根据本公开实施例的一种遥感卫星原始数据处理和管理方法的流程示意图。该遥感卫星原始数据处理和管理方法包括步骤S1-S4。
在步骤S1，在卫星过境同时，实时采集遥感卫星原始数据的码流；
在步骤S2，定义遥感卫星原始数据的分段模式，该遥感卫星原始数据的分段方式包括遥感卫星原始数据是否分段，遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值；
在步骤S3，对于分段的遥感卫星原始卫星数据，根据该遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值，对该卫星数据进行分段处理，生成分段遥感卫星原始数据；
在步骤S4，生成每个分段遥感卫星原始数据的元数据信息，该元数据信息用于对该分段遥感卫星原始数据进行管理与查询。
在本公开中，地面基站在接收原始卫星数据的同时，利用解调器采集原始卫星数据码流，并按预设分段方式，生成多个较小的分段遥感卫星原始数据文件，便于原始卫星数据的替换，节省了数据查询时间。
在本公开的一些实施例中，该定义遥感卫星原始数据的分段模式包括：定义遥感卫星原始数据是否分段以及分段类型，该分段类型包括按数据量分段、按时间分段、按帧数分段以及按卫星虚拟信道标识号分段中的至少一种；在遥感卫星原始数据需要分段的情况下，根据该分段类型定义每种分段方式的具体分段参数值。
上述根据该分段类型定义每种分段方式的具体分段参数值包括：在该分段方式为按数据量分段的情况下，具体分段参数值的单位为Mbps；在该分段方式为按时间分段的情况下，具体分段参数值的单位为秒(s)；在该分段方式为按帧数分段的情况下，具体分段参数值的单位为帧数；在该分段方式为按卫星虚拟信道标识号的情况下，具体分段参数值为卫星虚拟信道标识号。
具体的，SplitType：定义大数据文件是否分段以及分段的类型。NULL：表示不做分段；DATASIZE：按数据量分段；TIME：按时间分段；FRAME：按帧数分段；VCID：按卫星虚拟信道标识(VCID)分段。
SplitContent：当需要分段时，结合前面的SplitType分段方式定义分段的具体依据参数值。SplitType＝DATASIZE时，表示以多少数据量为单位进行分段，单位为Mbps；SplitType＝TIME时，表示以多少时间为单位进行分段，单位为s；SplitType＝FRAME时，表示以多少帧数为单位进行分段。
在本公开的一些实施例中，根据该遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值，对该遥感卫星原始数据进行分段处理，生成分段遥感卫星原始数据包括：在分段方式为按数据量分段的情况下，每达到具体分段参数值指定的数据量，则按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据；在分段方式为按时间分段的情况下，按照卫星原始数据格式解析每帧数据的时间码标识位，计算出时间量，每达到所述时间量，则按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据；在分段方式为按帧数分段的情况下，每达到具体分段参数值指定的帧数，则按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据；在分段方式为按卫星虚拟信道标识号的情况下，按照卫星原始数据格式解析每帧数据的虚拟信道标识号，同一个卫星虚拟信道标识号的数据按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据。
具体的，按数据量分段：当SplitType为DATASIZE时，按照SplitContent指定的数据量为单位进行分段，每达到指定的数据量，则生成一个分段遥感卫星原始数据；
按时间分段：当SplitType为TIME时，按照SplitContent指定的时间为单位进行分段，每达到指定的时间长度，则生成一个分段遥感卫星原始数据；
按帧数分段：当SplitType为FRAME时，按照SplitContent指定的帧数为单位进行分段，每达到指定的帧数，则生成一个分段遥感卫星原始数据。
按虚拟信道标识分段：当SplitType为VCID时，按照虚拟信道标识对数据进行分段，同一虚拟信道标识的数据生成一个分段遥感卫星原始数据。
在本公开的一些实施例中，该元数据信息包括该分段遥感卫星原始数据的基本属性信息和专有属性信息。
该基本属性信息包括卫星、轨道号、通道号和任务单号。
该专有属性信息包括：
data_filename：分段遥感卫星原始数据文件名；
file_size：分段遥感卫星原始数据文件大小；
split_start_time：分段遥感卫星原始数据开始时间；
split_end_time：分段遥感卫星原始数据结束时间；
frame_start_num：分段遥感卫星原始数据第一帧在原文件中的帧数；
frame_end_num：分段遥感卫星原始数据最后一帧在原文件中的帧数；
vcid：该分段遥感卫星原始数据的虚拟信道标识。
可以理解的，分段遥感卫星原始数据的基本属性信息和专有属性信息除了以上示意性示例之外，还可以包括其它必要的信息，本公开对此不做限制。
在本公开的一些实施例中，图1所示方法还包括：将一个数据文件下分段得到的每组分段遥感卫星原始数据存储于一个文件夹，即原来一个大数据文件生成的分段遥感卫星原始数据存储于一个文件夹。
图3示意性示出了根据本公开实施例的一种遥感卫星原始数据处理和管理方法的流程示意图。该遥感卫星原始数据处理和管理方法除了包括步骤S1-S4之外还包括S5-S6。
在步骤S1，在卫星过境同时，实时采集遥感卫星原始数据的码流。
在步骤S2，定义遥感卫星原始数据的分段模式，该遥感卫星原始数据的分段方式包括遥感卫星原始数据是否分段，遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值。
在步骤S3，对于分段的遥感卫星原始数据，根据该遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值，对该遥感卫星原始数据进行分段处理，生成分段遥感卫星原始数据。
在步骤S4，生成每个分段遥感卫星原始数据的元数据信息，该元数据信息用于对该遥感卫星原始数据进行管理与查询。
在步骤S5，解析该分段遥感卫星原始数据的元数据信息。
在步骤S6，将该分段遥感卫星原始数据及该分段遥感卫星原始数据的元数据信息注入数据库，并提供查询检索接口，该查询检索接口支持按分段遥感卫星原始数据文件名、文件大小、文件序号、数据起始时间、数据帧计数以及虚拟信道号的至少之一进行查找。
根据本公开实施例提供的遥感卫星原始数据处理和管理方法，可以按照用户使用业务需求将大数据文件按照不同的方式分段成多个小数据文件，便于数据的精准选择、传输与使用，节省时间、资源与网络带宽等。
基于上述遥感卫星原始数据处理和管理方法，本公开还提供了一种遥感卫星原始数据处理和管理装置。以下将结合图4对该遥感卫星原始数据处理和管理装置进行详细描述。
图4示意性示出了根据本公开实施例的一种遥感卫星原始数据处理和管理装置的结构框图。
如图4所示，该实施例的遥感卫星原始数据处理和管理装置400包括采集模块401、数据分段模式定义模块402、数据分段记录处理模块403和分段遥感卫星原始数据元数据文件生成模块404。
采集模块401，用于在卫星过境同时，实时采集遥感卫星原始数据的码流；
数据分段模式定义模块402，用于定义遥感卫星原始数据的分段模式，该遥感卫星原始数据的分段方式包括遥感卫星原始数据是否分段，遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值；
数据分段记录处理模块403，用于对于分段的遥感卫星原始数据，根据该遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值，对该遥感卫星原始数据进行分段处理，生成分段遥感卫星原始数据；
分段遥感卫星原始数据元数据文件生成模块404，用于生成每个分段遥感卫星原始数据的元数据信息，该元数据信息用于对该分段遥感卫星原始进行管理与查询。
在本公开的一些实施例中，该定义遥感卫星原始数据的分段模式包括：
定义遥感卫星原始数据是否分段以及分段类型，该分段类型包括按数据量分段、按时间分段、按帧数分段以及按卫星虚拟信道标识号分段中的至少一种；
在遥感卫星原始数据需要分段的情况下，根据该分段类型定义每种分段方式的具体分段参数值。
在本公开的一些实施例中，该根据该分段类型定义每种分段方式的具体分段参数值包括：
在该分段方式为按数据量分段的情况下，具体分段参数值的单位为Mbps；
在该分段方式为按时间分段的情况下，具体分段参数值的单位为s；
在该分段方式为按帧数分段的情况下，具体分段参数值的单位为帧数；
在该分段方式为按卫星虚拟信道标识号的情况下，具体分段参数值为卫星虚拟信道标识号。
在本公开的一些实施例中，该根据该遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值，对该遥感卫星原始数据进行分段处理，生成分段遥感卫星原始数据包括：
在所述分段方式为按数据量分段的情况下，每达到所述具体分段参数值指定的数据量，则按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据；
在所述分段方式为按时间分段的情况下，按照卫星原始数据格式解析每帧数据的时间码标识位，计算出时间量，每达到所述时间量，则按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据；
在所述分段方式为按帧数分段的情况下，每达到所述具体分段参数值指定的帧数，则按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据；
在所述分段方式为按卫星虚拟信道标识号的情况下，按照卫星原始数据格式解析每帧数据的虚拟信道标识号，同一个卫星虚拟信道标识号的数据按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据。
在本公开的一些实施例中，该元数据信息包括该分段遥感卫星原始数据的基本属性信息和专有属性信息；
该基本属性信息包括卫星、轨道号、通道号和任务单号中的至少之一；
该专有属性信息包括分段遥感卫星原始数据文件名、分段遥感卫星原始数据文件大小、分段遥感卫星原始数据的分段序号、分段遥感卫星原始数据的开始时间、分段遥感卫星原始数据的结束时间、分段遥感卫星原始数据第一帧在该原始卫星数据中的帧数、分段遥感卫星原始数据最后一帧在该原始卫星数据中的帧数以及分段遥感卫星原始数据的虚拟信道标识号。
在本公开的一些实施例中，装置400还包括：
存储模块，用于将一个数据文件下分段得到的每组分段遥感卫星原始数据存储于一个文件夹。
在本公开的一些实施例中，装置400还包括：
解析模块，解析该分段遥感卫星原始数据的元数据信息；
检索模块，用于将该分段遥感卫星原始数据及该分段遥感卫星原始数据的元数据信息注入数据库，并提供查询检索接口，该查询检索接口支持按分段遥感卫星原始数据文件名、文件大小、文件序号、数据起始时间、数据帧计数以及虚拟信道号的至少之一进行查找。
根据本公开的实施例，采集模块401、数据分段模式定义模块402、数据分段记录处理模块403和分段遥感卫星原始数据元数据文件生成模块404中的任意多个模块可以合并在一个模块中实现，或者其中的任意一个模块可以被拆分成多个模块。或者，这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合，并在一个模块中实现。
根据本公开的实施例，采集模块401、数据分段模式定义模块402、数据分段记录处理模块403和分段遥感卫星原始数据元数据文件生成模块404中的至少一个可以至少被部分地实现为硬件电路，例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC)，或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现，或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者，采集模块401、数据分段模式定义模块402、数据分段记录处理模块403和分段遥感卫星原始数据元数据文件生成模块404中的至少一个可以至少被部分地实现为计算机程序模块，当该计算机程序模块被运行时，可以执行相应的功能。
图5示意性示出了根据本公开实施例的适用于实现遥感卫星原始数据处理和管理方法的电子设备的方框图。
如图5所示，根据本公开实施例的电子设备500包括处理器501，其可以根据存储在只读存储器(ROM)502中的程序或者从存储部分508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。处理器501例如可以包括通用微处理器(例如CPU)、指令集处理器和/或相关芯片组和/或专用微处理器(例如，专用集成电路(ASIC))等等。处理器501还可以包括用于缓存用途的板载存储器。处理器501可以包括用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
在RAM 503中，存储有电子设备500操作所需的各种程序和数据。处理器501、ROM502以及RAM 503通过总线504彼此相连。处理器501通过执行ROM 502和/或RAM 503中的程序来执行根据本公开实施例的方法流程的各种操作。需要注意，该程序也可以存储在除ROM502和RAM503以外的一个或多个存储器中。处理器501也可以通过执行存储在该一个或多个存储器中的程序来执行根据本公开实施例的方法流程的各种操作。
根据本公开的实施例，电子设备500还可以包括输入/输出(I/O)接口505，输入/输出(I/O)接口505也连接至总线504。电子设备500还可以包括连接至I/O接口505的以下部件中的一项或多项：包括键盘、鼠标等的输入部分506；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分507；包括硬盘等的存储部分508；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分509。通信部分509经由诸如因特网的网络执行通信处理。驱动器510也根据需要连接至I/O接口505。可拆卸介质511，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器510上，以便于从其上读出的计算机程序根据需要被安装入存储部分508。
本公开还提供了一种计算机可读存储介质，该计算机可读存储介质可以是上述实施例中描述的设备/装置/系统中所包含的；也可以是单独存在，而未装配入该设备/装置/系统中。上述计算机可读存储介质承载有一个或者多个程序，当上述一个或者多个程序被执行时，实现根据本公开实施例的方法。
根据本公开的实施例，计算机可读存储介质可以是非易失性的计算机可读存储介质，例如可以包括但不限于：便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。例如，根据本公开的实施例，计算机可读存储介质可以包括上文描述的ROM 502和/或RAM 503和/或ROM 502和RAM 503以外的一个或多个存储器。
附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
以上在本公开的技术方案中，所涉及的遥感卫星数据的获取和存储等，均符合相关法律法规的规定，采取了必要保密措施，且不违背公序良俗。
本领域技术人员可以理解，本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合，即使这样的组合或结合没有明确记载于本公开中。特别地，在不脱离本公开精神和教导的情况下，本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
以上对本公开的实施例进行了描述。但是，这些实施例仅仅是为了说明的目的，而并非为了限制本公开的范围。尽管在以上分别描述了各实施例，但是这并不意味着各个实施例中的措施不能有利地结合使用。本公开的范围由所附权利要求及其等同物限定。不脱离本公开的范围，本领域技术人员可以做出多种替代和修改，这些替代和修改都应落在本公开的范围之内。
Claims (9)
1.一种遥感卫星原始数据处理和管理方法，其特征在于，包括：
在卫星过境同时，实时采集遥感卫星原始数据的码流；
定义遥感卫星原始数据的分段模式，所述遥感卫星原始数据的分段方式包括遥感卫星原始数据是否分段，遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值；
对于分段的遥感卫星原始数据，根据所述遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值，对所述遥感卫星原始数据进行分段处理，生成分段遥感卫星原始数据；
生成每个分段遥感卫星原始数据的元数据信息，所述元数据信息用于对所述分段遥感卫星原始数据进行管理与查询。
2.根据权利要求1所述的遥感卫星原始数据处理和管理方法，其特征在于，所述定义遥感卫星原始数据的分段模式包括：
定义遥感卫星原始数据是否分段以及分段类型，所述分段类型包括按数据量分段、按时间分段、按帧数分段以及按卫星虚拟信道标识号分段中的至少一种；
在遥感卫星原始数据需要分段的情况下，根据所述分段类型定义每种分段方式的具体分段参数值。
3.根据权利要求2所述的遥感卫星原始数据处理和管理方法，其特征在于，所述根据所述分段类型定义每种分段方式的具体分段参数值包括：
在所述分段方式为按数据量分段的情况下，具体分段参数值的单位为Mbps；
在所述分段方式为按时间分段的情况下，具体分段参数值的单位为秒；
在所述分段方式为按帧数分段的情况下，具体分段参数值的单位为帧数；
在所述分段方式为按卫星虚拟信道标识号的情况下，具体分段参数值为卫星虚拟信道标识号。
4.根据权利要求1或3所述的遥感卫星原始数据处理和管理方法，其特征在于，所述根据所述遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值，对所述遥感卫星原始数据进行分段处理，生成分段遥感卫星原始数据包括：
在所述分段方式为按数据量分段的情况下，每达到所述具体分段参数值指定的数据量，则按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据；
在所述分段方式为按时间分段的情况下，按照卫星原始数据格式解析每帧数据的时间码标识位，计算出时间量，每达到所述时间量，则按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据；
在所述分段方式为按帧数分段的情况下，每达到所述具体分段参数值指定的帧数，则按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据；
在所述分段方式为按卫星虚拟信道标识号的情况下，按照卫星原始数据格式解析每帧数据的虚拟信道标识号，同一个卫星虚拟信道标识号的数据按照卫星原始数据格式重新组织生成一个分段遥感卫星原始数据。
5.根据权利要求1所述的遥感卫星原始数据处理和管理方法，其特征在于，所述元数据信息包括所述分段遥感卫星原始数据的基本属性信息和专有属性信息；
所述基本属性信息包括卫星、轨道号、通道号和任务单号；
所述专有属性信息包括分段遥感卫星原始数据文件名、分段遥感卫星原始数据文件大小、分段遥感卫星原始数据的分段序号、分段遥感卫星原始数据的开始时间、分段遥感卫星原始数据的结束时间、分段遥感卫星原始数据第一帧在所述原始卫星数据中的帧数、分段遥感卫星原始数据最后一帧在所述原始卫星数据中的帧数以及分段遥感卫星原始数据的虚拟信道标识号。
6.根据权利要求1所述的遥感卫星原始数据处理和管理方法，其特征在于，所述方法还包括：
解析所述分段遥感卫星原始数据的元数据信息；
将所述分段遥感卫星原始数据及所述分段遥感卫星原始数据的元数据信息注入数据库，并提供查询检索接口，所述查询检索接口支持按分段遥感卫星原始数据文件名、文件大小、文件序号、数据起始时间、数据帧计数以及虚拟信道号的至少之一进行查找。
7.一种数据管理装置，其特征在于，包括：
采集模块，用于在卫星过境同时，实时采集遥感卫星原始数据的码流；
数据分段模式定义模块，用于定义遥感卫星原始数据的分段模式，所述遥感卫星原始数据的分段方式包括遥感卫星原始数据是否分段，遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值；
数据分段记录处理模块，用于对于分段的遥感卫星原始数据，根据所述遥感卫星原始数据的分段方式以及每种分段方式的具体分段参数值，对所述遥感卫星原始数据进行分段处理，生成分段遥感卫星原始数据；
分段遥感卫星原始数据元数据文件生成模块，用于生成每个分段遥感卫星原始数据的元数据信息，所述元数据信息用于对所述遥感卫星原始数据进行管理与查询。
8.一种电子设备，其特征在于，包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
其中，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器执行根据权利要求1～7中任一项所述的方法。
9.一种计算机可读存储介质，其特征在于，其上存储有可执行指令，该指令被处理器执行时使处理器执行根据权利要求1～7中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311394118.2A CN117332134A (zh) | 2023-10-25 | 2023-10-25 | 遥感卫星原始数据处理和管理方法、装置、设备及介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311394118.2A CN117332134A (zh) | 2023-10-25 | 2023-10-25 | 遥感卫星原始数据处理和管理方法、装置、设备及介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN117332134A true CN117332134A (zh) | 2024-01-02 |
Family
ID=89275346
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202311394118.2A Pending CN117332134A (zh) | 2023-10-25 | 2023-10-25 | 遥感卫星原始数据处理和管理方法、装置、设备及介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117332134A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117650836A (zh) * | 2024-01-30 | 2024-03-05 | 中国科学院空天信息创新研究院 | 多站协同的遥感卫星数据信息获取方法、装置及存储介质 |
| CN117650836B (zh) * | 2024-01-30 | 2024-05-03 | 中国科学院空天信息创新研究院 | 多站协同的遥感卫星数据信息获取方法、装置及存储介质 |
-
2023
- 2023-10-25 CN CN202311394118.2A patent/CN117332134A/zh active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117650836A (zh) * | 2024-01-30 | 2024-03-05 | 中国科学院空天信息创新研究院 | 多站协同的遥感卫星数据信息获取方法、装置及存储介质 |
| CN117650836B (zh) * | 2024-01-30 | 2024-05-03 | 中国科学院空天信息创新研究院 | 多站协同的遥感卫星数据信息获取方法、装置及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111949850B (zh) | 多源数据的采集方法、装置、设备及存储介质 | |
| CN111447251A (zh) | 用于使用边缘计算来收集、监测并分析来自多个车辆的车辆数据的系统和方法 | |
| CN111352903A (zh) | 日志管理平台、日志管理方法、介质以及电子设备 | |
| CN112948492A (zh) | 一种数据处理系统、方法、装置、电子设备及存储介质 | |
| CN111950857A (zh) | 基于业务指标的指标体系管理方法、装置以及电子设备 | |
| CN108710644A (zh) | 一种关于政务大数据处理方法 | |
| CN113485962A (zh) | 日志文件的存储方法、装置、设备和存储介质 | |
| CN102222112A (zh) | 资源管理装置和资源管理方法 | |
| CN111831750A (zh) | 一种区块链数据分析方法、装置、计算机设备及存储介质 | |
| CN117332134A (zh) | 遥感卫星原始数据处理和管理方法、装置、设备及介质 | |
| CN116185393A (zh) | 接口文档的生成方法、装置、设备、介质及产品 | |
| CN114328700B (zh) | 医疗数据etl任务中的数据核查方法及装置 | |
| CN115309802A (zh) | 用户分布热力图获取方法、装置、电子设备及存储介质 | |
| CN114661571A (zh) | 模型评测方法、装置、电子设备和存储介质 | |
| CN110955709B (zh) | 一种数据的处理方法、装置及电子设备 | |
| CN114169318A (zh) | 进程识别方法、装置、设备、介质和程序 | |
| CN110908886A (zh) | 一种数据发送方法、装置、电子设备和存储介质 | |
| CN111859145B (zh) | 信息的搜索方法及装置、电子设备、计算机存储介质 | |
| CN114239517A (zh) | 数据处理方法、装置、电子设备及存储介质 | |
| CN113934744A (zh) | 一种数据共享的方法及设备 | |
| CN116204521A (zh) | 数据质量检核方法、装置、设备、存储介质及程序产品 | |
| CN117674972A (zh) | Sar遥感卫星数据处理方法、装置、设备及存储介质 | |
| CN115348253A (zh) | 数据传输系统的数据传输方法及数据传输系统 | |
| CN112488412A (zh) | 时长信息确定方法、装置、电子设备及计算机存储介质 | |
| CN116800687A (zh) | 客户端流量处理方法、装置、设备、存储介质和程序产品 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |