CN117278653A - 面向分布式站点卫星的数据记录传输系统及方法 - Google Patents
面向分布式站点卫星的数据记录传输系统及方法 Download PDFInfo
- Publication number
- CN117278653A CN117278653A CN202311189212.4A CN202311189212A CN117278653A CN 117278653 A CN117278653 A CN 117278653A CN 202311189212 A CN202311189212 A CN 202311189212A CN 117278653 A CN117278653 A CN 117278653A
- Authority
- CN
- China
- Prior art keywords
- data
- test
- transmission
- satellite
- software
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 160
- 238000000034 method Methods 0.000 title claims abstract description 28
- 238000012360 testing method Methods 0.000 claims abstract description 167
- 238000004088 simulation Methods 0.000 claims abstract description 96
- 238000011056 performance test Methods 0.000 claims abstract description 59
- 238000004458 analytical method Methods 0.000 claims abstract description 48
- 238000007726 management method Methods 0.000 claims abstract description 35
- 238000013075 data extraction Methods 0.000 claims abstract description 31
- 238000000605 extraction Methods 0.000 claims abstract description 14
- 238000013523 data management Methods 0.000 claims abstract description 11
- 238000009826 distribution Methods 0.000 claims description 19
- 238000012544 monitoring process Methods 0.000 claims description 19
- 238000012545 processing Methods 0.000 claims description 17
- 230000003993 interaction Effects 0.000 claims description 14
- 238000012795 verification Methods 0.000 claims description 12
- 238000001514 detection method Methods 0.000 claims description 8
- 230000007246 mechanism Effects 0.000 claims description 8
- 238000013500 data storage Methods 0.000 claims description 3
- 238000011990 functional testing Methods 0.000 claims description 3
- 230000002159 abnormal effect Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000010276 construction Methods 0.000 description 5
- 230000009466 transformation Effects 0.000 description 4
- 230000005856 abnormality Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000013024 troubleshooting Methods 0.000 description 3
- 238000005253 cladding Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000005315 distribution function Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000013468 resource allocation Methods 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B7/00—Radio transmission systems, i.e. using radiation field
- H04B7/14—Relay systems
- H04B7/15—Active relay systems
- H04B7/185—Space-based or airborne stations; Stations for satellite systems
- H04B7/1851—Systems using a satellite or space-based relay
- H04B7/18513—Transmission in a satellite or space-based system
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Physics & Mathematics (AREA)
- Astronomy & Astrophysics (AREA)
- Aviation & Aerospace Engineering (AREA)
- General Physics & Mathematics (AREA)
- Environmental & Geological Engineering (AREA)
- Monitoring And Testing Of Transmission In General (AREA)
Abstract
本发明提供了一种面向分布式站点卫星的数据记录传输系统及方法,可以应用于遥感卫星技术领域。该系统包括:所述数据采集传输硬件平台,用于支持数据采集、传输、提取等原始数据业务运行;模拟设备管理模块,用于对运行业务所需要的设备及软件进行模拟,生成并管理模拟设备;测试数据管理模块,用于提供多种测试数据集,多种测试数据集用于验证数据采集功能、数据传输功能、数据提取功能和数据质量分析功能;功能性能测试模块,用于进行功能性能测试;接口测试模块,用于进行接口测试,实现数据记录传输系统的自动化测试。
Description
技术领域
本发明涉及遥感卫星领域,尤其涉及一种面向分布式站点卫星的数据记录传输系统及方法。
背景技术
随着越来越多的遥感卫星发射上天,遥感卫星地面站承担着越来越多的遥感卫星数据接收任务,这对接收站的遥感卫星接收系统的无故障稳定运行提出了更高的要求。目前国内外的遥感卫星接收系统,都逐渐实现了无人值守、自动化运行的能力。采用先进自动化测试技术,可以用以对系统进行故障诊断,进行模块功能、性能、接口验证测试,对于保障系统可靠运行有重要意义。
在传统遥感卫星地面接收系统或者小型遥感卫星地面接收站中,采用利用解调器设备的本地存储功能或者简单数据记录软件完成数据采集工作,后续采用人工介入或者自动化推送的方式,将数据推送至数据中心。这种传统的地面站设计弱化了原始数据的实时性要求。
在分布式地面接收站点建设中,在地面站有数据采集、实时和事后传输、数据质量分析、数据快速提取等各种原始数据实时处理的需求。数据记录传输系统需要从解调器设备实时采集基带数据,对卫星原始数据进行数据记录、质量分析、格式化提取等处理后,交由数据传输系统将数据回传至本部数据中心。同时在地面站数据接收的同时,可以进行数据质量分析报告,快速提取用户感兴趣数据。在最新的国家民用遥感卫星地面接收站以及分布式地面接收站点建设中,数据记录传输系统承担的角色越来越重要,这也是遥感卫星接收系统的一个发展趋势。
数据记录传输系统与卫星数据特点联系更为紧密,对数据误码状态也更为敏感,导致了相关模块的升级和改造也更为频繁。这就需要建立一种自动化测试方法,能够对数据记录传输系统进行模块功能、性能、接口验证测试,保证相关模块升级和改造后能够与卫星接收系统的兼容性。
当前在大多数遥感卫星的地面接收系统中,数据记录传输系统更多的是作为一种数据转存的功能存在,并没有针对性的进行自动化测试功能的设计。
发明内容
鉴于上述问题,本发明提供了面向分布式站点卫星的数据记录传输系统及方法。
根据本发明的第一个方面,提供了一种面向分布式站点卫星的数据记录传输系统,包括:数据采集传输硬件平台、模拟设备管理模块、测试数据管理模块、功能性能测试模块、接口测试模块;
所述数据采集传输硬件平台,用于支持数据运行业务的运行,所述运行业务包括采集业务、传输业务、提取业务;
所述模拟设备管理模块,用于对运行业务所需要的设备及软件进行模拟,生成并管理模拟设备,所述模拟设备包括解调器模拟设备、数据分发模拟设备、数据传输模拟设备、任务管控模拟设备、集中监视上报模拟设备;
所述测试数据管理模块,用于提供多种测试数据集,所述多种测试数据集用于验证数据采集功能、数据传输功能、数据提取功能和数据质量分析功能;
所述功能性能测试模块,用于进行功能性能测试,所述功能性能测试包括所述数据采集功能性能测试、所述数据传输功能性能测试、所述数据提取功能性能测试和所述数据质量分析功能性能测试;
所述接口测试模块,用于进行接口测试,所述接口测试包括模拟解调器接口测试、模拟数据分发接口测试、模拟数据传输接口测试、模拟任务单交互接口测试和模拟集中监视信息接口测试。
根据本发明的实施例,还包括:
软件管理模块,用于对系统内部的软件进行管理,并触发所述功能性测试和/或所述接口测试;
其中,所述软件包括数据提取软件、数据质量分析软件、数据采集软件、数据传输软件及数据格式解析软件。
根据本发明的实施例,所述多种测试数据集的数据类型包括:PN23\PN15序列数据、正确的卫星原始数据、从卫星接收站积累不同接收状态的真实卫星跟踪数据;
所述PN23\PN15序列数据,用于验证数据采集功能和数据传输功能;
所述正确的卫星原始数据,用于通过数据提取软件验证所述数据提取功能,利用数据质量分析软件验证所述数据质量分析功能;
所述从卫星接收站积累不同接收状态的真实卫星跟踪数据,用于通过数据质量分析软件验证数据接收状态。
根据本发明的实施例,所述数据采集功能性能测试包括:
通过解调器模拟设备,配置要回放的卫星的参数作为数据采集软件的模拟数据源,验证数据采集软件的数据采集协议正确性、数据采集性能和数据采集的可靠性;
通过数据传输模拟设备,模拟接收实时传输数据,验证数据采集软件边采集边传输功能的正确性;
通过数据格式分析模拟设备,对采集后的原始数据进行数据格式检查。
根据本发明的实施例,所述数据传输功能性能测试包括:
通过数据传输模拟设备,配置数据接收的TCP信息、数据协议类型、数据存储路径,验证数据传输软件的传输协议是否正确,发送数据与本地数据是否一致,以及数据传输效率是否满足指标要求;
通过ftp模拟服务器端,接收传输完成的数据,通过分析工具,对比传输完成的数据与本地数据的一致性,检查数据传输协议的正确性。
根据本发明的实施例,所述数据提取功能性能测试包括:
通过数据分发模拟设备,测试数据提取软件的数据提取能力是否满足协议和性能要求;
通过数据提取模拟设备,针对指定卫星,从所述测试数据集选取特定测试数据,将所述特定测试数据对比提取的数据,判断是否满足设定提取参数的要求。
根据本发明的实施例,所述数据质量分析功能性能测试包括:
通过配置数据分发模拟设备,测试数据质量分析软件数据获取能力是否满足协议、性能要求;
针对指定卫星,通过正常数据、误码数据、实际接收的卫星数据检查数据质量分析软件的分析报告,验证数据质量分析功能的正确性;
通过XSD校验机制,验证数据质量分析报告格式的正确性。
根据本发明的实施例,所述模拟解调器接口测试,用于通过解调器模拟设备,进行数据采集接口之间的测试,实现对主流数据格式的模拟接收能力;
所述模拟数据分发接口测试,用于数据提取软件、数据质量分析软件、数据格式解析软件的数据获取接口测试验证;
所述模拟数据传输接口测试,用于针对多协议的数据传输要求,通过数据传输模拟设备进行数据接收功能测试;
所述模拟任务单交互接口测试,用于支持基于ftp文件方式,模拟不同任务类型组合的远控任务单的下发、状态反馈文件的接收和解析,验证任务交互接口正确性;
所述模拟集中监视信息接口测试,用于支持基于UDP和TCP两种方式的集中监视信息收集模拟设备,可以验证主动上报、查询上报两种模式的监视信息上报功能的正确性。
根据本发明的实施例,还包括:
卫星管理模块,用于提供与所述业务环境一致的卫星参数配置,以保障不同卫星在不同业务处理任务情况下的自兼容能力;
异常处理模块,用于对系统的异常情况进行人工故障模拟,生成故障排查结果,并以规范化标识对所述故障排查结果进行上报。
本发明的第二方面提供了一种应用于第一方面所述的面向分布式站点卫星的数据记录传输系统的数据记录传输方法,包括:
利用所述数据采集传输硬件平台支持数据运行业务的运行,所述运行业务包括采集业务、传输业务、提取业务;
利用所述模拟设备管理模块对运行业务所需要的设备及软件进行模拟,生成并管理模拟设备;
利用所述测试数据管理模块提供多种测试数据集,所述多种测试数据集用于验证数据采集功能、数据传输功能、数据提取功能和数据质量分析功能;
利用所述功能性能测试模块进行功能性能测试,所述功能性能测试包括所述数据采集功能性能测试、所述数据传输功能性能测试、所述数据提取功能性能测试和所述数据质量分析功能性能测试;
利用所述接口测试模块进行接口测试,所述接口测试包括模拟解调器接口测试、模拟数据分发接口测试、模拟数据传输接口测试、模拟任务单交互接口测试和模拟集中监视信息接口测试。
本发明提供的面向分布式站点卫星的数据记录传输系统及方法至少具有以下有益效果:
(1)本发明具备多卫星数据格式、多码率的记录与实时传输自兼容能力,具备良好的通用性和可扩展性;
(2)本发明提出的模拟设备管理及系统模拟测试,定义了一种自动化模拟测试功能,具备良好的系统能力模拟测试验证能力,可以为后续系统建设初始化、系统能力升级改造等提供模拟设备及环境的测试能力;
(3)本发明提出的遥感卫星测试数据集,可以在系统建设过程中,针对各种数据格式、数据误码等情况积累大量真实测试数据,为系统中可能出现的各种异常数据情况积累测试基础数据,用以配合提高系统对记录、传输卫星数据过程中的异常兼容处理能力;
(4)本发明提出的软件信息及卫星参数信息管理,具备对系统软件部署信息进行管理,为任务调度资源分配提供软件基础信息。并具备对卫星参数信息的管理能力,为系统运行提供基础信息支撑;
(5)本发明提出了异常处理上报机制,总结了数据记录及传输过程中可能出现的各种常见异常情况及原因反馈,为系统运行中异常情况的排查及状态反馈提供了规范的异常排查依据。
附图说明
通过以下参照附图对本发明实施例的描述,本发明的上述内容以及其他目的、特征和优点将更为清楚,在附图中:
图1示意性示出了根据本发明实施例的面向分布式站点卫星的数据记录传输系统的示意图;
图2示意性示出了根据本发明实施例的数据记录传输方法的流程图。
具体实施方式
以下,将参照附图来描述本发明的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本发明的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本发明实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本发明的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本发明。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。
在本发明的技术方案中,所涉及的用户个人信息的收集、存储、使用、加工、传输、提供、发明和应用等处理,均符合相关法律法规的规定,采取了必要保密措施,且不违背公序良俗。
在本发明的技术方案中,对数据的获取、收集、存储、使用、加工、传输、提供、发明和应用等处理,均符合相关法律法规的规定,采取了必要保密措施,且不违背公序良俗。
当前,并没有针对数据记录传输系统进行自动化测试的研究。本发明针对数据记录传输系统的运行特点,设计实现了数据采集传输硬件设备、模拟设备管理模块、测试数据管理模块、功能性能测试模块、接口测试模块、软件管理模块、卫星管理模块和异常处理模块及其功能、性能、接口验证测试,具有至少如下优点:
提供了模拟外部设备的方法和装置,可以模拟当前主流数字解调器设备进行卫星基带数据的回放,可以模拟外部数据传输系统验证不同卫星数据传输协议;
建立了卫星测试用数据集,可以对通用数据采集功能进行误码率测试,可以对不同卫星数据质量分析功能进行测试验证(验证质量分析的正确性和客观性),可以对不同卫星数据的实时格式解析、实时提取处理功能进行测试验证;
提供了接口测试的方法和装置,可以对当前主流的卫星数据格式(例如,国家推荐标准为《遥感卫星原始数据记录与交换格式>>,标准号为GB/T 31011-2014)进行检查,对新增卫星数据处理模块的数据交互协议进行测试验证;
提供了数据采集传输性能测试的方法和装置,可以在[0,3.5]Gpbs码率范围内对卫星数据的实时采集、传输进行性能测试,对数据提取的时延性能进行测试验证;
提供了软件模块管理机制,具备软件模块版本的管理和自动化更新能力;
提供了异常测试的方法,能够模拟外部解调器和数据传输系统的各种异常状态,验证数据记录传输相关模块的异常处理能力,并形成了异常编码表。
图1示意性示出了根据本发明实施例的面向分布式站点卫星的数据记录传输系统的示意图。
如图1所示,该实施例的面向分布式站点卫星的数据记录传输系统包括数据采集传输硬件设备、模拟设备管理模块、测试数据管理模块、功能性能测试模块、接口测试模块。
数据采集传输硬件平台,用于支持数据运行业务的运行,所述运行业务包括采集业务、传输业务、提取业务等。
具体的,系统基于通用服务器平台建设,通用数据采集传输服务器针对数据记录传输系统的功能特点,重点针对高IO的需求,专门针对磁盘IO、网络设备进行了高配置;进行万兆聚合、多磁盘RAID,具备0~3.5Gbps的数据记录传输能力。同时针对当前主流数字解调器设备,进行自兼容数据记录采集,并支持自定义协议模式的数据传输能力。
模拟设备管理模块,用于对运行业务所需要的设备及软件进行模拟,生成并管理模拟设备,模拟设备包括解调器模拟设备、数据分发模拟设备、数据传输模拟设备、任务管控模拟设备、集中监视上报模拟设备。
具体的,模拟设备管理模块对数据记录传输系统业务运行依赖的外部专用设备、专用软件进行模拟,包括解调器模拟设备、数据分发模拟设备、数据传输模拟设备、任务管控模拟设备、集中监视上报模拟设备等。各种模拟设备参数灵活可变,能够通过人机交互界面进行相关的配置和管理。
测试数据管理模块,用于提供多种测试数据集,该多种测试数据集用于验证数据采集功能、数据传输功能、数据提取功能和数据质量分析功能。
在一些实施例中,该多种测试数据集的数据类型包括PN23\PN15数据、不同卫星的无误码数据、有误码数据等。
PN23\PN15序列数据,用于验证数据采集功能和数据传输功能,也即检查不同码率数据采集的误码情况,验证系统是否具备在0~3.5Gbps码率情况下的稳定运行能力。
正确的卫星原始数据,用于通过数据提取软件验证该数据提取功能,利用数据质量分析软件验证该数据质量分析功能。
具体的,利用译码校验和基于CCSDS标准定义的数据格式,提取无误码、无丢帧的卫星原始数据,其用于数据提取、数据质量分析软件的正确性测试。基于正确的卫星原始数据,设置典型数据丢帧、数据帧头误码、数据辅助数据域误码、数据域误码等不同情形,用于数据提取、数据质量分析、数据格式解析软件的容错能力测试。
该从卫星接收站积累不同接收状态的真实卫星跟踪数据,用于通过数据质量分析软件验证数据接收状态。
该功能性能测试模块,用于进行功能性能测试,功能性能测试包括数据采集功能性能测试、数据传输功能性能测试、数据提取功能性能测试和数据质量分析功能性能测试。
在本实施例中,功能性能测试模块对数据记录传输系统的数据采集、传输、提取、质量分析等原始数据业务流程的功能、性能进行测试和验证。
在一些实施例中,数据采集功能性能测试主要测试三方面内容:
(1)通过解调器模拟设备,配置要回放的卫星的参数(原始数据类型、回放码速率、回放时间长度等)作为数据采集软件的模拟数据源,验证数据采集软件的数据采集协议正确性、数据采集性能和数据采集的可靠性;
(2)通过数据传输模拟设备,模拟接收实时传输数据,验证数据采集软件边采集边传输功能的正确性;
(3)通过数据格式分析模拟设备,对采集后的原始数据进行数据格式检查。
在一些实施例中,数据传输功能性能测试主要测试数据实时、事后传输功能两方面内容:
(1)通过数据传输模拟设备,配置数据接收的TCP信息、数据协议类型、数据存储路径等信息,验证数据传输软件的传输协议是否正确,发送数据与本地数据是否一致,以及数据传输效率是否满足指标要求等;
(2)通过ftp模拟服务器端,接收传输完成的数据,通过分析工具,对比传输完成的数据与本地数据的一致性,检查数据传输协议的正确性。
在一些实施例中,数据提取功能性能测试主要测试数据在传输层、源包层的提取能力,包括以下三方面内容:
(1)通过数据分发模拟设备,测试数据提取软件的数据提取能力是否满足协议和性能要求;
(2)通过数据提取模拟设备,针对指定卫星从该测试数据集选取特定测试数据,将该特定测试数据对比提取的数据,判断是否满足设定提取参数的要求。
(3)通过载入卫星配置参数,测试数据提取软件的灵活扩展能力。
在一些实施例中,数据质量分析功能性能测试主要测试对不同卫星的数据质量检查功能是否正确,包括以下四方面内容:
(1)通过配置数据分发模拟设备,测试数据质量分析软件数据获取能力是否满足协议、性能要求;
(2)针对指定卫星,通过正常数据、误码数据、实际接收的卫星数据检查数据质量分析软件的分析报告,验证数据质量分析功能的正确性;
(3)通过XSD校验机制,验证数据质量分析报告格式的正确性。
(4)通过载入卫星配置参数,测试数据质量分析软件的灵活扩展能力。
该接口测试模块,用于进行接口测试,该接口测试包括模拟解调器接口测试、模拟数据分发接口测试、模拟数据传输接口测试、模拟任务单交互接口测试和模拟集中监视信息接口测试。通过此模块对系统业务接口进行内部模拟测试,并可实现在不具备与外部分系统联通的情况下,进行外部接口的模拟测试能力。
模拟解调器接口测试:通过解调器模拟设备,进行数据采集接口之间的测试,实现对主流数据格式的模拟接收能力。
模拟数据分发接口测试:提供模拟数据分发软件,支持从文件转换为支持内部数据传输协议的网络分发功能,可以模拟网络粘包、数据分块传输、数据帧长变化等不同情形,用于后端数据提取、数据质量分析、数据格式解析相关软件的数据获取接口测试验证。
模拟数据传输接口测试:针对多协议的数据传输要求,提供了数据传输模拟设备,可支持多种协议进行数据接收功能测试,如:快视传输协议、原始数据传输协议、先导数据传输协议、高轨数据传输协议,达到验证系统多数据格式传输能力的目的。
模拟任务单交互接口测试:支持基于ftp文件方式,模拟不同任务类型组合的远控任务单的下发、状态反馈文件的接收和解析,可以验证数据记录传输系统的任务交互接口正确性。
模拟集中监视信息接口测试:支持基于UDP和TCP两种方式的集中监视信息收集模拟设备,可以验证数据记录传输系统主动上报、查询上报两种模式的监视信息上报功能的正确性。
在一些实施例中,面向分布式站点卫星的数据记录传输系统还包括卫星管理模块,用于提供与该业务环境一致的卫星参数配置,以保障不同卫星在不同业务处理任务情况下的自兼容能力。
具体的,遥感卫星有不同的数据格式特点,进行数据质量分析、格式解析等处理时,需要依赖卫星配置参数。卫星管理模块为自动化测试装置提供卫星参数的配置管理机制,通过提供与生产环境一致的卫星参数配置,保障不同卫星在不同业务处理任务情况下的自兼容能力。具体内容如下:
卫星参数配置管理,支持数据接收大系统内对卫星简称、卫星载荷名称、卫星数据格式等要求进行配置管理;
支持CCSDS标准卫星数据格式的管理,通过配置模板,定义基带数据格式,包括是否为交织数据、数据是否已解扰;定义卫星原始数据格式,包括AOS帧的不同参数的位置、虚拟信道的定义、源包数据域的位置等信息;定义卫星源包数据格式,包括源包层帧头、帧尾、帧长信息等信息;
卫星处理流程配置管理,提供卫星处理所需的不同流程顺序、流程依赖关系信息。
在一些实施例中,面向分布式站点卫星的数据记录传输系统还包括:异常处理模块,用于对系统的异常情况进行人工故障模拟,生成故障排查结果,并以规范化标识对该故障排查结果进行上报。
具体的,通过进行系统异常情况的人工故障模拟,例如解调器不吐数据、解调器网络异常、解调器译码错误帧多、数传网络连接异常、数传中间数据传输失败(检查断点重连、请求帧发送、负载均衡正确性)等情况,异常处理模块具备故障排查总结、以规范化标识ErrorCode进行故障原因上报能力。常见异常故障ErrorCode标识及原因定义如下表:
本发明支持在离线状态对数据记录传输系统相关模块进行功能、性能、接口以及异常处理等方面的测试验证,保障数据记录传输系统进行软件升级以及日常故障模拟过程中的正确性。
本发明提出了一种数据记录与传输系统,能够对数据记录传输系统的数据采集、数据传输、数据提取、数据质量分析等关键功能软件进行功能、性能、接口、流程以及异常测试,并支持自动化测试通过后的自动部署,提高记录传输系统的持续集成、持续部署能力。
本发明提出了使用软件专用模拟设备和专用软件的方法,可以在不依赖外部系统前提下,提高自身系统流程测试的自动化水平,对数据采集、数据传输、质量分析等核心软件的关键功能性能进行测试,具备良好的系统能力模拟测试验证能力,可以为后续系统建设初始化、系统能力升级改造等提供模拟设备及环境的测试。
本发明提出对卫星格式、卫星参数进行模板化管理的要求,提供卫星参数的配置管理机制,通过提供与生产环境一致的卫星参数配置,保障不同卫星在不同业务处理任务情况下的自兼容能力。
本发明提出了一种新的异常处理及上报方式,可以针对数据记录及传输过程中可能出现的各种异常情况,进行异常原因的实时反馈,大大缩短了异常排查的时间。
本发明提出了一种测试数据集管理机制,针对不同卫星、不同数据格式、不同数据误码等情况积累大量真实测试数据,配合测试并提高系统对记录、传输卫星数据过程中的异常兼容处理能力。
图2示意性示出了根据本发明实施例的数据记录传输方法的流程图。
如图2所示,该方法包括操作S210至S250。
在操作S210,利用该数据采集传输硬件平台支持数据运行业务的运行,所述运行业务包括采集业务、传输业务、提取业务;
在操作S220,利用该模拟设备管理模块对运行业务所需要的设备及软件进行模拟,生成并管理模拟设备;
在操作S230,利用该测试数据管理模块提供多种测试数据集,该多种测试数据集用于验证数据采集功能、数据传输功能、数据提取功能和数据质量分析功能;
在操作S240,利用功能性能测试模块进行功能性能测试,功能性能测试包括数据采集功能性能测试、数据传输功能性能测试、数据提取功能性能测试和数据质量分析功能性能测试;
在操作S250,利用该接口测试模块进行接口测试,该接口测试包括模拟解调器接口测试、模拟数据分发接口测试、模拟数据传输接口测试、模拟任务单交互接口测试和模拟集中监视信息接口测试。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本领域技术人员可以理解,本发明的各个实施例和/或权利要求中记载的特征可以进行多种组合或/或结合,即使这样的组合或结合没有明确记载于本发明中。特别地,在不脱离本发明精神和教导的情况下,本发明的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本发明的范围。
以上对本发明的实施例进行了描述。但是,这些实施例仅仅是为了说明的目的,而并非为了限制本发明的范围。尽管在以上分别描述了各实施例,但是这并不意味着各个实施例中的措施不能有利地结合使用。本发明的范围由所附权利要求及其等同物限定。不脱离本发明的范围,本领域技术人员可以做出多种替代和修改,这些替代和修改都应落在本发明的范围之内。
Claims (10)
1.一种面向分布式站点卫星的数据记录传输系统,包括:
数据采集传输硬件平台、模拟设备管理模块、测试数据管理模块、功能性能测试模块、接口测试模块;
所述数据采集传输硬件平台,用于支持数据运行业务的运行,所述运行业务包括采集业务、传输业务、提取业务;
所述模拟设备管理模块,用于对运行业务所需要的设备及软件进行模拟,生成并管理模拟设备,所述模拟设备包括解调器模拟设备、数据分发模拟设备、数据传输模拟设备、任务管控模拟设备、集中监视上报模拟设备;
所述测试数据管理模块,用于提供多种测试数据集,所述多种测试数据集用于验证数据采集功能、数据传输功能、数据提取功能和数据质量分析功能;
所述功能性能测试模块,用于进行功能性能测试,所述功能性能测试包括所述数据采集功能性能测试、所述数据传输功能性能测试、所述数据提取功能性能测试和所述数据质量分析功能性能测试;
所述接口测试模块,用于进行接口测试,所述接口测试包括模拟解调器接口测试、模拟数据分发接口测试、模拟数据传输接口测试、模拟任务单交互接口测试和模拟集中监视信息接口测试。
2.根据权利要求1所述的面向分布式站点卫星的数据记录传输系统,其特征在于,还包括:
软件管理模块,用于对系统内部的软件进行管理,并触发所述功能性测试和/或所述接口测试;
其中,所述软件包括数据提取软件、数据质量分析软件、数据采集软件、数据传输软件及数据格式解析软件。
3.根据权利要求1所述的面向分布式站点卫星的数据记录传输系统,其特征在于,所述多种测试数据集的数据类型包括:PN23\PN15序列数据、正确的卫星原始数据、从卫星接收站积累不同接收状态的真实卫星跟踪数据;
所述PN23\PN15序列数据,用于验证数据采集功能和数据传输功能;
所述正确的卫星原始数据,用于通过数据提取软件验证所述数据提取功能,利用数据质量分析软件验证所述数据质量分析功能;
所述从卫星接收站积累不同接收状态的真实卫星跟踪数据,用于通过数据质量分析软件验证数据接收状态。
4.根据权利要求1所述的面向分布式站点卫星的数据记录传输系统,其特征在于,所述数据采集功能性能测试包括:
通过解调器模拟设备,配置要回放的卫星的参数作为数据采集软件的模拟数据源,验证数据采集软件的数据采集协议正确性、数据采集性能和数据采集的可靠性;
通过数据传输模拟设备,模拟接收实时传输数据,验证数据采集软件边采集边传输功能的正确性;
通过数据格式分析模拟设备,对采集后的原始数据进行数据格式检查。
5.根据权利要求1所述的面向分布式站点卫星的数据记录传输系统,其特征在于,所述数据传输功能性能测试包括:
通过数据传输模拟设备,配置数据接收的TCP信息、数据协议类型、数据存储路径,验证数据传输软件的传输协议是否正确,发送数据与本地数据是否一致,以及数据传输效率是否满足指标要求;
通过ftp模拟服务器端,接收传输完成的数据,通过分析工具,对比传输完成的数据与本地数据的一致性,检查数据传输协议的正确性。
6.根据权利要求1所述的面向分布式站点卫星的数据记录传输系统,其特征在于,所述数据提取功能性能测试包括:
通过数据分发模拟设备,测试数据提取软件的数据提取能力是否满足协议和性能要求;
通过数据提取模拟设备,针对指定卫星,从所述测试数据集选取特定测试数据,将所述特定测试数据对比提取的数据,判断是否满足设定提取参数的要求。
7.根据权利要求1所述的面向分布式站点卫星的数据记录传输系统,其特征在于,所述数据质量分析功能性能测试包括:
通过配置数据分发模拟设备,测试数据质量分析软件数据获取能力是否满足协议、性能要求;
针对指定卫星,通过正常数据、误码数据、实际接收的卫星数据检查数据质量分析软件的分析报告,验证数据质量分析功能的正确性;
通过XSD校验机制,验证数据质量分析报告格式的正确性。
8.根据权利要求1所述的面向分布式站点卫星的数据记录传输系统,其特征在于,所述模拟解调器接口测试,用于通过解调器模拟设备,进行数据采集接口之间的测试,实现对主流数据格式的模拟接收能力;
所述模拟数据分发接口测试,用于数据提取软件、数据质量分析软件、数据格式解析软件的数据获取接口测试验证;
所述模拟数据传输接口测试,用于针对多协议的数据传输要求,通过数据传输模拟设备进行数据接收功能测试;
所述模拟任务单交互接口测试,用于支持基于ftp文件方式,模拟不同任务类型组合的远控任务单的下发、状态反馈文件的接收和解析,验证任务交互接口正确性;
所述模拟集中监视信息接口测试,用于支持基于UDP和TCP两种方式的集中监视信息收集模拟设备,可以验证主动上报、查询上报两种模式的监视信息上报功能的正确性。
9.根据权利要求1所述的面向分布式站点卫星的数据记录传输系统,其特征在于,还包括:
卫星管理模块,用于提供与所述业务环境一致的卫星参数配置,以保障不同卫星在不同业务处理任务情况下的自兼容能力;
异常处理模块,用于对系统的异常情况进行人工故障模拟,生成故障排查结果,并以规范化标识对所述故障排查结果进行上报。
10.一种应用于权利要求1至9任一项所述的面向分布式站点卫星的数据记录传输系统的数据记录传输方法,其特征在于,包括:
利用所述数据采集传输硬件平台支持数据运行业务的运行,所述运行业务包括采集业务、传输业务、提取业务;
利用所述模拟设备管理模块对运行业务所需要的设备及软件进行模拟,生成并管理模拟设备;
利用所述测试数据管理模块提供多种测试数据集,所述多种测试数据集用于验证数据采集功能、数据传输功能、数据提取功能和数据质量分析功能;
利用所述功能性能测试模块进行功能性能测试,所述功能性能测试包括所述数据采集功能性能测试、所述数据传输功能性能测试、所述数据提取功能性能测试和所述数据质量分析功能性能测试;
利用所述接口测试模块进行接口测试,所述接口测试包括模拟解调器接口测试、模拟数据分发接口测试、模拟数据传输接口测试、模拟任务单交互接口测试和模拟集中监视信息接口测试。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311189212.4A CN117278653A (zh) | 2023-09-14 | 2023-09-14 | 面向分布式站点卫星的数据记录传输系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311189212.4A CN117278653A (zh) | 2023-09-14 | 2023-09-14 | 面向分布式站点卫星的数据记录传输系统及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117278653A true CN117278653A (zh) | 2023-12-22 |
Family
ID=89213539
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311189212.4A Pending CN117278653A (zh) | 2023-09-14 | 2023-09-14 | 面向分布式站点卫星的数据记录传输系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117278653A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117650836A (zh) * | 2024-01-30 | 2024-03-05 | 中国科学院空天信息创新研究院 | 多站协同的遥感卫星数据信息获取方法、装置及存储介质 |
-
2023
- 2023-09-14 CN CN202311189212.4A patent/CN117278653A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117650836A (zh) * | 2024-01-30 | 2024-03-05 | 中国科学院空天信息创新研究院 | 多站协同的遥感卫星数据信息获取方法、装置及存储介质 |
CN117650836B (zh) * | 2024-01-30 | 2024-05-03 | 中国科学院空天信息创新研究院 | 多站协同的遥感卫星数据信息获取方法、装置及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108337120A (zh) | 一种物联网终端设备的远程升级方法 | |
WO2017041406A1 (zh) | 一种故障定位方法及装置 | |
CN100390765C (zh) | 一种支持联网设备的计算机系统和方法 | |
CN102520715A (zh) | 一种通用化的卫星地面总体控制测试系统 | |
CN117278653A (zh) | 面向分布式站点卫星的数据记录传输系统及方法 | |
CN107800565A (zh) | 巡检方法、装置、系统、计算机设备和存储介质 | |
CN107066370A (zh) | 一种自动监控并收集故障硬盘日志的工具及方法 | |
CN108649691B (zh) | 一种适用于app动态加载的配电终端即插即用方法 | |
CN113485881B (zh) | 一种临时限速服务器的测试方法、装置、电子设备及介质 | |
CN101127590A (zh) | 一种对单板运行状态进行数据备份的方法及其装置 | |
CN210804735U (zh) | 一种智能电表 | |
CN111081003A (zh) | 一种抄表方法、装置及系统 | |
CN103678423A (zh) | 数据文件导入系统、装置及方法 | |
CN101188512B (zh) | 网络系统 | |
CN110333909B (zh) | 一种自动化二次设备模型自动配置的建模方法 | |
CN112671934A (zh) | 一种电力物联网系统 | |
CN113965447B (zh) | 一种在线云诊断方法、装置、系统、设备及存储介质 | |
CN113348778B (zh) | 基于dds体系的通用化卫星综合测试系统 | |
CN105978715A (zh) | 一种基于实时数据中心的数据接入接口统一管理方法 | |
US20100122266A1 (en) | Message mechanism for workflow interfacing | |
CN109274715A (zh) | 车载多通道通信系统的平台资源管理系统 | |
CN102984680B (zh) | 一种在电信运营系统的对外接口中实现号码跟踪的方法 | |
CN107608886A (zh) | 一种自动报录软件缺陷的方法及系统 | |
CN112953988B (zh) | 一种基于ftp的数据对接方法及装置 | |
CN114201659A (zh) | 一种消息轨迹传输查询方法、装置及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |