CN114510476A - 基于ccsds源包体制的遥测数据多路并行处理系统及方法 - Google Patents

基于ccsds源包体制的遥测数据多路并行处理系统及方法 Download PDF

Info

Publication number
CN114510476A
CN114510476A CN202111631558.6A CN202111631558A CN114510476A CN 114510476 A CN114510476 A CN 114510476A CN 202111631558 A CN202111631558 A CN 202111631558A CN 114510476 A CN114510476 A CN 114510476A
Authority
CN
China
Prior art keywords
data
source packet
telemetering
telemetry
identifier
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111631558.6A
Other languages
English (en)
Other versions
CN114510476B (zh
Inventor
宋宏江
崔帆
张欢
白少华
吕伟
储海洋
景争艳
李达
曹宇
韩爱玲
温新
张海祥
李鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Institute of Spacecraft System Engineering
Original Assignee
Beijing Institute of Spacecraft System Engineering
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Institute of Spacecraft System Engineering filed Critical Beijing Institute of Spacecraft System Engineering
Priority to CN202111631558.6A priority Critical patent/CN114510476B/zh
Publication of CN114510476A publication Critical patent/CN114510476A/zh
Application granted granted Critical
Publication of CN114510476B publication Critical patent/CN114510476B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G06F16/2282—Tablespace storage structures; Management thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2455—Query execution
    • G06F16/24552—Database cache management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2457—Query processing with adaptation to user needs
    • G06F16/24578—Query processing with adaptation to user needs using ranking
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明公开了一种基于CCSDS源包体制的遥测数据多路并行处理系统及方法，能够解决航天器不同舱器遥测数据处理链条过长以及同一舱器遥测源包数据并行处理能力不足的技术问题。采用系统包括数据接收模块、数据缓存组件、源包拼接模块、数据处理进程模块及数据发布模块。所述数据接收模块用于接收航天器的待处理遥测数据；所述数据缓存组件包括多个数据缓存模块；所述源包拼接模块用于将相同舱器标识及通道标识的残余数据及所述原始VCDU数据进行拼接处理；所述数据处理进程模块用于管理包括多个进程组，每个遥测源包仅能被一个进程获取并处理，在获取遥测源包后，进程计算遥测参数的工程值；所述数据发布模块用于获取并发布参数的工程值。

Description

基于CCSDS源包体制的遥测数据多路并行处理系统及方法
技术领域
本发明涉及航天测试鉴定领域，具体涉及一种基于CCSDS源包体制的遥测数据多路并行处理系统及方法。
背景技术
电性能测试是航天器研制流程中的重要环节，测试期间，综合测试系统需要实时解析探测器所有通道下传的遥测数据，供测试人员监视航天器部件工作状态并及时判读。
航天器一般由多个舱器组成，每个舱器的下行数据均采用CCSDS分包体制遥测，即依据探测器的不同工作模式分别对遥测源包E-PDU进行多路复用，生成多路协议数据单元(M-PDU)，填充入虚拟信道数据单元(VCDU)数据单元区中再下传至地面，然而航天器各个舱器之间数据流交互多且复杂，按照不同的工作模式，不同舱器的遥测数据按照不同规则混合下传。
以往的综合测试系统通常针对单一舱器进行设计或者完全定制性设计，只能解决单器或者两器联合测试时互传遥测数据处理。但对于多通道数据流的处理，没有一套并行的同时支持多舱器复杂工作模式中下行数据的处理方法。
也就是说，现有技术具体存在以下两点不足：
1)不同舱器遥测数据混合处理能力不足
传统的遥测数据处理只能为多舱器各自独立部署一套遥测数据处理系统，当某个舱器的遥测数据处理系统接收到本舱器代传的其它舱器数据时，需要按照其它舱器的遥测数据格式重新对数据进行封装，然后通过组播转发至其它舱器的遥测数据处理系统，这种处理方式导致不同舱器遥测数据处理链条过长，定制化程度高，处理效率低下。
2)同一舱器遥测数据并行处理能力不足
传统的遥测数据处理系统对于遥测数据均是按照串行方式处理的，这种处理方式不具备并行处理能力，而是高度依赖数据处理进程自身的处理效率和稳定性，一旦数据处理系统出现处理瓶颈或者异常，将会使遥测数据丢失，不适应于参数多、数据传输速率快，高可用的航天器遥测数据处理场合。
发明内容
有鉴于此，本发明提供了一种基于CCSDS源包体制的遥测数据多路并行处理系统及方法，能够解决航天器不同舱器遥测数据处理链条过长以及同一舱器遥测源包数据并行处理能力不足的技术问题，优化了航天器多舱器多通道遥测数据处理方法，提高了复杂航天器遥测数据的处理效率和稳定性。
为了解决上述技术问题，本发明是这样实现的。
一种基于CCSDS源包体制的遥测数据多路并行处理系统，该系统包括数据接收模块、数据缓存组件、源包拼接模块、数据处理进程模块及数据发布模块。
所述数据接收模块用于接收航天器的待处理遥测数据，将所述待处理遥测数据基于舱器标识及通道标识进行分类、标记，所述标记后的待处理遥测数据是在遥测数据前面增加两个字节，其中第一个字节是舱器标识，第二个字节是通道标识，将标记后的待处理遥测数据存储到消息队列中；航天器具有多个舱器，一个舱器具有多个通道；消息队列存储多个分类、标记的数据；
所述数据缓存组件包括多个数据缓存模块，相同舱器标识及相同通道标识的残余数据存储于同一数据缓存模块中；所述残余数据是标记后的遥测数据进行源包拼接后剩余的未能拼成完整遥测源包EPDU的数据；
所述源包拼接模块用于从所述消息队列中获取待处理遥测数据中的原始VCDU数据，并基于从所述消息队列中获取的待处理遥测数据的舱器标识及通道标识，确定与该舱器标识及通道标识对应的数据缓存模块，从所述对应的数据缓存模块中获取残余数据，将相同舱器标识及通道标识的残余数据及所述原始VCDU数据进行拼接处理，将拼接处理后剩余的未能拼成完整遥测源包EPDU的数据作为新的残余数据存储到数据缓存模块中；一次拼接处理后，获得多个完整遥测源包数据；基于所述遥测源包数据的舱器标识及通道标识，将相同舱器标识及通道标识的遥测源包EPDU数据进行整合，再将整合后的各遥测源包数据缓存到对应的链表中，所述链表有多个，相同舱器标识及通道标识的遥测源包缓存于同一链表中；
所述数据处理进程模块用于管理包括多个进程组，同一链表中的遥测源包由同一进程组进行处理，不同的进程组处理不同的链表；每个进程组包括多个进程；每个遥测源包仅能被一个进程获取并处理，采用并行处理的方式，在获取遥测源包后，进程计算遥测参数的工程值；
所述数据发布模块用于获取并发布参数的工程值。
优选地，所述进程通过抢占的方式从链表中获取需要处理的原码信息，通过对链表加锁、获取遥测源包、删除遥测源包和解锁操作，控制一个遥测源包EPDU仅能被一个进程获取并处理；获取到遥测源包EPDU的进程，依次调用该遥测源包内所有遥测参数的位置信息获取源码，再调用遥测参数的处理方法，计算所述遥测参数的工程值。
本发明所提供的一种基于CCSDS源包体制的遥测数据多路并行处理方法，所述方法基于如前所述基于CCSDS源包体制的遥测数据多路并行处理系统，包括以下步骤：
步骤S1：将航天器遥测数据从VCDU数据转化为EPDU遥测源包数据，基于舱器标识及通道标识构建链表；
步骤S2：基于所述EPDU遥测源包数据，由与链表对应的线程组对所述遥测源包EPDU的参数工程值进行并行计算。
优选地，所述步骤S1，包括：
步骤S11：基于舱器标识、通道标识和虚拟信道标识创建一维数组，该一维数组用于缓存残余数据，该一维数组中的每个数据，用于表示某舱器对应的某通道下的某虚拟信道的残余数据；一个航天器对应多个舱器，一个舱器对应多个通道，一个通道对应多个虚拟信道；基于舱器标识、通道标识创建多个链表，该链表用于缓存遥测源包，相同舱器标识及通道标识的遥测源包缓存于同一链表中；
步骤S12：实时接收航天器所有工作模式下的下行整帧VCDU原始遥测数据；判断所述整帧VCDU原始遥测数据CRC校验是否正确，如果不正确，进入步骤S12；否则，记录所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识；进入步骤S13；
步骤S13：基于所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识确定该整帧VCDU原始遥测数据是否为代传其它舱器数据；如果是，为所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识标记目标舱器数据标识，进入步骤S14；如果否，进入步骤S14；
步骤S14：基于所述整帧VCDU原始遥测数据设置源包游标，该源包游标指向所述整帧VCDU原始遥测数据中首个完整包的头位置；
步骤S15：基于所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识，查询一维数组，从所述一维数组中获取残余数据；将获取的残余数据与所述整帧VCDU原始遥测数据中首个完整包之前的数据进行拼接，由此获取拼接后的遥测源包EPDU数据；
步骤S16：对于拼接后的遥测源包EPDU数据，基于所述整帧VCDU原始遥测数据的舱器标识、通道标识，判断该拼接后的遥测源包EPDU数据是否为代传源包，如果是，为所述整帧VCDU原始遥测数据的舱器标识、通道标识标记目标舱器数据标识，进入步骤S17；如果不是，进入步骤S17；
步骤S17：基于所述整帧VCDU原始遥测数据的舱器标识、通道标识，将所述遥测源包EPDU数据存储到对应的链表中；
步骤S18：将所述整帧VCDU原始遥测数据中首个完整包之前的数据进行拼接之后，判断VCDU原始遥测数据的剩余数据中是否存在航天器的完整源包；如果是，将源包游标指向下一个完整源包的包头位置，进入步骤S16；否进，进入步骤S19；
步骤S19：基于所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识，缓存该整帧VCDU原始遥测数据的残留数据，更新一维数组中的残留数据值，以便于与下一帧遥测数据进行拼接处理；若遥测数据多路并行处理系统退出，方法结束，否则进入步骤S12。
优选地，所述步骤S2，包括：
步骤S21：对全部源包集合中的每个源包集合Ekm，获取源包集合Ekm的EPDU数据；Ekm表示舱器k通道m的源包组成的集合，其中包括多个属于舱器k通道m的源包，k取值为1～n，m取值为1～n，n为大于或等于1的正整数；为源包集合Ekm建立进程组，该进程组包括一组相同的处理进程；将游标指向存储源包集合Ekm的链表中的首包；
步骤S22：进程组中的每一个进程均判断存储源包集合Ekm的链表是否为空，如果是，则阻塞等待舱器k通道m的源包数据进入链表，再进入步骤S23；如果否，进入步骤S23；
步骤S23：为存储源包集合Ekm的链表加锁；
步骤S24：获取存储源包集合Ekm的链表中当前游标指向的遥测源包EPDU数据，在链表中删除该遥测源包EPDU数据，并将当前游标指向下一个遥测源包EPDU数据；
步骤S25：为存储源包集合Ekm的链表解锁；
步骤S26：基于获取的遥测源包EPDU数据，依次调用该源包内所有遥测参数的位置信息获取源码，然后调用参数的处理方法，计算参数的工程值，并向局域网发布数据；
步骤S27：若遥测数据多路并行处理系统退出，方法结束；否则，进入步骤S22。
优选地，所述航天器舱器标识包括轨道器、上升器、着陆器、返回器。
有益效果：
(1)本发明针对航天器不同舱器遥测数据进行标准化编排和并行处理，并依据此方法设计了并行数据处理系统，解决了航天器不同舱器遥测数据处理链条过长以及同一舱器遥测源包数据并行处理能力不足的技术问题，优化了航天器多舱器多通道遥测数据处理方法，提高了复杂航天器遥测数据的处理效率和稳定性。
(2)本发明将航天器多种工作模式下传输的遥测数据根据舱器标识、通道标识、虚拟信道标识以及源包标识进行目标舱器属性的重新统一编排，不论原始数据来源于哪个舱器的哪个通道均输出为目标舱器遥测源包EPDU的遥测源包EPDU数据，屏蔽了原始VCDU数据的前后帧依赖关系，实现了对航天器复杂数据的统一管理，使后续的数据处理程序只针对单一舱器进行集中分组并行处理。
(3)本发明通过舱器标识、通道标识创建源包分组链表用来存储目标舱器遥测源包EPDU的遥测源包EPDU数据，设置分组链表游标标识当前的处理进度，为每个舱器的每个通道均启动一组相同的数据处理进程，同时针对每个舱器的每个通道遥测源包EPDU的遥测源包EPDU数据依据先进先出的原则进行多实例抢占式消费处理，能够有效地利用操作系统资源，提高整个测试系统的实时数据吞吐量。
附图说明
图1为基于CCSDS源包体制的遥测数据多路并行处理系统结构示意图；
图2为基于CCSDS源包体制的遥测数据多路并行处理方法流程示意图；
图3为航天器遥测数据统一化处理方法流程示意图；
图4为航天器源包分组并行数据处理方法流程示意图。
具体实施方式
下面结合附图和实施例，对本发明进行详细描述。
如图1所示，本发明一种基于CCSDS源包体制的遥测数据多路并行处理系统，该系统包括数据接收模块、数据缓存组件、源包拼接模块、数据处理进程模块及数据发布模块。
所述数据接收模块用于接收航天器的待处理遥测数据，将所述待处理遥测数据基于舱器标识及通道标识进行分类、标记，所述标记后的待处理遥测数据是在遥测数据前面增加两个字节，其中第一个字节是舱器标识，第二个字节是通道标识，将标记后的待处理遥测数据存储到消息队列中；航天器具有多个舱器，一个舱器具有多个通道；消息队列存储多个分类、标记的数据；
所述数据缓存组件包括多个数据缓存模块，相同舱器标识及相同通道标识的残余数据存储于同一数据缓存模块中；所述残余数据是标记后的遥测数据进行源包拼接后剩余的未能拼成完整遥测源包EPDU的数据；
所述源包拼接模块用于从所述消息队列中获取待处理遥测数据中的原始VCDU数据，并基于从所述消息队列中获取的待处理遥测数据的舱器标识及通道标识，确定与该舱器标识及通道标识对应的数据缓存模块，从所述对应的数据缓存模块中获取残余数据，将相同舱器标识及通道标识的残余数据及所述原始VCDU数据进行拼接处理，将拼接处理后剩余的未能拼成完整遥测源包EPDU的数据作为新的残余数据存储到数据缓存模块中；一次拼接处理后，获得多个完整遥测源包数据；基于所述遥测源包数据的舱器标识及通道标识，将相同舱器标识及通道标识的遥测源包EPDU数据进行整合，再将整合后的各遥测源包数据缓存到对应的链表中，所述链表有多个，相同舱器标识及通道标识的遥测源包缓存于同一链表中；
所述数据处理进程模块用于管理包括多个进程组，同一链表中的遥测源包由同一进程组进行处理，不同的进程组处理不同的链表；每个进程组包括多个进程；每个遥测源包仅能被一个进程获取并处理，采用并行处理的方式，在获取遥测源包后，进程计算遥测参数的工程值；
所述数据发布模块用于获取并发布参数的工程值。
进一步地，所述进程通过抢占的方式从链表中获取需要处理的原码信息，通过对链表加锁、获取遥测源包、删除遥测源包和解锁操作，控制一个遥测源包EPDU仅能被一个进程获取并处理；获取到遥测源包EPDU的进程，依次调用该遥测源包内所有遥测参数的位置信息获取源码，再调用遥测参数的处理方法，计算所述遥测参数的工程值。
如图2所示，本发明提供一种基于CCSDS源包体制的遥测数据多路并行处理方法，所述方法基于如前所述的基于CCSDS源包体制的遥测数据多路并行处理系统，所述方法包括以下步骤：
步骤S1：将航天器遥测数据从VCDU数据转化为EPDU遥测源包数据，基于舱器标识及通道标识构建链表；
步骤S2：基于所述EPDU遥测源包数据，由与链表对应的线程组对所述遥测源包EPDU的参数工程值进行并行计算。
本实施例中，步骤S2是针对每个舱器的每个通道遥测源包EPDU的遥测源包EPDU数据进行多实例抢占式消费处理，发布处理后的遥测参数工程值。
所述步骤S1，包括：
步骤S11：基于舱器标识、通道标识和虚拟信道标识创建一维数组，该一维数组用于缓存残余数据，该一维数组中的每个数据，用于表示某舱器对应的某通道下的某虚拟信道的残余数据；一个航天器对应多个舱器，一个舱器对应多个通道，一个通道对应多个虚拟信道；基于舱器标识、通道标识创建多个链表，该链表用于缓存遥测源包，相同舱器标识及通道标识的遥测源包缓存于同一链表中；
步骤S12：实时接收航天器所有工作模式下的下行整帧VCDU原始遥测数据；判断所述整帧VCDU原始遥测数据CRC校验是否正确，如果不正确，进入步骤S12；否则，记录所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识；进入步骤S13；
步骤S13：基于所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识确定该整帧VCDU原始遥测数据是否为代传其它舱器数据；如果是，为所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识标记目标舱器数据标识，进入步骤S14；如果否，进入步骤S14；
步骤S14：基于所述整帧VCDU原始遥测数据设置源包游标，该源包游标指向所述整帧VCDU原始遥测数据中首个完整包的头位置；
步骤S15：基于所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识，查询一维数组，从所述一维数组中获取残余数据；将获取的残余数据与所述整帧VCDU原始遥测数据中首个完整包之前的数据进行拼接，获取拼接后的遥测源包EPDU数据；
步骤S16：对于拼接后的遥测源包EPDU数据，基于所述整帧VCDU原始遥测数据的舱器标识、通道标识，判断该拼接后的遥测源包EPDU数据是否为代传源包，如果是，为所述整帧VCDU原始遥测数据的舱器标识、通道标识标记目标舱器数据标识，进入步骤S17；如果不是，进入步骤S17；
步骤S17：基于所述整帧VCDU原始遥测数据的舱器标识、通道标识，将所述遥测源包EPDU数据存储到对应的链表中；
步骤S18：将所述整帧VCDU原始遥测数据中首个完整包之前的数据进行拼接之后，判断VCDU原始遥测数据的剩余数据中是否存在航天器的完整源包；如果是，将源包游标指向下一个完整源包的包头位置，进入步骤S16；否进，进入步骤S19；
步骤S19：基于所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识，缓存该整帧VCDU原始遥测数据的残留数据，更新一维数组中的残留数据值，以便于与下一帧遥测数据进行拼接处理；若遥测数据多路并行处理系统退出，方法结束，否则进入步骤S12。
所述步骤S2，包括：
步骤S21：对全部源包集合中的每个源包集合Ekm，获取源包集合Ekm的EPDU数据；Ekm表示舱器k通道m的源包组成的集合，其中包括多个属于舱器k通道m的源包，k取值为1～n，m取值为1～n，n为大于或等于1的正整数；为源包集合Ekm建立进程组，该进程组包括一组相同的处理进程；将游标指向存储源包集合Ekm的链表中的首包；
步骤S22：进程组中的每一个进程均判断存储源包集合Ekm的链表是否为空，如果是，则阻塞等待舱器k通道m的源包数据进入链表，再进入步骤S23；如果否，进入步骤S23；
步骤S23：为存储源包集合Ekm的链表加锁；
步骤S24：获取存储源包集合Ekm的链表中当前游标指向的遥测源包EPDU数据，在链表中删除该遥测源包EPDU数据，并将当前游标指向下一个遥测源包EPDU数据；
步骤S25：为存储源包集合Ekm的链表解锁；
步骤S26：基于获取的遥测源包EPDU数据，依次调用该源包内所有遥测参数的位置信息获取源码，然后调用参数的处理方法，计算参数的工程值，并向局域网发布数据；
步骤S27：若遥测数据多路并行处理系统退出，方法结束；否则，进入步骤S22。
本实施例中，所述航天器舱器标识包括轨道器、上升器、着陆器、返回器。所述航天器通道标识包括着上组合体测控通道、数传通道，返回器测控通道，轨道器测控通道、测控通道、RS422通道、数传通道。
经过测试表明，应用了本发明后，航天器综合测试系统针对不同舱器遥测数据处理链条明显缩短，同一舱器遥测数据并行处理能力明显提高，满足了航天器复杂功能工作模式下测试数据解析的实时性和稳定性要求，有效地保障了航天器任务的圆满成功。
以上的具体实施例仅描述了本发明的设计原理，该描述中的部件形状，名称可以不同，不受限制。所以，本发明领域的技术人员可以对前述实施例记载的技术方案进行修改或等同替换；而这些修改和替换未脱离本发明创造宗旨和技术方案，均应属于本发明的保护范围。

Claims (6)

1.一种基于CCSDS源包体制的遥测数据多路并行处理系统，其特征在于，该系统包括数据接收模块、数据缓存组件、源包拼接模块、数据处理进程模块及数据发布模块；
所述数据接收模块用于接收航天器的待处理遥测数据，将所述待处理遥测数据基于舱器标识及通道标识进行分类、标记，所述标记后的待处理遥测数据是在遥测数据前面增加两个字节，其中第一个字节是舱器标识，第二个字节是通道标识，将标记后的待处理遥测数据存储到消息队列中；航天器具有多个舱器，一个舱器具有多个通道；消息队列存储多个分类、标记的数据；
所述数据缓存组件包括多个数据缓存模块，相同舱器标识及相同通道标识的残余数据存储于同一数据缓存模块中；所述残余数据是标记后的遥测数据进行源包拼接后剩余的未能拼成完整遥测源包EPDU的数据；
所述源包拼接模块用于从所述消息队列中获取待处理遥测数据中的原始VCDU数据，并基于从所述消息队列中获取的待处理遥测数据的舱器标识及通道标识，确定与该舱器标识及通道标识对应的数据缓存模块，从所述对应的数据缓存模块中获取残余数据，将相同舱器标识及通道标识的残余数据及所述原始VCDU数据进行拼接处理，将拼接处理后剩余的未能拼成完整遥测源包EPDU的数据作为新的残余数据存储到数据缓存模块中；一次拼接处理后，获得多个完整遥测源包数据；基于所述遥测源包数据的舱器标识及通道标识，将相同舱器标识及通道标识的遥测源包EPDU数据进行整合，再将整合后的各遥测源包数据缓存到对应的链表中，所述链表有多个，相同舱器标识及通道标识的遥测源包缓存于同一链表中；
所述数据处理进程模块用于管理包括多个进程组，同一链表中的遥测源包由同一进程组进行处理，不同的进程组处理不同的链表；每个进程组包括多个进程；每个遥测源包仅能被一个进程获取并处理，采用并行处理的方式，在获取遥测源包后，进程计算遥测参数的工程值；
所述数据发布模块用于获取并发布参数的工程值。
2.如权利要求1所述的系统，其特征在于，所述进程通过抢占的方式从链表中获取需要处理的原码信息，通过对链表加锁、获取遥测源包、删除遥测源包和解锁操作，控制一个遥测源包EPDU仅能被一个进程获取并处理；获取到遥测源包EPDU的进程，依次调用该遥测源包内所有遥测参数的位置信息获取源码，再调用遥测参数的处理方法，计算所述遥测参数的工程值。
3.一种基于CCSDS源包体制的遥测数据多路并行处理方法，所述方法基于如权利要求1-2中任一项所述基于CCSDS源包体制的遥测数据多路并行处理系统，所述方法包括以下步骤：
步骤S1：将航天器遥测数据从VCDU数据转化为EPDU遥测源包数据，基于舱器标识及通道标识构建链表；
步骤S2：基于所述EPDU遥测源包数据，由与链表对应的线程组对所述遥测源包EPDU的参数工程值进行并行计算。
4.如权利要求3所述的方法，其特征在于，所述步骤S1，包括：
步骤S11：基于舱器标识、通道标识和虚拟信道标识创建一维数组，该一维数组用于缓存残余数据，该一维数组中的每个数据，用于表示某舱器对应的某通道下的某虚拟信道的残余数据；一个航天器对应多个舱器，一个舱器对应多个通道，一个通道对应多个虚拟信道；基于舱器标识、通道标识创建多个链表，该链表用于缓存遥测源包，相同舱器标识及通道标识的遥测源包缓存于同一链表中；
步骤S12：实时接收航天器所有工作模式下的下行整帧VCDU原始遥测数据；判断所述整帧VCDU原始遥测数据CRC校验是否正确，如果不正确，进入步骤S12；否则，记录所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识；进入步骤S13；
步骤S13：基于所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识确定该整帧VCDU原始遥测数据是否为代传其它舱器数据；如果是，为所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识标记目标舱器数据标识，进入步骤S14；如果否，进入步骤S14；
步骤S14：基于所述整帧VCDU原始遥测数据设置源包游标，该源包游标指向所述整帧VCDU原始遥测数据中首个完整包的头位置；
步骤S15：基于所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识，查询一维数组，从所述一维数组中获取残余数据；将获取的残余数据与所述整帧VCDU原始遥测数据中首个完整包之前的数据进行拼接，由此获取拼接后的遥测源包EPDU数据；
步骤S16：对于拼接后的遥测源包EPDU数据，基于所述整帧VCDU原始遥测数据的舱器标识、通道标识，判断该拼接后的遥测源包EPDU数据是否为代传源包，如果是，为所述整帧VCDU原始遥测数据的舱器标识、通道标识标记目标舱器数据标识，进入步骤S17；如果不是，进入步骤S17；
步骤S17：基于所述整帧VCDU原始遥测数据的舱器标识、通道标识，将所述遥测源包EPDU数据存储到对应的链表中；
步骤S18：将所述整帧VCDU原始遥测数据中首个完整包之前的数据进行拼接之后，判断VCDU原始遥测数据的剩余数据中是否存在航天器的完整源包；如果是，将源包游标指向下一个完整源包的包头位置，进入步骤S16；否进，进入步骤S19；
步骤S19：基于所述整帧VCDU原始遥测数据的舱器标识、通道标识、以及虚拟信道标识，缓存该整帧VCDU原始遥测数据的残留数据，更新一维数组中的残留数据值，以便于与下一帧遥测数据进行拼接处理；若遥测数据多路并行处理系统退出，方法结束，否则进入步骤S12。
5.如权利要求4所述的方法，其特征在于，所述步骤S2，包括：
步骤S21：对全部源包集合中的每个源包集合Ekm，获取源包集合Ekm的EPDU数据；Ekm表示舱器k通道m的源包组成的集合，其中包括多个属于舱器k通道m的源包，k取值为1～n，m取值为1～n，n为大于或等于1的正整数；为源包集合Ekm建立进程组，该进程组包括一组相同的处理进程；将游标指向存储源包集合Ekm的链表中的首包；
步骤S22：进程组中的每一个进程均判断存储源包集合Ekm的链表是否为空，如果是，则阻塞等待舱器k通道m的源包数据进入链表，再进入步骤S23；如果否，进入步骤S23；
步骤S23：为存储源包集合Ekm的链表加锁；
步骤S24：获取存储源包集合Ekm的链表中当前游标指向的遥测源包EPDU数据，在链表中删除该遥测源包EPDU数据，并将当前游标指向下一个遥测源包EPDU数据；
步骤S25：为存储源包集合Ekm的链表解锁；
步骤S26：基于获取的遥测源包EPDU数据，依次调用该源包内所有遥测参数的位置信息获取源码，然后调用参数的处理方法，计算参数的工程值，并向局域网发布数据；
步骤S27：若遥测数据多路并行处理系统退出，方法结束；否则，进入步骤S22。
6.如权利要求5所述的方法，其特征在于，所述航天器舱器标识包括轨道器、上升器、着陆器、返回器。
CN202111631558.6A 2021-12-29 2021-12-29 基于ccsds源包体制的遥测数据多路并行处理系统及方法 Active CN114510476B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111631558.6A CN114510476B (zh) 2021-12-29 2021-12-29 基于ccsds源包体制的遥测数据多路并行处理系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111631558.6A CN114510476B (zh) 2021-12-29 2021-12-29 基于ccsds源包体制的遥测数据多路并行处理系统及方法

Publications (2)

Publication Number Publication Date
CN114510476A true CN114510476A (zh) 2022-05-17
CN114510476B CN114510476B (zh) 2023-08-04

Family

ID=81548767

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111631558.6A Active CN114510476B (zh) 2021-12-29 2021-12-29 基于ccsds源包体制的遥测数据多路并行处理系统及方法

Country Status (1)

Country Link
CN (1) CN114510476B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114978852A (zh) * 2022-07-19 2022-08-30 成都新橙北斗智联有限公司 基于4g网络的gnss数据接收及多路并行传输方法
CN116910107A (zh) * 2023-09-13 2023-10-20 北京航天驭星科技有限公司 轨道数据的提取、轨道计算方法、装置及存储介质和设备
CN117671817A (zh) * 2024-01-31 2024-03-08 珠海遥测科技有限公司 基于irig106的信息显示方法、装置、系统、介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100208729A1 (en) * 2008-10-17 2010-08-19 John Oddie Method and System for Receiving Market Data Across Multiple Markets and Accelerating the Execution of Orders
US20100250276A1 (en) * 2009-03-26 2010-09-30 Jay Pierce System and method for an orthopedic dynamic data repository and registry for clinical
CN104486335A (zh) * 2014-12-12 2015-04-01 北京控制工程研究所 一种高复杂度航天器gnc数据实时智能处理系统
CN107317769A (zh) * 2017-05-25 2017-11-03 北京空间飞行器总体设计部 一种基于有序优先级队列的源包调度方法
CN109756514A (zh) * 2019-02-26 2019-05-14 北京控制工程研究所 一种航天器复杂协议的遥测数据动态处理方法
CN111241038A (zh) * 2020-01-19 2020-06-05 中国科学院电子学研究所 卫星数据处理方法及系统
CN113037886A (zh) * 2021-03-05 2021-06-25 腾讯科技（深圳）有限公司 网络设备的管理方法、装置、介质以及电子设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100208729A1 (en) * 2008-10-17 2010-08-19 John Oddie Method and System for Receiving Market Data Across Multiple Markets and Accelerating the Execution of Orders
US20100250276A1 (en) * 2009-03-26 2010-09-30 Jay Pierce System and method for an orthopedic dynamic data repository and registry for clinical
CN104486335A (zh) * 2014-12-12 2015-04-01 北京控制工程研究所 一种高复杂度航天器gnc数据实时智能处理系统
CN107317769A (zh) * 2017-05-25 2017-11-03 北京空间飞行器总体设计部 一种基于有序优先级队列的源包调度方法
CN109756514A (zh) * 2019-02-26 2019-05-14 北京控制工程研究所 一种航天器复杂协议的遥测数据动态处理方法
CN111241038A (zh) * 2020-01-19 2020-06-05 中国科学院电子学研究所 卫星数据处理方法及系统
CN113037886A (zh) * 2021-03-05 2021-06-25 腾讯科技（深圳）有限公司 网络设备的管理方法、装置、介质以及电子设备

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
P.SCHONLE ET AL.: "a multi-sensor and parallel processing Soc for wearable and implantable telemetry systems", pages 1 - 4 *
张志国: "基于MPI的遥测源码多站拼接并行化算法研究", vol. 38, no. 4, pages 111 - 113 *
顾征 等: "航天器动作状态的可视化遥测方法研究", vol. 23, no. 2, pages 185 - 190 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114978852A (zh) * 2022-07-19 2022-08-30 成都新橙北斗智联有限公司 基于4g网络的gnss数据接收及多路并行传输方法
CN116910107A (zh) * 2023-09-13 2023-10-20 北京航天驭星科技有限公司 轨道数据的提取、轨道计算方法、装置及存储介质和设备
CN116910107B (zh) * 2023-09-13 2023-12-15 北京航天驭星科技有限公司 轨道数据的提取、轨道计算方法、装置及存储介质和设备
CN117671817A (zh) * 2024-01-31 2024-03-08 珠海遥测科技有限公司 基于irig106的信息显示方法、装置、系统、介质
CN117671817B (zh) * 2024-01-31 2024-04-16 珠海遥测科技有限公司 基于irig106的信息显示方法、装置、系统、介质

Also Published As

Publication number Publication date
CN114510476B (zh) 2023-08-04

Similar Documents

Publication Publication Date Title
CN114510476A (zh) 基于ccsds源包体制的遥测数据多路并行处理系统及方法
US20030172177A1 (en) System and method for verifying a device
CN112511218B (zh) 一种基于微服务的卫星地面站监控系统
CN111241038B (zh) 卫星数据处理方法及系统
CN112214967B (zh) 一种报文格式转换方法及装置
CN110048761A (zh) 一种面向批产卫星数传地面自动化快速数据处理分析系统
US8028052B2 (en) NMS with multi-server change requests processing
CN117852101B (zh) 一种天文卫星数据完整性判读与观测数据产品生产系统
CN117332134A (zh) 遥感卫星原始数据处理和管理方法、装置、设备及介质
CN116996112B (zh) 一种遥感卫星数据实时预处理方法
CN111813699B (zh) 基于智能电表的数据路由测试方法、装置和计算机设备
EP1400046B1 (en) Overhead handling method and system for high order data streams
Bodlak et al. Development of new data acquisition system for COMPASS experiment
CN112422349B (zh) 面向nfv的网管系统、方法、设备及介质
CN108737568A (zh) 一种基于消息队列服务器的数据交互系统和方法
CN105302645B (zh) 一种任务分发方法及装置
CN114666289A (zh) 一种基于电磁屏蔽体的数据传输方法及系统
CN112650597A (zh) 高并发采集数据的处理系统及方法
CN113079067A (zh) 基于多维度数据整合分析的联盟链性能瓶颈测试系统和方法
CN117312761B (zh) 一种数据片段处理时间计算方法及装置
CN116506335B (zh) 基于以太网传输的数据封装方法、探针、采集方法及系统
CN116545506A (zh) 一种卫星地面应用系统业务数据处理方法
CN115484202B (zh) 一种基于int的轻量化路径探测方法
CN114756492B (zh) 适用于多种运载器的1553b数据总线处理方法
CN116132854A (zh) 光传送网的流量处理方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant