CN110784444B - 一种嵌套数据流处理的方法及相关设备 - Google Patents
一种嵌套数据流处理的方法及相关设备 Download PDFInfo
- Publication number
- CN110784444B CN110784444B CN201910845857.6A CN201910845857A CN110784444B CN 110784444 B CN110784444 B CN 110784444B CN 201910845857 A CN201910845857 A CN 201910845857A CN 110784444 B CN110784444 B CN 110784444B
- Authority
- CN
- China
- Prior art keywords
- data
- intermediate data
- data stream
- effective
- queue
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/22—Parsing or analysis of headers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
- H04L1/0056—Systems characterized by the type of code used
- H04L1/0061—Error detection codes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/50—Queue scheduling
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
- H04L67/5682—Policies or rules for updating, deleting or replacing the stored data
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开一种嵌套数据流处理的方法及相关设备,属于计算机领域,该方法包括:接收基础数据流;对接收的所述基础数据流进行一级处理,提取所述基础数据流中的中间数据流并依据所述中间数据流形成中间数据队列;对所述中间数据队列进行二级处理,提取所述中间数据流中的有效数据流并依据所述有效数据流形成有效数据队列;提取所述有效数据队列中的有效数据;解析并显示所提取的所述有效数据。本发明提供的方法及装置有效的解决了现有技术中的如何对插入数据流中的有效数据进行提取解析并显示的技术问题,具有数据处理、响应速度快,可靠性高的技术效果。
Description
技术领域
本发明涉及计算机技术领域,尤其涉及一种嵌套数据流处理的方法及相关设备。
背景技术
在卫星发射过程中,处理运载火箭舱内时,通常卫星地面天线无法实时接收卫星数据,需要通过运载方的中继转发设备及地面接收设备,实时下发遥测数据。此时,火箭下行传输到地面的数据即包含自身有用信息,又包含卫星实时数据,由于双方传输速率的差异,卫星数据下行数据只能分组插入数据流中,一起发送到地面端进行解析。然而,如何对插入数据流中的有效数据进行快速提取解析并实时显示,一直是本领域急需解决的技术难题。
发明内容
本发明提供一种嵌套数据流处理的方法及相关设备,用以解决现有技术中的如何对插入数据流中的有效数据进行提取解析并显示的技术问题。
第一方面,本发明实施例提供了一种嵌套数据流处理的方法,所述方法包括:接收基础数据流;对接收的所述基础数据流进行一级处理,提取所述基础数据流中的中间数据流并依据所述中间数据流形成中间数据队列;对所述中间数据队列进行二级处理,提取所述中间数据流中的有效数据流并依据所述有效数据流形成有效数据队列;提取所述有效数据队列中的有效数据;解析并显示所提取的所述有效数据。
可选的,所述对接收的所述基础数据流进行一级处理,提取所述基础数据流中的中间数据流并依据所述中间数据流形成中间数据队列包括:根据一级特征同步字对所述基础数据流进行中间数据头部和中间数据尾部的识别,找到中间数据队列的起始点和结束点;依据所述起始点和结束点对应标识所述中间数据头部和中间数据尾部;判断所述中间数据头部和中间数据尾部之间的数据长度是否小于等于预设的长度阈值y1;若是,则提取所述数据头部和数据尾部之间的中间数据流,并依据所述中间数据流形成所述中间数据队列。
可选的,所述对所述中间数据队列进行二级处理,提取所述中间数据流中的有效数据流并依据所述有效数据流形成有效数据队列包括:根据二级特征同步字对所述中间数据流进行有效数据头部和有效数据尾部的识别,找到有效数据队列的起始点和结束点;依据所述起始点和结束点对应标识所述有效数据头部和有效数据尾部;判断所述有效数据头部和有效数据尾部之间的数据进行和校验或CRC校验,检查校验结果低16位是否等于校验位;若是,则提取所述有效数据头部和有效数据尾部之间的有效数据流,并依据所述有效数据流形成所述有效数据队列。
可选的,所述方法还包括:对所述中间数据队列的缓存大小进行监控;若所述中间数据队列的缓存大小大于缓存最大值,则对缓存队列中的旧数据进行丢弃处理。
第二方面,本发明实施例还提供了一种嵌套数据流处理的系统,所述系统包括:基础数据流接收模块,被配置为接收基础数据流;一级处理模块,被配置为对接收的所述基础数据流进行一级处理,提取所述基础数据流中的中间数据流并依据所述中间数据流形成中间数据队列;二级处理模块,被配置为对所述中间数据队列进行二级处理,提取所述中间数据流中的有效数据流并依据所述有效数据流形成有效数据队列;有效数据提取模块,被配置为提取所述有效数据队列中的有效数据;显示模块,被配置为解析并显示所提取的所述有效数据。
可选的,所述一级处理模块具体包括:中间数据识别子模块,被配置为根据一级特征同步字对所述基础数据流进行中间数据头部和中间数据尾部的识别,找到中间数据队列的起始点和结束点;中间数据标识子模块,被配置为依据所述起始点和结束点对应标识所述中间数据头部和中间数据尾部;中间数据判断子模块,被配置为判断所述中间数据头部和中间数据尾部之间的数据长度是否小于等于预设的长度阈值y1;中间数据队列形成子模块,被配置为若是,则提取所述数据头部和数据尾部之间的中间数据流,并依据所述中间数据流形成所述中间数据队列。
可选的,所述二级处理模块具体包括:有效数据识别子模块,被配置为根据二级特征同步字对所述中间数据流进行有效数据头部和有效数据尾部的识别,找到有效数据队列的起始点和结束点;有效数据标识子模块,被配置为依据所述起始点和结束点对应标识所述有效数据头部和有效数据尾部;有效数据判断子模块,被配置为判断所述有效数据头部和有效数据尾部之间的数据进行和校验或CRC校验,检查校验结果低16位是否等于校验位;有效数据队列形成子模块,被配置为若是,则提取所述有效数据头部和有效数据尾部之间的有效数据流,并依据所述有效数据流形成所述有效数据队列。
可选的,还包括:监控模块,被配置为对所述中间数据队列的缓存大小进行监控;旧数据丢弃模块,被配置为若所述中间数据队列的缓存大小大于缓存最大值,则对缓存队列中的旧数据进行丢弃处理。
第三方面,本发明还提供了一种嵌套数据流处理的装置,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现以下步骤:接收基础数据流;对接收的所述基础数据流进行一级处理,提取所述基础数据流中的中间数据流并依据所述中间数据流形成中间数据队列;对所述中间数据队列进行二级处理,提取所述中间数据流中的有效数据流并依据所述有效数据流形成有效数据队列;提取所述有效数据队列中的有效数据;解析并显示所提取的所述有效数据。
第四方面,本发明还提供了一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现以下步骤:接收基础数据流;对接收的所述基础数据流进行一级处理,提取所述基础数据流中的中间数据流并依据所述中间数据流形成中间数据队列;对所述中间数据队列进行二级处理,提取所述中间数据流中的有效数据流并依据所述有效数据流形成有效数据队列;提取所述有效数据队列中的有效数据;解析并显示所提取的所述有效数据。
本发明实施例中提供的一个或多个技术方案,至少具有如下技术效果或优点:
本发明首先通过接收基础数据流,并对该基础数据流分别进行一级处理和二级处理,进而依次提取基础数据流中的中间数据流并依据中间数据流形成中间数据队列,以及提取中间数据流中的有效数据流并依据有效数据流形成有效数据队列;最终从该有效数据队列中提取有效数据,解析并显示该有效数据,以此有效的解决了现有技术中的如何对插入数据流中的有效数据进行提取解析并显示的技术问题,具有数据处理、响应速度快,可靠性高的技术效果。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例中嵌套数据流处理的方法的流程图一;
图2为本申请实施例中一级处理的流程示意图;
图3为本申请实施例中二级处理的流程示意图;
图4为本申请实施例中嵌套数据流处理系统的框架示意图;
图5为本申请实施例中一级处理模块的框架示意图;
图6为本申请实施例中二级处理模块的框架示意图;
图7为本申请实施例中基础数据流、中间数据流及有效数据流的关系示意图;
图8为本申请实施例中嵌套数据流处理的方法的流程图二;
图9为本申请实施例中嵌套数据流处理的装置示意图;
图10为本申请实施例中计算机可读存储介质400的结构示意图。
具体实施方式
本发明实施例提供的一种嵌套数据流处理的方法,用以解决现有技术中的如何对插入数据流中的有效数据进行提取解析并显示的技术问题,达到了数据处理、响应速度快,可靠性高的技术效果。
本发明实施例中的技术方案,总体思路如下:
一种嵌套数据流处理的方法,所述方法包括:
接收基础数据流;
对接收的所述基础数据流进行一级处理,提取所述基础数据流中的中间数据流并依据所述中间数据流形成中间数据队列;
对所述中间数据队列进行二级处理,提取所述中间数据流中的有效数据流并依据所述有效数据流形成有效数据队列;
提取所述有效数据队列中的有效数据;
解析并显示所提取的所述有效数据。
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明的说明书和权利要求书及上述附图中的术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
实施例一
本发明实施例一提供一种嵌套数据流处理的方法,请参考图1-3,所述方法包括:
步骤101:接收基础数据流;
步骤102:对接收的所述基础数据流进行一级处理,提取所述基础数据流中的中间数据流并依据所述中间数据流形成中间数据队列;
步骤103:对所述中间数据队列进行二级处理,提取所述中间数据流中的有效数据流并依据所述有效数据流形成有效数据队列;
步骤104:提取所述有效数据队列中的有效数据;
步骤105:解析并显示所提取的所述有效数据。
据发明人研究发现,在卫星发射过程中,处理运载火箭舱内时,通常卫星地面天线无法实时接收卫星数据,需要通过运载方的中继转发设备及地面接收设备,实时下发遥测数据。此时,火箭下行传输到地面的数据即包含自身有用信息,又包含卫星实时数据,由于双方传输速率的差异,卫星数据下行数据只能分组插入数据流中,一起发送到地面端进行解析。然而,如何对插入数据流中的有效数据进行快速提取解析并实时显示,一直是本领域急需解决的技术难题。
基于此,本发明实施例一提供了嵌套数据流处理的方法,用以解决现有技术中的如何对插入数据流中的有效数据进行提取解析并显示的技术问题,达到了数据处理、响应速度快,可靠性高的技术效果。
下面,结合图1对本发明实施例一提供的嵌套数据流处理的方法进行详细介绍:
首先,执行步骤S101接收基础数据流,和步骤S102,对接收的所述基础数据流进行一级处理,提取所述基础数据流中的中间数据流并依据所述中间数据流形成中间数据队列;
具体而言,该基础数据流可以理解为是含有卫星数据下行数据的数据流,也即该基础数据流中包含有需要进行解析、提取并显示的有效数据。在该步骤S101和步骤S102中,本发明实施例采用C/S架构的C++实现,以提高数据处理的效率。在步骤S102中,具体包括如下子步骤:步骤S1021,根据一级特征同步字对所述基础数据流进行中间数据头部和中间数据尾部的识别,找到中间数据队列的起始点和结束点;步骤S1022,依据所述起始点和结束点对应标识所述中间数据头部和中间数据尾部;步骤S1023,判断所述中间数据头部和中间数据尾部之间的数据长度是否小于等于预设的长度阈值y1;步骤S1024,若是,则提取所述数据头部和数据尾部之间的中间数据流,并依据所述中间数据流形成所述中间数据队列。
然后,执行步骤S103,对所述中间数据队列进行二级处理,提取所述中间数据流中的有效数据流并依据所述有效数据流形成有效数据队列;
具体而言,该步骤S103也同样包括如下子步骤:步骤1031,根据二级特征同步字对所述中间数据流进行有效数据头部和有效数据尾部的识别,找到有效数据队列的起始点和结束点;步骤1032,依据所述起始点和结束点对应标识所述有效数据头部和有效数据尾部;步骤1033,判断所述有效数据头部和有效数据尾部之间的数据进行和校验或CRC校验,检查校验结果低16位是否等于校验位;步骤1034,若是,则提取所述有效数据头部和有效数据尾部之间的有效数据流,并依据所述有效数据流形成所述有效数据队列。
其中,如图7所示,对于基础数据流、中间数据流及有效数据流,可以理解为基础数据流中的数据信息如{A1B1C1A2B2A3C2…},包含中间数据流中的数据信息如{B1C1B2C2…},中间数据流中的数据信息包含有效数据流中的数据信息如{C1C2…}。
最后,执行步骤104:提取所述有效数据队列中的有效数据;和步骤105:解析并显示所提取的所述有效数据。
需要说明的是,本发明实施例还包括:步骤106,对所述中间数据队列的缓存大小进行监控;和步骤107,若所述中间数据队列的缓存大小大于缓存最大值,则对缓存队列中的旧数据进行丢弃处理。
在实际应用过程中,请参阅图8,本发明主要由三个主要线程组成,线程间交互通过数据进行驱动;数据通过UDP协议实现数据转发,由数据显示模块对接收的数据实时进行解析显示和转发存储。具体为:对基础数据流进行接收,根据一级处理进行数据头识别,找到队列起始点,由于一级全局数据量较大,采用数据定长确定数据窗口;对数据进行数据头部及尾部特征标识和长度校验,若校验通过则进行数据转发存储,且同时进行队列缓存;同时由一级缓存监控模块对一级队列缓存的大小进行监控,若大于缓存最大值,及时对旧数据进行丢弃处理,防止内存堆积数据量过大,影响整个系统处理数据能力;对校验通过的缓存数据,需要进一步缩小数据处理窗口,利用二级特征数据匹配的方式,对数据进行提取,进入二级数据队列缓存;二级有效数据校验采用数据头标识校验及数据和校验或CRC校验方式,若校验通过则进入队列进行缓存;数据转发模块将缓存队列数据进行实时转发存储,并对已转发存储的数据及时进行内存清理;数据显示模块通过UDP协议接收数据,对接收的数据进行实时数据转发和实时解析显示;数据存储模块对接收的数据进行及时存储备份。
值得一提的是,本发明实施例引入全局数据队列进行数据流处理,保障了数据流解析的实时性和可靠性,具体为:采用二级嵌套处理方法,缩小数据处理窗口,加快数据识别速度;采用多进程、进程内多线程处理方式,提高数据处理速度;利用数据转发模块和缓存监控模块,进行数据卸载,防止突发数据处理流量超过系统的处理能力,提高数据响应时间;对数据队列采用内存缓存和转发数据库存储相结合,保证了数据的可追朔性;引入数据校验模块,保障了接收数据的可靠性。
基于同一发明构思,本发明实施例还提供了与实施例一中方法对应的系统,见实施例二。
实施例二
本发明实施例二提供了一种系统,请参考图4-6,所述系统包括:基础数据流接收模块201,被配置为接收基础数据流;一级处理模块202,被配置为对接收的所述基础数据流进行一级处理,提取所述基础数据流中的中间数据流并依据所述中间数据流形成中间数据队列;二级处理模块203,被配置为对所述中间数据队列进行二级处理,提取所述中间数据流中的有效数据流并依据所述有效数据流形成有效数据队列;有效数据提取模块204,被配置为提取所述有效数据队列中的有效数据;显示模块205,被配置为解析并显示所提取的所述有效数据。
在本发明实施例二中,所述一级处理模块202具体包括:中间数据识别子模块2021,被配置为根据一级特征同步字对所述基础数据流进行中间数据头部和中间数据尾部的识别,找到中间数据队列的起始点和结束点;中间数据标识子模块2022,被配置为依据所述起始点和结束点对应标识所述中间数据头部和中间数据尾部;中间数据判断子模块2023,被配置为判断所述中间数据头部和中间数据尾部之间的数据长度是否小于等于预设的长度阈值y1;中间数据队列形成子模块2024,被配置为若是,则提取所述数据头部和数据尾部之间的中间数据流,并依据所述中间数据流形成所述中间数据队列。
在本发明实施例二中,所述二级处理模块203具体包括:有效数据识别子模块2031,被配置为根据二级特征同步字对所述中间数据流进行有效数据头部和有效数据尾部的识别,找到有效数据队列的起始点和结束点;有效数据标识子模块2032,被配置为依据所述起始点和结束点对应标识所述有效数据头部和有效数据尾部;有效数据判断子模块2033,被配置为判断所述有效数据头部和有效数据尾部之间的数据进行和校验或CRC校验,检查校验结果低16位是否等于校验位;有效数据队列形成子模块2034,被配置为若是,则提取所述有效数据头部和有效数据尾部之间的有效数据流,并依据所述有效数据流形成所述有效数据队列。
在本发明实施例二中,还包括:监控模块,被配置为对所述中间数据队列的缓存大小进行监控;旧数据丢弃模块,及时对数据进行卸载,被配置为若所述中间数据队列的缓存大小大于缓存最大值,则对缓存队列中的旧数据进行丢弃处理。
由于本发明实施例二所介绍的系统,为实施本发明实施例一的方法所采用的系统,故而基于本发明实施例一所介绍的方法,本领域所属人员能够了解该装置的具体结构及变形,故而在此不再赘述。凡是本发明实施例一的方法所采用的系统都属于本发明所欲保护的范围。
实施例三
需要说明的是,基于上述实施例一、实施例二同样的发明沟通,本发明实施例三提供了一种装置,包括:射频(Radio Frequency,RF)电路310、存储器320、输入单元330、显示单元340、音频电路350、WiFi模块360、处理器370、以及电源380等部件。其中,存储器320上存储有可在处理器370上运行的计算机程序,处理器370执行所述计算机程序时实现实施例一中所述的步骤S100、步骤S102、步骤S103、步骤S104和步骤S105。
在具体实施过程中,处理器执行计算机程序时,可以实现实施例一、二中的任一实施方式。
本领域技术人员可以理解,图9中示出的装置结构并不构成对装置本身的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图9对计算机设备的各个构成部件进行具体的介绍:
RF电路310可用于信号的接收和发送,特别地,将基站的下行信息接收后,给处理器370处理。通常,RF电路310包括但不限于至少一个放大器、收发信机、耦合器、低噪声放大器(Low Noise Amplifier,LNA)、双工器等。
存储器320可用于存储软件程序以及模块,处理器370通过运行存储在存储器320的软件程序以及模块,从而执行计算机设备的各种功能应用以及数据处理。存储器320可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序等;存储数据区可存储根据计算机设备的使用所创建的数据等。此外,存储器320可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
输入单元330可用于接收输入的数字或字符信息,以及产生与计算机设备的用户设置以及功能控制有关的键信号输入。具体地,输入单元330可包括键盘331以及其他输入设备332。键盘331,可收集用户在其上的输入操作,并根据预先设定的程式驱动相应的连接装置。键盘331采集到输出信息后再送给处理器370。除了键盘331,输入单元330还可以包括其他输入设备332。具体地,其他输入设备332可以包括但不限于触控面板、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元340可用于显示由用户输入的信息或提供给用户的信息以及计算机设备的各种菜单。显示单元340可包括显示面板341,可选的,可以采用液晶显示器(LiquidCrystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板341。进一步的,键盘331可覆盖显示面板341,当键盘331检测到在其上或附近的触摸操作后,传送给处理器370以确定触摸事件的类型,随后处理器370根据输入事件的类型在显示面板341上提供相应的视觉输出。虽然在图3中键盘331与显示面板341是作为两个独立的部件来实现计算机设备的输入和输入功能,但是在某些实施例中,可以将键盘331与显示面板341集成而实现计算机设备的输入和输出功能。
音频电路350、扬声器351,传声器352可提供用户与计算机设备之间的音频接口。音频电路350可将接收到的音频数据转换后的电信号,传输到扬声器351,由扬声器351转换为声音信号输出;
WiFi属于短距离无线传输技术,计算机设备通过WiFi模块360可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图4示出了WiFi模块360,但是可以理解的是,其并不属于计算机设备的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
处理器370是计算机设备的控制中心,利用各种接口和线路连接整个计算机设备的各个部分,通过运行或执行存储在存储器320内的软件程序和/或模块,以及调用存储在存储器320内的数据,执行计算机设备的各种功能和处理数据,从而对计算机设备进行整体监控。可选的,处理器370可包括一个或多个处理单元;优选的,处理器370可集成应用处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等。
计算机设备还包括给各个部件供电的电源380(比如电源适配器),优选的,电源可以通过电源管理系统与处理器370逻辑相连。
实施例四
基于同一发明构思,如图10所示,本实施例五提供了一种计算机可读存储介质400,其上存储有计算机程序411,该计算机程序411被处理器执行时实现实施例一中所述的步骤S101、步骤S102、步骤S103、步骤S104和步骤S105。
在具体实施过程中,该计算机程序411被处理器执行时,可以实现实施例一、二和三中的任一实施方式。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
本发明实施例中提供的技术方案,至少具有如下技术效果或优点:
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明实施例进行各种改动和变型而不脱离本发明实施例的精神和范围。这样,倘若本发明实施例的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (6)
1.一种嵌套数据流处理的方法,其特征在于,所述方法包括:
接收基础数据流;
对接收的所述基础数据流进行一级处理,提取所述基础数据流中的中间数据流并依据所述中间数据流形成中间数据队列;
对所述中间数据队列进行二级处理,提取所述中间数据流中的有效数据流并依据所述有效数据流形成有效数据队列;
提取所述有效数据队列中的有效数据;
解析并显示所提取的所述有效数据;
所述对接收的所述基础数据流进行一级处理,提取所述基础数据流中的中间数据流并依据所述中间数据流形成中间数据队列包括:
根据一级特征同步字对所述基础数据流进行中间数据头部和中间数据尾部的识别,找到中间数据队列的起始点和结束点;
依据所述起始点和结束点对应标识所述中间数据头部和中间数据尾部;
判断所述中间数据头部和中间数据尾部之间的数据长度是否小于等于预设的长度阈值y1;
若是,则提取所述中间数据头部和中间数据尾部之间的中间数据流,并依据所述中间数据流形成所述中间数据队列。
2.如权利要求1所述的方法,其特征在于,所述对所述中间数据队列进行二级处理,提取所述中间数据流中的有效数据流并依据所述有效数据流形成有效数据队列包括:
根据二级特征同步字对所述中间数据流进行有效数据头部和有效数据尾部的识别,找到有效数据队列的起始点和结束点;
依据所述起始点和结束点对应标识所述有效数据头部和有效数据尾部;
判断所述有效数据头部和有效数据尾部之间的数据进行和校验或CRC校验,检查校验结果低16位是否等于校验位;
若是,则提取所述有效数据头部和有效数据尾部之间的有效数据流,并依据所述有效数据流形成所述有效数据队列。
3.如权利要求2所述的方法,其特征在于,所述方法还包括:
对所述中间数据队列的缓存大小进行监控;
若所述中间数据队列的缓存大小大于缓存最大值,则对缓存队列中的旧数据进行丢弃处理。
4.一种嵌套数据流处理的系统,其特征在于,所述系统包括:
基础数据流接收模块,被配置为接收基础数据流;
一级处理模块,被配置为对接收的所述基础数据流进行一级处理,提取所述基础数据流中的中间数据流并依据所述中间数据流形成中间数据队列;
二级处理模块,被配置为对所述中间数据队列进行二级处理,提取所述中间数据流中的有效数据流并依据所述有效数据流形成有效数据队列;
有效数据提取模块,被配置为提取所述有效数据队列中的有效数据;
显示模块,被配置为解析并显示所提取的所述有效数据;
所述一级处理模块具体包括:
中间数据识别子模块,被配置为根据一级特征同步字对所述基础数据流进行中间数据头部和中间数据尾部的识别,找到中间数据队列的起始点和结束点;
中间数据标识子模块,被配置为依据所述起始点和结束点对应标识所述中间数据头部和中间数据尾部;
中间数据判断子模块,被配置为判断所述中间数据头部和中间数据尾部之间的数据长度是否小于等于预设的长度阈值y1;
中间数据队列形成子模块,被配置为若是,则提取所述中间数据头部和中间数据尾部之间的中间数据流,并依据所述中间数据流形成所述中间数据队列。
5.如权利要求4所述的系统,其特征在于,所述二级处理模块具体包括:
有效数据识别子模块,被配置为根据二级特征同步字对所述中间数据流进行有效数据头部和有效数据尾部的识别,找到有效数据队列的起始点和结束点;
有效数据标识子模块,被配置为依据所述起始点和结束点对应标识所述有效数据头部和有效数据尾部;
有效数据判断子模块,被配置为判断所述有效数据头部和有效数据尾部之间的数据进行和校验或CRC校验,检查校验结果低16位是否等于校验位;
有效数据队列形成子模块,被配置为若是,则提取所述有效数据头部和有效数据尾部之间的有效数据流,并依据所述有效数据流形成所述有效数据队列。
6.如权利要求5所述的系统,其特征在于,还包括:
监控模块,被配置为对所述中间数据队列的缓存大小进行监控;
旧数据丢弃模块,被配置为及时对队列进行卸载,若所述中间数据队列的缓存大小大于缓存最大值,则对缓存队列中的旧数据进行丢弃处理。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910845857.6A CN110784444B (zh) | 2019-09-09 | 2019-09-09 | 一种嵌套数据流处理的方法及相关设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910845857.6A CN110784444B (zh) | 2019-09-09 | 2019-09-09 | 一种嵌套数据流处理的方法及相关设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110784444A CN110784444A (zh) | 2020-02-11 |
CN110784444B true CN110784444B (zh) | 2021-10-15 |
Family
ID=69384173
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910845857.6A Active CN110784444B (zh) | 2019-09-09 | 2019-09-09 | 一种嵌套数据流处理的方法及相关设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110784444B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102323941A (zh) * | 2011-09-01 | 2012-01-18 | 北京空间飞行器总体设计部 | 一种遥测数据处理方法 |
CN105022712A (zh) * | 2015-06-18 | 2015-11-04 | 哈尔滨工业大学 | 一种基于数据流传输的数据包提取方法 |
CN105743812A (zh) * | 2014-12-26 | 2016-07-06 | 英特尔公司 | 在单个连接上多路复用许多客户端流 |
CN107124385A (zh) * | 2016-02-24 | 2017-09-01 | 中国科学院声学研究所 | 一种基于镜像流的ssl/tls协议明文数据采集方法 |
CN109379620A (zh) * | 2018-11-28 | 2019-02-22 | 广州四三九九信息科技有限公司 | 音视频缓冲方法和装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7821933B2 (en) * | 2007-08-31 | 2010-10-26 | France Telecom | Apparatus and associated methodology of processing a network communication flow |
-
2019
- 2019-09-09 CN CN201910845857.6A patent/CN110784444B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102323941A (zh) * | 2011-09-01 | 2012-01-18 | 北京空间飞行器总体设计部 | 一种遥测数据处理方法 |
CN105743812A (zh) * | 2014-12-26 | 2016-07-06 | 英特尔公司 | 在单个连接上多路复用许多客户端流 |
CN105022712A (zh) * | 2015-06-18 | 2015-11-04 | 哈尔滨工业大学 | 一种基于数据流传输的数据包提取方法 |
CN107124385A (zh) * | 2016-02-24 | 2017-09-01 | 中国科学院声学研究所 | 一种基于镜像流的ssl/tls协议明文数据采集方法 |
CN109379620A (zh) * | 2018-11-28 | 2019-02-22 | 广州四三九九信息科技有限公司 | 音视频缓冲方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
CN110784444A (zh) | 2020-02-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10516622B2 (en) | Speech transmission method and apparatus and speech service system | |
CN106293901B (zh) | 一种终端应用的进程管理方法及装置 | |
US11671678B2 (en) | Method and device, equipment, and storage medium for data processing | |
CN107592250B (zh) | 基于航空fc总线多速率自适应测试设备 | |
US8539453B2 (en) | Autonomic I/O tracing and performance tuning | |
CN112908318A (zh) | 智能音箱的唤醒方法、装置、智能音箱及存储介质 | |
CN101729879B (zh) | 一种基于mimo-ofdm系统的实时视频传输的实现方法 | |
CN103036707B (zh) | 便携式iptv业务服务质量诊断装置及诊断方法 | |
CN113791910A (zh) | 内存分配方法、内存分配装置、电子设备和可读存储介质 | |
CN110784444B (zh) | 一种嵌套数据流处理的方法及相关设备 | |
CN111315026B (zh) | 信道的选择方法、装置、网关及计算机可读存储介质 | |
CN102694730A (zh) | 一种并行处理的方法及装置 | |
CN111866071A (zh) | 业务应用的数据上传方法、装置、电子设备及存储介质 | |
CN104038307A (zh) | 数据流传输系统及方法 | |
CN108289165A (zh) | 一种基于手机控制相机的实现方法、装置及终端设备 | |
CN106933718B (zh) | 性能监控方法及装置 | |
CN108234359A (zh) | 传输报文的系统和方法 | |
CN105743802B (zh) | 一种实现业务协同调度的方法及计算单板 | |
CN106209516B (zh) | 一种上传性能监控方法、监控服务器及系统 | |
CN106357767B (zh) | 一种信息同步的方法及服务器 | |
CN109495119A (zh) | 一种射频开关控制方法、装置、移动终端及存储介质 | |
Schmitt et al. | PSAT–A Package Structure Analyzation Tool to Regain Control of Hijacked Drones | |
CN111741142A (zh) | 一种高频ip地址获取方法、系统、存储介质及终端设备 | |
CN107564129A (zh) | 一种交通事故数据的传输方法及装置 | |
CN117573515B (zh) | 可编程报文解析器验证方法及平台 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |