CN111797117A - 一种数据处理方法及装置 - Google Patents
一种数据处理方法及装置 Download PDFInfo
- Publication number
- CN111797117A CN111797117A CN202010633207.8A CN202010633207A CN111797117A CN 111797117 A CN111797117 A CN 111797117A CN 202010633207 A CN202010633207 A CN 202010633207A CN 111797117 A CN111797117 A CN 111797117A
- Authority
- CN
- China
- Prior art keywords
- data
- receiver
- preset
- storage area
- parallel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 17
- 230000005540 biological transmission Effects 0.000 claims abstract description 118
- 238000000034 method Methods 0.000 claims abstract description 62
- 230000015572 biosynthetic process Effects 0.000 claims abstract description 45
- 238000003786 synthesis reaction Methods 0.000 claims abstract description 45
- 238000004088 simulation Methods 0.000 claims abstract description 30
- 238000012545 processing Methods 0.000 claims abstract description 28
- 238000012360 testing method Methods 0.000 claims description 64
- 230000002194 synthesizing effect Effects 0.000 claims description 13
- 238000004891 communication Methods 0.000 abstract description 15
- 238000010586 diagram Methods 0.000 description 2
- 238000005192 partition Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24568—Data stream processing; Continuous queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2453—Query optimisation
- G06F16/24532—Query optimisation of parallel queries
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
本发明提供了一种数据处理方法及装置,在确定发射机与接收机之间为并行数据发射模式情况下,控制接收机按照并行数据的获取方式从预设存储区域中获取发射机发射的数据;在获取数据的过程中,只有确定接收机获取到的数据满足预设数据合成条件的情况下,才会控制接收机将获取到的数据进行合成,预设数据合成条件至少包括:从预设存储区域中获取的数据个数符合预设个数阈值,或者从预设存储区域中获取数据的时长符合第一时长阈值。通过预设数据合成条件的限制,降低对数据仿真系统的时延要求,减少多文件数据流处理过程中因为通信设备的时延限制产生的数据丢失问题,有效地提高了数据仿真系统的准确性。
Description
技术领域
本发明涉及电子通信技术领域,更具体的说,是涉及一种数据处理方法及装置。
背景技术
在数据流仿真过程中,数据通常会在发射机与接收机之间传输,而发射机与接收机之间通常存在两种不同的数据传输方式,一种是串行数据传输,另外一种是并行数据传输,其中,在并行数据传输过程中,发射机在同一时刻会向接收机并行发射多个数据,相应的,接收机获取到发射机并行发射的数据之后,将获取到的数据进行合成,然后对合成后的数据进行下一步处理。
然而在仿真系统中,发射机与接收机之间传输数据的实时性较差,数据传输过程会存在一定的延时,导致每次进行数据合成的数据少于发射机并行发射的数据,进而出现数据丢失的现象,降低后续数据处理的准确性。
发明内容
有鉴于此,本发明提供了一种数据处理方法及装置,以解决现有技术数据合成过程中容易出现数据丢失,降低后续数据处理准确性的问题。
为实现上述目的,本发明提供如下技术方案:
一种数据处理方法,所述方法应用于数据仿真系统中的控制器,所述方法包括:
在确定发射机与接收机之间为并行数据发射模式的情况下,控制接收机按照并行数据对应的获取方式从预设存储区域中获取发射机发射的数据;
在确定接收机获取到的数据满足预设数据合成条件的情况下,控制接收机将获取到的数据进行合成,所述预设数据合成条件至少包括:接收机从预设存储区域中获取的数据的个数符合预设个数阈值,或者,接收机从预设存储区域中获取数据的时长符合第一时长阈值。
可选的,所述预设个数阈值的确定过程包括:
在并行数据发射测试过程中,执行至少一次并行数据发射测试操作,得到并行发射数据个数测试值;
基于所述并行发射数据个数测试值,确定所述预设个数阈值。
可选的,所述第一时长阈值的确定过程包括:
在并行数据发射测试过程中,执行至少一次并行数据发射测试操作,并在每次并行数据发射测试操作开始时触发开始计时,至该次并行数据发射测试操作中最后一个数据被存储至预设存储区域中时计时结束;得到每次并行数据发射测试操作的计时时长;
基于并行数据发射测试过程中所得到的各计时时长,确定单次并行数据发射过程中并行发射数据全部存储至预设存储区域中的所用时长测试值;
基于所述所用时长测试值,确定第一时长阈值,所述第一时长阈值大于等于所述所用时长测试值。
可选的,所述控制接收机按照并行数据对应的获取方式从预设存储区域中获取发射机发射的数据包括:
依据预先设定的、接收机标识与接收机之间的第一对应关系,控制接收机从预设存储区域中获取符合所述第一对应关系的数据;
或;
依据预先设定的、存储范围与接收机之间的第二对应关系,控制接收机从预设存储区域中获取符合所述第二对应关系的数据。
可选的,所述方法还包括:
在控制接收机从预设存储区域中获取数据的时长大于等于第二时长阈值的情况下,判断接收机是否从预设存储区域中获取到数据,所述第二时长阈值大于等于单次并行数据发射过程中首个数据被存储至预设存储区域中时的数据发射时长测试值,并且小于所述第一时长阈值;
在接收机没有从预设存储区域中获取到数据的情况下,控制发射机重新发射数据。
可选的,在确定接收机将获取到的所有数据合成完成后,所述方法还包括:返回执行判断接收机获取到的数据是否满足预设数据合成条件的步骤,直到满足预设数据获取终止条件。
可选的,所述方法还包括:
在确定发射机与接收机之间为串行数据发射模式的情况下,控制接收机按照串行数据对应的获取方式从预设存储区域中获取发射机发射的数据。
可选的,所述控制接收机按照串行数据对应的获取方式从预设存储区域中获取发射机发射的数据包括:
按照数据发射时间从早到晚的顺序,控制接收机从预设存储区域中获取数据。
可选的,所述按照所述数据发射时间从早到晚的顺序,控制所述接收机从预设存储区域中获取数据包括:
依据预先设定、接收机标识与接收机之间的第三对应关系,控制接收机从预设存储区域中确定符合所述第三对应关系的数据;或,依据预先设定的、存储范围与接收机之间的第四对应关系,控制接收机从预设存储区域中确定符合所述第四对应关系的数据;
按照所述符合所述第三对应关系的数据的发射时间从早到晚的顺序,控制所述接收机获取相应的数据;或,按照所述符合所述第四对应关系的数据的发射时间从早到晚的顺序,控制所述接收机获取相应的数据。
一种数据处理装置,所述装置应用于数据仿真系统中的控制器,所述装置包括:
数据获取单元,用于在确定发射机与接收机之间为并行数据发射模式的情况下,控制接收机按照并行数据对应的获取方式从预设存储区域中获取发射机发射的数据;
数据合成单元,用于在确定接收机获取到的数据满足预设数据合成条件的情况下,控制接收机将获取到的数据进行合成,所述预设数据合成条件至少包括:接收机从预设存储区域中获取的数据的个数符合预设个数阈值,或者,接收机从预设存储区域中获取数据的时长符合第一时长阈值。
经由上述的技术方案可知,与现有技术相比,本发明提供了一种数据处理方法及装置,在确定发射机与接收机之间为并行数据发射模式的情况下,控制接收机按照并行数据对应的获取方式从预设存储区域中获取发射机发射的数据;在获取数据的过程中,只有确定接收机获取到的数据满足预设数据合成条件的情况下,才会控制接收机将获取到的数据进行合成,由于预设数据合成条件至少包括:接收机从预设存储区域中获取的数据的个数符合预设个数阈值,或者,接收机从预设存储区域中获取数据的时长符合第一时长阈值。也就是说,通过预设数据合成条件的限制,可以对一段时间内的并行数据进行筛选和合成处理,而不是严格的将某一时刻的数据进行合成,可以降低对数据仿真系统的时延要求,减少多文件数据流处理过程中因为通信设备的时延限制产生的数据丢失问题,有效地提高了数据仿真系统的准确性和处理速度,同时降低了对通信设备实时性的要求,提高仿真设备的应用范围。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的数据处理方法的流程图;
图2为本发明实施例提供的另一种数据处理方法的流程图;
图3为本发明实施例提供的数据处理装置的结构框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。
在数据流仿真过程中,数据通常会在发射机与接收机之间传输,而发射机与接收机之间通常存在两种不同的数据传输方式,一种是串行数据传输,另外一种是并行数据传输,其中,在并行数据传输过程中,发射机在同一时刻会向接收机同时传输多个数据,相应的,接收机获取到发射机并行发射的数据之后,将获取到的数据进行合成,然后对合成后的数据进行下一步处理。
然而在数据仿真系统中,发射机与接收机之间传输数据的实时性较差,数据传输过程会存在一定的延时,目前的数据处理方式导致进行数据合成的数据少于发射机并行发射的数据,也就是在进行数据合成的时候,接收机还没有获取到发射机并行发射的所有数据,因此,进行数据合成的数据只是发射机并行发射的部分数据,仅对发射机并行发射的部分数据进行数据合成,势必会出现数据丢失的现象,降低后续数据处理的准确性。其中,数据仿真系统也称为仿真设备,由于发射机和接收机之间进行了数据通信,因此,两者也统称为通信设备。
为了解决上述技术问题,本发明实施例提供一种数据处理方法及装置,在确定发射机与接收机之间为并行数据发射模式的情况下,控制接收机按照并行数据对应的获取方式从预设存储区域中获取发射机发射的数据;在获取数据的过程中,只有确定接收机获取到的数据满足预设数据合成条件的情况下,才会控制接收机将获取到的数据进行合成,由于预设数据合成条件至少包括:接收机从预设存储区域中获取的数据的个数符合预设个数阈值,或者,接收机从预设存储区域中获取数据的时长符合第一时长阈值。也就是说,通过预设数据合成条件的限制,可以对一段时间内的并行数据进行筛选和合成处理,而不是严格的将某一时刻的数据进行合成,可以降低对数据仿真系统的时延要求,减少多文件数据流处理过程中因为通信设备的时延限制产生的数据丢失问题,有效地提高了数据仿真系统的准确性和处理速度,同时降低了对通信设备实时性的要求,提高仿真设备的应用范围。
下面对本发明实施例提供的数据处理方法进行介绍,图1为本发明实施例提供的数据处理方法的流程图,该方法应用于数据仿真系统中的控制器,所述控制器至少用于控制发射机与接收机之间的数据传输过程,本发明实施例数据仿真系统中并不限定发射机与接收机的个数,也不限定发射机与接收机的对应关系,例如,所述数据仿真系统中一个发射机可以对应一个接收机,一个发射机还可以对应多个接收机,多个发射机可以对应一个接收机,多个发射机还可以对应多个接收机。也就是说,一个发射机发射的数据可以由一个接收机获取,或者一个发射机发射的数据由多个接收机获取,还可能多个发射机发射的数据由一个接收机获取,或者多个发射机发射的数据由多个接收机获取。当多个发射机发射的数据由多个接收机获取且每个接收机同一时刻不能同时获取多个数据文件的情况下,说明不同的接收机只能处理不同的发射机发射的数据,则接收机的数量肯定大于发射机的数量,此时要求接收机的数量≥发射机的数量。
相应的,本发明对发射机与接收机之间的通信方式也不限定,发射机与接收机之间的通信方式可以为:无多址传输、TDMA(Time division multiple access,时分多址)和FDMA(Frequency division multiple access,频分多址)。
在无多址传输时,接收机每次只处理发射机发射的一个数据,若接收机需处理多个发射机发送的数据文件,则按照数据发送的时间顺序进行处理。在TDMA中,接收机需按照不同的时隙分配处理发射机发送的多个数据文件。在FDMA中,接收机需同时处理发射机发送的多个数据文件。
参照图1,本发明实施例提供的数据处理方法可以包括:
步骤S100、在确定发射机与接收机之间为并行数据发射模式的情况下,控制接收机按照并行数据对应的获取方式从预设存储区域中获取发射机发射的数据。
需要说明的是,本发明实施例在确定发射机与接收机之间的数据发射模式之前,可以先执行对数据仿真系统的初始化过程,对数据仿真系统的初始化过程主要包括:初始化发射机与接收机之间的通信约定,例如:在发射机待发送的数据中添加接收机标识,或者在发射机待发送的数据中添加标识数据,如发送时间的时间戳等,本发明实施例不做具体限定。
本发明实施例可以通过识别数据仿真系统中发射机与接收机的数据传输方式的方法,确定发射机与接收机之间的数据发射模式。发射机与接收机之间的数据发射模式可以为串行数据发射模式,还可以为并行数据发射模式。
本发明实施例在仿真设备的某一存储空间中预先设置一块预设存储区域,预设存储区域专门用来存储发射机发射的数据。在数据传输过程中,发射机并不直接将数据发射给接收机,而是先将要发射的数据发射到预设存储区域中,然后,接收机再从预设存储区域中获取发射机发射的数据。
需要说明的是,控制接收机按照并行数据对应的获取方式从预设存储区域中获取发射机发射的数据可以包括:
依据预先设定的、接收机标识与接收机之间的第一对应关系,控制接收机从预设存储区域中获取符合第一对应关系的数据;
或;依据预先设定的、存储范围与接收机之间的第二对应关系,控制接收机从预设存储区域中获取符合第二对应关系的数据。
可选的,在多个接收机各自对应的数据都存储在预设存储区域中的情况下,假设某个接收机对应的接收机标识为001,则该接收机可以从预设存储区域中搜索并接收具有001接收机标识的数据。接收机标识用于唯一标识一个接收机。
可选的,本发明实施例还可以预先对预设存储区域进行范围的划分,并建立存储范围与接收机的第二对应关系,在多个接收机各自对应的数据都存储在预设存储区域中的情况下,假设某个接收机对应的存储范围为分区1,则该接收机可以从预设存储区域的分区1中搜索并接收数据。
步骤S110、在确定接收机获取到的数据满足预设数据合成条件的情况下,控制接收机将获取到的数据进行合成,预设数据合成条件至少包括:接收机从预设存储区域中获取的数据的个数符合预设个数阈值,或者,接收机从预设存储区域中获取数据的时长符合第一时长阈值。
需要说明的是,为了确定预设个数阈值以及第一时长阈值的大小,本发明实施例可以在正式的数据发射之前,先执行并行数据发射测试过程,主要测试发射机能够或者需要一次并行发射多少个数据,以及每次并行数据发射测试操作的计时时长。
基于此,预设个数阈值预先依据并行数据发射测试过程中确定的能够或者需要并行发射的数据的个数而确定,预设个数阈值的确定过程包括:
在并行数据发射测试过程中,执行至少一次并行数据发射测试操作,得到并行发射数据个数测试值;基于并行发射数据个数测试值,确定预设个数阈值。
可选的,本发明实施例可以将并行发射数据个数测试值的平均值、最大值或最小值作为发射机并行发射数据的基准个数,预设个数阈值大于或等于发射机并行发射数据的基准个数,发射机并行发射数据的基准个数表征发射机能够或者需要并行发射的数据的个数。
第一时长阈值的确定过程包括:
在并行数据发射测试过程中,执行至少一次并行数据发射测试操作,并在每次并行数据发射测试操作开始时触发开始计时,至该次并行数据发射测试操作中最后一个数据被存储至预设存储区域中时计时结束;得到每次并行数据发射测试操作的计时时长;基于并行数据发射测试过程中所得到的各计时时长,确定单次并行数据发射过程中并行发射数据全部存储至预设存储区域中的所用时长测试值;基于所用时长测试值,确定第一时长阈值,第一时长阈值大于等于所用时长测试值。
需要说明的是,由于在发射机与接收机之间传输数据的实时性较差,数据传输过程会存在一定的延时,因此,发射机并行发射出去的各个数据,到达预设存储区域中的到达时间会存在时间差,也就是说,并行发射出去的数据,并不是同时到达预设存储区域的,到达时间会有先后之分,因此,发射机一次并行数据发射过程,会存在首个被存储至预设存储区域中的数据,也会存在最后一个被存储至预设存储区域中的数据。
需要说明的是,本发明实施例中接收机从预设存储区域中获取的数据的个数符合预设个数阈值具体包括:接收机从预设存储区域中获取的数据的个数大于或等于预设个数阈值;接收机从预设存储区域中获取数据的时长符合第一时长阈值具体包括:接收机从预设存储区域中获取数据的时长大于或等于第一时长阈值。
可选的,由于发射机并行发射的数据之间存在相关性,因此,接收机接收到发射机并行发射的所有数据之后,会将所有数据进行合成,并在合成之后,才能够对合成的数据执行后续数据处理操作。
可选的,本发明实施例还包括:
在控制接收机从预设存储区域中获取数据的时长大于等于第二时长阈值的情况下,判断接收机是否从预设存储区域中获取到数据,第二时长阈值大于等于单次并行数据发射过程中首个数据被存储至预设存储区域中时的数据发射时长测试值,并且小于第一时长阈值;
在接收机没有从预设存储区域中获取到数据的情况下,控制发射机重新发射数据。
在控制接收机从预设存储区域中开始获取数据的时候,控制计时器开始对接收机的数据获取时长进行计时,在计时器计时过程中,首先会在计时器所计时长大于或等于第二时长阈值的情况下,判断接收机是否从预设存储区域中获取到数据,如果在计时器所计时长大于或等于第二时长阈值的情况下,接收机从预设存储区域中获取到数据,则继续执行数据获取过程,并在计时器所计时长大于或等于第一时长阈值的情况下,控制接收机将获取到的数据进行合成,同时触发计时器重新开始计时;如果在计时器所计时长大于或等于第二时长阈值的情况下,接收机从预设存储区域中并未获取到数据,则表明发射机的数据发射过程出现问题,则控制发射机重新发射数据,同时触发计时器重新开始计时。
由于第二时长阈值大于等于单次并行数据发射过程中首个数据被存储至预设存储区域中时的数据发射时长测试值,并且小于第一时长阈值,本发明实施例在数据获取过程中,通过判断接收机从预设存储区域中获取数据的时长是否大于或等于第二时长阈值的方式,从而能够判断发射机的数据发射过程是否存在问题,如果接收机从预设存储区域中获取数据的时长大于或等于第二时长阈值的时候,接收机从预设存储区域中并未获取到数据,则表明发射机的数据发射过程出现问题,则控制发射机重新发射数据,提高数据传输过程的可靠性。
在确定发射机与接收机之间为并行数据发射模式的情况下,控制接收机按照并行数据对应的获取方式从预设存储区域中获取发射机发射的数据;在获取数据的过程中,只有确定接收机获取到的数据满足预设数据合成条件的情况下,才会控制接收机将获取到的数据进行合成,由于预设数据合成条件至少包括:接收机从预设存储区域中获取的数据的个数符合预设个数阈值,或者,接收机从预设存储区域中获取数据的时长符合第一时长阈值。也就是说,通过预设数据合成条件的限制,可以对一段时间内的并行数据进行筛选和合成处理,而不是严格的将某一时刻的数据进行合成,可以降低对数据仿真系统的时延要求,减少多文件数据流处理过程中因为通信设备的时延限制产生的数据丢失问题,有效地提高了数据仿真系统的准确性和处理速度,同时降低了对通信设备实时性的要求,提高仿真设备的应用范围。
下面以一个具体的实施例,进一步说明本发明数据处理方式的具体执行过程,参照图2,本发明实施例提供的数据处理方法可以包括:
步骤S200、在确定发射机与接收机之间为并行数据发射模式的情况下,控制接收机按照并行数据对应的获取方式从预设存储区域中获取发射机发射的数据。
步骤S210、判断接收机获取到的数据是否满足预设数据合成条件,在确定接收机获取到的数据满足预设数据合成条件的情况下,执行步骤S220,在确定接收机获取到的数据不满足预设数据合成条件的情况下,继续执行数据获取过程。
预设数据合成条件至少包括:接收机从预设存储区域中获取的数据的个数符合预设个数阈值,或者,接收机从预设存储区域中获取数据的时长符合第一时长阈值。
步骤S220、控制接收机将获取到的满足该次数据合成条件的数据进行合成。
步骤S230、判断接收机是否将获取到的满足该次数据合成条件的所有数据都合成完成,在确定接收机将获取到的满足该次数据合成条件的所有数据合成完成后,返回执行步骤S210,直到满足预设数据获取终止条件终止;在确定接收机并没有将获取到的满足该次数据合成条件的所有数据合成完成后,继续执行数据合成过程。
预设数据获取终止条件可以为数据获取时长满足预设数据获取终止时长,或者发射机完成数据发送任务等,本发明实施例不做具体限定。
本发明实施例在控制接收机按照并行数据对应的获取方式从预设存储区域中持续获取数据的过程中,会实时判断接收机获取到的数据是否满足预设数据合成条件,在确定接收机获取到的数据满足预设数据合成条件的情况下,才会控制接收机将获取到的数据进行合成,并在接收机将获取到的所有数据都合成完成后,返回执行判断接收机获取到的数据是否满足预设数据合成条件的步骤,从而实现周期性的对接收机获取到的数据进行合成,由于预设数据合成条件至少包括:接收机从预设存储区域中获取的数据的个数符合预设个数阈值,或者,接收机从预设存储区域中获取数据的时长符合第一时长阈值。也就是说,通过预设数据合成条件的限制,可以对一段时间内的并行数据进行筛选和合成处理,而不是严格的将某一时刻的数据进行合成,可以降低对数据仿真系统的时延要求,减少多文件数据流处理过程中因为通信设备的时延限制产生的数据丢失问题,有效地提高了数据仿真系统的准确性和处理速度,同时降低了对通信设备实时性的要求,提高仿真设备的应用范围。
下面在确定发射机与接收机之间为串行数据发射模式的情况下,本发明还包括:控制接收机按照串行数据对应的获取方式从预设存储区域中获取发射机发射的数据。
可选的,控制接收机按照串行数据对应的获取方式从预设存储区域中获取发射机发射的数据包括:
按照数据发射时间从早到晚的顺序,控制接收机从预设存储区域中获取数据。
按照数据发射时间从早到晚的顺序,控制接收机从预设存储区域中获取数据包括:
依据预先设定、接收机标识与接收机之间的第三对应关系,控制接收机从预设存储区域中确定符合第三对应关系的数据;或,依据预先设定的、存储范围与接收机之间的第四对应关系,控制接收机从预设存储区域中确定符合第四对应关系的数据;
按照符合第三对应关系的数据的发射时间从早到晚的顺序,控制接收机获取相应的数据(即符合第三对应关系的数据);或,按照符合第四对应关系的数据的发射时间从早到晚的顺序,控制接收机获取相应的数据(即符合第四对应关系的数据)。
由于从预设存储区域中获取到的数据会携带一个表示数据发射时间的时间戳,该数据发射时间是以发射机发射数据的时间为基准,发射机与接收机之间为串行数据发射模式的情况下,则需要按照时间戳中携带的数据发射时间从早到晚的顺序,控制接收机从预设存储区域中串行获取数据。
若是无多址传输方式,则接收机需按照数据中携带的数据发射时间从早到晚的顺序,串行获取数据。若是TDMA传输方式,则在按照发射机发送数据文件中的时隙安排,控制接收机分时间点从预设存储区域中串行获取数据。
通过本发明上述方式,可以根据发射机与接收机之间的数据发射模式,灵活的选择串行的多文件数据处理方式或者并行的多文件数据处理方式,扩大了多文件数据处理方法的适用范围。
可以理解的是,本发明还存在其他实施例,比如,预设个数阈值或者第一时长阈值也可以根据经验设定。又如,可以在发射机发送的数据中添加接收机标识,以使接收机接收含有自身接收机标识的数据。
下面对本发明实施例提供的数据处理装置进行介绍,下文描述的数据处理装置可与上文数据处理方法相互对应参照。
图3为本发明实施例提供的数据处理装置的结构框图,参照图3,所述装置应用于数据仿真系统中的控制器,所述数据处理装置包括:
数据获取单元300,用于在确定发射机与接收机之间为并行数据发射模式的情况下,控制接收机按照并行数据对应的获取方式从预设存储区域中获取发射机发射的数据;
数据合成单元310,用于在确定接收机获取到的数据满足预设数据合成条件的情况下,控制接收机将获取到的数据进行合成,所述预设数据合成条件至少包括:接收机从预设存储区域中获取的数据的个数符合预设个数阈值,或者,接收机从预设存储区域中获取数据的时长符合第一时长阈值。
可选的,所述数据处理装置还包括:预设个数阈值确定单元,所述预设个数阈值确定单元包括:
个数测试值获取子单元,用于在并行数据发射测试过程中,执行至少一次并行数据发射测试操作,得到并行发射数据个数测试值;
预设个数阈值确定子单元,用于基于所述并行发射数据个数测试值,确定所述预设个数阈值。
可选的,所述数据处理装置还包括:第一时长阈值确定单元,所述第一时长阈值确定单元包括:
计时时长获取子单元,用于在并行数据发射测试过程中,执行至少一次并行数据发射测试操作,并在每次并行数据发射测试操作开始时触发开始计时,至该次并行数据发射测试操作中最后一个数据被存储至所述预设存储区域中时计时结束;得到每次并行数据发射测试操作的计时时长;
所用时长测试值确定子单元,用于基于并行数据发射测试过程中所得到的各计时时长,确定单次并行数据发射过程中并行发射数据全部存储至所述预设存储区域中的所用时长测试值;
第一时长阈值确定子单元,用于基于所述所用时长测试值,确定第一时长阈值,所述第一时长阈值大于等于所述所用时长测试值。
可选的,所述数据获取单元包括:
第一对应关系数据获取单元,用于依据预先设定的、接收机标识与接收机之间的第一对应关系,控制接收机从所述预设存储区域中获取符合所述第一对应关系的数据;
或;
第二对应关系数据获取单元,用于依据预先设定的、存储范围与接收机之间的第二对应关系,控制接收机从所述预设存储区域中获取符合所述第二对应关系的数据。
可选的,所述数据处理装置还包括:
获取数据判断单元,用于在控制接收机从所述预设存储区域中获取数据的时长大于等于第二时长阈值的情况下,判断接收机是否从所述预设存储区域中获取到数据,所述第二时长阈值大于等于单次并行数据发射过程中首个数据被存储至所述预设存储区域中时的数据发射时长测试值,并且小于所述第一时长阈值;
数据重发单元,用于在获取数据判断单元判断出接收机没有从所述预设存储区域中获取到数据的情况下,控制发射机重新发射数据。
可选的,在确定接收机将获取到的所有数据合成完成后,所述装置还用于执行:返回执行判断接收机获取到的数据是否满足预设数据合成条件的步骤,直到满足预设数据获取终止条件。
所述装置还包括:
串行获取单元,用于在确定发射机与接收机之间为串行数据发射模式的情况下,控制接收机按照串行数据对应的获取方式从所述预设存储区域中获取发射机发射的数据。
所述串行获取单元包括:
串行获取子单元,用于按照数据发射时间从早到晚的顺序,控制接收机从所述预设存储区域中获取数据。
所述串行获取子单元具体用于:
依据预先设定、接收机标识与接收机之间的第三对应关系,控制接收机从所述预设存储区域中确定符合所述第三对应关系的数据;或,依据预先设定的、存储范围与接收机之间的第四对应关系,控制接收机从所述预设存储区域中确定符合所述第四对应关系的数据;
按照所述符合所述第三对应关系的数据的发射时间从早到晚的顺序,控制所述接收机获取相应的数据;或,按照所述符合所述第四对应关系的数据的发射时间从早到晚的顺序,控制所述接收机获取相应的数据。
本说明书中各个实施例中记载的技术特征可以相互替换或组合,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种数据处理方法,其特征在于,所述方法应用于数据仿真系统中的控制器,所述方法包括:
在确定发射机与接收机之间为并行数据发射模式的情况下,控制接收机按照并行数据对应的获取方式从预设存储区域中获取发射机发射的数据;
在确定接收机获取到的数据满足预设数据合成条件的情况下,控制接收机将获取到的数据进行合成,所述预设数据合成条件至少包括:接收机从预设存储区域中获取的数据的个数符合预设个数阈值,或者,接收机从预设存储区域中获取数据的时长符合第一时长阈值。
2.根据权利要求1所述的方法,其特征在于,所述预设个数阈值的确定过程包括:
在并行数据发射测试过程中,执行至少一次并行数据发射测试操作,得到并行发射数据个数测试值;
基于所述并行发射数据个数测试值,确定所述预设个数阈值。
3.根据权利要求1所述的方法,其特征在于,所述第一时长阈值的确定过程包括:
在并行数据发射测试过程中,执行至少一次并行数据发射测试操作,并在每次并行数据发射测试操作开始时触发开始计时,至该次并行数据发射测试操作中最后一个数据被存储至预设存储区域中时计时结束;得到每次并行数据发射测试操作的计时时长;
基于并行数据发射测试过程中所得到的各计时时长,确定单次并行数据发射过程中并行发射数据全部存储至预设存储区域中的所用时长测试值;
基于所述所用时长测试值,确定第一时长阈值,所述第一时长阈值大于等于所述所用时长测试值。
4.根据权利要求1所述的方法,其特征在于,所述控制接收机按照并行数据对应的获取方式从预设存储区域中获取发射机发射的数据包括:
依据预先设定的、接收机标识与接收机之间的第一对应关系,控制接收机从预设存储区域中获取符合所述第一对应关系的数据;
或;
依据预先设定的、存储范围与接收机之间的第二对应关系,控制接收机从预设存储区域中获取符合所述第二对应关系的数据。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在控制接收机从预设存储区域中获取数据的时长大于等于第二时长阈值的情况下,判断接收机是否从预设存储区域中获取到数据,所述第二时长阈值大于等于单次并行数据发射过程中首个数据被存储至预设存储区域中时的数据发射时长测试值,并且小于所述第一时长阈值;
在接收机没有从预设存储区域中获取到数据的情况下,控制发射机重新发射数据。
6.根据权利要求1所述的方法,其特征在于,在确定接收机将获取到的所有数据合成完成后,所述方法还包括:返回执行判断接收机获取到的数据是否满足预设数据合成条件的步骤,直到满足预设数据获取终止条件。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在确定发射机与接收机之间为串行数据发射模式的情况下,控制接收机按照串行数据对应的获取方式从预设存储区域中获取发射机发射的数据。
8.根据权利要求7所述的方法,其特征在于,所述控制接收机按照串行数据对应的获取方式从预设存储区域中获取发射机发射的数据包括:
按照数据发射时间从早到晚的顺序,控制接收机从预设存储区域中获取数据。
9.根据权利要求8所述的方法,其特征在于,所述按照所述数据发射时间从早到晚的顺序,控制所述接收机从预设存储区域中获取数据包括:
依据预先设定、接收机标识与接收机之间的第三对应关系,控制接收机从预设存储区域中确定符合所述第三对应关系的数据;或,依据预先设定的、存储范围与接收机之间的第四对应关系,控制接收机从预设存储区域中确定符合所述第四对应关系的数据;
按照所述符合所述第三对应关系的数据的发射时间从早到晚的顺序,控制所述接收机获取相应的数据;或,按照所述符合所述第四对应关系的数据的发射时间从早到晚的顺序,控制所述接收机获取相应的数据。
10.一种数据处理装置,其特征在于,所述装置应用于数据仿真系统中的控制器,所述装置包括:
数据获取单元,用于在确定发射机与接收机之间为并行数据发射模式的情况下,控制接收机按照并行数据对应的获取方式从预设存储区域中获取发射机发射的数据;
数据合成单元,用于在确定接收机获取到的数据满足预设数据合成条件的情况下,控制接收机将获取到的数据进行合成,所述预设数据合成条件至少包括:接收机从预设存储区域中获取的数据的个数符合预设个数阈值,或者,接收机从预设存储区域中获取数据的时长符合第一时长阈值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010633207.8A CN111797117A (zh) | 2020-07-02 | 2020-07-02 | 一种数据处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010633207.8A CN111797117A (zh) | 2020-07-02 | 2020-07-02 | 一种数据处理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111797117A true CN111797117A (zh) | 2020-10-20 |
Family
ID=72811142
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010633207.8A Pending CN111797117A (zh) | 2020-07-02 | 2020-07-02 | 一种数据处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111797117A (zh) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101388844A (zh) * | 2008-11-07 | 2009-03-18 | 东软集团股份有限公司 | 一种数据流程的处理方法和系统 |
CN102623291A (zh) * | 2012-01-17 | 2012-08-01 | 上海大学 | 一种数据采集并行储存装置及方法 |
CN105740196A (zh) * | 2016-01-26 | 2016-07-06 | 广东威创视讯科技股份有限公司 | 高速串行发送数据预处理方法和系统 |
CN106210032A (zh) * | 2016-07-06 | 2016-12-07 | 乐视控股(北京)有限公司 | 基于终端数据批量上报的方法及装置 |
CN106789718A (zh) * | 2016-12-05 | 2017-05-31 | 广东神马搜索科技有限公司 | 数据传输的拥塞控制方法、设备、服务器及可编程设备 |
CN107122135A (zh) * | 2017-04-25 | 2017-09-01 | 北京小米移动软件有限公司 | 数据处理方法及装置 |
CN108563697A (zh) * | 2018-03-22 | 2018-09-21 | 腾讯科技(深圳)有限公司 | 一种数据处理方法、装置和存储介质 |
CN108681510A (zh) * | 2018-05-21 | 2018-10-19 | 迈克医疗电子有限公司 | 数据处理方法及装置 |
CN109711533A (zh) * | 2018-12-20 | 2019-05-03 | 西安电子科技大学 | 基于fpga的卷积神经网络模块 |
CN110134366A (zh) * | 2019-05-21 | 2019-08-16 | 合肥工业大学 | 一种并行写入多通道fifo的方法及装置 |
CN110245436A (zh) * | 2019-06-19 | 2019-09-17 | 山东大学 | 一种基于遗传算法和机器学习的并行模拟电路优化方法 |
-
2020
- 2020-07-02 CN CN202010633207.8A patent/CN111797117A/zh active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101388844A (zh) * | 2008-11-07 | 2009-03-18 | 东软集团股份有限公司 | 一种数据流程的处理方法和系统 |
CN102623291A (zh) * | 2012-01-17 | 2012-08-01 | 上海大学 | 一种数据采集并行储存装置及方法 |
CN105740196A (zh) * | 2016-01-26 | 2016-07-06 | 广东威创视讯科技股份有限公司 | 高速串行发送数据预处理方法和系统 |
CN106210032A (zh) * | 2016-07-06 | 2016-12-07 | 乐视控股(北京)有限公司 | 基于终端数据批量上报的方法及装置 |
CN106789718A (zh) * | 2016-12-05 | 2017-05-31 | 广东神马搜索科技有限公司 | 数据传输的拥塞控制方法、设备、服务器及可编程设备 |
CN107122135A (zh) * | 2017-04-25 | 2017-09-01 | 北京小米移动软件有限公司 | 数据处理方法及装置 |
CN108563697A (zh) * | 2018-03-22 | 2018-09-21 | 腾讯科技(深圳)有限公司 | 一种数据处理方法、装置和存储介质 |
CN108681510A (zh) * | 2018-05-21 | 2018-10-19 | 迈克医疗电子有限公司 | 数据处理方法及装置 |
CN109711533A (zh) * | 2018-12-20 | 2019-05-03 | 西安电子科技大学 | 基于fpga的卷积神经网络模块 |
CN110134366A (zh) * | 2019-05-21 | 2019-08-16 | 合肥工业大学 | 一种并行写入多通道fifo的方法及装置 |
CN110245436A (zh) * | 2019-06-19 | 2019-09-17 | 山东大学 | 一种基于遗传算法和机器学习的并行模拟电路优化方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102047749B (zh) | 认知无线系统、认知无线设备以及无线信号检测方法 | |
US5960000A (en) | System, device, and method for contention-based reservation in a shared medium network | |
JPH04273635A (ja) | 移動体又は自動車両間でデータを伝送する方法 | |
CN110351198B (zh) | 一种流量调节方法、数据传输系统、存储介质及设备 | |
US7454204B2 (en) | Method of accessing resources of a radiocommunication system, mobile terminal and base station for the implementation of the method | |
WO2017108918A1 (en) | Dynamic channel selection and dfs re-entry | |
JPWO2018174550A5 (zh) | ||
CN109152042B (zh) | 前导码的配置、识别方法及基站、终端、可读存储介质 | |
WO2016046606A1 (en) | Methods and apparatus for minimization of drive testing | |
US7428608B2 (en) | Communication system, communication circuit and communication method | |
WO2020087506A1 (zh) | 传输时间提前量的设置方法及装置 | |
CN114124842B (zh) | 一种数据传输方法、系统、电子设备及存储介质 | |
JP3610466B2 (ja) | データ通信システム | |
US10587305B2 (en) | Data transmission/reception by frequency hopping | |
CN111797117A (zh) | 一种数据处理方法及装置 | |
CN108617003B (zh) | 快速随机接入的方法、装置及用户设备 | |
CN110312321B (zh) | 随机接入驻留频点确定方法、装置及终端 | |
CN111092789A (zh) | 数据传输方法、装置、设备及计算机可读存储介质 | |
CN112584525B (zh) | 基于多用户接入的上行数据分割方法及装置 | |
JP3459644B2 (ja) | 無線通信システム端末用の同期装置 | |
CN110072291B (zh) | 随机接入过程通信的方法及设备 | |
US20220358065A1 (en) | Data communication method, master device and system | |
CN110831143B (zh) | 同步信号块位置的指示及获取方法、基站、终端、介质 | |
JP3725420B2 (ja) | パケット無線システムの移動局からの転送中にカウントダウンを実行する方法 | |
JP7221772B2 (ja) | ビーコン送信端末、ビーコン受信端末および無線通信システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |