CN116662276B - 数据处理方法、装置、电子设备及存储介质 - Google Patents
数据处理方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN116662276B CN116662276B CN202310665062.3A CN202310665062A CN116662276B CN 116662276 B CN116662276 B CN 116662276B CN 202310665062 A CN202310665062 A CN 202310665062A CN 116662276 B CN116662276 B CN 116662276B
- Authority
- CN
- China
- Prior art keywords
- data
- wind speed
- period
- periods
- processing unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 19
- 238000000034 method Methods 0.000 claims abstract description 72
- 230000008569 process Effects 0.000 claims abstract description 46
- 238000004364 calculation method Methods 0.000 description 15
- 238000004891 communication Methods 0.000 description 13
- 238000004590 computer program Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 4
- 230000003993 interaction Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000013500 data storage Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004148 unit process Methods 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/172—Caching, prefetching or hoarding of files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/14—Details of searching files based on file metadata
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
- G06F16/164—File meta data generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
- G06F16/168—Details of user interfaces specifically adapted to file systems, e.g. browsing and visualisation, 2d or 3d GUIs
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
- Y02A90/00—Technologies having an indirect contribution to adaptation to climate change
- Y02A90/10—Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation
Abstract
本公开提供一种数据处理方法、装置、电子设备及存储介质,其中,该数据处理方法包括:第一处理单元以第一周期接收数据源产生的数据项,并将数据项写入数据文件,其中,数据源以第一周期产生数据项,一个第一周期产生一个数据项,一个数据项包括一个或多个数据元素;第二处理单元以第二周期从数据文件中读取最近的N个第一周期的数据项,处理最近的N个第一周期的数据项得到数据结果,将数据结果存储至数据库,其中,第二周期为第一周期的N倍,N为大于1的整数;第三处理单元以第三周期从数据库中获取最近的数据结果,并在前端显示界面中显示获取的数据结果。采用本公开,能够实现高频数据的可靠存储和实时显示。
Description
技术领域
本公开涉及数据处理技术领域,尤其涉及一种数据处理方法、装置、电子设备及存储介质。
背景技术
一些场景中,数据产生频率较高。数据产生频率可达数百赫兹,即每秒产生数百个数据,例如,数据产生频率为100HZ,即每秒产生100次数据。通常对这些数据的处理包括接收、存储、转换和显示等。通常显示为实时显示,也就是说在采集到数据并进行处理后就进行显示,显示时间与数据产生时间之间差距越小,实时性越高。然而一些设备硬件资源有限,无法保证在短时间内完成数据的接收、存储、转换和显示等任务,可能因运算不及时而导致部分时间的数据缺失、数据显示不及时等问题。例如,对于数据产生频率大于100HZ的情形,如果要实现秒级显示,则需要在1秒钟内对超过100个数据进行接收、存储、计算和显示,然而接收、存储、计算和显示的时间通常会大于1秒,导致新的数据过来后之前的数据还没有在1秒内完成处理,造成数据积压。
发明内容
本公开实施例提供一种数据处理方法、装置、电子设备及存储介质,以提高高频数据处理的可靠性和及时性。
根据本公开的一方面,提供了一种数据处理方法,包括:
第一处理单元以第一周期接收数据源产生的数据项,并将数据项写入数据文件,其中,数据源以第一周期产生数据项,一个第一周期产生一个数据项,一个数据项包括一个或多个数据元素;
第二处理单元以第二周期从数据文件中读取最近的N个第一周期的数据项,处理最近的N个第一周期的数据项得到数据结果,将数据结果存储至数据库,其中,第二周期为第一周期的N倍,N为大于1的整数;以及
第三处理单元以第三周期从数据库中获取最近的数据结果,并在前端显示界面中显示获取的数据结果。
可选地,第一处理单元以第一周期接收数据源产生的数据项,并将数据项写入数据文件,包括:第一处理单元以第一周期接收数据源产生的数据项,将每N个第一周期的数据项作为一个数据行以追加方式写入数据文件中,数据文件中每个数据行包括N个第一周期的数据项;第二处理单元以第二周期从数据文件中读取最近的N个第一周期的数据项,包括:第二处理单元以第二周期从数据文件中读取最近的一个数据行,得到最近的N个第一周期的数据项。
可选地,第三处理单元以第三周期从数据库中获取最近的数据结果,并在前端显示界面中显示获取的数据结果,包括:第三处理单元通过与前端显示界面之间的WebSocket连接,向前端显示界面推送获取的数据结果,以使前端显示界面显示获取的数据结果。
可选地,上述数据处理方法还包括:第一处理单元将每M个第一周期的数据项存储为一个数据文件,M为正整数。
可选地,上述第一处理单元为第一进程,第二处理单元为第二进程,第三处理单元为第三进程。
可选地,上述数据源为三维超声风速仪,一个数据项包括一个第一周期的多个风向的风速值,一个数据结果包括N个第一周期内每个风向的风速平均值。
根据本公开的另一方面,提供了一种数据处理装置,包括:
第一处理单元,用于以第一周期接收数据源产生的数据项,并将数据项写入数据文件,其中,数据源以第一周期产生数据项,一个第一周期产生一个数据项,一个数据项包括一个或多个数据元素;
第二处理单元,用于以第二周期从数据文件中读取最近的N个第一周期的数据项,处理最近的N个第一周期的数据项得到数据结果,将数据结果存储至数据库,其中,第二周期为第一周期的N倍,N为大于1的整数;以及
第三处理单元,用于以第三周期从数据库中获取最近的数据结果,并在前端显示界面中显示获取的数据结果。
可选地,上述数据源为三维超声风速仪,一个数据项包括一个第一周期的多个风向的风速值,一个数据结果包括N个第一周期内每个风向的风速平均值。
可选地,第一处理单元,用于接收数据源产生的数据项,将每N个第一周期的数据项作为一个数据行以追加方式写入数据文件中,数据文件中每个数据行包括N个第一周期的数据项;第二处理单元,用于以第二周期从数据文件中读取最近的一个数据行,得到最近的N个第一周期的数据项。
可选地,第三处理单元,用于通过与前端显示界面之间的WebSocket连接,向前端显示界面推送获取的数据结果,以使前端显示界面显示获取的数据结果。
根据本公开的另一方面,提供了一种电子设备,包括:处理器;以及存储程序的存储器,其中,程序包括指令,指令在由处理器执行时使处理器执行上述的方法。
根据本公开的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,计算机指令用于使计算机执行上述的方法。
本申请实施例中提供的一个或多个技术方案,第一处理单元进行数据接收和存储,第二处理单元进行数据处理,第三处理单元进行数据显示,不同的处理单元以其任务对应的周期(频率)进行处理,能够降低硬件资源要求;用数据文件存储高频率的数据项,具有稳定的特点;使用数据库存储计算得到的数据结果,具有查询效率高的特点,便于数据查询和显示。采用本申请实施的一个或多个技术方案,能够提高数据展示时效性,避免因数据计算处理不及时而导致的数据存在中断的问题。
附图说明
在下面结合附图对于示例性实施例的描述中,本公开的更多细节、特征和优点被公开,在附图中:
图1示出了根据本公开示例性实施例的数据处理装置的结构框图;
图2示出了根据本公开示例性实施例的数据处理方法的流程图;
图3示出了根据本公开示例性实施例的风速数据处理系统的示意性框图;
图4示出了根据本公开示例性实施例的风速数据显示的示意图;
图5示出了能够用于实现本公开的实施例的示例性电子设备的结构框图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
应当理解,本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
以下参照附图描述本公开的方案。
图1示出了根据本公开示例性实施例的数据处理装置的结构框图,如图1所述,数据处理装置100包括:第一处理单元101、第二处理单元102和第三处理单元103。
作为一种实施方式,第一处理单元101、第二处理单元102和第三处理单元103可以为不同的进程。不同的进程之间可以通过进程间通信进行消息交互。
第一处理单元101,可以用于以第一周期接收数据源产生的数据项,并将数据项写入数据文件,其中,数据源以第一周期产生数据项,一个第一周期产生一个数据项,一个数据项包括一个或多个数据元素。
其中,数据项可以是任何数据,一个数据项包括一个或多个数据元素。示例性的,数据项可为传感器数据,一个数据项可以包括一个或多个传感器采集的数据,例如,一个数据项可以为一个时刻的温度、湿度、大气压之一或者组合。
其中,第一周期较小,也就说数据源以较高的频率产生数据项。例如,第一周期为0.01秒,数据产生频率即为100赫兹,也就是说每0.01秒产生一个数据项,每秒产生100个数据项。又例如,第一周期为0.005秒,数据产生频率即为200赫兹,也就是说每0.005秒产生一个数据项,每秒产生200个数据项。
其中,数据文件是指硬盘中的文件。在已有文件的情况下,打开文件并向文件中写入数据。在没有文件的情况下,创建文件并向文件中写入数据。
作为一种实施方式,第一处理单元101可以将每M个第一周期的数据项存储为一个数据文件,M为正整数。由于数据项是按照第一周期产生的,M个第一周期对应于一个时间段,也就是将一段时间内的数据项存储为一个数据文件。例如,第一处理单元101可以将每个小时的数据项存储为一个数据文件。
在一些示例中,第一处理单元101可以通过DMA(Direct Memory Access,直接存储器访问)方式接收数据并将数据写入文件中,在数据接收和写入文件的过程中,不占用处理器(例如CPU)的计算资源。DMA方式是指将数据不经过处理器而直接存储到硬盘中。DMA传输将数据从一个地址空间(例如接收数据的串口)复制到另一个地址空间(例如,硬盘),提供在外设和存储器之间或者存储器和存储器之间的高速数据传输。第一处理单元101初始化这个传输动作,传输动作本身是由DMA控制器来实现和完成的。DMA传输方式无需处理器直接控制传输,也没有中断处理方式那样保留现场和恢复现场过程,使得处理器的效率大大提高。
第二处理单元102,可以用于以第二周期从数据文件中读取最近的N个第一周期的数据项,处理最近的N个第一周期的数据项得到数据结果,将数据结果存储至数据库,第二周期为第一周期的N倍,N为大于1的整数。
其中,一个数据结果是基于多个数据项计算得到的。示例性的,每秒的数据结果是基于一秒内的数据项计算得到的。
其中,第二周期也就是产生数据结果的周期。示例性的,每1秒产生一个数据结果,那么第二周期为1秒;每2秒产生一个数据结果,那么第二周期为2秒。
例如,数据源产生数据项的第一周期为0.01秒,第二处理单元102产生数据结果的第二周期为1秒,数据结果是基于1秒内的数据项计算得到的,第二周期为第一周期的100倍。第一处理单元101每秒将数据源产生的100个数据项写入数据文件,也就是100个第一周期的数据项。第二处理单元102每秒从数据文件中读取最近1秒(即最近的100个第一周期)的数据项,得到最近1秒的100个数据项。第二处理单元102可以处理该100个数据项得到一个数据结果(即最近一秒的数据结果),将数据结果存储至数据库中。
作为一种实施方式,第一处理单元101可以以第一周期接收数据源产生的数据项,将每N个第一周期的数据项作为一个数据行以追加方式写入数据文件中,数据文件中每个数据行包括N个第一周期的数据项;第二处理单元102可以以第二周期从数据文件中读取最近的一个数据行,得到最近的N个第一周期的数据项。第二处理单元102基于N个第一周期的数据项来产生一个数据结果,将N个第一周期的数据项作为一个数据行存储,使得第二处理单元102可以按行读取,读取一行即为产生一个数据结果所需的数据项,而无需对数据进行解析以获得所需位置的数据项,并且也无需将整个数据文件读取到内存中,从而能够提高处理效率并降低资源消耗。
示例性的,第一周期为0.01秒,第二周期为1秒。第一处理单元可以将每秒产生的100个数据项作为一个数据行以追加方式写入数据文件中,数据文件中的每一行为1秒的100个数据项。第二处理单元102可以每秒读取数据文件中最近一个数据行,得到最近的100数据项,处理该100个数据项,得到最近一秒的数据结果。
第三处理单元103,可以用于以第三周期从数据库中获取最近的数据结果,并在前端显示界面中显示获取的数据结果。
其中,第三周期可以等于第二周期。例如,第二周期和第三周期可均为1秒,第二处理单元101每秒产生并存储一个数据结果,第三处理单元103可以每秒获取一个数据结果,并在前端显示界面中显示,即实现秒级显示。
作为一种实施方式,第三处理单元103可以通过与前端显示界面之间的WebSocket连接,向前端显示界面推送获取的数据结果,以使前端显示界面显示获取的数据结果。第三处理单元103作为WebSocket连接的服务端,前端显示界面作为WebSocket连接的客户端。WebSocket可参见公知技术,本说明书对此不作赘述。
示例性的,上述数据源为三维超声风速仪,一个数据项包括一个第一周期的多个风向的风速值,一个数据结果包括N个第一周期内每个风向的风速平均值。示例性的,一个数据项为每0.01秒的风速值,一个数据结果为每1秒的平均风速值。
根据本公开还提供了一种数据处理方法。
图2示出了根据本公开示例性实施例的数据处理方法的流程图,如图2所示,数据处理方法包括步骤S202至步骤S206。
步骤S202,第一处理单元以第一周期接收数据源产生的数据项,并将数据项写入数据文件,数据源以第一周期产生数据项,一个第一周期产生一个数据项,一个数据项包括一个或多个数据元素。
步骤S204,第二处理单元以第二周期从数据文件中读取最近的N个第一周期的数据项,处理最近的N个第一周期的数据项得到数据结果,将数据结果存储至数据库,第二周期为第一周期的N倍,N为大于1的整数。
步骤S206,第三处理单元以第三周期从数据库中获取最近的数据结果,并在前端显示界面中显示获取的数据结果。
本公开的数据处理方法,第一处理单元进行数据接收和存储,第二处理单元进行数据处理,第三处理单元进行数据显示,不同的处理单元以其任务对应的周期(频率)进行处理,能够降低硬件资源要求;用数据文件存储高频率的数据项,具有稳定的特点;使用数据库存储计算得到的数据结果,具有查询效率高的特点,便于数据查询和显示。采用本申请实施的一个或多个技术方案,能够提高数据展示时效性,避免因数据计算处理不及时而导致的数据存在中断的问题。
作为一种实施方式,上述步骤S202可以包括:第一处理单元以第一周期接收数据源产生的数据项,将每N个第一周期的数据项作为一个数据行以追加方式写入数据文件中,数据文件中每个数据行包括N个第一周期的数据项。相应的,上述步骤S204可以包括:第二处理单元以第二周期从数据文件中读取最近的一个数据行,得到最近的N个第一周期的数据项。
作为一种实施方式,上述步骤S206可以包括第三处理单元通过与前端显示界面之间的WebSocket连接,向前端显示界面推送获取的数据结果,以使前端显示界面显示获取的数据结果。
在一些实施方式中,第一处理单元可以将每M个第一周期的数据项存储为一个数据文件,M为正整数。
在一些实施方式中,上述第一处理单元为第一进程,第二处理单元为第二进程,第三处理单元为第三进程。第一进程、第二进程和第三进程之间可以通过进程间通信进行消息交互。
上述数据源可以为三维超声风速仪,一个数据项包括一个第一周期的多个风向的风速值,一个数据结果包括N个第一周期内每个风向的风速平均值。下面以风速数据处理为例,结合图3对本公开的数据处理进行示例性说明。
如图3所示,在该示例中,数据处理系统可以包括:三维超声风速仪300和上位机400。三维超声风速仪300与上位机400通信连接。
三维超声风速仪300按照预定频率产生风速数据,每个时刻产生的风速数据包括U、V、W三个分量的风速值,每个时刻产生的风速数据也称为一组风速数据。三维超声风速仪300产生风速数据的频率较高,可以达到数百赫兹,也就是每秒产生数百组风速数据。本在示例中以预定频率为100HZ为例,即每秒产生100组风速数据。
上位机400与三维超声风速仪300通信连接,例如通过串口通信。上位机400可以接收并显示风速数据。上位机400中可以运行数据采集进程401(对应于上述的第一处理单元)、数据计算进程402(对应于上述的第二处理单元)、数据显示进程403(对应于上述的第三处理单元)。
数据采集进程401可以接收三维超声风速仪300发送的风速数据,每秒接收100组风速数据,将每秒接收的100组风速数据作为一个数据行以追加方式写入数据文件中,数据文件中每个数据行包括100组风速数据。
数据计算进程402可以每秒从数据文件中读取最近的一个数据行,得到最近的一秒的风速数据(即100组风速数据)。数据计算进程402根据最近一秒的100组风速数据计算该秒的风速。示例性的,数据计算进程402分别计算U、V、W三个数据的在该秒的平均值,计算过程中可以剔除异常数据。进一步的,数据计算进程402基于U、V、W三个数据的在该秒的平均值计算合成风,合成风的计算方法可以为:V合成风=U2+V2+W2。数据计算进程402可以在计算出一秒的风速数据后,将该秒的风速数据存储到数据库中。
数据显示进程403可以每秒从数据库中获取最近一秒的风速数据,将获取到的风速数据通过与前端显示界面之间的WebSocket连接推送到前端显示界面,前端显示界面实时显示每秒的风速数据。图4示出了按秒显示风速的图形用户界面,如图4所示,每秒的风速包括U、V、W和合成风的值。
数据计算进程402还可以从数据库中获取每小时、每三小时的风速数据,计算每小时、每三小时的平均风速并存储至数据中。数据显示进程403可以查询每小时、每三小时的平均风速,并在前端显示界面中显示。
该示例,通过分离数据存储、数据计算、数据显示的方式,采用不同的进程进行同频率运行,将数据文件用于存储高频率的原始信号结果值,具有稳定的特点,使用关系型数据库,存储计算好的结果数据,具有查询效率高的特点,结合不同软件模块使用,可以有效的提高数据展示时效性,避免因数据计算处理不及时而导致的,三维超声风速仪数据存在中断的问题。使得高频数据可以完整的存储,又满足了实时展示秒级数据的需求。通过分离处理,可以将数据存储的时间控制在1秒内,新的数据到来后,之前的数据已经完成了处理,不影响新的数据存储,数据计算、数据展示可以使用定时的方式并行处理,从而提升了处理速度。如果直接在前端进行数据展示,则会造成因为计算机硬件资源不够而导致的数据处理速度赶不上数据生成速度,而造成的数据缺失问题。
本公开示例性实施例还提供一种电子设备,包括:至少一个处理器;以及与至少一个处理器通信连接的存储器。所述存储器存储有能够被所述至少一个处理器执行的计算机程序,所述计算机程序在被所述至少一个处理器执行时用于使所述电子设备执行根据本公开实施例的方法。
本公开示例性实施例还提供一种存储有计算机程序的非瞬时计算机可读存储介质,其中,所述计算机程序在被计算机的处理器执行时用于使所述计算机执行根据本公开实施例的方法。
本公开示例性实施例还提供一种计算机程序产品,包括计算机程序,其中,所述计算机程序在被计算机的处理器执行时用于使所述计算机执行根据本公开实施例的方法。
参考图5,现将描述可以作为本公开的数据处理装置的电子设备500的结构框图,其是可以应用于本公开的各方面的硬件设备的示例。电子设备旨在表示各种形式的数字电子的计算机设备,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图5所示,电子设备500包括计算单元501,其可以根据存储在只读存储器(ROM)502中的计算机程序或者从存储单元508加载到随机访问存储器(RAM)503中的计算机程序,来执行各种适当的动作和处理。在RAM 503中,还可存储设备500操作所需的各种程序和数据。计算单元501、ROM 502以及RAM 503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
电子设备500中的多个部件连接至I/O接口505,包括:输入单元506、输出单元507、存储单元508以及通信单元509。输入单元506可以是能向电子设备500输入信息的任何类型的设备,输入单元506可以接收输入的数字或字符信息,以及产生与电子设备的用户设置和/或功能控制有关的键信号输入。输出单元507可以是能呈现信息的任何类型的设备,并且可以包括但不限于显示器、扬声器、视频/音频输出终端、振动器和/或打印机。存储单元508可以包括但不限于磁盘、光盘。通信单元509允许电子设备500通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据,并且可以包括但不限于调制解调器、网卡、红外通信设备、无线通信收发机和/或芯片组,例如蓝牙设备、WiFi设备、WiMax设备、蜂窝通信设备和/或类似物。
计算单元501可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元501的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元501执行上文所描述的各个方法和处理。例如,在一些实施例中,前述的数据处理方法可被实现为计算机软件程序,其被有形地包含于机器可读介质,例如存储单元508。在一些实施例中,计算机程序的部分或者全部可以经由ROM 502和/或通信单元509而被载入和/或安装到电子设备500上。在一些实施例中,计算单元501可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行前述的数据处理方法。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器,使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
如本公开使用的,术语“机器可读介质”和“计算机可读介质”指的是用于将机器指令和/或数据提供给可编程处理器的任何计算机程序产品、设备、和/或装置(例如,磁盘、光盘、存储器、可编程逻辑装置(PLD)),包括,接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”指的是用于将机器指令和/或数据提供给可编程处理器的任何信号。
为了提供与用户的交互,可以在计算机上实施此处描述的系统和技术,该计算机具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。
Claims (8)
1.一种数据处理方法,其特征在于,应用于上位机,所述方法包括:
所述上位机的第一进程以第一周期接收三维超声风速仪产生的风速数据,将每N个第一周期的风速数据作为一个数据行以追加方式写入数据文件中,所述数据文件中每个数据行包括N个第一周期的风速数据,其中,所述三维超声风速仪以所述第一周期产生所述风速数据,一个第一周期产生一个风速数据,一个风速数据包括一个或多个数据元素;
所述上位机的第二进程以第二周期从所述数据文件中读取最近的一个数据行,得到最近的N个第一周期的风速数据,处理所述最近的N个第一周期的风速数据得到一个第二周期对应的风速,将所述风速存储至数据库,其中,所述第二周期为所述第一周期的N倍,N为大于1的整数;
所述上位机的第三进程以第三周期从所述数据库中获取最近的风速,并在前端显示界面中显示获取的风速。
2.如权利要求1所述的数据处理方法,其特征在于,所述上位机的第三进程以第三周期从所述数据库中获取最近的风速,并在前端显示界面中显示获取的风速,包括:
所述第三进程通过与所述前端显示界面之间的WebSocket连接,向所述前端显示界面推送获取的风速,以使所述前端显示界面显示获取的风速。
3.如权利要求1所述的数据处理方法,其特征在于,还包括:所述第一进程将每M个第一周期的风速数据存储为一个数据文件,M为正整数。
4.如权利要求1至3任一项所述的数据处理方法,其特征在于,一个风速数据包括一个第一周期的多个风向的风速值,一个第二周期对应的风速包括N个第一周期内每个风向的风速平均值。
5.一种数据处理装置,其特征在于,应用于上位机,所述装置包括:
第一进程,用于以第一周期接收三维超声风速仪产生的风速数据,将每N个第一周期的风速数据作为一个数据行以追加方式写入数据文件中,所述数据文件中每个数据行包括N个第一周期的风速数据,其中,所述三维超声风速仪以所述第一周期产生所述风速数据,一个所述第一周期产生一个风速数据,一个风速数据包括一个或多个数据元素;
第二进程,用于以第二周期从所述数据文件中读取最近的一个数据行,得到最近的N个第一周期的风速数据,处理所述最近的N个第一周期的风速数据得到一个第二周期对应的风速,将所述风速存储至数据库,其中,所述第二周期为所述第一周期的N倍,N为大于1的整数;
第三进程,用于以第三周期从所述数据库中获取最近的风速,并在前端显示界面中显示获取的风速。
6.如权利要求5所述的数据处理装置,其特征在于,一个风速数据包括一个第一周期的多个风向的风速值,一个第二周期对应的风速包括N个第一周期内每个风向的风速平均值。
7. 一种电子设备,其特征在于,包括:
处理器;以及
存储程序的存储器,
其中,所述程序包括指令,所述指令在由所述处理器执行时使所述处理器执行根据权利要求1-4中任一项所述的方法。
8.一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使计算机执行根据权利要求1-4中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310665062.3A CN116662276B (zh) | 2023-06-06 | 2023-06-06 | 数据处理方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310665062.3A CN116662276B (zh) | 2023-06-06 | 2023-06-06 | 数据处理方法、装置、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116662276A CN116662276A (zh) | 2023-08-29 |
CN116662276B true CN116662276B (zh) | 2024-03-05 |
Family
ID=87709381
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310665062.3A Active CN116662276B (zh) | 2023-06-06 | 2023-06-06 | 数据处理方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116662276B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102542732A (zh) * | 2010-12-08 | 2012-07-04 | 中国电信股份有限公司 | 自然灾害监测预警方法与系统 |
CN103003803A (zh) * | 2010-08-11 | 2013-03-27 | 株式会社日立制作所 | 时序数据处理装置及其方法 |
CN109271193A (zh) * | 2018-10-08 | 2019-01-25 | 广州市百果园信息技术有限公司 | 一种数据处理方法、装置、设备及存储介质 |
CN113157710A (zh) * | 2021-02-01 | 2021-07-23 | 苏宁金融科技(南京)有限公司 | 区块链数据并行写入方法、装置、计算机设备及存储介质 |
CN115080271A (zh) * | 2022-06-27 | 2022-09-20 | 北京软通智慧科技有限公司 | 一种事件数据处理方法、装置、电子设备以及存储介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10866816B2 (en) * | 2018-12-18 | 2020-12-15 | Jpmorgan Chase Bank, N.A. | Method and apparatus for automated feed processing |
-
2023
- 2023-06-06 CN CN202310665062.3A patent/CN116662276B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103003803A (zh) * | 2010-08-11 | 2013-03-27 | 株式会社日立制作所 | 时序数据处理装置及其方法 |
CN102542732A (zh) * | 2010-12-08 | 2012-07-04 | 中国电信股份有限公司 | 自然灾害监测预警方法与系统 |
CN109271193A (zh) * | 2018-10-08 | 2019-01-25 | 广州市百果园信息技术有限公司 | 一种数据处理方法、装置、设备及存储介质 |
CN113157710A (zh) * | 2021-02-01 | 2021-07-23 | 苏宁金融科技(南京)有限公司 | 区块链数据并行写入方法、装置、计算机设备及存储介质 |
CN115080271A (zh) * | 2022-06-27 | 2022-09-20 | 北京软通智慧科技有限公司 | 一种事件数据处理方法、装置、电子设备以及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN116662276A (zh) | 2023-08-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112769897B (zh) | 边缘计算消息的同步方法、装置、电子设备及存储介质 | |
CN113242358A (zh) | 音频数据处理方法、装置、系统、电子设备及存储介质 | |
CN113365146B (zh) | 用于处理视频的方法、装置、设备、介质和产品 | |
CN114201278A (zh) | 任务处理方法、任务处理装置、电子设备以及存储介质 | |
JP2022020060A (ja) | ノイズ除去アルゴリズムのデバッグ方法、装置及び電子機器 | |
CN113742174B (zh) | 云手机应用监控方法、装置、电子设备和存储介质 | |
CN116662276B (zh) | 数据处理方法、装置、电子设备及存储介质 | |
CN114748873B (zh) | 界面渲染方法、装置、设备和存储介质 | |
CN116594563A (zh) | 分布式存储扩容方法、装置、电子设备和存储介质 | |
CN114554110B (zh) | 视频生成方法、装置、电子设备和存储介质 | |
CN114139605A (zh) | 分布式的模型训练方法、系统、设备以及存储介质 | |
CN114386577A (zh) | 用于执行深度学习模型的方法、设备和存储介质 | |
CN114445682A (zh) | 训练模型的方法、装置、电子设备、存储介质及产品 | |
CN113556575A (zh) | 用于压缩数据的方法、装置、设备、介质和产品 | |
CN113656239A (zh) | 针对中间件的监控方法、装置及计算机程序产品 | |
CN113905040A (zh) | 文件传输方法、装置、系统、设备以及存储介质 | |
CN112835759A (zh) | 测试数据处理方法、装置、电子设备以及存储介质 | |
CN114222073B (zh) | 视频输出方法、装置、电子设备和存储介质 | |
CN113760431B (zh) | 应用程序的控制方法、装置、电子设备及可读存储介质 | |
CN113032040B (zh) | 用于处理任务的方法、装置、设备、介质和产品 | |
CN112671970B (zh) | 移动设备和云手机的控制方法、控制装置以及电子设备、移动设备、云服务器和介质 | |
CN112506582B (zh) | 小程序数据包处理方法、装置、设备及介质 | |
CN115334159A (zh) | 处理流式数据的方法、装置、设备和介质 | |
CN115456627A (zh) | 一种安全算法切换方法、装置、设备及存储介质 | |
CN115730000A (zh) | 一种基于数据湖的医疗数据集成方法、装置、设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |