CN108509652B - 数据处理系统及方法 - Google Patents

数据处理系统及方法 Download PDF

Info

Publication number
CN108509652B
CN108509652B CN201810343574.7A CN201810343574A CN108509652B CN 108509652 B CN108509652 B CN 108509652B CN 201810343574 A CN201810343574 A CN 201810343574A CN 108509652 B CN108509652 B CN 108509652B
Authority
CN
China
Prior art keywords
data
module
processor
time sequence
hardware module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810343574.7A
Other languages
English (en)
Other versions
CN108509652A (zh
Inventor
杜磊
王晋平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Dazhong Yikang Technology Co ltd
Original Assignee
Shandong Dazhong Yikang Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shandong Dazhong Yikang Network Technology Co ltd filed Critical Shandong Dazhong Yikang Network Technology Co ltd
Priority to CN201810343574.7A priority Critical patent/CN108509652B/zh
Publication of CN108509652A publication Critical patent/CN108509652A/zh
Application granted granted Critical
Publication of CN108509652B publication Critical patent/CN108509652B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Computer And Data Communications (AREA)

Abstract

本发明涉及数据传输技术领域,具体涉及一种数据处理系统及方法,数据处理系统包括服务器和下位机,下位机包括硬件模块和FLASH模块,服务器包括信号传输组件和处理器,硬件模块用于在接收到前端设备发送的数据时,将数据存储到FLASH模块,并向所述数据中加入时间戳和标识信息以得到第一数据,硬件模块还用于将第一数据发送至信号传输组件,处理器用于获取信号传输组件接收到第一数据,并将第一数据作为时序数据发送至时序数据库并保存,处理器还用于对所述时序数据进行分析以得到分析结果,并将分析结果写入至时序数据库。通过上述设置,以在服务器端实现时序数据的同步存储、读取和分析,进而便于后续调用以及简化了前端设备的配置和开发。

Description

数据处理系统及方法
技术领域
本发明涉及数据处理技术领域,具体而言,涉及一种数据处理系统及方法。
背景技术
目前,物联网采集设备用途越来越广,现有的物联网终端通常会将采集到的各种传感器的原始数据,进行云端的储存,以便于后续的调用。现有的原始数据量通常较大,不同类型的传感器采样精度不同,有的传感器一秒钟的采样数据点可能就1000个以上。
发明人经研究发现,目前对这些数据的处理方式通常是采用物联网终端下位机对这些数据进行分析,通常仅将分析的结果进行上传,但是,越来越多的需求需要将原始数据能传到上位机,此外,在处理传输时下位机和上位机之间要处理底层的TCP/IP、或者UDP等数据通讯协议,需要专业的开发人员进行相关开发,且上位机和下位机的开发工作都相对比较困难和开发难度大,进而在对于大量的数据时,在下位机本地保存和传输过程以及服务器端的存储和传输都难以实现。因此,提供一种数据处理系统以实现在服务器端实现时取、序数据的同步存储、读取和分析数据是亟待解决的技术问题。
发明内容
有鉴于此,本发明的目的在于提供一种数据处理系统及方法,以有效解决上述技术问题。
为了达到上述目的,本发明较佳实施例提供一种数据处理系统,包括服务器和下位机,所述服务器与所述下位机通信连接,所述服务器关联有时序数据库,所述下位机与前端设备电连接,所述下位机包括硬件模块和FLASH模块,所述硬件模块与FLASH模块电连接,所述服务器包括信号传输组件和处理器,所述处理器与所述信号传输组件电连接;
所述硬件模块用于在接收到所述前端设备发送的数据时,将所述数据存储到所述FLASH模块,并向所述数据中加入时间戳和标识信息以得到第一数据,其中,所述时间戳为硬件模块与服务器同步时间后,所述硬件模块接收到所述数据的时间;
所述硬件模块还用于将所述第一数据发送至信号传输组件,所述处理器用于获取所述信号传输组件接收到第一数据,并将该第一数据作为时序数据发送至所述时序数据库,以使所述时序数据库对所述时序数据进行保存,所述处理器还用于对所述时序数据进行分析以得到分析结果,并将所述分析结果写入至所述时序数据库或与所述处理器连接的数据存储器。
可选的,在数据处理系统中,所述前端设备为传感器、汽车中控设备或心电图机,当所述前端设备为汽车中控设备或心电图机时,所述硬件模块还用于将所述分析结果反馈至所述前端设备,当所述前端设备为传感器时,所述硬件模块还用于根据所述分析结果控制该前端设备对应的硬件模块管脚的通断或D/A输出。
可选的,在数据处理系统中,所述硬件模块中存储有多种通信协议,所述硬件模块连接有通信模块,所述硬件模块还用于在接收到所述前端设备发送的数据时根据所述通信模块的类型及对应的通信协议将所述通信模块与所述信号传输组件建立连接,并通过所述通信模块采用对应的通信协议将所述第一数据传输至所述信号传输组件。
可选的,在数据处理系统中,所述FLASH模块由索引存储模块和数据存储模块构成,所述处理器在接收到所述数据时,将所述数据的长度、位于数据存储模块的位置、数据压缩算法代码、所述时间戳以及所述标识信息写入所述索引存储模块,并将所述数据按照顺序写入所述数据存储模块,将所述数据存储模块的数据和对应的索引存储模块中的信息作为所述第一数据并通过所述信号传输组件传输至所述时序数据库,并在所述数据存储模块写满时,所述硬件模块还用于从所述数据存储模块的头部开始擦除数据,去掉所述索引存储模块中该数据对应的索引,以及在所述第一数据传输成功后,从所述数据存储模块擦除该第一数据对应的数据,同时在索引存储模块去掉该第一数据对应索引。
可选的,在数据处理系统中,所述服务器时序数据库用于在接收到所述处理器发送的时序数据时,采用压缩函数对所述时序数据进行压缩,将压缩后的时序数据写入所述时序数据库的一存储文件中。
可选的,在数据处理系统中,所述数据处理系统,还包括与所述处理器的API接口电连接的人机交互装置,所述人机交互装置还用于接收用户输入的访问信息并通过所述API接口发送至所述处理器,所述处理器还用于根据数据访问信息从所述服务器关联的时序数据库中获取对应的时序数据和分析结果,并通过所述API接口反馈至所述人机交互装置。
可选的,在上述数据处理系统中,所述人机交互装置还用于接收用户输入的配置所述硬件模块的配置信息并通过所述API接口发送至所述处理器,所述处理器用于通过所述API接口和所述信号传输组件,将所述配置信息发送至所述硬件模块,以使所述硬件模块根据所述配置信息进行配置。
可选的,在数据处理系统中,所述服务器关联有多个存储器件,所述信号传输组件用于在接收到所述时序数据时,将所述时序数据传输至各所述存储器件,以使各所述存储器件将所述时序数据进行保存。
可选的,在数据处理系统中,所述处理器中存储有预设时长,所述处理器还用于每间隔预设时长检测所述时序数据库中存储的时序数据的存储时长,并将存储时长大于所述预设时长的时序数据删除。
可选的,在数据处理系统中,所述处理器还关联有多个存储设备,所述处理器在将所述时序数据库中存储时长大于所述预设时长的时序数据删除时,将该时序数据备份至各所述存储设备。
本发明还提供一种数据处理方法,应用于上述数据处理系统,所述数据处理方法包括:
硬件模块接收到所述前端设备发送的数据,将所述数据存储到所述FLASH模块,并向所述数据中加入时间戳和标识信息以得到第一数据,其中,所述时间戳为硬件模块与服务器同步时间后,所述硬件模块接收到所述数据的时间;
所述硬件模块将所述第一数据发送至信号传输组件;
处理器获取所述信号传输组件接收到第一数据,并将该第一数据作为时序数据发送至所述时序数据库,以使所述时序数据库对所述时序数据进行保存;
所述处理器对所述时序数据进行分析以得到分析结果,并将所述分析结果写入至所述时序数据库或与所述处理器连接的数据存储器。
本发明实施例提供的一种数据处理系统及方法,包括服务器和下位机,服务器关联有时序数据库,下位机与前端设备电连接,下位机包括硬件模块和FLASH模块,服务器包括信号传输组件和处理器,硬件模块用于在接收到前端设备发送的数据时,将数据存储到FLASH模块,并向所述数据中加入时间戳和标识信息以得到第一数据,硬件模块还用于将第一数据发送至信号传输组件,处理器用于获取信号传输组件接收到第一数据,并将第一数据作为时序数据发送至时序数据库并保存,处理器还用于对所述时序数据进行分析以得到分析结果,并将分析结果写入至时序数据库或与所述处理器连接的数据存储器,以在服务器端实现时序数据的同步存储、读取和分析,进而便于后续调用以及简化了前端设备的配置和开发。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本发明实施例提供的一种数据处理系统的应用框图。
图2为本发明实施例提供的一种数据处理系统的连接框图。
图3为本发明实施例提供的一种数据处理系统的另一应用框图。
图4为本发明实施例提供的一种数据处理方法的流程示意图。
图标:10-数据处理系统;20-前端设备;30-人机交互装置;40-存储器件;100-下位机;110-硬件模块;120-FLASH模块;200-服务器;210-信号传输组件;220-处理器。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
请结合图1和图2,本发明提供一种数据处理系统10,包括服务器200和下位机100,所述服务器200与所述下位机100通信连接,所述服务器200关联有时序数据库,所述下位机100与前端设备20电连接,所述下位机100包括硬件模块110和FLASH模块120,所述硬件模块110与FLASH模块120电连接,所述服务器200包括信号传输组件210和处理器220,所述处理器220与所述信号传输组件210电连接。
所述硬件模块110用于在接收到所述前端设备20发送的数据时,将所述数据存储到所述FLASH模块120,并向所述数据中加入时间戳和标识信息以得到第一数据,其中,所述时间戳为硬件模块110与服务器200同步时间后,所述硬件模块110接收到所述数据的时间,所述硬件模块110还用于将所述第一数据发送至信号传输组件210,所述处理器220用于获取所述信号传输组件210接收到第一数据,并将该第一数据作为时序数据发送至所述时序数据库,以使所述时序数据库对所述时序数据进行保存,所述处理器220还用于对所述时序数据进行分析以得到分析结果,并将所述分析结果写入至所述时序数据库或与所述处理器220连接的数据存储器。
通过上述设置,以在前端设备20向所述下位机100发送数据时,能够在服务器端实现时序数据的同步存储、读取和分析,进而便于后续调用以及简化了前端设备20的配置和开发。
具体的,在本实施例中,所述前端设备20可以连接到下位机100的硬件模块110的A/D接口、I/O口,或者直接将数据通过串口等数据通信口,以使前端设备20能够直接将数据发送至下位机100的硬件模块110。下位机100的硬件模块110接收到数据后,先保存在FLASH模块120中,并向所述数据中加入时间戳和标识信息以得到第一数据,以及与服务器200建立连接,连接成功后,将FLASH模块120中的第一数据传输至服务器200,所述服务器200在接收到下位机100的硬件模块110发过来的第一数据时作为时序数据并存储至时序数据库中,以实现高速高性能存储,此外服务器200在接收到第一数据时,对所述第一数据进行分析以得到分析结果并进行保存,通过上述设置,以在服务器端实现时序数据的同步存储、读取和分析,进而便于后续调用,并避免因采用所述前端设备20对数据处理时造成前端设备20开发困难的问题,且避免因前端设备20对数据进行处理后传输时数据量过大进而存在延时以及耗费过多带宽的问题。
其中,所述前端设备20可以是但不限于传感器、汽车中控设备或心电图机等电子设备,所述下位机100可以是但不限于手机、电脑或平板电脑等终端设备。
在本实施例中,当所述前端设备20为汽车中控设备或心电图机时,所述硬件模块110还用于将所述分析结果反馈至所述前端设备20,当所述前端设备20为传感器时,所述硬件模块110还用于根据所述分析结果控制该前端设备20对应的硬件模块110的管脚的通断或D/A输出。通过上述设置,以便于用户直接查看所述分析结果或基于所述前端设备20的工作状态得到分析结果。
所述硬件模块110可以包括但不限于控制器、通信模块和电源,根据实际需求进行设置即可,在此不作具体限定。
当所述硬件模块110包括控制器时,所述下位机100还包括通信模块,所述通信模块与所述控制器电连接,所述通信模块可采用USB口、光纤、有线网口、Wifi、蓝牙、2G/3G/4G/5G模块、Zigbee模块、NB-IoT模块等。所述硬件模块110中存储有多种通信协议,所述硬件模块110连接有通信模块,所述硬件模块110还用于在接收到所述前端设备20发送的数据时根据所述通信模块的类型及对应的通信协议将所述通信模块与所述信号传输组件210建立连接,并通过所述通信模块采用对应的通信协议将所述第一数据传输至所述信号传输组件210,通过上述设置,以实现根据所述通讯协议控制对应的通信模块向所述服务器200发送第一数据。
在本实施例中,所述FLASH模块120由索引存储模块和数据存储模块构成,所述处理器220在接收到所述数据时,将所述数据的长度、位于数据存储模块的位置、数据压缩算法代码、所述时间戳以及所述标识信息写入所述索引存储模块,并将所述数据按照顺序写入所述数据存储模块,将所述数据存储模块的数据和对应的索引存储模块中的信息作为所述第一数据并通过所述信号传输组件210传输至所述时序数据库,并在所述数据存储模块写满时,所述硬件模块110还用于从所述数据存储模块的头部开始擦除数据,去掉所述索引存储模块中该数据对应的索引,以及在所述第一数据传输成功后,从所述数据存储模块擦除该第一数据对应的数据,同时在索引存储模块去掉该第一数据对应索引。
其中,所述时间戳为8字节(64位无符号整型),所述数据指针为8字节(64位无符号整型),用于标识该条时序数据在数据文件中相对文件头的偏移量。所述数据的长度为4字节(32位无符号整型),用于标识该条时序数据在数据文件中占用的长度。所述数据标签为4字节(32位无符号整型),用于标识该条时序数据的标签或者说明。
具体的,所述硬件模块110在接收到所述前端设备20发送的数据时,将所述数据写入至所述FLASH模块120中的数据存储模块中数据文件的尾部,并获得该文件相对于头文件的偏移量,以根据所述时间戳、数据长度、偏移量以及标签构造索引条目并写入至索引存储模块中索引文件的尾部,并根据所述数据和对应的索引条目得到所述第一数据。
通过上述设置,以实现对所述第一数据进行高效地写入,并在写入后便于基于该第一数据中的索引信息进行查找并调用所述第一数据。
信号传输组件210可以是但不限于USB口、光纤、有线网口、Wifi、蓝牙、2G/3G/4G/5G模块、Zigbee模块、NB-IoT模块等,在此不作具体限定,可选的,在本实施例中,所述数据传输组件的种类与所述通信模块的种类对应。以便于对所述第一数据进行传输,且传输效率更高。
为避免所述时序数据库在对所述时序数据进行存储时,消耗过多的内存空间,可选的,在本实施例中,所述服务器200时序数据库用于在接收到所述处理器220发送的时序数据时,采用压缩函数对所述时序数据进行压缩,将压缩后的时序数据写入所述时序数据库的一存储文件中。
请结合图3,可选的,为便于用户调用和查看前端设备20发送的数据以及该数据对应的分析结果,在本实施例中,所述数据处理系统10,还包括与所述处理器220的API接口电连接的人机交互装置30,所述人机交互装置30还用于接收用户输入的访问信息并通过所述API接口发送至所述处理器220,所述处理器220还用于根据数据访问信息从所述服务器200的关联的时序数据库中获取对应的时序数据和分析结果,并通过所述API接口反馈至所述人机交互装置30。
为便于用户对所述数据处理系统10进行配置,可选的,在本实施例中,所述人机交互装置30用于接收用户输入的配置所述硬件模块110的配置信息并通过所述API接口发送至所述处理器220,所述处理器220用于通过所述API接口和所述信号传输组件210将所述配置信息发送至所述硬件模块110,以使所述硬件模块110根据所述配置信息进行配置。
为有效降低存储成本,同时提高系统的容灾能力,可选的,在本实施例中,所述服务器200关联有多个存储器件40,所述信号传输组件210用于在接收到所述时序数据时,将所述时序数据传输至各所述存储器件40,以使各所述存储器件40将所述时序数据进行保存。
为进一步降低存储成本,可选的,在本实施例中,所述处理器220中存储有预设时长,所述处理器220还用于每间隔预设时长检测所述时序数据库中存储的时序数据的存储时长,并将存储时长大于所述预设时长的时序数据删除。
具体的,所述处理器220每间隔预设时长检查时序数据库的数据,若存在占用空间超过一定阈值或对应的时间戳早于一指定时间的数据,则将该数据删除。当用户通过人机交互装置30查询或数据时序数据时,所述处理器220先在时序数据库查询是否有符合条件的数据,若存在直接读取并返回给人机交互装置30或所述处理器220,若没有,则查询各个存储器件40中是否有符合条件的数据,若有,则获取对应的数据并反馈至所述人机交互装置30。
请结合图4,在上述基础上,本发明还提供一种数据处理方法,所述数据处理方法应用于上述的数据处理系统10,所述数据处理方法应用于上述的数据处理系统10时能够执行以下步骤:
步骤S110:硬件模块110接收到所述前端设备20发送的数据,将所述数据存储到所述FLASH模块120,并向所述数据中加入时间戳和标识信息以得到第一数据,其中,所述时间戳为硬件模块110与服务器200同步时间后,所述硬件模块110接收到所述数据的时间。
步骤S120:所述硬件模块110将所述第一数据发送至信号传输组件210。
步骤S130:处理器220获取所述信号传输组件210接收到第一数据,并将该第一数据作为时序数据发送至所述时序数据库,以使所述时序数据库对所述时序数据进行保存。
步骤S140:所述处理器220对所述时序数据进行分析以得到分析结果,并将所述分析结果写入至所述时序数据库或与所述处理器220连接的数据存储器。
综上,本发明提供的一种数据处理系统10及方法,所述数据处理系统10包括服务器200和下位机100,下位机100包括硬件模块110和FLASH模块120,服务器200包括信号传输组件210和处理器220,硬件模块110用于在接收到前端设备20发送的数据时,将数据存储到FLASH模块120,并向所述数据中加入时间戳和标识信息以得到第一数据,硬件模块110还用于将第一数据发送至信号传输组件210,处理器220用于获取信号传输组件210接收到第一数据,并将第一数据作为时序数据发送至时序数据库并保存,处理器220还用于对所述时序数据进行分析以得到分析结果,并将分析结果写入至时序数据库。通过上述设置,以在服务器端实现时序数据的同步存储、读取和分析,进而便于后续调用以及简化了前端设备20的配置和开发。
在本发明实施例所提供的几个实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置和方法实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的装置来实现,或者可以用专用硬件与计算机指令的组合来实现。另外,在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,电子设备,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (9)

1.一种数据处理系统,其特征在于,包括服务器和下位机,所述服务器与所述下位机通信连接,所述服务器关联有时序数据库,所述下位机与前端设备电连接,所述下位机包括硬件模块和FLASH模块,所述硬件模块与FLASH模块电连接,所述服务器包括信号传输组件和处理器,所述处理器与所述信号传输组件电连接;
所述硬件模块用于在接收到所述前端设备发送的数据时,将所述数据存储到所述FLASH模块,并向所述数据中加入时间戳和标识信息以得到第一数据,其中,所述时间戳为硬件模块与服务器同步时间后,所述硬件模块接收到所述数据的时间;
所述硬件模块还用于将所述第一数据发送至信号传输组件,所述处理器用于获取所述信号传输组件接收到第一数据,并将该第一数据作为时序数据发送至所述时序数据库,以使所述时序数据库对所述时序数据进行保存,所述处理器还用于对所述时序数据进行分析以得到分析结果,并将所述分析结果写入至所述时序数据库或与所述处理器连接的数据存储器;
其中,所述FLASH模块由索引存储模块和数据存储模块构成,所述处理器在接收到所述数据时,将所述数据的长度、位于数据存储模块的位置、数据压缩算法代码、所述时间戳以及所述标识信息写入所述索引存储模块,并将所述数据按照顺序写入所述数据存储模块,将所述数据存储模块的数据和对应的索引存储模块中的信息作为所述第一数据并通过所述信号传输组件传输至所述时序数据库,并在所述数据存储模块写满时,所述硬件模块还用于从所述数据存储模块的头部开始擦除数据,去掉所述索引存储模块中该数据对应的索引,以及在所述第一数据传输成功后,从所述数据存储模块擦除该第一数据对应的数据,同时在索引存储模块去掉该第一数据对应索引。
2.根据权利要求1所述的数据处理系统,其特征在于,所述前端设备为传感器、汽车中控设备或心电图机,当所述前端设备为汽车中控设备或心电图机时,所述硬件模块还用于将所述分析结果反馈至所述前端设备,当所述前端设备为传感器时,所述硬件模块还用于根据所述分析结果控制该前端设备对应的硬件模块管脚的通断或D/A输出。
3.根据权利要求1所述的数据处理系统,其特征在于,所述硬件模块中存储有多种通信协议,所述硬件模块连接有通信模块,所述硬件模块还用于在接收到所述前端设备发送的数据时根据所述通信模块的类型及对应的通信协议将所述通信模块与所述信号传输组件建立连接,并通过所述通信模块采用对应的通信协议将所述第一数据传输至所述信号传输组件。
4.根据权利要求1所述的数据处理系统,其特征在于,所述服务器时序数据库用于在接收到所述处理器发送的时序数据时,采用压缩函数对所述时序数据进行压缩,将压缩后的时序数据写入所述时序数据库的一存储文件中。
5.根据权利要求1所述的数据处理系统,其特征在于,所述数据处理系统,还包括与所述处理器的API接口电连接的人机交互装置,所述人机交互装置还用于接收用户输入的访问信息并通过所述API接口发送至所述处理器,所述处理器还用于根据数据访问信息从所述服务器关联的时序数据库中获取对应的时序数据和分析结果,并通过所述API接口反馈至所述人机交互装置。
6.根据权利要求5所述的数据处理系统,其特征在于,所述人机交互装置还用于接收用户输入的配置所述硬件模块的配置信息并通过所述API接口发送至所述处理器,所述处理器用于通过所述API接口和所述信号传输组件将所述配置信息发送至所述硬件模块,以使所述硬件模块根据所述配置信息进行配置。
7.根据权利要求1所述的数据处理系统,其特征在于,所述服务器关联有多个存储器件,所述信号传输组件用于在接收到所述时序数据时,将所述时序数据传输至各所述存储器件,以使各所述存储器件将所述时序数据进行保存。
8.根据权利要求1所述的数据处理系统,其特征在于,所述处理器中存储有预设时长,所述处理器还用于每间隔预设时长检测所述时序数据库中存储的时序数据的存储时长,并将存储时长大于所述预设时长的时序数据删除。
9.一种数据处理方法,其特征在于,应用于权利要求1-8任意一项所述数据处理系统,所述数据处理方法包括:
硬件模块接收到所述前端设备发送的数据,将所述数据存储到所述FLASH模块,并向所述数据中加入时间戳和标识信息以得到第一数据,其中,所述时间戳为硬件模块与服务器同步时间后,所述硬件模块接收到所述数据的时间;
所述硬件模块将所述第一数据发送至信号传输组件;
处理器获取所述信号传输组件接收到第一数据,并将该第一数据作为时序数据发送至所述时序数据库,以使所述时序数据库对所述时序数据进行保存;
所述处理器对所述时序数据进行分析以得到分析结果,并将所述分析结果写入至所述时序数据库或与所述处理器连接的数据存储器。
CN201810343574.7A 2018-04-17 2018-04-17 数据处理系统及方法 Active CN108509652B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810343574.7A CN108509652B (zh) 2018-04-17 2018-04-17 数据处理系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810343574.7A CN108509652B (zh) 2018-04-17 2018-04-17 数据处理系统及方法

Publications (2)

Publication Number Publication Date
CN108509652A CN108509652A (zh) 2018-09-07
CN108509652B true CN108509652B (zh) 2021-01-22

Family

ID=63382240

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810343574.7A Active CN108509652B (zh) 2018-04-17 2018-04-17 数据处理系统及方法

Country Status (1)

Country Link
CN (1) CN108509652B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111782134A (zh) * 2019-06-14 2020-10-16 北京京东尚科信息技术有限公司 数据处理方法、装置、系统和计算机可读存储介质
CN111552687B (zh) * 2020-03-10 2023-08-04 远景智能国际私人投资有限公司 时序数据的存储方法、查询方法、装置、设备及存储介质
CN113593340A (zh) * 2021-08-02 2021-11-02 北京华云智联科技有限公司 一种北斗教学互动系统
CN113630217A (zh) * 2021-09-10 2021-11-09 北京智思迪科技有限公司 一种数据传输方法及装置
CN114253211A (zh) * 2021-12-15 2022-03-29 意欧斯智能科技股份有限公司 一种plc与上位机wcs信号交互验证的方法
CN114374812B (zh) * 2022-01-20 2022-08-19 集睿致远(厦门)科技有限公司 Dp接口辅助通道的通信信息监测设备、方法及系统
CN115150294B (zh) * 2022-06-20 2023-10-13 浪潮工业互联网股份有限公司 一种用于监控物联网设备的数据分析方法、设备及介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101930404A (zh) * 2010-08-27 2010-12-29 威盛电子股份有限公司 存储装置及其操作方法
CN101965559A (zh) * 2007-12-27 2011-02-02 普莱恩特技术股份有限公司 包括将处理器与内部存储器连接的交叉切换器的用于闪存的存储控制器
CN103188312A (zh) * 2011-12-30 2013-07-03 上海博泰悦臻电子设备制造有限公司 数据处理系统及数据处理方法
CN103559562A (zh) * 2013-11-20 2014-02-05 贵州电网公司电力调度控制中心 电网智能运行系统及其实现方法
CN106483258A (zh) * 2016-12-14 2017-03-08 北京林业大学 一种森林环境下空气质量数据采集与无线传输装置
CN106951181A (zh) * 2017-02-21 2017-07-14 深圳大普微电子科技有限公司 一种数据存储系统的控制装置
CN107636602A (zh) * 2017-07-14 2018-01-26 深圳市元征科技股份有限公司 一种数据处理方法及数据处理设备

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6968439B2 (en) * 2002-08-29 2005-11-22 Micron Technology, Inc. Single segment data object management

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101965559A (zh) * 2007-12-27 2011-02-02 普莱恩特技术股份有限公司 包括将处理器与内部存储器连接的交叉切换器的用于闪存的存储控制器
CN101930404A (zh) * 2010-08-27 2010-12-29 威盛电子股份有限公司 存储装置及其操作方法
CN103188312A (zh) * 2011-12-30 2013-07-03 上海博泰悦臻电子设备制造有限公司 数据处理系统及数据处理方法
CN103559562A (zh) * 2013-11-20 2014-02-05 贵州电网公司电力调度控制中心 电网智能运行系统及其实现方法
CN106483258A (zh) * 2016-12-14 2017-03-08 北京林业大学 一种森林环境下空气质量数据采集与无线传输装置
CN106951181A (zh) * 2017-02-21 2017-07-14 深圳大普微电子科技有限公司 一种数据存储系统的控制装置
CN107636602A (zh) * 2017-07-14 2018-01-26 深圳市元征科技股份有限公司 一种数据处理方法及数据处理设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
传感器网络数据管理平台的研究和设计;马林玲;《中国优秀硕士学位论文全文数据库 信息科技辑》;20151015;I140-82 *

Also Published As

Publication number Publication date
CN108509652A (zh) 2018-09-07

Similar Documents

Publication Publication Date Title
CN108509652B (zh) 数据处理系统及方法
CN108847977B (zh) 一种业务数据的监控方法、存储介质和服务器
CN107870849B (zh) 测试日志的处理方法和装置
CN109359091B (zh) 文件管理方法、装置、终端及计算机可读存储介质
CN105100062A (zh) 信息推送方法、装置及系统
CN106445616B (zh) 终端设备从多系统至单系统的升级方法及装置
CN102118451B (zh) 用户资源的上传处理方法及装置
CN113159000A (zh) 人脸识别方法、装置及系统
CN110442439B (zh) 任务进程处理方法、装置和计算机设备
CN105262491A (zh) 数据压缩方法及系统、数据解压缩方法及系统、通信设备
CN115203148A (zh) 修改文件的方法和装置
EP3537663B1 (en) Efficient time series data communication
CN112783827A (zh) 多传感器数据存储方法和装置
US10803861B2 (en) Method and apparatus for identifying information
CN108289165B (zh) 一种基于手机控制相机的实现方法、装置及终端设备
CN107066421B (zh) 一种示波器及其采集数据上报方法
CN105653207B (zh) 一种闪存接口信息的实时解析方法和系统
CN104951253A (zh) 一种内存容量处理的方法及移动终端
CN110543436B (zh) 一种机器人的数据获取方法及装置
CN109947371B (zh) 数据记录方法、装置、存储器及t-box
CN114039969A (zh) 一种数据传输方法及装置
CN112130791B (zh) 多屏间信息编辑方法和装置、存储介质及电子装置
CN105991221B (zh) 数据发送/接收装置及方法、以及数据收发系统
CN104809167B (zh) 一种终端
CN110298935B (zh) 一种获取用户操作习惯信息的方法、诊断设备、及服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20230302

Address after: Room 522B, 5th Floor, No. 23, Zhichun Road, Haidian District, Beijing 100083

Patentee after: BEIJING DAZHONG YIKANG TECHNOLOGY Co.,Ltd.

Address before: 274000 No. 201-19, 2059 Zhonghua West Road, Wanfu office, high tech Zone, Heze City, Shandong Province

Patentee before: SHANDONG DAZHONG YIKANG NETWORK TECHNOLOGY CO.,LTD.