CN105426123A - 数据管理方法、采集站及设备监测系统 - Google Patents

数据管理方法、采集站及设备监测系统 Download PDF

Info

Publication number
CN105426123A
CN105426123A CN201510751917.XA CN201510751917A CN105426123A CN 105426123 A CN105426123 A CN 105426123A CN 201510751917 A CN201510751917 A CN 201510751917A CN 105426123 A CN105426123 A CN 105426123A
Authority
CN
China
Prior art keywords
data
storage unit
threshold
data record
harvester
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510751917.XA
Other languages
English (en)
Other versions
CN105426123B (zh
Inventor
贾维银
尹现军
陈亮
刘刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ANHUI RONGZHI RIXIN INFORMATION TECHNOLOGY Co Ltd
Original Assignee
ANHUI RONGZHI RIXIN INFORMATION TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ANHUI RONGZHI RIXIN INFORMATION TECHNOLOGY Co Ltd filed Critical ANHUI RONGZHI RIXIN INFORMATION TECHNOLOGY Co Ltd
Priority to CN201510751917.XA priority Critical patent/CN105426123B/zh
Publication of CN105426123A publication Critical patent/CN105426123A/zh
Application granted granted Critical
Publication of CN105426123B publication Critical patent/CN105426123B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614Improving the reliability of storage systems
    • G06F3/0616Improving the reliability of storage systems in relation to life time, e.g. increasing Mean Time Between Failures [MTBF]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0625Power saving in storage systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/20Administration of product repair or maintenance

Abstract

本发明公开了数据管理方法、采集站及设备监测系统。其中数据管理方法包括以下步骤。接收至少一个采集装置对设备进行监测而采集的一条或多条数据记录。根据每条数据记录的长度类型确定该数据记录的长度是否小于第一阈值。在这条数据记录的长度小于第一阈值时,将这条数据记录存储到第一存储单元中。在这条数据记录的长度大于或等于第一阈值时,将这条数据记录存储到第二存储单元中。检测每个采集装置在第一存储单元中、所存储的数据的长度是否大于第二阈值。在所存储的数据的长度大于第二阈值时,将所存储的数据转存到第二存储单元中,其中第二阈值小于第一阈值。

Description

数据管理方法、采集站及设备监测系统
技术领域
本发明涉及机械设备领域,尤其涉及监测设备的数据管理方案。
背景技术
目前,大型旋转机械设备广泛应用在化工、风电、冶金等领域中。诸如风力发电机组和输油泵等旋转设备的结构和应用环境也越来越复杂。旋转设备的故障也很可能造成事故和巨大损失。随着振动故障诊断特征技术的发展,越来越多的振动监测设备被用于监测机械设备的振动故障。
由于振动监测设备通常布置在不易进行布线和维修的区域,因此多种振动监测设备采用无线传输和电池供电的工作方式。这样,如何降低监测设备的功耗、提高使用寿命是现在所面临的问题。
发明内容
为此,本发明提供一种新的监测设备的数据管理方案,有效的解决了上面至少一个问题。
根据本发明的一个方面,提供一种采集站执行的数据管理方法,包括以下步骤。接收至少一个采集装置对设备进行监测而采集的一条或多条数据记录。其中每条数据记录为其对应的采集装置在预定发送周期内所采集的监测数据。这里,预定发送周期例如为5分钟。根据每条数据记录的长度类型确定该数据记录的长度是否小于第一阈值。在这条数据记录的长度小于第一阈值时,将这条数据记录存储到第一存储单元中。检测每个采集装置在第一存储单元中、所存储的数据的长度是否大于第二阈值。在所存储的数据的长度大于第二阈值时,将所存储的数据转存到第二存储单元中,其中第二阈值小于第一阈值。
根据本发明的又一个方面,提供一种采集站,包括第一存储单元、第二存储单元和控制单元。其中控制单元包括通信模块和数据管理模块。通信模块适于接收至少一个采集装置对设备进行监测而采集的一条或多条数据记录。其中每条数据记录为其对应的采集装置在预定发送周期内所采集的监测数据。数据管理模块适于根据每条数据记录的长度类型确定该数据记录的长度是否小于第一阈值。在这条数据记录的长度小于第一阈值时,数据管理模块将这条数据记录存储到第一存储单元中。数据管理模块检测每个采集装置在第一存储单元中、所存储的数据的长度是否大于第二阈值。在所存储的数据的长度大于第二阈值时,将所存储的数据转存到第二存储单元中,其中第二阈值小于第一阈值。
根据本发明的又一个方面,还提供一种设备监测系统,包括根据本发明的采集装置、根据本发明的采集站和服务器。其中采集装置适于采集对设备的监测数据。服务器适于从采集站获取监测数据,并通过该监测数据对设备进行诊断分析。
根据本发明的数据管理方案,通过在第一存储器中存放对第二存储器的管理信息,可以提高第二存储单元的使用寿命。其次,根据本发明的数据管理方案通过连续接收数据帧的方式,可以提高采集站接收数据的效率并降低功耗。另外,根据本发明的数据管理方案,通过将数据先存储到第一存储器中并在数据量达到阈值时再将这些数据统一存储到第二存储单元的方式,可以极大降低第二存储单元的读写次数,从而提高第二存储单元的使用寿命。需要说明的是,采用电池供电和维修困难的设备通过本发明的数据管理方案,极大提升了设备性能和使用寿命。
附图说明
为了实现上述以及相关目的,本文结合下面的描述和附图来描述某些说明性方面,这些方面指示了可以实践本文所公开的原理的各种方式,并且所有方面及其等效方面旨在落入所要求保护的主题的范围内。通过结合附图阅读下面的详细描述,本公开的上述以及其它目的、特征和优势将变得更加明显。遍及本公开,相同的附图标记通常指代相同的部件或元素。
图1示出了根据本发明一些实施例的设备监测系统100的示意图;
图2示出了根据本发明一些实施例的采集站200的框图;
图3示出了根据本发明一些实施例中第一和第二存储单元存储信息示意图;以及
图4示出了根据本发明一些实施例的采集站执行的数据管理方法400的流程图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
图1示出了根据本发明一些实施例的设备监测系统100的示意图。设备监测系统100包括多个采集装置110、采集站120和服务器130。这里的采集装置110是对用于采集设备振动类数据信息的装置的统称。例如,其中一个采集装置110包括监测设备振动的传感器,适于采集设备振动数据。而另一个采集装置110包括监测设备转动的传感器,适于采集设备转轴的转速数据。为了简化描述,下文中不再对采集装置110具体类型进行区分。每个采集装置110适于通过例如ZigBee等无线方式与采集站120进行通信。这样,采集站120可以汇集多个采集装置110所采集的数据。采集站120对于从多个采集装置110获取的数据可以直接向服务器130发送,也可以选择在采集站中进行存储并后续向服务器130传输。服务器130可以从采集站120获取采集站所汇集的振动类数据信息以便进行针对被检测设备的故障诊断分析,当然也可以向采集站120发送配置信息。这样,采集站120可以根据该配置信息进行工作策略调整。另外,根据本发明的采集站120通常布置在不易布线和维修困难的环境中。因此,采集站120采用电池供电,并且通过例如3G或者4G等通信方式与服务器130进行数据传输。
一般而言,采集装置110通常按照一个预定发送周期(例如5分钟),向采集站传输该周期内所采集数据。例如,采集装置110会将一个预定发送周期内所采集的数据向采集站传输。这里,采集装置110在每个发送周期中,可以基于不同的采集频率和采集时长采集一组或多组数据。因此,每组数据的种类和大小可以是不同的。在根据本发明一个实施例中,采集装置110在每个发送周期的结束时间点(也是下一个发送周期的开始时间点),向采集站120发送该发送周期的所采集的数据。为了简化描述,尽管采集装置110向采集站120发送数据会持续一个时间段,这里不再区分发送数据的开始时间和结束时间,而是用发送周期的结束时间点统一表示。
另外,采集装置110也可以向采集站120发送除本发送周期以外的数据,例如,发送本周期之前未上传成功的数据。采集站120在接收到采集装置110发送的数据时,需要对这些数据的存储和发送进行管理。下面结合图2对采集站进行进一步示例说明。
图2示出了根据本发明一些实施例的采集站200的框图。如图2所示,采集站200包括第一存储单元210、第二存储单元220和控制单元230。其中,控制单元230可以包括内部存储区231、通信模块232和数据管理模块233。控制单元230可以在内部存储区231中分配一个用于接收采集装置数据的缓存区。这里,内部存储区231例如为内存RAM。第一存储单元210为容量小于第二存储单元220的小容量存储器件,并且读写寿命较长,例如为FRAM或者ROM等。第二存储单元220为大容量存储器,但读写寿命有限,并且最小读写单位(例如为2048BYTE)大于第一存储单元210的最小读写单元,例如为NANDFLASH或者NORFLASH等,但不限于此。
通信模块232从一个或多个采集装置接收数据。采集装置可以将一个发送周期内所采集的数据作为一条数据记录向采集站200传输。采集装置会将所采集的这条数据记录在传输时分组为适于在无线信道中传输的M个数据帧。例如,M值为2000个。具体地,在根据本发明一个实施例中,通信模块232在接收到采集装置对一条数据记录的传输请求时,返回确认消息。然后,通信模块232可以连续接收采集装置所发送的M个数据帧中至少一部分。这里,采集装置向采集站发送的传输请求或者所发送的M帧数据中的第一帧可以包括这条数据记录的长度类型。长度类型例如可以是大于第一阈值或者小于第一阈值的类型。根据本发明一个实施例,第一阈值为缓存区的容量。缓存区通常为第二存储单元最小读写单位的整数倍,例如为4096BYTE。另外,通信模块232还可以接收采集装置针对M个数据帧中至少一部分所发送的传输状态请求消息,并返回传输状态响应消息。这里,传输状态响应消息中包括通信模块232未接收到数据帧的编号,以便采集装置再次发送这些未接收到的数据帧。这样,如果存在未接收的数据帧,通信模块232还可以继续接收之前未接收到的数据帧。如上所述,根据本发明的通信模块232采用了连续接收数据帧的方式,而不是每接收一帧(一个数据帧)一应答(通信模块232接收到后反馈接收情况)的方式。这样,根据本发明的通信模块232可以通过较少的交互次数完成数据接收,从而提高了数据接收效率,节省了资源消耗。需要说明的是,通信模块232连续接收数据的方式只作为一种示例性说明,但接收数据的方式并不限于此,任何已知的数据接收方式都可以应用在本发明中。
如上所述,通信模块232可以从采集装置接收一条数据记录的多个数据帧,并将接收到的数据帧存放到缓存区中。数据管理模块233还可以通过这条数据记录的长度类型来判断其长度是否小于第一阈值。下面具体说明数据管理模块233根据对这个数据包的长度的判断结果,来进行数据管理的过程。
第一种情况是,这条数据记录的长度小于第一阈值,即缓存区足以存放这条数据记录。这样,数据管理模块233可以选择直接将这条数据记录上传到服务器,或者将其存放到第一存储器210中。具体地,数据管理模块233可以判断这条数据记录的上传优先级,如果这条数据记录例如为报警数据等优先级较高的数据,则直接向服务器上传这条数据记录,但不限于此,这里可以根据监测需要来确定不同数据的优先级。如果这条数据记录的优先级较低,则数据管理模块233将其存放到第一存储器210中。这样,通过判断这条数据记录的优先级,数据管理模块233既可以及时向服务器上传需要实时上传的数据,又可以对优先级较低的数据进行存储从而避免频繁向服务器上传数据。这对于电池供电的采集站200而言,可以极大的降低功耗,提高电池的使用寿命。
另一种情况,在这条数据记录大于第一阈值时,即缓存区不能够完全存放整个数据,数据管理模块233可以将这条数据记录直接存储到第二存储单元220中。需要说明的是,这里之所以将这条数据记录直接存储到第二存储单元220中,是因为采集站200需要对多个采集装置的数据进行管理,对于大于第一阈值的一条数据记录,适于直接将其存放到容量较大的第二存储单元中220而不是存放到第一存储单元210中,以避免第一存储单元210出现空间不足的情况。
另外,如果一个采集装置在第一存储单元210中所存储的数据的长度大于第二阈值,则可以选择向服务器发送这些所存储的数据。这里,第二阈值例如为第二存储单元220的最小读写单位,但不限于此。这样,可以将这个采集装置存储在第一存储单元210中的多条数据记录进行集中处理,而不用数据管理模块233过于频繁地向服务器上传数据,以节省功耗。这样,如果上传成功,则第一存储单元210不再需要存储这些已上传的数据,可以腾出空间存放采集站后续接收的数据。如果上传不成功,则数据管理模块233可以将这些数据转存到第二存储单元220中。由于多条数据记录的长度大于第二存储单元220的最小读写单位,这样,数据管理模块233可以将这多条数据记录统一转存到第二存储单元220中,而不是对这些数据记录中每一个进行一次写操作,从而可以减少对第二存储单元220的读写次数以提高其使用寿命。
如上所述,数据管理单元233可以将长度大于第一阈值的一条数据记录直接存放到第二存数单元220中。或者,数据管理单元233可以将长度小于第一阈值的数据记录先存储到第一存储单元,然后将第一存储单元中多个数据包统一转存到第二存储单元220中。下面结合图3进一步描述数据管理模块233将数据存储到第二存储单元220的过程。
图3示出了根据本发明一些实施例中第一和第二存储单元中存储信息的示意图。
如图3所示,第一存储单元210中存储有对第二存储单元220的管理信息300。这样,根据本发明的实施例通过将操作频繁的管理信息300存放在读写寿命较长的第一存储单元210中而不是直接存放在第二存储单元220中,可以使第二存储单元220有更长的使用寿命。这里,管理信息300包括索引表310和映射表320。映射表包括多个映射项。每个映射项中存储有第二存储单元220中一个存储区域的物理地址。这个存储区域例如为第二存储单元220的最小擦除单位。每个最小擦除单位可称为一个块。一般而言,这个存储区域可以包括多个最小读写单位。每个最小读写单位可称为一页,例如为2048BYTE。索引表310包括多个采集装置对应的访问索引。下文以一个采集装置的访问索引为例进行说明。这个采集装置对应的访问索引例如可以包括3个,分别为读索引、写索引和页索引。其中,读索引和写索引中都存储有映射表310中一个映射项的地址。数据管理模块233将这个采集装置的数据写入第二存储单元220时,首先通过写索引找到其对应的映射项,并通过映射项中物理地址值寻址对应的存储区域。而页索引中记录有所寻址的存储区域中要写入数据的页地址。通常,页索引中存储的地址为一个当前要写入页的偏移地址。换言之,需要结合写索引寻址到的存储区域的物理地址和当前偏移地址来确定当前要写入数据的页的实际物理地址。这样,数据管理模块233,可以根据写索引和页索引将数据写入到存储区域中。在这个存储区域被存满数据后,页索引的地址会被清零。如果数据管理模块233需要继续写入数据,可以新分配一个存储区域继续写入。具体地,写索引中地址会指向一个新的映射项,而这个映射项中存储有新分配的存储区域的地址。页索引则指向这个存储区域中第一页的地址,并在第一页写满数据时,页索引更新为第二页的地址,依次类推,这里不再赘述。数据管理模块233在需要从第二存储单元220中读取数据时,通过读索引中地址寻址一个映射项,然后通过该映射项中物理地址找到所要读取的存储区域,以从其中读出数据。这里,数据管理模块233可以将从第二存储单元220中读取的数据向服务器传输。
需要说明的是,在采集站第一次上电工作时,第二存储单元220处于未存储数据的状态。因此,第二存储单元220中用于存储数据的存储区域都是未使用状态。数据管理模块233可以在管理信息300中记录第二存储单元的一个地址段,该地址段包括第二存储单元220首个存储区域的物理地址和最后一个存储区域的物理地址。在需要新分配一个存储区域时,数据管理模块233可以依次分配该地址段中的一个地址。这样,在第二存储单元220从上电工作到存满数据之前,数据管理模块233并不需要将第二存储单元220的未分配的每一个地址全部记录在映射表中,从而可以节省第一存储单元210的存储空间。
另外,在第二存储单元220存满数据时,数据管理模块233可以执行清除操作。这里,清除操作的策略例如可以从服务器获取,但不限于此。在根据本发明一个实施例中,数据管理模块233将每个采集装置存储在第二存储单元220中优先级较低的数据进行删除操作,但不限于此。这里,根据本发明的实施例可以根据需要来配置不同类型数据的优先级。对于被执行清除操作而释放的存储区域,成为可以重新写入数据的未分配存储区域。数据管理模块233对映射表会执行更新操作,以便映射表具有对应每个未分配存储区域的映射项。这样,数据管理模块233在后续分配新的存储区域时,可以从更新后的映射表中获取未分配存储区域的物理地址,并将数据写入该物理地址上的存储区域中。下面进一步对映射表的更新过程进行说明。首先,数据管理模块233可以建立一个新的映射表。然后,数据管理模块233将原映射表中未清除的存储区域对应的映射项复制到新的映射表中,然后将原映射表中已释放的未分配存储区域对应的映射项复制到新的映射表中。最后,数据管理模块233将索引表进行更新,以建立索引表与新的映射表的映射关系。随后,数据管理模块233可以使用新的映射表代替原有的映射表。换言之,映射表执行了一次更新操作。
另外,数据管理模块233可以对第二存储单元220的存储量进行检测,例如可以在将一个数据包写入到第二存储单元220之前进行检测,但不限于此。如果第二存储单元已存满,则启动上文所述的清除操作。应当注意,在检测第二存储单元220时,如果第二存储单元220剩余的空间不足已存放这个数据包,数据管理模块233也会将第二存储单元220视为已存满。
如上所述,根据本发明的采集站200,通过在第一存储器中存放对第二存储器的管理信息,可以提高第二存储单元的使用寿命。其次,根据本发明的采集站通过连续接收数据帧的方式,可以提高采集站接收数据的效率并降低功耗。另外,根据本发明的采集站,通过将数据先存储到第一存储器中并在数据量达到阈值时再将这些数据统一存储到第二存储单元的方式,可以极大降低第二存储单元的读写次数,从而提高第二存储单元的使用寿命。
图4示出了根据本发明一些实施例的采集站执行的数据管理方法400的流程图。
如图4所示,方法400始于步骤S410。在步骤S410中,接收至少一个采集装置对设备进行监测而采集的一条或多条数据记录。每条数据记录为一个采集装置在预定发送周期内所采集的数据。应当注意,每个采集装置的预定发送周期可以根据需要进行配置。这里预定发送周期例如为5分钟,但不限于此。具体地,在根据本发明一个实施例中,在步骤S410中,响应于接收到一个采集装置对一条数据记录的传输请求时,返回确认消息。这里,所要传输的数据记录在传输时适于被分组为M个数据帧。随后,连续接收来自该采集装置的M个数据帧中至少一部分。响应于接收到采集装置所发送的传输状态请求消息,返回包含了其中未收到数据帧的编号的传输状态响应消息,以便采集装置继续传输其中未收到的数据帧。随后,继续接收其中未收到的数据帧。这样,通过一次或多次的连续接收数据帧,采集站可以完成对这个数据包的全部接收。需要说明的是,在步骤S410中的传输请求消息或者M个数据帧的第一个数据帧中包括了对这条数据记录的长度类型。例如这条数据记录的长度类型为大于或者小于第一阈值。
方法400还包括步骤S420。在步骤S420中,根据一条数据记录的长度类型确定其长度是否小于第一阈值。采集站的内存(例如RAM)中分配有用于接收数据包的缓存区。第一阈值例如为缓存区的容量。
在这条数据记录的长度小于第一阈值时,方法400进入步骤S430,将这个数据包存储到第一存储单元中。在这条数据记录的长度大于或等于第一阈值时,方法400进入步骤S440,将这个数据包存储到第二存储单元中。这里,第一存储单元例如为FRAM,第二存储单元例如为NANDFLASH,但不限于此。
另外,方法400还包括步骤S450。在步骤S450中,检测每个采集装置在第一存储单元中、所存储的数据的长度是否大于第二阈值。这里,第二阈值例如为第二存储单元的最小读写单位。所存储的数据的长度是指来自这个采集装置的多条数据记录在第一存储单元中的累积数据量。在所存储的数据的长度大于第二阈值时,方法400进入步骤S460,将所存储的数据转存到第二存储单元中。可选地,在执行步骤S460之前,还可以将所存储的数据向服务器发送,并在发送成功时不再执行步骤S460。
另外,根据本发明一个实施例,第一存储单元存储有对第二存储单元的管理信息,该管理信息包括索引表和映射表。映射表包括一个或多个映射项。每个映射项包括第二存储单元中一个存储区域的物理地址。索引表包括多个访问索引。每个访问索引对应一个采集装置,并存有当前要访问的存储区域所对应的映射项的地址。下面对步骤S440和S460中,将一条数据记录存储到第二存储单元的过程进行进一步说明。
首先,通过采集这条数据记录的采集装置所对应的访问索引找到相应的映射项,并将这条数据记录开始写入所找到映射项中物理地址指向的存储区域。如果在存满所指向的存储区域时没有完成对这条数据记录的存储,继续将这个数据包写入到新分配的存储区域中。可选地,在将这条数据记录存储到第二存储单元之前,还可以判断第二存储单元是否已存满。如果已存满,则根据从服务器获取的清除策略,对第二存储单元进行清除操作,以释放第二存储单元中多个存储区域并作为未分配的存储区域。这里,清除策略例如是依次清除每个采集装置存储到第二存储单元中优先级较低的数据。随后,更新映射表,以便映射表包括未分配的存储区域对应的映射项。另外,前文中所说继续将这个数据包写入到新分配的存储区域中的具体示例如下。首先,通过映射表中未分配的存储区域对应的映射项,分配新的存储区域。然后,更新访问索引中地址为新分配的存储区域对应的映射项,以及根据更新后访问索引继续写入数据到新分配的存储区域中。
可选地,方法400还包括步骤S470,将每个采集装置存储到第二存储单元中的数据向服务器传输。根据本发明的方法400更具体的实施过程与图2及图3的说明一致,这里不再赘述。
A9、如A8所述的方法,在执行所述将这条数据记录存储到第二存储单元中的步骤之前,还包括:判断所述第二存储单元是否已存满,如果已存满,则根据从所述服务器获取的清除策略,对第二存储单元进行清除操作,以释放第二存储单元中多个存储区域并作为未分配的存储区域;以及更新所述映射表,以便映射表包括未分配的存储区域对应的映射项。A10、如A9所述的方法,其中所述继续将这条数据记录写入到新分配的存储区域中的步骤包括:通过所述映射表中未分配的存储区域对应的映射项,分配新的存储区域;以及更新所述访问索引中地址为新分配的存储区域对应的映射项,以及根据更新后访问索引继续将这条数据记录写入到新分配的存储区域中。A11、如A9所述的方法,还包括:将每个采集装置存储到第二存储单元中的数据向服务器传输。A12、如A11所述的方法,其中所述清除策略包括:依次清除每个采集装置存储到第二存储单元中优先级低的数据。A13、如A1-A12中任一项所述的方法,其中所述接收至少一个采集装置对设备进行监测而采集的一条或多条数据记录的步骤包括:在每接收到所述至少一个采集装置对一条数据记录的传输请求时,返回确认消息,所要传输的这条数据记录被其对应的采集装置分组为M个数据帧;连续接收来自该采集装置的M个数据帧中至少一部分;响应于接收到该采集装置所发送的传输状态请求消息,返回包含了其中未收到数据帧的编号的传输状态响应消息,以便采集装置继续传输其中未收到的数据帧;以及继续接收其中未收到的数据帧。A14、如A13所述的方法,其中,所述对一条数据记录的传输请求包括这条数据记录的长度类型,这条数据类型的长度类型为大于第一阈值的数据类型或者小于第一阈值的数据类型。
B16、如B15所述的采集站,在所存储的数据的长度大于第二阈值时且将所存储的数据转存到第二存储单元之前,所述数据管理模块还适于:将所存储的数据向服务器发送,并在发送成功时不再执行所述转存操作。B17、如B15或B16所述的采集站,在确定这条数据记录的长度大于或等于第一阈值时,所述数据管理模块还适于将这条数据记录存储到第二存储单元中。B18、如B15-B17中任一项所述的采集站,其中所述控制单元还包括内部存储区,并在其中分配一个用于接收来自采集装置数据的缓存区,所述第一阈值为该缓存区的容量,所述预定发送周期为5分钟。B19、如B15-B18中任一项所述的采集站,其中,所述第二阈值为所述第二存储单元的最小读写单位。B20、如B15-B19中任一项所述的采集站,其中第一存储单元为FRAM,第二存储单元为NANDFLASH。B21、如B15-B20中任一项所述的采集站,其中所述第一存储单元还适于存储对第二存储单元的管理信息,该管理信息包括索引表和映射表,该映射表包括一个或多个映射项,每个映射项包括第二存储单元中一个存储区域的物理地址;该索引表包括多个访问索引,每个访问索引对应所述至少一个采集装置中的一个,并存有当前要访问的存储区域所对应的映射项的地址。B22、如B21所述的采集站,其中所述数据管理模块适于根据下述方式将这条数据记录存储到第二存储单元中:通过采集这条数据记录的采集装置所对应的访问索引找到相应的映射项,并将这条数据记录开始写入所找到映射项中物理地址指向的存储区域;以及如果在存满所指向的存储区域时没有完成对这条数据记录的存储,继续将这条数据记录写入到新分配的存储区域中。B23、如B22所述的采集站,在将这条数据记录存储到所述第二存储单元中之前,所述数据管理模块还适于:判断所述第二存储单元是否已存满,如果已存满,则根据从所述服务器获取的清除策略,对第二存储单元进行清除操作,以释放第二存储单元中多个存储区域并作为未分配的存储区域;以及更新所述映射表,以便映射表包括未分配的存储区域对应的映射项。B24、如B23所述的采集站,其中所述数据管理模块适于根据下述方式继续将这条数据记录写入到新分配的存储区域中:通过所述映射表中未分配的存储区域对应的映射项,分配新的存储区域;以及更新所述访问索引中地址为新分配的存储区域对应的映射项,以及根据更新后访问索引继续将这条数据记录写入到新分配的存储区域中。B25、如B23所述的采集站,所述数据管理模块还适于将每个采集装置存储到第二存储单元中的数据向服务器传输。B26、如B25所述的采集站,所述数据管理模块根据下述方式执行所述清除策略:依次清除每个采集装置存储到第二存储单元中优先级低的数据。27、如15-26中任一项所述的采集站,所述通信模块适于根据下述方式接收至少一个采集装置对设备进行监测而采集的一条或多条数据记录的步骤包括:在每接收到所述至少一个采集装置对一个数据包的传输请求时,返回确认消息,其中所要传输的这条数据记录被其对应的采集装置分组为M个数据帧;连续接收来自该采集装置的M个数据帧中至少一部分;响应于接收到该采集装置所发送的传输状态请求消息,返回包含了其中未收到数据帧的编号的传输状态响应消息,以便采集装置继续传输其中未收到的数据帧;以及继续接收其中未收到的数据帧。B28、如B27所述的采集站,其中所述对一条数据记录的传输请求包括这条数据记录的长度类型,这条数据类型的长度类型为大于第一阈值的数据类型或者小于第一阈值的数据类型。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下被实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员应当理解在本文所公开的示例中的设备的模块或单元或组件可以布置在如该实施例中所描述的设备中,或者可替换地可以定位在与该示例中的设备不同的一个或多个设备中。前述示例中的模块可以组合为一个模块或者此外可以分成多个子模块。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
此外,所述实施例中的一些在此被描述成可以由计算机系统的处理器或者由执行所述功能的其它装置实施的方法或方法元素的组合。因此,具有用于实施所述方法或方法元素的必要指令的处理器形成用于实施该方法或方法元素的装置。此外,装置实施例的在此所述的元素是如下装置的例子:该装置用于实施由为了实施该发明的目的的元素所执行的功能。
如在此所使用的那样,除非另行规定,使用序数词“第一”、“第二”、“第三”等等来描述普通对象仅仅表示涉及类似对象的不同实例,并且并不意图暗示这样被描述的对象必须具有时间上、空间上、排序方面或者以任意其它方式的给定顺序。
尽管根据有限数量的实施例描述了本发明,但是受益于上面的描述,本技术领域内的技术人员明白,在由此描述的本发明的范围内,可以设想其它实施例。此外,应当注意,本说明书中使用的语言主要是为了可读性和教导的目的而选择的,而不是为了解释或者限定本发明的主题而选择的。因此,在不偏离所附权利要求书的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。对于本发明的范围,对本发明所做的公开是说明性的,而非限制性的,本发明的范围由所附权利要求书限定。

Claims (10)

1.一种采集站执行的数据管理方法,包括:
接收至少一个采集装置对设备进行监测而采集的一条或多条数据记录,其中每条数据记录为其对应的采集装置在预定发送周期内所采集的监测数据;
根据每条数据记录的长度类型确定该数据记录的长度是否小于第一阈值;
在这条数据记录的长度小于第一阈值时,将这条数据记录存储到第一存储单元中;
检测每个采集装置在第一存储单元中、所存储的数据的长度是否大于第二阈值;以及
在所存储的数据的长度大于第二阈值时,将所存储的数据转存到第二存储单元中,其中第二阈值小于第一阈值。
2.如权利要求1所述的方法,在所存储的数据的长度大于第二阈值时,且在将所存储的数据转存到第二存储单元之前,该方法还包括:
将所存储的数据向服务器发送,并在发送成功时不再执行所述转存步骤。
3.如权利要求1或2所述的方法,还包括:
在这条数据记录的长度大于或等于第一阈值时,将这条数据记录存储到第二存储单元中。
4.如权利要求1-3中任一项所述的方法,其中,所述采集站还包括内部存储区,并在其中分配有一个用于接收所述一条或多条数据记录的缓存区,所述第一阈值为该缓存区的容量,所述预定发送周期为5分钟。
5.如权利要求1-4中任一项所述的方法,其中,所述第二阈值为所述第二存储单元的最小读写单位。
6.如权利要求1-5中任一项所述的方法,其中所述第一存储单元为FRAM,所述第二存储单元为NANDFLASH。
7.如权利要求1-6中任一项所述的方法,其中所述第一存储单元还适于存储对所述第二存储单元的管理信息,该管理信息包括索引表和映射表,
该映射表包括一个或多个映射项,每个映射项包括第二存储单元中一个存储区域的物理地址,
该索引表包括多个访问索引,每个访问索引对应所述至少一个采集装置中的一个,并存有当前要访问的存储区域所对应的映射项的地址。
8.如权利要求7所述的方法,其中所述将这条数据记录存储到第二存储单元中的步骤包括:
通过采集这条数据记录的采集装置所对应的访问索引找到相应的映射项,并将这条数据记录开始写入所找到映射项中物理地址指向的存储区域;以及
如果在存满所指向的存储区域时没有完成对这条数据记录的存储,继续将这条数据记录写入到新分配的存储区域中。
9.一种采集站,包括:
第一存储单元;
第二存储单元;以及
控制单元,包括:
通信模块,适于接收至少一个采集装置对设备进行监测而采集的一条或多条数据记录,其中每条数据记录为其对应的采集装置在预定发送周期内所采集的监测数据;
数据管理模块,适于根据每条数据记录的长度类型确定该数据记录的长度是否小于第一阈值,
在这条数据记录的长度小于第一阈值时,将这条数据记录存储到第一存储单元中,
检测每个采集装置在第一存储单元中、所存储的数据的长度是否大于第二阈值,以及
在所存储的数据的长度大于第二阈值时,将所存储的数据转存到第二存储单元中,其中第二阈值小于第一阈值。
10.一种设备监测系统,包括:
采集装置,适于采集对设备的监测数据;
如权利要求9所述的采集站;以及
服务器,适于从所述采集站获取所述监测数据,并通过该监测数据对设备进行诊断分析。
CN201510751917.XA 2015-11-06 2015-11-06 数据管理方法、采集站及设备监测系统 Active CN105426123B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510751917.XA CN105426123B (zh) 2015-11-06 2015-11-06 数据管理方法、采集站及设备监测系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510751917.XA CN105426123B (zh) 2015-11-06 2015-11-06 数据管理方法、采集站及设备监测系统

Publications (2)

Publication Number Publication Date
CN105426123A true CN105426123A (zh) 2016-03-23
CN105426123B CN105426123B (zh) 2018-07-03

Family

ID=55504356

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510751917.XA Active CN105426123B (zh) 2015-11-06 2015-11-06 数据管理方法、采集站及设备监测系统

Country Status (1)

Country Link
CN (1) CN105426123B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105912271A (zh) * 2016-04-14 2016-08-31 四川隧唐科技股份有限公司 一种车载快速数据储存方法
CN106656558A (zh) * 2016-11-04 2017-05-10 上海中兴电力建设发展有限公司 一种延长数据采集服务器存储单元使用寿命的方法
CN110874388A (zh) * 2018-08-31 2020-03-10 阿里巴巴集团控股有限公司 数据存储及读取方法、数据处理装置及电子设备
CN111078505A (zh) * 2019-12-26 2020-04-28 安徽容知日新科技股份有限公司 一种监测数据处理方法、装置和计算设备
CN112383601A (zh) * 2020-11-06 2021-02-19 江苏恒澄交科信息科技股份有限公司 基于数据库索引标记的船舶尾气数据云同步方法及系统
CN112732194A (zh) * 2021-01-13 2021-04-30 同盾科技有限公司 非规则数据存储方法、装置及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101819561A (zh) * 2010-04-21 2010-09-01 中兴通讯股份有限公司 文件下载方法及系统
CN101853196A (zh) * 2010-04-21 2010-10-06 中兴通讯股份有限公司 一种记录异常数据的方法及装置
US20120263255A1 (en) * 2011-04-14 2012-10-18 Fujitsu Limited Data processing system and data processing method
CN104978361A (zh) * 2014-04-11 2015-10-14 深圳中兴力维技术有限公司 动力环境实时监控数据存储方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101819561A (zh) * 2010-04-21 2010-09-01 中兴通讯股份有限公司 文件下载方法及系统
CN101853196A (zh) * 2010-04-21 2010-10-06 中兴通讯股份有限公司 一种记录异常数据的方法及装置
US20120263255A1 (en) * 2011-04-14 2012-10-18 Fujitsu Limited Data processing system and data processing method
CN104978361A (zh) * 2014-04-11 2015-10-14 深圳中兴力维技术有限公司 动力环境实时监控数据存储方法及装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105912271A (zh) * 2016-04-14 2016-08-31 四川隧唐科技股份有限公司 一种车载快速数据储存方法
CN106656558A (zh) * 2016-11-04 2017-05-10 上海中兴电力建设发展有限公司 一种延长数据采集服务器存储单元使用寿命的方法
CN106656558B (zh) * 2016-11-04 2020-04-24 上海枫昱能源科技有限公司 一种延长数据采集服务器存储单元使用寿命的方法
CN110874388A (zh) * 2018-08-31 2020-03-10 阿里巴巴集团控股有限公司 数据存储及读取方法、数据处理装置及电子设备
CN111078505A (zh) * 2019-12-26 2020-04-28 安徽容知日新科技股份有限公司 一种监测数据处理方法、装置和计算设备
CN111078505B (zh) * 2019-12-26 2022-09-30 安徽容知日新科技股份有限公司 一种监测数据处理方法、装置和计算设备
CN112383601A (zh) * 2020-11-06 2021-02-19 江苏恒澄交科信息科技股份有限公司 基于数据库索引标记的船舶尾气数据云同步方法及系统
CN112732194A (zh) * 2021-01-13 2021-04-30 同盾科技有限公司 非规则数据存储方法、装置及存储介质
CN112732194B (zh) * 2021-01-13 2022-08-19 同盾科技有限公司 非规则数据存储方法、装置及存储介质

Also Published As

Publication number Publication date
CN105426123B (zh) 2018-07-03

Similar Documents

Publication Publication Date Title
CN105426123A (zh) 数据管理方法、采集站及设备监测系统
TWI740110B (zh) 在固態儲存驅動器陣列中的工作量適應超容量快取
CN101673243B (zh) 数据储存装置与方法
CN112815990A (zh) 一种基于物联网技术的配电设备监测系统
CN104935482A (zh) 分布式监控系统及方法
CN110677286B (zh) 电源掉电告警监测方法、装置和系统
CN102930614B (zh) 集成化车载设备记录器及记录方法
CN102567185B (zh) 一种应用服务器的监控方法
CN111371832A (zh) 一种数据存储、检测方法及设备
CN102158875B (zh) 一种设备信息采集方法及系统
CN104516471A (zh) 一种管理存储器系统的电源的方法和装置
CN103354562B (zh) 能耗采集器、能耗采集系统及能耗采集方法
CN107656807A (zh) 一种虚拟资源的自动弹性伸缩方法及装置
CN110381456B (zh) 流量管理系统及流量阈值计算方法、空调系统
CN102981939B (zh) 磁盘监控方法
CN1996305A (zh) 一种数据存储及读取方法及装置以及数据传输系统
CN105204981A (zh) 应用性能测试方法和装置
CN104679623A (zh) 一种服务器硬盘的维护方法、系统及服务器监控设备
CN110716695A (zh) 一种节点日志的存储方法、系统、电子设备及存储介质
CN109189724B (zh) 提高视频监控系统音视频数据存储效率的方法及装置
CN108228476B (zh) 一种数据获取方法及装置
CN108959614A (zh) 一种快照管理方法、系统、装置、设备及可读存储介质
CN101118514A (zh) 一种用于分析软件系统cpu占用率的方法及存储器
CN113419885B (zh) 一种数据完整性处理方法、装置及电子设备
CN109102421A (zh) 一种农田土壤质量智能可靠监测系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 230088, Hefei City, Anhui high tech Zone Wangjiang West Road, No. 800 animation base B1-8 floor

Applicant after: Anhui new Polytron Technologies Inc

Address before: 230088, Hefei City, Anhui high tech Zone Wangjiang West Road, No. 800 animation base B1-8 floor

Applicant before: ANHUI RONGZHI RIXIN INFORMATION TECHNOLOGY CO., LTD.

COR Change of bibliographic data
GR01 Patent grant
GR01 Patent grant