CN106709013A - 数据处理方法及对应装置、数据交互方法及对应装置 - Google Patents

数据处理方法及对应装置、数据交互方法及对应装置 Download PDF

Info

Publication number
CN106709013A
CN106709013A CN201611219322.0A CN201611219322A CN106709013A CN 106709013 A CN106709013 A CN 106709013A CN 201611219322 A CN201611219322 A CN 201611219322A CN 106709013 A CN106709013 A CN 106709013A
Authority
CN
China
Prior art keywords
data
recorded
current
record
uploaded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611219322.0A
Other languages
English (en)
Inventor
唐健
李�杰
凌满州
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Jieshun Science and Technology Industry Co Ltd
Original Assignee
Shenzhen Jieshun Science and Technology Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Jieshun Science and Technology Industry Co Ltd filed Critical Shenzhen Jieshun Science and Technology Industry Co Ltd
Priority to CN201611219322.0A priority Critical patent/CN106709013A/zh
Publication of CN106709013A publication Critical patent/CN106709013A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2457Query processing with adaptation to user needs
    • G06F16/24578Query processing with adaptation to user needs using ranking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24552Database cache management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种数据处理方法,上位机通过接收由下位机上传的当前待记录数据;将当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;当从缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从缓存队列中未查找到相同的记录数据时,将当前待记录数据存储至数据库,返回记录成功的信息。下位机获取需上传至上位机的当前待记录数据;并接收上位机返回的记录成功的信息;在当前待记录数据全部上传完成时,删除存储于下位机中的当前待记录数据。本发明减少了上位机数据库性能的消耗,并且解决了上位机记录数据重复的问题。此外,本发明还提供了一种具有上述技术优点的数据处理装置、数据交互方法以及对应装置。

Description

数据处理方法及对应装置、数据交互方法及对应装置
技术领域
本发明涉及上下位机数据交互技术领域,特别是涉及一种数据处理方法及对应装置、一种数据交互方法以及对应装置。
背景技术
上位机与下位机数据交互机制在安防设备中普遍应用。上位机是指可以直接发出操控命令的计算机,一般是PC/host computer/master computer/upper computer,屏幕上显示各种信号变化(液压,水位,温度等)。下位机是直接控制设备获取设备状况的计算机,一般是PLC/单片机single chip microcomputer/slave computer/lower computer之类的。上位机发出的命令首先给下位机,下位机再根据此命令解释成相应时序信号直接控制相应设备。下位机不时读取设备状态数据(一般为模拟量),转换成数字信号反馈给上位机。在概念上,控制者和提供服务者是上位机,被控制者和被服务者是下位机,也可以理解为主机和从机的关系,但上位机和下位机是可以转换的。
下位机可以脱机工作也可以在线工作,脱机工作时数据按文件形式保存在本地,一般上位机接收下位机上传的脱机记录会存在数据重复处理的问题,原因有上传数据受通讯线路、设备故障中断传输等,这对产品的功能产生严重的影响。传统方法是上位机每次接收记录都会去查数据库,但是频繁的操作数据库会影响系统的整体性能。
发明内容
本发明的目的是提供一种数据处理方法及对应装置、一种数据交互方法以及对应装置,以解决现有技术频繁操作数据库而影响系统的整体性能的问题。
为解决上述技术问题,本发明提供一种数据处理方法,应用于上位机,处理方法包括:
接收由下位机上传的当前待记录数据;
将所述当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;
当从所述缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从所述缓存队列中未查找到相同的记录数据时,将所述当前待记录数据存储至数据库,返回记录成功的信息。
可选地,在所述接收由下位机上传的当前待记录数据之前还包括:
从所述数据库中读取最近K条已存记录数据,K=X*Y,其中X大于所述下位机每个块存储的记录数,Y为所述上位机托管的设备数;
将获取的所述已存记录数据加载至所述缓存队列中;
启动接收记录数据的线程。
可选地,在所述将所述当前待记录数据存储至数据库之后还包括:
将保存到所述数据库的数据插入所述缓存队列中。
本发明还提供了一种数据处理装置,包括:
数据接收模块,用于接收由下位机上传的当前待记录数据;
比较模块,用于将所述当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;
处理模块,用于当从所述缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从所述缓存队列中未查找到相同的记录数据时,将所述当前待记录数据存储至数据库,返回记录成功的信息。
本发明还提供了一种数据处理方法,应用于下位机,包括:
获取需上传至上位机的当前待记录数据;
将所述当前待记录数据解析为多条记录数据流;
依次将所述记录数据流上传至上位机,以使所述上位机对未存储于数据缓存库的数据进行存储,并接收所述上位机返回的记录成功的信息;
当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据。
可选地,所述获取需上传至上位机的当前待记录数据包括:
按块读取所述下位机本地存储的脱机记录。
可选地,在当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据之后还包括:
判断所述下位机是否还存在未上传的脱机数据块,如果是,则返回按块读取所述下位机本地存储的脱机记录的步骤。
本发明还提供了一种数据处理装置,包括:
获取模块,用于获取需上传至上位机的当前待记录数据;
解析模块,用于将所述当前待记录数据解析为多条记录数据流;
信息接收模块,用于依次将所述记录数据流上传至上位机,以使所述上位机对未存储于数据缓存库的数据进行存储,并接收所述上位机返回的记录成功的信息;
删除模块,用于当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据。
本发明还提供了一种数据交互方法,包括:
下位机获取需上传至上位机的当前待记录数据,将所述当前待记录数据解析为多条记录数据流,依次上传所述记录数据流;
上位机接收由下位机上传的当前待记录数据;将所述当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;当从所述缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从所述缓存队列中未查找到相同的记录数据时,将所述当前待记录数据存储至数据库,返回记录成功的信息;
所述下位机接收所述上位机返回的记录成功的信息;当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据。
本发明还提供了一种数据交互系统,包括下位机以及上位机;
其中,所述下位机用于获取需上传至上位机的当前待记录数据,将所述当前待记录数据解析为多条记录数据流,依次上传所述记录数据流;
所述上位机用于接收由下位机上传的当前待记录数据;将所述当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;当从所述缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从所述缓存队列中未查找到相同的记录数据时,将所述当前待记录数据存储至数据库,返回记录成功的信息;
所述下位机用于接收所述上位机返回的记录成功的信息;当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据。
本发明所提供的数据处理方法,上位机通过接收由下位机上传的当前待记录数据;将当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;当从缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从缓存队列中未查找到相同的记录数据时,将当前待记录数据存储至数据库,返回记录成功的信息。下位机获取需上传至上位机的当前待记录数据;将当前待记录数据解析为多条记录数据流;依次将记录数据流上传至上位机,以使上位机对未存储于数据缓存库的数据进行存储,并接收上位机返回的记录成功的信息;在当前待记录数据全部上传完成时,删除存储于下位机中的当前待记录数据。本发明在上位机建立数据缓存库,每次接收下位机记录后检查数据缓存库是否重复即可,不需要每次去数据库中查询验证,减少了上位机数据库性能的消耗,并且解决了上位机记录数据重复的问题。此外,本发明还提供了一种具有上述技术优点的数据处理装置、数据交互方法以及对应装置。
附图说明
为了更清楚的说明本发明实施例或现有技术的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明所提供的数据处理方法的一种具体实施方式的流程图;
图2为本发明所提供的数据处理方法的一种具体实施方式中上位机接收记录线程初始化过程的流程图;
图3为本发明实施例提供的数据处理装置的一种具体实施方式的结构框图;
图4为本发明所提供的数据处理方法的另一种具体实施方式的流程图;
图5为本发明实施例提供的数据处理装置的另一种具体实施方式的结构框图;
图6为本发明所提供的数据交互方法的具体工作流程图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面结合附图和具体实施方式对本发明作进一步的详细说明。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明所提供的数据处理方法的一种具体实施方式的流程图如图1所示,该方法应用于上位机,具体可以包括:
步骤S101:接收由下位机上传的当前待记录数据;
步骤S102:将所述当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;
步骤S103:当从所述缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从所述缓存队列中未查找到相同的记录数据时,将所述当前待记录数据存储至数据库,返回记录成功的信息。
一般上位机接收下位机上传的脱机记录会存在数据重复处理的问题,这对产品的功能产生严重的影响,传统方法是上位机每次接收记录都会去查数据库,频繁的操作数据库会影响系统的整体性能。本发明实施例在上位机建立一个数据缓存库,每次接收下位机记录数据请求后需检查缓存库中是否有重复,不需要去数据库中查询验证,减少了对上位机系统性能的影响,并解决了上位机记录数据重复的问题。
本发明所提供的数据处理方法,上位机通过接收由下位机上传的当前待记录数据;将当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;当从缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从缓存队列中未查找到相同的记录数据时,将当前待记录数据存储至数据库,返回记录成功的信息。本发明实施例在上位机建立数据缓存库,每次接收下位机记录后检查数据缓存库是否重复即可,不需要每次去数据库中查询验证,减少了上位机数据库性能的消耗,并且解决了上位机记录数据重复的问题。
在上述实施例的基础上,本发明所提供的数据处理方法在上位机启动接收下位机数据的工作线程前,从数据库中查询本工作站所托管设备的最近K条数据,K=X*Y,X大于下位机每个块存储的记录数,Y为上位机托管的设备数,把K条数据保存在一个缓存库中。如图2本发明所提供的数据处理方法的一种具体实施方式中上位机接收记录线程初始化过程的流程图所示,该方法包括:
步骤S201:从所述数据库中读取最近K条已存记录数据,K=X*Y,其中X大于所述下位机每个块存储的记录数,Y为所述上位机托管的设备数;
步骤S202:将获取的所述已存记录数据加载至所述缓存队列中;
步骤S203:启动接收记录数据的线程。
每次接收下位机记录需检查缓存库中是否有重复,如果存在重复则丢弃处理,并给下位机返回相应结果,下位机不再上传该记录。如果不存在重复就正常处理和保存数据库。
作为一种具体实施方式,在将所述当前待记录数据存储至数据库之后还可以进一步包括:
将保存到所述数据库的数据插入所述缓存队列中。
下面对本发明实施例提供的数据处理装置进行介绍,下文描述的数据处理装置与上文描述的数据处理方法可相互对应参照。
图3为本发明实施例提供的数据处理装置的一种具体实施方式的结构框图,参照图3数据处理装置可以包括:
数据接收模块100,用于接收由下位机上传的当前待记录数据;
比较模块200,用于将所述当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;
处理模块300,用于当从所述缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从所述缓存队列中未查找到相同的记录数据时,将所述当前待记录数据存储至数据库,返回记录成功的信息。
本实施例的数据处理装置用于实现前述的数据处理方法,因此数据处理装置中的具体实施方式可见前文中的数据处理方法的实施例部分,例如,数据接收模块100,比较模块200,处理模块300,分别用于实现上述数据处理方法中步骤S101,S102,S103,所以,其具体实施方式可以参照相应的各个部分实施例的描述,在此不再赘述。
本发明所提供的数据处理方法的另一种具体实施方式的流程图如图4所示,该方法可应用于下位机,其具体包括:
步骤S301:获取需上传至上位机的当前待记录数据;
具体地,读取的方式可以为按块读取所述下位机本地存储的脱机记录。
步骤S302:将所述当前待记录数据解析为多条记录数据流;
步骤S303:依次将所述记录数据流上传至上位机,以使所述上位机对未存储于数据缓存库的数据进行存储,并接收所述上位机返回的记录成功的信息;
步骤S304:当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据。
本发明实施例在当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据之后还可以进一步包括:判断所述下位机是否还存在未上传的脱机数据块,如果是,则返回按块读取所述下位机本地存储的脱机记录的步骤。
本发明实施例中下位机通过获取需上传至上位机的当前待记录数据;将当前待记录数据解析为多条记录数据流;依次将记录数据流上传至上位机,以使上位机对未存储于数据缓存库的数据进行存储,并接收上位机返回的记录成功的信息;在当前待记录数据全部上传完成时,删除存储于下位机中的当前待记录数据。本发明在上位机建立数据缓存库,每次接收下位机记录后检查数据缓存库是否重复即可,不需要每次去数据库中查询验证,减少了上位机数据库性能的消耗,并且解决了上位机记录数据重复的问题。
下面对本发明实施例提供的数据处理装置进行介绍,下文描述的数据处理装置与上文描述的数据处理方法可相互对应参照。图5为本发明实施例提供的数据处理装置的另一种具体实施方式的结构框图,参照图5数据处理装置可以包括:
获取模块400,用于获取需上传至上位机的当前待记录数据;
解析模块500,用于将所述当前待记录数据解析为多条记录数据流;
信息接收模块600,用于依次将所述记录数据流上传至上位机,以使所述上位机对未存储于数据缓存库的数据进行存储,并接收所述上位机返回的记录成功的信息;
删除模块700,用于当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据
本实施例的数据处理装置用于实现前述的数据处理方法,因此数据处理装置中的具体实施方式可见前文中的数据处理方法的实施例部分,例如,获取模块400,解析模块500,信息接收模块600,删除模块700,分别用于实现上述数据处理方法中步骤S301,S302,S303,S304,所以,其具体实施方式可以参照相应的各个部分实施例的描述,在此不再赘述。
此外,本发明还提供了一种数据交互方法,该方法具体包括:
下位机获取需上传至上位机的当前待记录数据,将所述当前待记录数据解析为多条记录数据流,依次上传所述记录数据流;
上位机接收由下位机上传的当前待记录数据;将所述当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;当从所述缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从所述缓存队列中未查找到相同的记录数据时,将所述当前待记录数据存储至数据库,返回记录成功的信息;
所述下位机接收所述上位机返回的记录成功的信息;当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据。
参照图6,下面对本发明所提供的数据交互方法的具体工作流程进行进一步详细阐述。下位机按块读取本地存储的脱机记录,将块内记录数据解析为N条(N小于X),X大于下位机每个块存储的记录数,然后依次向上位机上传记录数据。上位机接收记录数据,并从缓存队列中查找是否存在相同的记录数据,如果是,则直接返回记录成功的标记信息;如果否,则将当前数据保存至数据库中,并插入缓存队列后,返回记录成功的标记信息。下位机接收处理结果,并判断块内的数据是否上传完毕,直到上传完毕后删除当前数据块。并且进一步检测是否还有未上传的脱机数据块,如果是,则返回按块读取本地存储的脱机记录;如果否,则结束。
下面对本发明实施例提供的数据交互系统进行介绍,下文描述的数据交互系统与上文描述的数据交互方法可相互对应参照。该数据交互系统可以具体包括:下位机以及上位机;
其中,所述下位机用于获取需上传至上位机的当前待记录数据,将所述当前待记录数据解析为多条记录数据流,依次上传所述记录数据流;
所述上位机用于接收由下位机上传的当前待记录数据;将所述当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;当从所述缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从所述缓存队列中未查找到相同的记录数据时,将所述当前待记录数据存储至数据库,返回记录成功的信息;
所述下位机用于接收所述上位机返回的记录成功的信息;当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据。
综上,本发明在上位机建立数据缓存库,每次接收下位机记录后检查数据缓存库是否重复即可,不需要每次去数据库中查询验证,减少了上位机数据库性能的消耗,并且解决了上位机记录数据重复的问题。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本发明所提供的数据处理方法及对应装置、数据交互方法以及对应装置进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以对本发明进行若干改进和修饰,这些改进和修饰也落入本发明权利要求的保护范围内。

Claims (10)

1.一种数据处理方法,其特征在于,应用于上位机,处理方法包括:
接收由下位机上传的当前待记录数据;
将所述当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;
当从所述缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从所述缓存队列中未查找到相同的记录数据时,将所述当前待记录数据存储至数据库,返回记录成功的信息。
2.如权利要求1所述的数据处理方法,其特征在于,在所述接收由下位机上传的当前待记录数据之前还包括:
从所述数据库中读取最近K条已存记录数据,K=X*Y,其中X大于所述下位机每个块存储的记录数,Y为所述上位机托管的设备数;
将获取的所述已存记录数据加载至所述缓存队列中;
启动接收记录数据的线程。
3.如权利要求1或2所述的数据处理方法,其特征在于,在所述将所述当前待记录数据存储至数据库之后还包括:
将保存到所述数据库的数据插入所述缓存队列中。
4.一种数据处理装置,其特征在于,包括:
数据接收模块,用于接收由下位机上传的当前待记录数据;
比较模块,用于将所述当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;
处理模块,用于当从所述缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从所述缓存队列中未查找到相同的记录数据时,将所述当前待记录数据存储至数据库,返回记录成功的信息。
5.一种数据处理方法,其特征在于,应用于下位机,包括:
获取需上传至上位机的当前待记录数据;
将所述当前待记录数据解析为多条记录数据流;
依次将所述记录数据流上传至上位机,以使所述上位机对未存储于数据缓存库的数据进行存储,并接收所述上位机返回的记录成功的信息;
当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据。
6.如权利要求5所述的数据处理方法,其特征在于,所述获取需上传至上位机的当前待记录数据包括:
按块读取所述下位机本地存储的脱机记录。
7.如权利要求6所述的数据处理方法,其特征在于,在当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据之后还包括:
判断所述下位机是否还存在未上传的脱机数据块,如果是,则返回按块读取所述下位机本地存储的脱机记录的步骤。
8.一种数据处理装置,其特征在于,包括:
获取模块,用于获取需上传至上位机的当前待记录数据;
解析模块,用于将所述当前待记录数据解析为多条记录数据流;
信息接收模块,用于依次将所述记录数据流上传至上位机,以使所述上位机对未存储于数据缓存库的数据进行存储,并接收所述上位机返回的记录成功的信息;
删除模块,用于当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据。
9.一种数据交互方法,其特征在于,包括:
下位机获取需上传至上位机的当前待记录数据,将所述当前待记录数据解析为多条记录数据流,依次上传所述记录数据流;
上位机接收由下位机上传的当前待记录数据;将所述当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;当从所述缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从所述缓存队列中未查找到相同的记录数据时,将所述当前待记录数据存储至数据库,返回记录成功的信息;
所述下位机接收所述上位机返回的记录成功的信息;当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据。
10.一种数据交互系统,其特征在于,包括下位机以及上位机;
其中,所述下位机用于获取需上传至上位机的当前待记录数据,将所述当前待记录数据解析为多条记录数据流,依次上传所述记录数据流;
所述上位机用于接收由下位机上传的当前待记录数据;将所述当前待记录数据与预先加载到数据缓存库的缓存队列中的已存记录数据进行比较;当从所述缓存队列中查找到相同的记录数据时,返回记录成功的信息;当从所述缓存队列中未查找到相同的记录数据时,将所述当前待记录数据存储至数据库,返回记录成功的信息;
所述下位机用于接收所述上位机返回的记录成功的信息;当所述当前待记录数据全部上传完成时,删除存储于下位机中的所述当前待记录数据。
CN201611219322.0A 2016-12-26 2016-12-26 数据处理方法及对应装置、数据交互方法及对应装置 Pending CN106709013A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611219322.0A CN106709013A (zh) 2016-12-26 2016-12-26 数据处理方法及对应装置、数据交互方法及对应装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611219322.0A CN106709013A (zh) 2016-12-26 2016-12-26 数据处理方法及对应装置、数据交互方法及对应装置

Publications (1)

Publication Number Publication Date
CN106709013A true CN106709013A (zh) 2017-05-24

Family

ID=58903428

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611219322.0A Pending CN106709013A (zh) 2016-12-26 2016-12-26 数据处理方法及对应装置、数据交互方法及对应装置

Country Status (1)

Country Link
CN (1) CN106709013A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107809463A (zh) * 2017-09-26 2018-03-16 北京航天发射技术研究所 一种双轴激光捷联惯组下位机与上位机之间的交互方法
CN108304438A (zh) * 2017-10-12 2018-07-20 深圳市天下房仓科技有限公司 海量数据存储方法及海量数据存储系统
CN108768760A (zh) * 2018-04-04 2018-11-06 吉林省星途科技有限公司 一种多机协同工作设备中高速数据流接收方法及系统
CN109062708A (zh) * 2018-07-05 2018-12-21 武汉斗鱼网络科技有限公司 一种数据发送方法、接收方法及装置
CN110597895A (zh) * 2019-09-10 2019-12-20 广东职业技术学院 一种基于trio控制器的弯管数据管理方法及系统
CN110865988A (zh) * 2019-11-15 2020-03-06 北京云迹科技有限公司 一种数据传输方法、装置,机器人及存储介质
CN111787082A (zh) * 2020-06-22 2020-10-16 珠海格力电器股份有限公司 一种多级业务数据上报的方法、设备及系统
CN112069216A (zh) * 2020-09-18 2020-12-11 山东超越数控电子股份有限公司 一种基于FPGA的Join算法实现方法、系统、装置和介质
CN112084050A (zh) * 2019-06-14 2020-12-15 北京北方华创微电子装备有限公司 信息记录方法及系统
CN113325798A (zh) * 2021-07-08 2021-08-31 宜科(天津)电子有限公司 传感器数据处理系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102663068A (zh) * 2012-03-31 2012-09-12 哈尔滨工业大学 锅炉控制中的基于opc服务器的实时数据库实现数据实时更新的装置及数据实时更新方法
CN103294702A (zh) * 2012-02-27 2013-09-11 上海淼云文化传播有限公司 一种数据处理方法、装置及系统
CN105739912A (zh) * 2014-12-11 2016-07-06 北京北方微电子基地设备工艺研究中心有限责任公司 半导体设备中实时数据的存储方法及系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103294702A (zh) * 2012-02-27 2013-09-11 上海淼云文化传播有限公司 一种数据处理方法、装置及系统
CN102663068A (zh) * 2012-03-31 2012-09-12 哈尔滨工业大学 锅炉控制中的基于opc服务器的实时数据库实现数据实时更新的装置及数据实时更新方法
CN105739912A (zh) * 2014-12-11 2016-07-06 北京北方微电子基地设备工艺研究中心有限责任公司 半导体设备中实时数据的存储方法及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
匿名: "mysql数据库插入检测重复的方法", 《SEGMENTFAULT网站URL: HTTPS://SEGMENTFAULT.COM/Q/1010000000518010》 *
李剑勇: "《数据恢复实训教程》", 28 February 2014 *

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107809463B (zh) * 2017-09-26 2020-08-07 北京航天发射技术研究所 一种双轴激光捷联惯组下位机与上位机之间的交互方法
CN107809463A (zh) * 2017-09-26 2018-03-16 北京航天发射技术研究所 一种双轴激光捷联惯组下位机与上位机之间的交互方法
CN108304438A (zh) * 2017-10-12 2018-07-20 深圳市天下房仓科技有限公司 海量数据存储方法及海量数据存储系统
CN108768760A (zh) * 2018-04-04 2018-11-06 吉林省星途科技有限公司 一种多机协同工作设备中高速数据流接收方法及系统
CN109062708B (zh) * 2018-07-05 2020-07-10 武汉斗鱼网络科技有限公司 一种数据发送方法、接收方法及装置
CN109062708A (zh) * 2018-07-05 2018-12-21 武汉斗鱼网络科技有限公司 一种数据发送方法、接收方法及装置
CN112084050A (zh) * 2019-06-14 2020-12-15 北京北方华创微电子装备有限公司 信息记录方法及系统
CN110597895B (zh) * 2019-09-10 2020-06-12 广东职业技术学院 一种基于trio控制器的弯管数据管理方法及系统
CN110597895A (zh) * 2019-09-10 2019-12-20 广东职业技术学院 一种基于trio控制器的弯管数据管理方法及系统
CN110865988A (zh) * 2019-11-15 2020-03-06 北京云迹科技有限公司 一种数据传输方法、装置,机器人及存储介质
CN111787082A (zh) * 2020-06-22 2020-10-16 珠海格力电器股份有限公司 一种多级业务数据上报的方法、设备及系统
CN112069216A (zh) * 2020-09-18 2020-12-11 山东超越数控电子股份有限公司 一种基于FPGA的Join算法实现方法、系统、装置和介质
CN113325798A (zh) * 2021-07-08 2021-08-31 宜科(天津)电子有限公司 传感器数据处理系统

Similar Documents

Publication Publication Date Title
CN106709013A (zh) 数据处理方法及对应装置、数据交互方法及对应装置
US8893131B2 (en) System and/or method for bulk loading of records into an ordered distributed database
CN103593298B (zh) 内存回收方法和装置
CN103593147A (zh) 一种数据读取的方法及装置
CN109857548A (zh) 存储空间优化方法、装置、计算机设备及存储介质
CN108984295B (zh) 内存回收方法、计算机装置及计算机可读存储介质
CN107391774A (zh) 基于重复数据删除的日志文件系统的垃圾回收方法
CN107066349A (zh) 一种集群文件系统数据保护的方法及系统
CN109471843B (zh) 一种元数据缓存方法、系统及相关装置
CN107102896A (zh) 一种多级缓存的操作方法、装置及电子设备
CN102362281A (zh) 策略生成和转换系统、策略分配系统及其方法和程序
CN103593447B (zh) 用于数据库表的数据处理方法和装置
US7610321B2 (en) File transfer system, file storage apparatus, method for storing file, and program
CN107229421A (zh) 视频数据存储系统的创建、文件写入和读取方法及装置
CN104699566A (zh) 基于云存储的数据冗余备份方法、系统及存储节点服务器
CN103034669A (zh) 利用网络文件系统提供用户数据存储环境的系统
CN104408126B (zh) 一种数据库的持久化写入方法、装置和系统
CN112596949A (zh) 一种高效率的ssd删除数据恢复方法及系统
CN102780780B (zh) 云计算模式下的数据处理方法、设备和系统
CN111176559B (zh) 数据写入方法及装置、双活系统
CN110737635A (zh) 一种数据分块方法
CN107608825A (zh) 一种云备份快照数据的方法及装置
US11003578B2 (en) Method and system for parallel mark processing
CN107330002A (zh) 分布式数据库实现方法及装置
CN106775456A (zh) 一种数据处理方法、装置及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170524