CN109889456A - 一种数据传输方法、装置、设备、系统和存储介质 - Google Patents
一种数据传输方法、装置、设备、系统和存储介质 Download PDFInfo
- Publication number
- CN109889456A CN109889456A CN201811638892.2A CN201811638892A CN109889456A CN 109889456 A CN109889456 A CN 109889456A CN 201811638892 A CN201811638892 A CN 201811638892A CN 109889456 A CN109889456 A CN 109889456A
- Authority
- CN
- China
- Prior art keywords
- data
- equipment
- data transmission
- upper level
- acquisition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Information Transfer Between Computers (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种数据传输方法、装置、设备、系统和存储介质,包括:接收下一级设备传输的采集数据;其中,下一级设备为待采集的设备或者下一级的数据传输设备。对采集数据进行缓存,以在底层形成缓存队列。获取上一级设备的网络地址,并通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备;其中,上一级设备为上一级的数据传输设备或者后台服务器。本发明还公开了一种数据传输装置、设备、系统以及存储介质。实施本发明可以达到多级数据采集、传递及存储的目的,且多级服务器采集、传递和存储数据的方法可以减轻服务器并发的压力,提高服务器接收数据的可靠性。
Description
技术领域
本发明涉及数据传输应用技术领域,具体地涉及一种数据传输方法、装置、设备、系统和存储介质。
背景技术
当前,计算机设备或系统依靠网络将所采集到的数据进行上传与下载等交互工作是极为普遍的。
在目前的数据传输方案中,采用的是每一台终端设备通过局域网或通信运营商网络等无线组网方式,实时、自动上传到一台远程服务器中。这种实现方案最大的弊端在于每一台终端的数据全部存储在一台远程服务器,数据上传装置通讯频率高,对服务器并发要求高,存储服务器成为系统性能的瓶颈,也是数据可靠性和安全性的焦点,不能满足大规模存储应用的需求。
发明内容
有鉴于此,本发明的目的在于提出一种数据传输方法、装置、设备、系统和存储介质。实施本发明可以达到多级数据采集、传递及存储的目的,且多级服务器采集、传递和存储数据的方法可以减轻服务器并发的压力,提高服务器接收数据的可靠性。
第一方面,本发明实施例提供了一种数据传输方法,包括:
接收下一级设备传输的采集数据;其中,所述下一级设备为待采集的设备或者下一级的数据传输设备;
对所述采集数据进行缓存,以在底层形成缓存队列;
获取上一级设备的网络地址,并通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备;其中,所述上一级设备为上一级的数据传输设备或者后台服务器。
优选地,获取上一级设备的网络地址,并通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备,还包括:
当判断数据量超出自身的负载时,控制所述采集数据延时上传至上一级设备。
当判断设备自身崩溃时,控制所述采集数据停止上传至上一级设备。
优选地,通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备,所述上传方式包括:省流量的数据上传方式、数据必达的数据上传方式以及数据只到达一次的数据上传方式。
优选地,还包括:
接收所述上一级设备根据所述网络地址下发的数据指令;其中,所述上一级设备为上一级的数据传输设备或者后台服务器;
将所述数据指令通过多次数据交互方式逐一下发到下一级设备;其中,一旦设备接收到所述数据指令优先执行所述数据下发工作。
第二方面,本发明实施例还提供了一种数据传输装置,包括:
数据接收单元,用于接收下一级设备传输的采集数据;其中,所述下一级设备为待采集的设备或者下一级的数据传输设备;
数据缓存单元,用于对所述采集数据进行缓存,以在底层形成缓存队列;
寻址单元,用于获取上一级设备的网络地址,并通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备;其中,所述上一级设备为上一级的数据传输设备或者后台服务器。
第三方面,本发明实施例还提供了一种数据传输设备,包括处理器、存储器以及存储在所述存储器中且被配置由所述处理执行的计算机程序,所述处理器执行所述计算机程序时实现如第一方面所述的数据传输方法。
第四方面,本发明实施例还提供了一种数据传输系统,其特征在于,包括后台服务器以及数据传输系统;其中,所述数据传输系统包括至少一级数据传输层;每级数据传输层包括至少一个第三方面所述的数据传输设备。
其中,对于每一级数据传输层的数据传输设备,用于接收下一级设备传输的采集数据;对所述采集数据进行缓存,以在底层形成缓存队列;获取上一级设备的网络地址,并通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备;其中,所述下一级设备为待采集的设备或者下一级的数据传输设备;所述上一级设备为上一级的数据传输设备或者后台服务器;
所述后台服务器,用于接收所述数据传输设备上传的所述采集数据。
优选地,所述后台服务器,还用于获取下一级数据传输设备的网络地址,并通过网络将数据库中的采集数据根据所述网络地址逐一下传到下一级数据传输设备。
优选地,所述后台服务器,还用于对所述采集数据进行识别,具体为:
采用高效数据缓存预取方法将访问频率高的热点数据进行缓存和预取并存储在数据库中;
采用低速存储方法将访问频率低的冷点数据存储在数据库中。
第五方面,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质包括存储的计算机程序,其中,在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如第一方面所述的数据传输方法。
实施本发明实施例,具有如下有益效果:
本发明通过至少一个数据输出设备来分担存储负荷,具体地,由一个后台服务器逐级向下设置数据传输系统,每个数据传输系统包括至少一级数据传输层,每级数据传输层包括数据传输设备。每级数据传输设备通过通讯模块采集数据并在在底层组成缓存队列,并通过局域网或通信运营商网络将内部缓存的数据上传到上一级设备中,以达到多级数据采集、传递及存储的目的且多级服务器采集、传递和存储数据的方法可以减轻服务器并发的压力,提高服务器接收数据的可靠性。
附图说明
为了更清楚地说明本发明的技术方案,下面将对实施方式中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明第一实施例提供的数据传输系统的结构示意图。
图2为本发明第一实施例提供数据上传的流程示意图。
图3为本发明第一实施例提供数据下发指令的流程示意图。
图4为本发明第二实施例提供的数据传输方法的流程流程图。
图5为本发明第三实施例提供的数据传输装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1至图3,本发明第一实施例提供了一种数据传输系统,包括后台服务器1以及数据多级采集结构;其中,所述数据多级采集结构包括至少一级数据传输层;每级数据传输层包括至少一个数据传输设备。
其中,对于每一级数据传输层的数据传输设备,用于接收下一级设备传输的采集数据;对所述采集数据进行缓存,以在底层形成缓存队列;获取上一级设备的网络地址,并通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备;其中,所述下一级设备为待采集的设备或者下一级的数据传输设备;其中,所述上一级设备为上一级的数据传输设备或者后台服务器。
所述后台服务器1,用于接收所述数据传输设备上传的采集数据。
在本实施例中,所述数据多级采集结构包括至少一级数据传输层;每级数据传输层包括至少一个数据传输设备2。所述数据传输设备2可接收多台下一级设备采集的数据,并传递给后台服务器进行存储,减少后台服务器的并发压力,提高数据接收的可靠性。
参阅图2,为了便于说明本实施例,以下所述数据多级采集结构包括两级数据传输层,其中,第一级数据传输层包括一个第一级数据传输设备2,第二级数据传输层包括二个第一级数据传输设备4。当然,需要说明的是,在本发明其他实施例中,所述数据多级采集结构包括三级数据传输层或者一级数据传输层,每层数据传输层可以包括三个或者更多的数据传输设备,在此本发明不做具体的限制。
具体地,在本实施例中,所述数据传输设备2包括用于采集所需要数据的通讯模块以及通过设置数据传输设备2的数据存储模块。在本实施例中,所述第一级数据传输设备22的通讯模块用于与第一级数据传输设备4通讯,可以实时采集数据,并将采集数据存储在内部记忆电路中。所述第一级数据传输设备2的存储模块,用于实时获取第一级传输设备的通讯模块采集到的数据,对通讯模块内采集的数据进行读取和验证,并将采集数据存储到存储器,并将采集数据在底层形成缓存队列。所述存储模块还用于将所述通讯模块采集到的采集数据上传至后台服务器1中,从而形成分布式数据采集、传递及存储方式。所述存储模块通过局域网或通信运营商网络将内部存储的采集数据逐条上传到后台服务器1中。当然,需要说明的是,所述局域网为内置WIFI网络以及以太网等,所述通信运营商网络/4G/3G/2G网络等。所述存储模块也可以通过广域网或城域网将内部存储的采集数据逐条上传到后台服务器1中,在此,本发明不做具体限制。
本发明通过设置至少一级数据传输设备2,所述数据传输设备用于采集待采集设备3的采集数据,并将所述采集数据发送至存储模块,所述存储模块用于将所述通讯模块采集到的采集数据存储并上传后台服务器1,形成分布式数据采集、传递及存储方式。且所述数据传输设备可接收多台待采集设备3采集的数据,并传递给后台服务器1进行存储,减少后台服务器1的并发压力,提高数据接收的可靠性。
在本实施例中,对于数据传输系统,从多个最底端的数据传输设备到最顶端的后台服务器,包括中间可能存在的多个多级数据传输设备,这组成一整个数据传输网络,并存在一个各设备之间的寻址系统。在该寻址系统中,会存储整个数据传输网络中的所有设备地址以及表示上下级的层级关系,这可称为设备地址库,此份的设备地址库,在整个数据传输网络中的每个设备中都存在一份完全一样的副本,并且任何网络一个设备的地址发生变更时,将通知整个数据传输网络,更新每个设备中的设备地址库。
其中,当级设备本身在判断上一级的设备崩溃时,对于要求必达的数据,将尝试自动寻找更高一级的设备进行传输数据,如果没办法直接连接更高一级的设备,则将寻找同级的其他设备,将数据转由同级设备向上级设备传输,以尽可能保证数据到达最终后台服务器。同理,对于数据下级指令时,如果直接下级的设备崩溃或者传输不到,则尝试寻找再下一级或者同级设备,将指令下达到终端设备。
当然,需要说明的是,在第一实施例的基础上,本发明的一优选实施例中所述后台服务器1,还用于获取下一级数据传输设备的网络地址,并通过网络将上一级设备中的采集数据根据所述网络地址逐一下传到下一级数据传输设备。
参阅图3,具体地,后台服务器1通过寻址模块将采集数据下发指令能够准确、实时地发送给下一级设备即第一级数据传输设备2中,并通过多次数据交互方式确保采集数据全部到达第一级数据传输设备4中,且到达的次数仅为一次,要求数据传输设备一旦接收到数据下发指令,将优先执行数据下发工作。具体地,所述数据指令下发实现的流程如下:
为了便于说明本实施例,以下所述数据多级采集结构包括两级数据传输层,其中,第一级数据传输层包括一个第一级数据传输设备2,第二级数据传输层包括二个第一级数据传输设备4。后台服务器根据所述网络地址下发的数据指令至第一级数据传输设备4;第一级数据传输设备2的存储模块存储所述数据指令并将所述数据指令发送至第一级数据传输设备2的通讯模块,所述通讯模块获取到所述数据指令后通过多次数据交互方式逐一下发到第一级数据传输设备4中,再由第一级数据传输设备4通过多次数据交互方式逐一下发到待采集设备3中。
在第一实施例的基础上,本发明的一优选实施例中,所述后台服务器1接收数据传输设备上传的采集数据,并对所述采集数据进行识别,对访问频率高的热点采集数据进行缓存和预取,通过高效的数据缓存预取方法将数据存储在数据库中,提高数据访问性能。采用低速存储方法将访问频率低的冷点数据存储在数据库中。
参阅图4,本发明第二实施例提供了一种数据传输方法,包括如下步骤:
S10,接收下一级设备传输的采集数据;其中,下一级设备为待采集的设备或者下一级的数据传输设备。
在本实施例中,在数据传输设备内通过设置数据传输设备2的通讯协议,形成用于采集所需要数据的通讯模块,通过数据传输设备2与下一级数据传输设备或者待采集设备3进行通讯,实现实时采集数据,并将采集数据存储在内部记忆电路中。
S20,对采集数据进行缓存,以在底层形成缓存队列。
在本实施例中,在数据传输设备内通过设置数据传输设备2的数据存储模块,实时获取通讯模块采集到的采集数据,对通讯模块内采集的采集数据进行读取和验证,并将采集数据存储到存储器,并将采集数据在底层按到达的时间顺序排成一队形成缓存队列。
S30,获取上一级设备的网络地址,并通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备;其中,上一级设备为上一级的数据传输设备或者后台服务器。
在本实施例中,所述数据传输设备内部设有寻址装置,所述采集数据在底层形成缓存队列,每个数据传输设备通过局域网或通信运营商网络将缓存队列中的采集数据根据网络地址向上一级设备逐一传送数据,最后由一个数据传输设备将采集数据传送至后台服务器。当然,需要说明的是,缓存队列的最大特性是确保采集数据上传到上一个级设备的传输数据设备时,避免数据量大或设备执行的指令太多而造成数据丢失。
具体地,获取上一级设备的网络地址,并通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备,还包括:
当判断数据量超出自身的负载时,控制所述采集数据延时上传至上一级设备。当所述判断自身设备崩溃时,控制所述采集数据停止上传至上一级设备。具体地,数据上传过程中,任何一级的数据传输设备产生大负载时,负载分流机制会自动将此大负载控制在当前数据传输设备中,避免影响到后台服务器。负载分流的方式由两种:①当判断所述数据量超出自身负载时,负载分流机制将通过缓存机制,在底层形成缓存队列,控制数据延时上传。②当数据传输设备当前数据传输设备自身崩溃时,该数据传输设备的数据不执行数据上传指令,以免因某一级的数据传输设备的故障而影响后台服务器。
本发明通过至少一个数据传输设备分担存储负荷,由所述后台服务器逐级向下发送数据指令至数据传输设备,形成分布式数据传输及存储方式。且所述数据传输设备可接收多台设备采集的数据,并逐级向上传递采集数据给后台服务器进行存储,减少了后台服务器的并发压力,提高数据接收的可靠性。
在第一实施例的基础上,本发明的一优选实施例中,通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备,所述上传方式包括:省流量的数据上传方式、数据必达的数据上传方式以及数据只到达一次的数据上传方式。具体地,①省流量的数据上传方式:省流量的数据上传方式允许上传的数据丢失,其最大特点是上传效率高,耗费的网络流量少。②数据必达的数据上传方式:确保数据上传到目标数据传输设备数据传输设备,允许数据重复到达到数据传输设备。相比省流量的数据上传方式,数据必达的上传方式耗费的流量较多,数据上传效率也较低。③数据只到达一次的数据上传方式:通过多次数据交互方式确保数据全部到达数据传输设备,且到达的次数仅为一次。与数据必达的上传方式相比,数据只到达一次的上传方式耗费的流量较多,数据上传效率也较低。
参阅图3,在第一实施例的基础上,本发明的一优选实施例中,后台服务器通过寻址模块将采集数据下发指令能够准确、实时地发送给下一级设备,并通过多次数据交互方式确保采集数据全部到达下一级设备中,且到达的次数仅为一次,要求数据传输设备一旦接收到数据下发指令,将优先执行数据下发工作。
实现的流程如下:
所述数据传输设备还用于,接收所述上一级设备根据所述网络地址下发的数据指令;其中,所述上一级设备为上一级的数据传输设备或者后台服务器。将所述数据指令通过多次数据交互方式逐一下发到下一级设备;其中,一旦设备接收到所述数据指令优先执行所述数据下发工作。具体地,后台服务器或者上一级设备将所述数据指令下发至所述存储模块,所述存储模块用于将所述上一级设备发送的数据指令存储并下发至通讯模块,通讯模块接收该数据指令后发送至下一级设备或者待传输设备或者待采集设备。
参阅图5,本发明第三实施例提供了一种数据传输装置,包括:
数据接收单元10,用于接收下一级设备传输的采集数据;其中,所述下一级设备为待采集的设备或者下一级的数据传输设备;
数据缓存单元20,用于对所述采集数据进行缓存,以在底层形成缓存队列;
寻址单元30,用于获取上一级设备的网络地址,并通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备;其中,所述上一级设备为上一级的数据传输设备或者后台服务器。
优选地,所述寻址单元30,还用于当判断数据量超出自身的负载时,控制所述采集数据延时上传至上一级设备。当所述判断自身设备崩溃时,控制所述采集数据停止上传至上一级设备。
优选地,通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备,所述上传方式包括:省流量的数据上传方式、数据必达的数据上传方式以及数据只到达一次的数据上传方式。
本发明第四实施例提供了一种数据传输设备,包括处理器、存储器以及存储在所述存储器中且被配置由所述处理执行的计算机程序,所述处理器执行所述计算机程序时实现如第一实施例所述的数据传输方法。
本发明第五实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质包括存储的计算机程序。其中,在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行上述第一实施例中所述的数据传输方法。
示例性地,本发明所述的计算机程序可以被分割成一个或多个模块,所述一个或者多个模块被存储在所述存储器中,并由所述处理器执行,以完成本发明。所述一个或多个模块可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序在所述实现一种数据传输设备中的执行过程。例如,本发明第二实施例中所述的数据传输方法。
所称处理器可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等,所述处理器是所述数据传输方法的控制中心,利用各种接口和线路连接整个所述实现数据传输方法的各个部分。
所述存储器可用于存储所述计算机程序和/或模块,所述处理器通过运行或执行存储在所述存储器内的计算机程序和/或模块,以及调用存储在存储器内的数据,实现基于物联网的物品追踪方法的各种功能。所述存储器可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、文字转换功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、文字消息数据等)等。此外,存储器可以包括高速随机存取存储器,还可以包括非易失性存储器,例如硬盘、内存、插接式硬盘、智能存储卡(Smart Media Card,SMC)、安全数字(SecureDigital,SD)卡、闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
其中,所述实现的模块如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一个计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、USB设备、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
需说明的是,以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。另外,本发明提供的装置实施例附图中,模块之间的连接关系表示它们之间具有通信连接,具体可以实现为一条或多条通信总线或信号线。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求的保护范围为准。
Claims (10)
1.一种数据传输方法,其特征在于,包括:
接收下一级设备传输的采集数据;其中,所述下一级设备为待采集的设备或者下一级的数据传输设备;
对所述采集数据进行缓存,以在底层形成缓存队列;
获取上一级设备的网络地址,并通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备;其中,所述上一级设备为上一级的数据传输设备或者后台服务器。
2.根据权利要求1所述的数据传输方法,其特征在于,获取上一级设备的网络地址,并通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备,还包括:
当判断数据量超出自身的负载时,控制所述采集数据延时上传至上一级设备;
当判断设备自身崩溃时,控制所述采集数据停止上传至上一级设备。
3.根据权利要求2所述的数据传输方法,其特征在于,通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备,所述上传方式包括:省流量的数据上传方式、数据必达的数据上传方式以及数据只到达一次的数据上传方式。
4.根据权利要求1所述的数据传输方法,其特征在于,还包括:
接收所述上一级设备根据所述网络地址下发的数据指令;其中,所述上一级设备为上一级的数据传输设备或者后台服务器;
将所述数据指令通过多次数据交互方式逐一下发到下一级设备;其中,一旦设备接收到所述数据指令优先执行所述数据下发工作;其中,所述下一级设备为待采集的设备或者下一级的数据传输设备。
5.一种数据传输装置,其特征在于,包括:
数据接收单元,用于接收下一级设备传输的采集数据;其中,所述下一级设备为待采集的设备或者下一级的数据传输设备;
数据缓存单元,用于对所述采集数据进行缓存,以在底层形成缓存队列;
寻址单元,用于获取上一级设备的网络地址,并通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备;其中,所述上一级设备为上一级的数据传输设备或者后台服务器。
6.一种数据传输设备,其特征在于,包括处理器、存储器以及存储在所述存储器中且被配置由所述处理执行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1至4任一项所述的数据传输方法。
7.一种数据传输系统,其特征在于,包括后台服务器以及数据多级采集结构;其中,所述数据多级采集结构包括至少一级数据传输层;每级数据传输层包括至少一个如权利要求6所述的数据传输设备;
其中,对于每一级数据传输层的数据传输设备,用于接收下一级设备传输的采集数据;对所述采集数据进行缓存,以在底层形成缓存队列;获取上一级设备的网络地址,并通过网络将缓存队列中的采集数据根据所述网络地址逐一上传到上一级设备;其中,所述下一级设备为待采集的设备或者下一级的数据传输设备;所述上一级设备为上一级的数据传输设备或者后台服务器;
所述后台服务器,用于接收所述数据传输设备上传的采集数据。
8.根据权利要求7所述的数据传输系统,其特征在于,所述后台服务器,还用于获取下一级数据传输设备的网络地址,并通过网络将数据库中的采集数据根据所述网络地址逐一下传到下一级数据传输设备。
9.根据权利要求7所述的数据传输系统,其特征在于,所述后台服务器,还用于对所述采集数据进行识别,具体为:
采用高效数据缓存预取方法将访问频率高的热点数据进行缓存和预取并存储在数据库中;
采用低速存储方法将访问频率低的冷点数据存储在数据库中。
10.一种计算机可读存储介质,所述计算机可读存储介质包括存储的计算机程序,其中,在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如权利要求1至4任意一项所述的数据传输方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811638892.2A CN109889456B (zh) | 2018-12-29 | 2018-12-29 | 一种数据传输方法、装置、设备、系统和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811638892.2A CN109889456B (zh) | 2018-12-29 | 2018-12-29 | 一种数据传输方法、装置、设备、系统和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109889456A true CN109889456A (zh) | 2019-06-14 |
CN109889456B CN109889456B (zh) | 2023-09-05 |
Family
ID=66925412
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811638892.2A Active CN109889456B (zh) | 2018-12-29 | 2018-12-29 | 一种数据传输方法、装置、设备、系统和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109889456B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111294287A (zh) * | 2020-02-14 | 2020-06-16 | 广州市百果园信息技术有限公司 | 一种数据上传方法、装置、设备和存储介质 |
CN113141577A (zh) * | 2020-01-19 | 2021-07-20 | 深圳市云海物联科技有限公司 | 数据传输方法、装置及终端设备 |
CN114827774A (zh) * | 2022-04-26 | 2022-07-29 | 浙江正泰物联技术有限公司 | 一种电气数据采集方法、装置及系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20050101590A (ko) * | 2004-04-19 | 2005-10-25 | 권영길 | 계층적 정보 수집 시스템과 그 형성 방법 및 계층적 정보공유 방법 |
US20110314526A1 (en) * | 2010-06-21 | 2011-12-22 | Eric Lee Valentine | System and method for handling personal identification information |
CN104168148A (zh) * | 2014-05-04 | 2014-11-26 | 杭州立地信息技术有限公司 | 一种多接口数据采集装置及采集方法 |
CN107017921A (zh) * | 2017-05-12 | 2017-08-04 | 南京南瑞微电子技术有限公司 | 一种提高宽带电力线载波用电信息采集效率的方法 |
CN108551490A (zh) * | 2018-05-14 | 2018-09-18 | 西京学院 | 一种工业流数据编码解码系统及方法 |
CN109240747A (zh) * | 2018-08-13 | 2019-01-18 | 郑州云海信息技术有限公司 | 一种多级服务器管理系统的信息查看方法及其相关装置 |
-
2018
- 2018-12-29 CN CN201811638892.2A patent/CN109889456B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20050101590A (ko) * | 2004-04-19 | 2005-10-25 | 권영길 | 계층적 정보 수집 시스템과 그 형성 방법 및 계층적 정보공유 방법 |
US20110314526A1 (en) * | 2010-06-21 | 2011-12-22 | Eric Lee Valentine | System and method for handling personal identification information |
CN104168148A (zh) * | 2014-05-04 | 2014-11-26 | 杭州立地信息技术有限公司 | 一种多接口数据采集装置及采集方法 |
CN107017921A (zh) * | 2017-05-12 | 2017-08-04 | 南京南瑞微电子技术有限公司 | 一种提高宽带电力线载波用电信息采集效率的方法 |
CN108551490A (zh) * | 2018-05-14 | 2018-09-18 | 西京学院 | 一种工业流数据编码解码系统及方法 |
CN109240747A (zh) * | 2018-08-13 | 2019-01-18 | 郑州云海信息技术有限公司 | 一种多级服务器管理系统的信息查看方法及其相关装置 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113141577A (zh) * | 2020-01-19 | 2021-07-20 | 深圳市云海物联科技有限公司 | 数据传输方法、装置及终端设备 |
CN113141577B (zh) * | 2020-01-19 | 2022-03-04 | 深圳市云海物联科技有限公司 | 数据传输方法、装置及终端设备 |
CN111294287A (zh) * | 2020-02-14 | 2020-06-16 | 广州市百果园信息技术有限公司 | 一种数据上传方法、装置、设备和存储介质 |
CN111294287B (zh) * | 2020-02-14 | 2023-11-21 | 广州市百果园信息技术有限公司 | 一种数据上传方法、装置、设备和存储介质 |
CN114827774A (zh) * | 2022-04-26 | 2022-07-29 | 浙江正泰物联技术有限公司 | 一种电气数据采集方法、装置及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN109889456B (zh) | 2023-09-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109889456A (zh) | 一种数据传输方法、装置、设备、系统和存储介质 | |
CN105554102A (zh) | 基于容器集群的弹性伸缩方法及其应用系统 | |
CN107404480A (zh) | 一种流媒体数据的传输方法、存储介质和流媒体服务器 | |
CN101527082B (zh) | 一种交通路况采集系统以及方法 | |
CN103716343A (zh) | 基于数据缓存同步的分布式业务请求处理方法及系统 | |
CN110839075A (zh) | 边缘计算环境下基于粒子群的服务迁移方法 | |
CN102263825A (zh) | 一种基于云位置的混合云存储系统数据传输方法 | |
CN102143237A (zh) | 一种基于网格的互联网内容分发方法和系统 | |
CN102055771B (zh) | 面向云服务的多并发业务流控制装置及控制方法 | |
CN106452919A (zh) | 一种基于模糊理论的雾节点优化方法 | |
CN104092756A (zh) | 一种基于dht机制的云存储系统的资源动态分配方法 | |
CN114330722B (zh) | 推理实现方法、网络、电子设备及存储介质 | |
CN104769550A (zh) | 在云计算网络中分配带宽的方法和系统 | |
CN106302615A (zh) | 远程管理方法、被管理设备、管理设备和智能电视系统 | |
CN100488114C (zh) | 一种网元管理方法与系统 | |
CN109992291A (zh) | 一种终端软件升级方法、装置、系统以及存储介质 | |
CN104768079A (zh) | 多媒体资源分发方法、装置及系统 | |
CN105245592A (zh) | 基于相近缓存协作的移动网络基站缓存内容放置方法 | |
CN106940696B (zh) | 一种用于sdn多层控制器的信息查询方法及系统 | |
CN106713512B (zh) | 动态平衡物联网网络带宽的高效数据传输方法及系统 | |
CN104052677A (zh) | 单一数据源的软负载均衡方法和装置 | |
CN108924203A (zh) | 数据副本自适应分布方法、分布式计算系统及相关设备 | |
CN107197039A (zh) | 一种基于cdn的paas平台服务包分发方法及系统 | |
CN105009102B (zh) | 用于多级聚合架构的系统和方法 | |
CN102075584B (zh) | 一种分布式文件系统及其访问方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |