CN112003922B - 一种数据传输方法及装置 - Google Patents

一种数据传输方法及装置 Download PDF

Info

Publication number
CN112003922B
CN112003922B CN202010831723.1A CN202010831723A CN112003922B CN 112003922 B CN112003922 B CN 112003922B CN 202010831723 A CN202010831723 A CN 202010831723A CN 112003922 B CN112003922 B CN 112003922B
Authority
CN
China
Prior art keywords
node
service
target
data
response node
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010831723.1A
Other languages
English (en)
Other versions
CN112003922A (zh
Inventor
刘成业
宋杨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Diji Intelligent Technology Co ltd
Original Assignee
Hangzhou Diji Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Diji Intelligent Technology Co ltd filed Critical Hangzhou Diji Intelligent Technology Co ltd
Priority to CN202010831723.1A priority Critical patent/CN112003922B/zh
Publication of CN112003922A publication Critical patent/CN112003922A/zh
Application granted granted Critical
Publication of CN112003922B publication Critical patent/CN112003922B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16YINFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y30/00IoT infrastructure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks
    • H04L67/1061Peer-to-peer [P2P] networks using node-based peer discovery mechanisms
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks
    • H04L67/1061Peer-to-peer [P2P] networks using node-based peer discovery mechanisms
    • H04L67/1065Discovery involving distributed pre-established resource-based relationships among peers, e.g. based on distributed hash tables [DHT] 
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Computer And Data Communications (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本说明书一个或多个实施例提供了一种数据传输方法及装置,该方法包括:获取针对至少一个物联网设备所产生的目标数据;在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点;其中,业务响应节点与业务请求节点之间采用直连通信方式进行数据传输;将该目标数据发送至目标业务响应节点,以使目标业务响应节点对目标数据执行相应的数据处理。通过将分布式的业务请求节点与业务响应节点之间采用直连通信方式进行数据传输,由业务请求节点选取目标响应节点进行数据路由分发,这样能够避免因服务总线异常导致数据传输中断或数据丢失的情况,缩短了数据在系统之间的数据传输距离,提高了数据传输效率和数据传输稳定性。

Description

一种数据传输方法及装置
技术领域
本文件涉及物联网技术领域,尤其涉及一种数据传输方法及装置。
背景技术
目前,随着物联网技术的快速发展,物联网设备的应用越来越广泛,基于物联网设备对外提供业务服务的系统架构可能涉及多个业务系统,因此,将涉及业务系统之间的数据传输。
例如,智能网关作为物联网设备的接入系统,智能网络在获取到物联网设备上传的采集到的数据、业务处理得到的数据、或者设备监控数据之后,再将该数据上传至相应的数据处理系统,以便该数据处理系统对物联网设备的相关数据进行处理;又如,数据处理系统由将处理后的数据存储至相应的数据库系统。
然而,在智慧园区或智慧城市场景一般采用ESB(Enterprise Service Bus,企业服务总线)架构,当前系统之间的数据传输过程主要通过服务总线来代理转发,存在结构臃肿且深度耦合、系统开销大、通信速度较慢等问题。
发明内容
本说明书实施例的目的是提供一种数据传输方法及装置,以解决当前数据传输过程存在结构臃肿且深度耦合、系统开销大、通信速度较慢等问题。
为解决上述技术问题,本说明书一个或多个实施例是这样实现的:
第一方面,本说明书一个或多个实施例的目的是提供一种数据传输方法。该数据传输方法包括:
获取针对至少一个物联网设备所产生的目标数据;其中,所述目标数据包括:原始采集数据、业务处理数据、以及处理结果数据中至少一项;
在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点;其中,所述业务响应节点与所述业务请求节点之间采用直连通信方式进行数据传输;
将所述至少一个物联网设备的所述目标数据发送至所述目标业务响应节点,以使所述目标业务响应节点对所述目标数据执行相应的数据处理。
第二方面,本说明书一个或多个实施例的目的是提供一种数据传输装置。该数据传输装置包括:
目标数据获取模块,用于获取针对至少一个物联网设备所产生的目标数据;其中,所述目标数据包括:原始采集数据、业务处理数据、以及处理结果数据中至少一项;
响应节点选取模块,用于在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点;其中,所述业务响应节点与所述业务请求节点之间采用直连通信方式进行数据传输;
目标数据传输模块,用于将所述至少一个物联网设备的所述目标数据发送至所述目标业务响应节点,以使所述目标业务响应节点对所述目标数据执行相应的数据处理。
第三方面,本说明书实施例提供一种数据传输设备,包括:处理器,以及被安排成存储计算机可执行指令的存储器;所述计算机可执行指令在被执行时使所述处理器实现上述第一方面任一项所述的方法的步骤。
第四方面,本说明书实施例提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述第一方面任一项所述的方法的步骤。
本说明书实施例所提供的数据传输方法及装置,获取针对至少一个物联网设备所产生的目标数据;在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点;其中,业务响应节点与业务请求节点之间采用直连通信方式进行数据传输;将该目标数据发送至目标业务响应节点,以使目标业务响应节点对目标数据执行相应的数据处理。通过将分布式的业务请求节点与业务响应节点之间采用直连通信方式进行数据传输,由业务请求节点选取目标响应节点进行数据路由分发,这样能够避免因服务总线异常导致数据传输中断或数据丢失的情况,缩短了数据在系统之间的数据传输距离,提高了数据传输效率和数据传输稳定性。
附图说明
为了更清楚地说明本说明书一个或多个实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本说明书一个或多个中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本说明书一个或多个实施例提供的数据传输系统的应用场景示意图;
图2为本说明书一个或多个实施例提供的数据传输方法的第一种流程示意图;
图3为本说明书一个或多个实施例提供的数据传输方法的第二种流程示意图;
图4为本说明书一个或多个实施例提供的数据传输方法的第三种流程示意图;
图5为本说明书一个或多个实施例提供的数据传输装置的模块组成示意图;
图6为本说明书一个或多个实施例提供的数据传输设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本说明书一个或多个中的技术方案,下面将结合本说明书一个或多个实施例中的附图,对本说明书一个或多个实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本说明书一个或多个一部分实施例,而不是全部的实施例。基于本说明书一个或多个中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本文件的保护范围。
需要说明的是,在不冲突的情况下,本说明书中的一个或多个实施例以及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本说明书一个或多个实施例。
本说明书一个或多个实施例提供了一种数据传输方法及装置,通过将分布式的业务请求节点与业务响应节点之间采用直连通信方式进行数据传输,由业务请求节点选取目标响应节点进行数据路由分发,这样能够避免因服务总线异常导致数据传输中断或数据丢失的情况,缩短了数据在系统之间的数据传输距离,提高了数据传输效率和数据传输稳定性。
图1为本说明书一个或多个实施例提供的数据传输系统的应用场景示意图,如图1所示,该系统包括:多个物联网设备、分布式的多个业务请求节点和分布式的多个业务响应节点,其中,该业务请求节点或业务响应节点可以是用于对物联网设备进行智能控制、数据处理的业务系统中的业务节点,该业务请求节点或业务响应节点可以是独立的服务器,也可以是由多个服务器组成的服务器集群,每个分布式业务请求节点或分布式业务响应节点均可以称为独立的分布式网络控制器;该物联网设备可以是智能家居设备,例如智能冰箱,也可以是智能监控设备,例如智能小区摄像头,还可以是智能售卖设备,例如商超扫码售卖柜等等。
其中,每个分布式业务请求节点或分布式业务响应节点均部署有微服务(Microservices Architecture)的架构风格,业务系统中的各个微服务可被独立部署,各个微服务之间是松耦合的;每个微服务仅关注于完成一件任务并很好地完成该任务;在所有情况下,每个任务代表着一个小的业务能力,从而实现从服务入口到数据持久层,逻辑上都是独立隔离的,直接在系统请求端做路由分发,使得系统与系统间直接对接。同时,由于节点之间相互独立,即使有某个节点出现异常也不会影响到其它节点,随着业务的快速增长,也易于开发、维护与扩展。
其中,业务请求节点可以是设备接入系统中的一个业务节点,也可以是中间的业务处理系统中的一个业务节点,另外,针对业务系统1与业务系统2之间的数据传输过程,业务请求节点为业务系统1中的一个业务节点,业务响应节点为业务系统2中的一个业务节点,即业务系统2作为业务响应方;而针对业务系统2与业务系统3之间的数据传输过程,业务请求节点为业务系统2中的一个业务节点,业务响应节点为业务系统3中的一个业务节点,即业务系统2作为业务请求方。
具体的,在图1中,针对设备接入系统与数据处理系统之间的数据传输过程,对应的,业务请求节点为设备接入系统中的一个设备接入节点,业务响应节点为数据处理系统中的一个数据处理节点,上述数据传输的具体过程为:
物联网设备,将物联网设备所产生的目标数据上传至设备接入节点;其中,该目标数据包括:原始采集数据;
设备接入节点,接收物联网设备上传的目标数据;例如,该设备接入节点可以是智能网关系统中的一个业务节点,对接收到的目标数据进行协议识别,若识别通过,则以统一数据格式将目标数据传输至智能网关系统的下一层业务系统;
设备接入节点,在多个数据处理节点中,选取用于为设备接入节点提供数据处理服务的目标数据处理节点;其中,数据处理节点与设备接入节点之间采用直连通信方式进行数据传输;
设备接入节点,将至少一个物联网设备的目标数据发送至目标数据处理节点;
数据处理节点,在接收到设备接入节点发送的目标数据后,对接收到的目标数据执行相应的数据处理;例如,该数据处理节点可以是数据解析系统中的一个业务节点,利用相应的解析逻辑对接收到的目标数据进行解析处理,再将处理后的目标数据传输至数据解析系统的下一层业务系统;
数据处理节点,将处理后的目标数据存储至目标数据库中,具体的,从设备接入节点到目标数据库可以经过多个不同的业务系统中的数据处理节点,即经过多次系统之间的数据传输,将最终得到的数据存储至目标数据库中;其中,每个业务请求节点或业务响应节点均具有分库分表、连接重置、限流保护、主从热切换、权限设置、自定义策略等功能。
其中,针对最终得到的处理后的目标数据的传输过程,数据处理节点由业务响应节点变为业务请求节点,该目标数据库为数据处理节点所需请求的业务响应节点;目标数据库的选取过程参见上述目标数据处理节点的选取过程。
在上述应用场景中,在物联网业务系统之间进行数据传输的过程中,通过将分布式的业务请求节点与业务响应节点之间采用直连通信方式进行数据传输,由业务请求节点选取目标响应节点进行数据路由分发,这样能够避免因服务总线异常导致数据传输中断或数据丢失的情况,提高了数据传输效率和数据传输稳定性,缩短了数据在系统之间的数据传输距离,从而缩短了接入分布函数距离。
图2为本说明书一个或多个实施例提供的数据传输方法的第一种流程示意图,图2中的方法能够由图1中的任一分布式的业务请求节点执行,如图2所示,该方法至少包括以下步骤:
S202,获取针对至少一个物联网设备所产生的目标数据;其中,该目标数据包括:原始采集数据、业务处理数据、以及处理结果数据中至少一项;
具体的,上述目标数据可以是物联网设备所采集的原始数据,例如,物联网设备为智能冰箱,对应的,目标数据为用电量或制冷温度等;又如,物联网设备为商超扫码售卖柜,对应的,目标数据为用户所购买的商品信息和用户信息;针对业务请求节点为除设备接入系统之外的中间业务系统的情况,上述目标数据还可以是基于原始数据得到的业务处理数据或处理结果数据。
S204,在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点;
其中,由于业务响应节点与业务请求节点之间采用直连通信方式进行数据传输,需要由业务请求节点直接进行数据路由分发,为了确保业务响应节点的负载均衡,避免多个业务请求节点集中向部分业务响应节点进行数据传输,业务请求节点采用相应的目标节点选取方式,在多个业务响应节点中选取目标业务响应节点。
S206,将至少一个物联网设备的目标数据发送至目标业务响应节点,以使该目标业务响应节点对接收到的目标数据执行相应的数据处理;
具体的,在业务请求节点按照预设选取方式确定出目标业务响应节点后,业务请求节点基于目标业务响应节点的端口号与目标业务响应节点建立通信连接,直接向目标业务响应节点发送数据处理请求,其中,该数据处理请求携带有目标数据,目标业务响应节点响应于该数据处理请求,对接收到的目标数据执行相应的数据处理。
本说明书一个或多个实施例中,获取针对至少一个物联网设备所产生的目标数据;在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点;其中,业务响应节点与业务请求节点之间采用直连通信方式进行数据传输;将该目标数据发送至目标业务响应节点,以使目标业务响应节点对目标数据执行相应的数据处理。通过将分布式的业务请求节点与业务响应节点之间采用直连通信方式进行数据传输,由业务请求节点选取目标响应节点进行数据路由分发,这样能够避免因服务总线异常导致数据传输中断或数据丢失的情况,缩短了数据在系统之间的数据传输距离,提高了数据传输效率和数据传输稳定性。
其中,考虑到物联网设备的类型多样性,业务系统架构的复杂性,业务系统架构包括多个业务系统,例如,智能网关系统、数据解析系统、权限控制系统、基础服务系统、数据存储系统等,即涉及多层数据处理系统结构,从设备接入系统到数据存储系统涉及多次业务系统之间的数据传输,不同的业务系统之间的数据传输可以选用不同的响应节点选取方式,为了实现快速、精准地选取出目标业务响应节点,提高业务请求节点直接进行数据路由分发的适用性,提供多种响应节点选取方式,以便结合不同数据传输场景,选取最合适的响应节点选取方式,基于此,如图3所示,上述S204,在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点,具体包括:
S2041,在预设的多种响应节点选取方式中,确定业务请求节点所需使用的目标节点选取方式;
其中,预设的多种响应节点选取方式可以包括:哈希取模选取响应节点的方式、基于动态增减表征响应节点负载状态的资源量选取响应节点的方式、随机选取响应节点的方式中至少两种。
S2042,利用目标节点选取方式,在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点。
具体的,考虑到由于数据处理类型的不同,可以选用不同的响应节点选取方式,来确定用于为业务请求节点提供数据处理服务的目标业务响应节点,基于此,如图4所示,上述S2041,在预设的多种响应节点选取方式中,确定业务请求节点所需使用的目标节点选取方式,具体包括:
S20411,确定业务请求节点所需请求的业务响应节点的数据处理类型;
S20412,根据确定出的业务响应节点的数据处理类型,在预设的多种响应节点选取方式中,确定业务请求节点所需使用的目标节点选取方式;
具体的,可以预先建立数据处理类型与响应节点选取方式之间的映射关系,根据该映射关系,确定与业务响应节点的数据处理类型对应的响应节点选取方式,例如,若数据处理类型为第一处理类型,如该第一处理类型为数据存储,由于将数据存储至数据库之后,数据查询终端还需准确地从相应的数据库中读取该数据,则目标节点选取方式为哈希取模选取响应节点的方式;又如,若数据处理类型为第二处理类型,如该第二处理类型为数据核验,由于针对数据核验的过程需要确保数据核验的精准度,因此对数据处理节点的性能要求比较高,则目标节点选取方式为基于动态增减表征响应节点负载状态的资源量选取响应节点的方式。
具体的,针对目标业务响应节点的确定过程,若目标节点选取方式为:哈希取模选取响应节点的方式;
对应的,上述S2042,利用目标节点选取方式,在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点,具体包括:
步骤a1,对获取到的物联网设备的目标数据进行哈希处理,得到哈希值;或者,对基于获取到的物联网设备的目标数据所确定的关键特征字段进行哈希处理,得到哈希值;其中,该关键特征字段可以为用于对数据进行分库分表的唯一性标识字段;例如,针对同一个物联网设备的数据存储至同一个数据库中同一个数据表中,该关键特征字段可以是物联网设备的设备标识;
具体的,考虑到针对数据存储的情况,为了后续数据查询终端能够快速、准确地锁定待查询数据所在数据库,在数据存储时进行哈希处理的数据对象为关键特征字段,这样在数据查询时,基于该关键特征字段能够从对应的分库分表中快速、准确查询到所需的数据。
步骤a2,对得到的目标数据对应的哈希值进行取模处理,得到取模后的哈希值;
具体的,对得到的目标数据的哈希值与预设数量进行相除运算,将相除运算得到的余数确定为取模后的哈希值;其中,该预设数量为业务响应节点的总数。
步骤a3,将与取模后的哈希值对应的业务响应节点,确定为用于为业务请求节点提供数据处理服务的目标业务响应节点;
具体的,将节点标识与取模后的哈希值相同的业务响应节点,确定为与取模后的哈希值对应的业务响应节点。
具体的,针对目标业务响应节点的确定过程,若目标节点选取方式为:基于动态增减表征响应节点负载状态的资源量选取响应节点的方式;
对应的,上述S2042,利用目标节点选取方式,在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点,具体包括:
步骤b1,获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量;
具体的,针对每个业务响应节点,动态更新该业务响应节点对应的用于表征响应节点负载状态的资源量;其中,若业务响应节点接收到业务请求,则增加该业务响应节点对应的用于表征响应节点负载状态的资源量,该资源增加量是根据已接收未处理的业务请求中待处理数据量所确定的;若业务响应节点处理完成业务请求,则减少该业务响应节点对应的用于表征响应节点负载状态的资源量,该资源减少量是根据已完成的业务请求中已处理数据量和/或处理中的业务请求中已处理数据量所确定的。
步骤b2,根据各业务响应节点对应的资源量,确定当前负载最小的业务响应节点;
具体的,由于资源量的大小能够表征响应节点负载状态,资源量越大,说明响应节点负载越大,资源量越小,说明响应节点负载越小。
步骤b3,将当前负载最小的业务响应节点确定为用于为业务请求节点提供数据处理服务的目标业务响应节点。
具体的,针对业务响应节点的数据处理性能、响应速度等要求高的情况,优选的,将基于动态增减表征响应节点负载状态的资源量选取响应节点的方式确定为目标节点选取方式,由于利用该节点选取方式确定目标业务响应节点的过程中,是基于各业务响应节点的当前负载情况,选取当前负载最小的业务响应节点作为目标业务响应节点,这样能够确保业务响应节点为业务请求节点提供数据处理服务的响应速度。
其中,针对用于表征响应节点负载状态的资源量的更新过程可以在业务请求节点处执行,对应的,业务响应节点需要向业务请求节点反馈各自的数据处理进度信息和请求接收信息,以使业务请求节点基于各业务响应节点的数据处理进度信息和请求接收信息,更新对应的业务响应节点的表征响应节点负载状态的资源量,基于此,上述步骤b1,获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量,具体包括:
接收各业务响应节点反馈的数据处理进度信息和请求接收信息;其中,该数据处理进度信息包括:已完成的业务请求中已处理数据量和/或处理中的业务请求中已处理数据量,该请求接收信息包括:已接收未处理的业务请求中待处理数据量。
在响应节点资源量记录中,根据接收到的数据处理进度信息和请求接收信息,更新对应的业务响应节点的表征响应节点负载状态的资源量;
具体的,根据已完成的业务请求中已处理数据量和/或处理中的业务请求中已处理数据量,确定资源减少量;以及根据已接收未处理的业务请求中待处理数据量,确定资源增加量;根据该资源减少量和资源增加量,更新对应的业务响应节点的表征响应节点负载状态的资源量。
在具体实施时,可以采用注水放水的方式记录各业务响应节点对应的资源量,根据资源减少量,从虚拟盛水容器中放水;对应的,根据资源增加量,从虚拟盛水容器中注水,这样直接将各业务响应节点对应的虚拟盛水容器中的水面高低进行对比,即可确定出当前负载最小的业务响应节点。
从响应节点资源量记录中,读取各业务响应节点的用于表征响应节点负载状态的资源量。
其中,针对用于表征响应节点负载状态的资源量的更新过程还可以在业务响应节点处执行,对应的,业务响应节点将更新后的资源量信息反馈至业务请求节点,以使业务请求节点基于各业务响应节点的最新的资源量信息选取目标业务响应节点,基于此,上述步骤b1,获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量,具体包括:
接收各业务响应节点发送的负载状态更新请求,其中,该负载状态更新请求携带有响应节点标识和最新的用于表征当前负载状态的资源量;
具体的,根据已完成的业务请求中已处理数据量和/或处理中的业务请求中已处理数据量,确定资源减少量;以及根据已接收未处理的业务请求中待处理数据量,确定资源增加量;根据该资源减少量和资源增加量,更新对应的业务响应节点的表征响应节点负载状态的资源量。
根据最新的用于表征当前负载状态的资源量,更新本地存储的响应节点资源量记录中与上述响应节点标识对应的表征响应节点负载状态的历史资源量;
在具体实施时,可以采用注水放水的方式记录各业务响应节点对应的资源量,根据资源减少量,从虚拟盛水容器中放水;对应的,根据资源增加量,从虚拟盛水容器中注水,这样直接将各业务响应节点对应的虚拟盛水容器中的水面高低进行对比,即可确定出当前负载最小的业务响应节点。
从更新后的响应节点资源量记录中,读取各业务响应节点的用于表征响应节点负载状态的资源量。
进一步的,考虑到针对业务请求节点和业务响应节点比较多的情况,如果每个业务请求节点均基于所有业务请求节点对业务响应节点的请求调用,更新各业务响应节点对应的资源量,这样势必会额外增加业务请求节点的负担;又考虑到业务响应节点的数据处理速度能够反映其他业务请求节点的请求调用情况,例如,多个业务请求节点同时调用同一业务响应节点,将影响该业务响应节点的数据处理速度,因此,可以不关注其他业务请求节点向业务响应节点发送调用请求的情况,直接参考业务响应节点返回的数据处理反馈信息即可,基于此,为了减少业务请求节点由于维护响应节点资源量记录所产生的额外负担,业务请求节点在每次对目标业务响应节点进行请求调用后,基于请求处理的目标数据的数据量和目标业务响应节点返回的数据处理反馈信息,动态更新本地存储的响应节点资源量记录中该目标业务响应节点对应的资源量,以便在下一次选取目标业务响应节点时参考更新后的响应节点资源量记录,具体的,在S206,将至少一个物联网设备的目标数据发送至目标业务响应节点之后,还包括:
在本地存储的响应节点资源量记录中,基于目标数据的数据量,增加目标业务响应节点对应的用于表征响应节点负载状态的资源量;以及,
接收目标业务响应节点返回的数据处理反馈信息;其中,该数据处理反馈信息包括:数据处理完成、数据处理异常、处理开始时间戳、以及处理完成时间戳中至少一项;
在最新的响应节点资源量记录中,根据接收到的数据处理反馈信息,减少或保持目标业务响应节点对应的用于表征响应节点负载状态的资源量;
对应的,上述步骤b1,获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量,具体包括:
从最新的响应节点资源量记录中,读取各业务响应节点的用于表征响应节点负载状态的资源量。
具体的,根据目标数据的数据量,确定资源增加量;以及根据接收到的数据处理反馈信息,确定资源减少量;根据该资源减少量和资源增加量,更新目标业务响应节点的表征响应节点负载状态的资源量。
具体的,基于数据处理反馈信息确定目标响应节点的实际数据处理速度,若该实际数据处理速度大于或等于第一速度阈值,则将第一数值确定为资源减少量,若该实际数据处理速度小于第一速度阈值且大于第二数据阈值,则将第二数值确定为资源减少量,若该实际数据处理速度小于或等于第二速度阈值,则将第三数值确定为资源减少量;
其中,上述第二速度阈值可以为预设的基准数据处理速度,上述第一速度阈值为理想数据处理速度,该第二速度阈值小于第一速度阈值;第一数值大于第二数值,第二数值大于第三数值,该第三数值可以为零(即资源量保持不变)或负数(即需要增加资源量),该第二数值可以与本次资源增加量相等;
若实际数据处理速度小于或等于第二速度阈值,则说明业务响应节点的数据处理性能未达标,当前负载可能过高;
若实际数据处理速度小于第一速度阈值且大于第二速度阈值,则说明业务响应节点的数据处理性能正常,当前负载均衡;
若实际数据处理速度大于或等于第一速度阈值,则说明业务响应节点的数据处理性能超标,当前负载偏低,能够承担更多的数据处理量。
在具体实施时,业务请求节点可以采用注水放水的方式记录各业务响应节点对应的资源量,根据资源减少量,从虚拟盛水容器中放水;对应的,根据资源增加量,从虚拟盛水容器中注水,这样直接将各业务响应节点对应的虚拟盛水容器中的水面高低进行对比,即可确定出当前负载最小的业务响应节点。
具体的,针对目标业务响应节点的确定过程,还可以采用随机路由分发的方式进行数据传输,即若目标节点选取方式为:随机选取响应节点的方式;
对应的,上述S2042,利用目标节点选取方式,在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点,具体包括:
步骤c1,在多个业务响应节点的节点标识中,随机选取至少一个节点标识;
步骤c2,将选取的至少一个节点标识对应的业务响应节点,确定为用于为业务请求节点提供数据处理服务的目标业务响应节点。
另外,还可以利用轮训路由方式,则个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点,具体的,业务请求节点依次轮训向N个业务响应节点发送数据处理请求。
进一步的,针对业务响应节点的数据处理类型为数据存储的情况,即上述业务响应节点为数据库服务器;
对应的,上述S20412,根据确定出的业务响应节点的数据处理类型,在预设的多种响应节点选取方式中,确定业务请求节点所需使用的目标节点选取方式,具体包括:
将哈希取模选取响应节点的方式,确定为业务请求节点所需使用的目标节点选取方式。
具体的,考虑到针对数据存储的情况,为了后续数据查询终端能够快速、准确地锁定待查询数据所在数据库,在数据存储时进行哈希处理的数据对象为关键特征字段,这样在数据查询时,基于该关键特征字段能够快速、准确查询到所需的数据。
具体的,在S204,在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点之前,还包括:
基于物联网设备的目标数据,确定用于哈希处理的关键特征字段;
将确定出的关键特征字段的标识信息发送至数据查询终端,以使该数据查询终端基于该关键特征字段的哈希值、从对应的数据库服务器中读取所需的业务数据;
对应的,上述S2042,利用目标节点选取方式,在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点,具体包括:
步骤a1,对基于获取到的物联网设备的目标数据所确定的关键特征字段进行哈希处理,得到哈希值;其中,该关键特征字段可以为用于对数据进行分库分表的唯一性标识字段;
步骤a2,对得到的目标数据对应的哈希值进行取模处理,得到取模后的哈希值;
步骤a3,将与取模后的哈希值对应的业务响应节点,确定为用于为业务请求节点提供数据处理服务的目标业务响应节点;
具体的,利用哈希取模选取响应节点的方式,选取目标业务响应节点,实现了将数据分散到多个业务响应节点,达到热点数据分散的目的,将热点数据拆分存储在不同的库不同的表中,减轻数据库并发更新热点带来的耗时升高和应用连接等待时能保证业务能够正常访问其他表。
本说明书一个或多个实施例中的数据传输方法,获取针对至少一个物联网设备所产生的目标数据;在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点;其中,业务响应节点与业务请求节点之间采用直连通信方式进行数据传输;将该目标数据发送至目标业务响应节点,以使目标业务响应节点对目标数据执行相应的数据处理。通过将分布式的业务请求节点与业务响应节点之间采用直连通信方式进行数据传输,由业务请求节点选取目标响应节点进行数据路由分发,这样能够避免因服务总线异常导致数据传输中断或数据丢失的情况,缩短了数据在系统之间的数据传输距离,提高了数据传输效率和数据传输稳定性。
对应上述图1至图4描述的数据传输方法,基于相同的技术构思,本说明书一个或多个实施例还提供了一种数据传输装置,图5为本说明书一个或多个实施例提供的数据传输装置的模块组成示意图,该装置设置于分布式的业务请求节点,用于执行图1至图4描述的数据传输方法,如图5所示,该装置包括:
目标数据获取模块502,用于获取针对至少一个物联网设备所产生的目标数据;其中,所述目标数据包括:原始采集数据、业务处理数据、以及处理结果数据中至少一项;
响应节点选取模块504,用于在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点;其中,所述业务响应节点与所述业务请求节点之间采用直连通信方式进行数据传输;
目标数据传输模块506,用于将所述至少一个物联网设备的所述目标数据发送至所述目标业务响应节点,以使所述目标业务响应节点对所述目标数据执行相应的数据处理。
本说明书一个或多个实施例中,通过将分布式的业务请求节点与业务响应节点之间采用直连通信方式进行数据传输,由业务请求节点选取目标响应节点进行数据路由分发,这样能够避免因服务总线异常导致数据传输中断或数据丢失的情况,缩短了数据在系统之间的数据传输距离,提高了数据传输效率和数据传输稳定性。
可选地,所述响应节点选取模块504,具体用于:
在预设的多种响应节点选取方式中,确定所述业务请求节点所需使用的目标节点选取方式;
利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
可选地,所述响应节点选取模块504,进一步具体用于:
确定所述业务请求节点所需请求的业务响应节点的数据处理类型;
根据所述数据处理类型,在预设的多种响应节点选取方式中,确定所述业务请求节点所需使用的目标节点选取方式。
可选地,所述目标节点选取方式包括:哈希取模选取响应节点的方式;
所述响应节点选取模块504,进一步具体用于:
对所述物联网设备的所述目标数据进行哈希处理,得到哈希值;或者,对基于所述物联网设备的所述目标数据所确定的关键特征字段进行哈希处理,得到哈希值;
对所述目标数据对应的所述哈希值进行取模处理,得到取模后的哈希值;
将与所述取模后的哈希值对应的业务响应节点,确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
可选地,所述目标节点选取方式包括:基于动态增减表征响应节点负载状态的资源量选取响应节点的方式;
所述响应节点选取模块504,进一步具体用于:
获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量;
根据各所述业务响应节点的所述资源量,确定当前负载最小的业务响应节点;
将当前负载最小的所述业务响应节点确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
可选地,所述响应节点选取模块504,更进一步具体用于:
接收各业务响应节点反馈的数据处理进度信息和请求接收信息;
在响应节点资源量记录中,根据所述数据处理进度信息和所述请求接收信息,更新对应的所述业务响应节点的表征响应节点负载状态的资源量;
从所述响应节点资源量记录中,读取各所述业务响应节点的用于表征响应节点负载状态的资源量。
可选地,所述响应节点选取模块504,更进一步具体用于:
接收各业务响应节点发送的负载状态更新请求,其中,所述负载状态更新请求携带有响应节点标识和最新的用于表征当前负载状态的资源量;
根据最新的所述资源量,更新本地存储的响应节点资源量记录中与所述响应节点标识对应的表征响应节点负载状态的历史资源量;
从更新后的所述响应节点资源量记录中,读取各所述业务响应节点的用于表征响应节点负载状态的资源量。
可选地,上述装置还包括:节点资源量更新模块,用于:
在本地存储的响应节点资源量记录中,基于所述目标数据的数据量,增加所述目标业务响应节点对应的用于表征响应节点负载状态的资源量;以及,
接收所述目标业务响应节点返回的数据处理反馈信息;其中,所述数据处理反馈信息包括:数据处理完成、数据处理异常、处理开始时间戳、以及处理完成时间戳中至少一项;
在最新的所述响应节点资源量记录中,根据所述数据处理反馈信息,减少或保持所述目标业务响应节点对应的用于表征响应节点负载状态的资源量;
对应的,所述响应节点选取模块504,还进一步具体用于:
从最新的所述响应节点资源量记录中,读取各所述业务响应节点的用于表征响应节点负载状态的资源量。
可选地,所述目标节点选取方式包括:随机选取响应节点的方式;
所述响应节点选取模块504,进一步具体用于:
在多个业务响应节点的节点标识中,随机选取至少一个节点标识;
将选取的所述至少一个节点标识对应的业务响应节点,确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
可选地,所述数据处理类型为数据存储,所述业务响应节点为数据库服务器;
所述响应节点选取模块504,更进一步具体用于:
将哈希取模选取响应节点的方式,确定为所述业务请求节点所需使用的目标节点选取方式。
可选地,所述装置还包括:字段标识发送模块,用于:
基于所述物联网设备的所述目标数据,确定用于哈希处理的关键特征字段;
将所述关键特征字段的标识信息发送至数据查询终端,以使所述数据查询终端基于与所述标识信息对应的所述关键特征字段的哈希值、从对应的数据库服务器中读取所需的业务数据。
本说明书一个或多个实施例中的数据传输装置,获取针对至少一个物联网设备所产生的目标数据;在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点;其中,业务响应节点与业务请求节点之间采用直连通信方式进行数据传输;将该目标数据发送至目标业务响应节点,以使目标业务响应节点对目标数据执行相应的数据处理。通过将分布式的业务请求节点与业务响应节点之间采用直连通信方式进行数据传输,由业务请求节点选取目标响应节点进行数据路由分发,这样能够避免因服务总线异常导致数据传输中断或数据丢失的情况,缩短了数据在系统之间的数据传输距离,提高了数据传输效率和数据传输稳定性。
进一步地,对应上述图1至图4所示的方法,基于相同的技术构思,本说明书一个或多个实施例还提供了一种数据传输设备,该设备用于执行上述的数据传输方法,如图6所示。
数据传输设备可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上的处理器601和存储器602,存储器602中可以存储有一个或一个以上存储应用程序或数据。其中,存储器602可以是短暂存储或持久存储。存储在存储器602的应用程序可以包括一个或一个以上模块(图示未示出),每个模块可以包括对数据传输设备中的一系列计算机可执行指令。更进一步地,处理器601可以设置为与存储器602通信,在数据传输设备上执行存储器602中的一系列计算机可执行指令。数据传输设备还可以包括一个或一个以上电源603,一个或一个以上有线或无线网络接口604,一个或一个以上输入输出接口605,一个或一个以上键盘606等。
在一个具体的实施例中,数据传输设备包括有存储器,以及一个或一个以上的程序,其中一个或者一个以上程序存储于存储器中,且一个或者一个以上程序可以包括一个或一个以上模块,且每个模块可以包括对数据传输设备中的一系列计算机可执行指令,且经配置以由一个或者一个以上处理器执行该一个或者一个以上程序包含用于进行以下计算机可执行指令:
获取针对至少一个物联网设备所产生的目标数据;其中,所述目标数据包括:原始采集数据、业务处理数据、以及处理结果数据中至少一项;
在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点;其中,所述业务响应节点与所述业务请求节点之间采用直连通信方式进行数据传输;
将所述至少一个物联网设备的所述目标数据发送至所述目标业务响应节点,以使所述目标业务响应节点对所述目标数据执行相应的数据处理。
本说明书一个或多个实施例中,通过将分布式的业务请求节点与业务响应节点之间采用直连通信方式进行数据传输,由业务请求节点选取目标响应节点进行数据路由分发,这样能够避免因服务总线异常导致数据传输中断或数据丢失的情况,缩短了数据在系统之间的数据传输距离,提高了数据传输效率和数据传输稳定性。
可选地,计算机可执行指令在被执行时,所述在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点,包括:
在预设的多种响应节点选取方式中,确定所述业务请求节点所需使用的目标节点选取方式;
利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
可选地,计算机可执行指令在被执行时,所述在预设的多种响应节点选取方式中,确定所述业务请求节点所需使用的目标节点选取方式,包括:
确定所述业务请求节点所需请求的业务响应节点的数据处理类型;
根据所述数据处理类型,在预设的多种响应节点选取方式中,确定所述业务请求节点所需使用的目标节点选取方式。
可选地,计算机可执行指令在被执行时,所述目标节点选取方式包括:哈希取模选取响应节点的方式;
所述利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点,包括:
对所述物联网设备的所述目标数据进行哈希处理,得到哈希值;或者,对基于所述物联网设备的所述目标数据所确定的关键特征字段进行哈希处理,得到哈希值;
对所述目标数据对应的所述哈希值进行取模处理,得到取模后的哈希值;
将与所述取模后的哈希值对应的业务响应节点,确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
可选地,计算机可执行指令在被执行时,所述目标节点选取方式包括:基于动态增减表征响应节点负载状态的资源量选取响应节点的方式;
所述利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点,包括:
获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量;
根据各所述业务响应节点的所述资源量,确定当前负载最小的业务响应节点;
将当前负载最小的所述业务响应节点确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
可选地,计算机可执行指令在被执行时,所述获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量,包括:
接收各业务响应节点反馈的数据处理进度信息和请求接收信息;
在响应节点资源量记录中,根据所述数据处理进度信息和所述请求接收信息,更新对应的所述业务响应节点的表征响应节点负载状态的资源量;
从所述响应节点资源量记录中,读取各所述业务响应节点的用于表征响应节点负载状态的资源量。
可选地,计算机可执行指令在被执行时,所述获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量,包括:
接收各业务响应节点发送的负载状态更新请求,其中,所述负载状态更新请求携带有响应节点标识和最新的用于表征当前负载状态的资源量;
根据最新的所述资源量,更新本地存储的响应节点资源量记录中与所述响应节点标识对应的表征响应节点负载状态的历史资源量;
从更新后的所述响应节点资源量记录中,读取各所述业务响应节点的用于表征响应节点负载状态的资源量。
可选地,计算机可执行指令在被执行时,在将所述至少一个物联网设备的所述目标数据发送至所述目标业务响应节点之后,还包括:
在本地存储的响应节点资源量记录中,基于所述目标数据的数据量,增加所述目标业务响应节点对应的用于表征响应节点负载状态的资源量;以及,
接收所述目标业务响应节点返回的数据处理反馈信息;其中,所述数据处理反馈信息包括:数据处理完成、数据处理异常、处理开始时间戳、以及处理完成时间戳中至少一项;
在最新的所述响应节点资源量记录中,根据所述数据处理反馈信息,减少或保持所述目标业务响应节点对应的用于表征响应节点负载状态的资源量;
对应的,所述获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量,包括:
从最新的所述响应节点资源量记录中,读取各所述业务响应节点的用于表征响应节点负载状态的资源量。
可选地,计算机可执行指令在被执行时,所述目标节点选取方式包括:随机选取响应节点的方式;
所述利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点,包括:
在多个业务响应节点的节点标识中,随机选取至少一个节点标识;
将选取的所述至少一个节点标识对应的业务响应节点,确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
可选地,计算机可执行指令在被执行时,所述数据处理类型为数据存储,所述业务响应节点为数据库服务器;
所述根据所述数据处理类型,在预设的多种响应节点选取方式中,确定所述业务请求节点所需使用的目标节点选取方式,包括:
将哈希取模选取响应节点的方式,确定为所述业务请求节点所需使用的目标节点选取方式。
可选地,计算机可执行指令在被执行时,在在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点之前,还包括:
基于所述物联网设备的所述目标数据,确定用于哈希处理的关键特征字段;
将所述关键特征字段的标识信息发送至数据查询终端,以使所述数据查询终端基于与所述标识信息对应的所述关键特征字段的哈希值、从对应的数据库服务器中读取所需的业务数据。
本说明书一个或多个实施例中的数据传输设备,获取针对至少一个物联网设备所产生的目标数据;在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点;其中,业务响应节点与业务请求节点之间采用直连通信方式进行数据传输;将该目标数据发送至目标业务响应节点,以使目标业务响应节点对目标数据执行相应的数据处理。通过将分布式的业务请求节点与业务响应节点之间采用直连通信方式进行数据传输,由业务请求节点选取目标响应节点进行数据路由分发,这样能够避免因服务总线异常导致数据传输中断或数据丢失的情况,缩短了数据在系统之间的数据传输距离,提高了数据传输效率和数据传输稳定性。
需要说明的是,本说明书中关于数据传输设备的实施例与本说明书中关于数据传输方法的实施例基于同一发明构思,因此该实施例的具体实施可以参见前述对应的数据传输方法的实施,重复之处不再赘述。
进一步地,对应上述图1至图4所示的方法,基于相同的技术构思,本说明书一个或多个实施例还提供了一种存储介质,用于存储计算机可执行指令,一种具体的实施例中,该存储介质可以为U盘、光盘、硬盘等,该存储介质存储的计算机可执行指令在被处理器执行时,能实现以下流程:
获取针对至少一个物联网设备所产生的目标数据;其中,所述目标数据包括:原始采集数据、业务处理数据、以及处理结果数据中至少一项;
在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点;其中,所述业务响应节点与所述业务请求节点之间采用直连通信方式进行数据传输;
将所述至少一个物联网设备的所述目标数据发送至所述目标业务响应节点,以使所述目标业务响应节点对所述目标数据执行相应的数据处理。
本说明书一个或多个实施例中,通过将分布式的业务请求节点与业务响应节点之间采用直连通信方式进行数据传输,由业务请求节点选取目标响应节点进行数据路由分发,这样能够避免因服务总线异常导致数据传输中断或数据丢失的情况,缩短了数据在系统之间的数据传输距离,提高了数据传输效率和数据传输稳定性。
可选地,该存储介质存储的计算机可执行指令在被处理器执行时,所述在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点,包括:
在预设的多种响应节点选取方式中,确定所述业务请求节点所需使用的目标节点选取方式;
利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
可选地,该存储介质存储的计算机可执行指令在被处理器执行时,所述在预设的多种响应节点选取方式中,确定所述业务请求节点所需使用的目标节点选取方式,包括:
确定所述业务请求节点所需请求的业务响应节点的数据处理类型;
根据所述数据处理类型,在预设的多种响应节点选取方式中,确定所述业务请求节点所需使用的目标节点选取方式。
可选地,该存储介质存储的计算机可执行指令在被处理器执行时,所述目标节点选取方式包括:哈希取模选取响应节点的方式;
所述利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点,包括:
对所述物联网设备的所述目标数据进行哈希处理,得到哈希值;或者,对基于所述物联网设备的所述目标数据所确定的关键特征字段进行哈希处理,得到哈希值;
对所述目标数据对应的所述哈希值进行取模处理,得到取模后的哈希值;
将与所述取模后的哈希值对应的业务响应节点,确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
可选地,该存储介质存储的计算机可执行指令在被处理器执行时,所述目标节点选取方式包括:基于动态增减表征响应节点负载状态的资源量选取响应节点的方式;
所述利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点,包括:
获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量;
根据各所述业务响应节点的所述资源量,确定当前负载最小的业务响应节点;
将当前负载最小的所述业务响应节点确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
可选地,该存储介质存储的计算机可执行指令在被处理器执行时,所述获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量,包括:
接收各业务响应节点反馈的数据处理进度信息和请求接收信息;
在响应节点资源量记录中,根据所述数据处理进度信息和所述请求接收信息,更新对应的所述业务响应节点的表征响应节点负载状态的资源量;
从所述响应节点资源量记录中,读取各所述业务响应节点的用于表征响应节点负载状态的资源量。
可选地,该存储介质存储的计算机可执行指令在被处理器执行时,所述获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量,包括:
接收各业务响应节点发送的负载状态更新请求,其中,所述负载状态更新请求携带有响应节点标识和最新的用于表征当前负载状态的资源量;
根据最新的所述资源量,更新本地存储的响应节点资源量记录中与所述响应节点标识对应的表征响应节点负载状态的历史资源量;
从更新后的所述响应节点资源量记录中,读取各所述业务响应节点的用于表征响应节点负载状态的资源量。
可选地,该存储介质存储的计算机可执行指令在被处理器执行时,在将所述至少一个物联网设备的所述目标数据发送至所述目标业务响应节点之后,还包括:
在本地存储的响应节点资源量记录中,基于所述目标数据的数据量,增加所述目标业务响应节点对应的用于表征响应节点负载状态的资源量;以及,
接收所述目标业务响应节点返回的数据处理反馈信息;其中,所述数据处理反馈信息包括:数据处理完成、数据处理异常、处理开始时间戳、以及处理完成时间戳中至少一项;
在最新的所述响应节点资源量记录中,根据所述数据处理反馈信息,减少或保持所述目标业务响应节点对应的用于表征响应节点负载状态的资源量;
对应的,所述获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量,包括:
从最新的所述响应节点资源量记录中,读取各所述业务响应节点的用于表征响应节点负载状态的资源量。
可选地,该存储介质存储的计算机可执行指令在被处理器执行时,所述目标节点选取方式包括:随机选取响应节点的方式;
所述利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点,包括:
在多个业务响应节点的节点标识中,随机选取至少一个节点标识;
将选取的所述至少一个节点标识对应的业务响应节点,确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
可选地,该存储介质存储的计算机可执行指令在被处理器执行时,所述数据处理类型为数据存储,所述业务响应节点为数据库服务器;
所述根据所述数据处理类型,在预设的多种响应节点选取方式中,确定所述业务请求节点所需使用的目标节点选取方式,包括:
将哈希取模选取响应节点的方式,确定为所述业务请求节点所需使用的目标节点选取方式。
可选地,该存储介质存储的计算机可执行指令在被处理器执行时,在在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点之前,还包括:
基于所述物联网设备的所述目标数据,确定用于哈希处理的关键特征字段;
将所述关键特征字段的标识信息发送至数据查询终端,以使所述数据查询终端基于与所述标识信息对应的所述关键特征字段的哈希值、从对应的数据库服务器中读取所需的业务数据。
本说明书一个或多个实施例中的存储介质存储的计算机可执行指令在被处理器执行时,获取针对至少一个物联网设备所产生的目标数据;在多个业务响应节点中,选取用于为业务请求节点提供数据处理服务的目标业务响应节点;其中,业务响应节点与业务请求节点之间采用直连通信方式进行数据传输;将该目标数据发送至目标业务响应节点,以使目标业务响应节点对目标数据执行相应的数据处理。通过将分布式的业务请求节点与业务响应节点之间采用直连通信方式进行数据传输,由业务请求节点选取目标响应节点进行数据路由分发,这样能够避免因服务总线异常导致数据传输中断或数据丢失的情况,缩短了数据在系统之间的数据传输距离,提高了数据传输效率和数据传输稳定性。
需要说明的是,本说明书中关于存储介质的实施例与本说明书中关于数据传输方法的实施例基于同一发明构思,因此该实施例的具体实施可以参见前述对应的数据传输方法的实施,重复之处不再赘述。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
在20世纪90年代,对于一个技术的改进可以很明显地区分是硬件上的改进(例如,对二极管、晶体管、开关等电路结构的改进)还是软件上的改进(对于方法流程的改进)。然而,随着技术的发展,当今的很多方法流程的改进已经可以视为硬件电路结构的直接改进。设计人员几乎都通过将改进的方法流程编程到硬件电路中来得到相应的硬件电路结构。因此,不能说一个方法流程的改进就不能用硬件实体模块来实现。例如,可编程逻辑器件(Programmable Logic Device,PLD)(例如现场可编程门阵列(Field Programmable GateArray,FPGA))就是这样一种集成电路,其逻辑功能由用户对器件编程来确定。由设计人员自行编程来把一个数字系统“集成”在一片PLD上,而不需要请芯片制造厂商来设计和制作专用的集成电路芯片。而且,如今,取代手工地制作集成电路芯片,这种编程也多半改用“逻辑编译器(logic compiler)”软件来实现,它与程序开发撰写时所用的软件编译器相类似,而要编译之前的原始代码也得用特定的编程语言来撰写,此称之为硬件描述语言(Hardware Description Language,HDL),而HDL也并非仅有一种,而是有许多种,如ABEL(Advanced Boolean Expression Language)、AHDL(Altera Hardware DescriptionLanguage)、Confluence、CUPL(Cornell University Programming Language)、HD Cal、JHDL(Java Hardware Description Language)、Lava、Lola、My HDL、PALASM、RHDL(RubyHardware Description Language)等,目前最普遍使用的是VHDL(Very-High-SpeedIntegrated Circuit Hardware Description Language)与Verilog。本领域技术人员也应该清楚,只需要将方法流程用上述几种硬件描述语言稍作逻辑编程并编程到集成电路中,就可以很容易得到实现该逻辑方法流程的硬件电路。
控制器可以按任何适当的方式实现,例如,控制器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(Application Specific Integrated Circuit,ASIC)、可编程逻辑控制器和嵌入微控制器的形式,控制器的例子包括但不限于以下微控制器:ARC 625D、Atmel AT91SAM、Microchip PIC18F26K20以及Silicone Labs C8051F320,存储器控制器还可以被实现为存储器的控制逻辑的一部分。本领域技术人员也知道,除了以纯计算机可读程序代码方式实现控制器以外,完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件,而对其内包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至,可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
上述实施例阐明的系统、装置、模块或单元,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机。具体的,计算机例如可以为个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任何设备的组合。
为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本说明书一个或多个时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本领域内的技术人员应明白,本说明书一个或多个的实施例可提供为方法、系统、或计算机程序产品。因此,本说明书一个或多个可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本说明书一个或多个可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本说明书一个或多个是参照根据本说明书一个或多个实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白,本说明书一个或多个的实施例可提供为方法、系统或计算机程序产品。因此,本说明书一个或多个可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本说明书一个或多个可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本说明书一个或多个可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本说明书一个或多个,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本说明书一个或多个的实施例而已,并不用于限制本说明书一个或多个。对于本领域技术人员来说,本说明书一个或多个可以有各种更改和变化。凡在本说明书一个或多个的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本说明书一个或多个的权利要求范围之内。

Claims (13)

1.一种数据传输方法,应用于分布式的业务请求节点,所述方法包括:
获取针对至少一个物联网设备所产生的目标数据;其中,所述目标数据包括:原始采集数据、业务处理数据、以及处理结果数据中至少一项;
在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点;其中,所述业务响应节点与所述业务请求节点之间采用直连通信方式进行数据传输;
将所述至少一个物联网设备的所述目标数据发送至所述目标业务响应节点,以使所述目标业务响应节点对所述目标数据执行相应的数据处理;
所述在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点,包括:
确定所述业务请求节点所需请求的业务响应节点的数据处理类型;
根据所述数据处理类型以及预先建立的数据处理类型与响应节点选取方式之间的映射关系,确定所述业务请求节点所需使用的目标节点选取方式;
利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点;
所述数据处理类型为数据存储,所述业务响应节点为数据库服务器;
所述根据所述数据处理类型,在预设的多种响应节点选取方式中,确定所述业务请求节点所需使用的目标节点选取方式,包括:
将哈希取模选取响应节点的方式,确定为所述业务请求节点所需使用的目标节点选取方式。
2.根据权利要求1所述的方法,其中,所述目标节点选取方式包括:哈希取模选取响应节点的方式;
所述利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点,包括:
对所述物联网设备的所述目标数据进行哈希处理,得到哈希值;或者,对基于所述物联网设备的所述目标数据所确定的关键特征字段进行哈希处理,得到哈希值;
对所述目标数据对应的所述哈希值进行取模处理,得到取模后的哈希值;
将与所述取模后的哈希值对应的业务响应节点,确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
3.根据权利要求1所述的方法,其中,所述目标节点选取方式包括:基于动态增减表征响应节点负载状态的资源量选取响应节点的方式;
所述利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点,包括:
获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量;
根据各所述业务响应节点的所述资源量,确定当前负载最小的业务响应节点;
将当前负载最小的所述业务响应节点确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
4.根据权利要求3所述的方法,其中,所述获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量,包括:
接收各业务响应节点反馈的数据处理进度信息和请求接收信息;
在响应节点资源量记录中,根据所述数据处理进度信息和所述请求接收信息,更新对应的所述业务响应节点的表征响应节点负载状态的资源量;
从所述响应节点资源量记录中,读取各所述业务响应节点的用于表征响应节点负载状态的资源量。
5.根据权利要求3所述的方法,其中,所述获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量,包括:
接收各业务响应节点发送的负载状态更新请求,其中,所述负载状态更新请求携带有响应节点标识和最新的用于表征当前负载状态的资源量;
根据最新的所述资源量,更新本地存储的响应节点资源量记录中与所述响应节点标识对应的表征响应节点负载状态的历史资源量;
从更新后的所述响应节点资源量记录中,读取各所述业务响应节点的用于表征响应节点负载状态的资源量。
6.根据权利要求3所述的方法,其中,在将所述至少一个物联网设备的所述目标数据发送至所述目标业务响应节点之后,还包括:
在本地存储的响应节点资源量记录中,基于所述目标数据的数据量,增加所述目标业务响应节点对应的用于表征响应节点负载状态的资源量;以及,
接收所述目标业务响应节点返回的数据处理反馈信息;其中,所述数据处理反馈信息包括:数据处理完成、数据处理异常、处理开始时间戳、以及处理完成时间戳中至少一项;
在最新的所述响应节点资源量记录中,根据所述数据处理反馈信息,减少或保持所述目标业务响应节点对应的用于表征响应节点负载状态的资源量;
对应的,所述获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量,包括:
从最新的所述响应节点资源量记录中,读取各所述业务响应节点的用于表征响应节点负载状态的资源量。
7.根据权利要求1所述的方法,其中,所述目标节点选取方式包括:随机选取响应节点的方式;
所述利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点,包括:
在多个业务响应节点的节点标识中,随机选取至少一个节点标识;
将选取的所述至少一个节点标识对应的业务响应节点,确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
8.根据权利要求1所述的方法,其中,在在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点之前,还包括:
基于所述物联网设备的所述目标数据,确定用于哈希处理的关键特征字段;
将所述关键特征字段的标识信息发送至数据查询终端,以使所述数据查询终端基于与所述标识信息对应的所述关键特征字段的哈希值、从对应的数据库服务器中读取所需的业务数据。
9.一种数据传输装置,设置于分布式的业务请求节点,所述装置包括:
目标数据获取模块,用于获取针对至少一个物联网设备所产生的目标数据;其中,所述目标数据包括:原始采集数据、业务处理数据、以及处理结果数据中至少一项;
响应节点选取模块,用于在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点;其中,所述业务响应节点与所述业务请求节点之间采用直连通信方式进行数据传输;
目标数据传输模块,用于将所述至少一个物联网设备的所述目标数据发送至所述目标业务响应节点,以使所述目标业务响应节点对所述目标数据执行相应的数据处理;
其中,所述响应节点选取模块,具体用于:
确定所述业务请求节点所需请求的业务响应节点的数据处理类型;
根据所述数据处理类型以及预先建立的数据处理类型与响应节点选取方式之间的映射关系,确定所述业务请求节点所需使用的目标节点选取方式;
利用所述目标节点选取方式,在多个业务响应节点中,选取用于为所述业务请求节点提供数据处理服务的目标业务响应节点;
所述数据处理类型为数据存储,所述业务响应节点为数据库服务器;
所述响应节点选取模块,还用于将哈希取模选取响应节点的方式,确定为所述业务请求节点所需使用的目标节点选取方式。
10.根据权利要求9所述的装置,其中,所述目标节点选取方式包括:哈希取模选取响应节点的方式;
所述响应节点选取模块,进一步具体用于:
对所述物联网设备的所述目标数据进行哈希处理,得到哈希值;或者,对基于所述物联网设备的所述目标数据所确定的关键特征字段进行哈希处理,得到哈希值;
对所述目标数据对应的所述哈希值进行取模处理,得到取模后的哈希值;
将与所述取模后的哈希值对应的业务响应节点,确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
11.根据权利要求9所述的装置,其中,所述目标节点选取方式包括:基于动态增减表征响应节点负载状态的资源量选取响应节点的方式;
所述响应节点选取模块,进一步具体用于:
获取针对各业务响应节点记录的用于表征响应节点负载状态的资源量;
根据各所述业务响应节点的所述资源量,确定当前负载最小的业务响应节点;
将当前负载最小的所述业务响应节点确定为用于为所述业务请求节点提供数据处理服务的目标业务响应节点。
12.一种数据传输设备,包括:处理器,以及被安排成存储计算机可执行指令的存储器;所述计算机可执行指令在被执行时使所述处理器实现上述权利要求1至8中任一项所述的方法的步骤。
13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述权利要求1至8中任一项所述的方法的步骤。
CN202010831723.1A 2020-08-18 2020-08-18 一种数据传输方法及装置 Active CN112003922B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010831723.1A CN112003922B (zh) 2020-08-18 2020-08-18 一种数据传输方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010831723.1A CN112003922B (zh) 2020-08-18 2020-08-18 一种数据传输方法及装置

Publications (2)

Publication Number Publication Date
CN112003922A CN112003922A (zh) 2020-11-27
CN112003922B true CN112003922B (zh) 2023-06-06

Family

ID=73473834

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010831723.1A Active CN112003922B (zh) 2020-08-18 2020-08-18 一种数据传输方法及装置

Country Status (1)

Country Link
CN (1) CN112003922B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112950370A (zh) * 2021-02-25 2021-06-11 未鲲(上海)科技服务有限公司 业务处理方法、装置、设备及存储介质
CN113422798B (zh) * 2021-05-11 2022-09-16 华为技术有限公司 一种网络数据传输方法、装置、系统以及计算机
CN115695434A (zh) * 2022-09-28 2023-02-03 聚好看科技股份有限公司 一种负载均衡方法、装置和电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104270322A (zh) * 2014-10-30 2015-01-07 中电海康集团有限公司 面向物联网设备接入处理平台的自适应负载均衡调度机制
CN106161552A (zh) * 2015-04-16 2016-11-23 国家电网公司 一种海量数据环境下负载均衡方法及系统
CN108387953A (zh) * 2018-02-22 2018-08-10 苏州大学 一种分布式的气象数据采集系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170337275A1 (en) * 2016-05-17 2017-11-23 International Business Machines Corporation Allocating computing resources
CN109246229B (zh) * 2018-09-28 2021-08-27 网宿科技股份有限公司 一种分发资源获取请求的方法和装置
CN110753126B (zh) * 2019-10-28 2022-06-17 国网河南省电力公司信息通信公司 服务节点选择方法、装置、系统和介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104270322A (zh) * 2014-10-30 2015-01-07 中电海康集团有限公司 面向物联网设备接入处理平台的自适应负载均衡调度机制
CN106161552A (zh) * 2015-04-16 2016-11-23 国家电网公司 一种海量数据环境下负载均衡方法及系统
CN108387953A (zh) * 2018-02-22 2018-08-10 苏州大学 一种分布式的气象数据采集系统

Also Published As

Publication number Publication date
CN112003922A (zh) 2020-11-27

Similar Documents

Publication Publication Date Title
CN112003922B (zh) 一种数据传输方法及装置
CN111756550B (zh) 一种区块链共识方法及装置
JP7130142B2 (ja) 通信方法、装置、エンティティ及びコンピュータ可読記憶媒体
CN110875935B (zh) 消息发布、处理、订阅方法、装置及系统
CN109614404B (zh) 一种数据缓存系统及方法
CN110413845B (zh) 基于物联网操作系统的资源存储方法及装置
CN110046187B (zh) 数据处理系统、方法及装置
CN116170289A (zh) 一种节点选举的方法、装置、存储介质及电子设备
CN115374117A (zh) 一种数据处理方法、装置、可读存储介质及电子设备
CN116737345A (zh) 分布式任务处理系统及方法、装置、存储介质以及设备
CN112583941A (zh) 一种支持接入多电力终端的方法、单元节点及电力物联网
CN116366666A (zh) 区块链系统中的链状态更新方法和区块链节点
CN113126884B (zh) 数据迁移方法、装置、电子设备及计算机存储介质
CN111163171B (zh) 一种终端设备的远程控制方法以及装置
CN114296869A (zh) 一种基于tcp长连接的服务器节点服役方法及装置
CN114328129A (zh) 消息发送方法、装置、设备及存储介质
CN117041980B (zh) 一种网元管理方法、装置、存储介质及电子设备
CN115174587B (zh) 一种数据传输系统、方法、装置、计算机可读存储介质及电子设备
CN117555697B (zh) 一种面向分布式训练的缓存加载系统、方法、装置及设备
CN117093161B (zh) 一种基于光收发芯片的内存管理系统、方法、介质及设备
CN114422527B (zh) 一种区块同步方法、装置、电子设备和存储介质
CN117097779B (zh) 一种网络通信的方法、装置、存储介质及电子设备
CN113067712B (zh) 网元信息处理方法、装置、设备及存储介质
CN117651064A (zh) 一种应用集群部署中tcp下行消息处理方法、设备及介质
CN117812150A (zh) 业务执行方法、数据存储系统和区块链系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: A data transmission method and device

Effective date of registration: 20230718

Granted publication date: 20230606

Pledgee: Hangzhou United Rural Commercial Bank Co.,Ltd. Gudang Sub branch

Pledgor: Hangzhou Diji Intelligent Technology Co.,Ltd.

Registration number: Y2023980048826