CN111641583B - 一种物联网资源接入系统及资源接入方法 - Google Patents

一种物联网资源接入系统及资源接入方法 Download PDF

Info

Publication number
CN111641583B
CN111641583B CN202010271735.3A CN202010271735A CN111641583B CN 111641583 B CN111641583 B CN 111641583B CN 202010271735 A CN202010271735 A CN 202010271735A CN 111641583 B CN111641583 B CN 111641583B
Authority
CN
China
Prior art keywords
protocol
internet
things
data
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010271735.3A
Other languages
English (en)
Other versions
CN111641583A (zh
Inventor
程渤
章洋
陈俊亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing University of Posts and Telecommunications
Original Assignee
Beijing University of Posts and Telecommunications
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing University of Posts and Telecommunications filed Critical Beijing University of Posts and Telecommunications
Priority to CN202010271735.3A priority Critical patent/CN111641583B/zh
Publication of CN111641583A publication Critical patent/CN111641583A/zh
Priority to PCT/CN2020/114953 priority patent/WO2021203623A1/zh
Application granted granted Critical
Publication of CN111641583B publication Critical patent/CN111641583B/zh
Priority to US17/958,357 priority patent/US11729260B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004—Server selection for load balancing
    • H04L67/1008—Server selection for load balancing based on parameters of servers, e.g. available memory or workload
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y10/00—Economic sectors
    • G16Y10/75—Information technology; Communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/12—Avoiding congestion; Recovering from congestion
    • H04L47/125—Avoiding congestion; Recovering from congestion by balancing the load, e.g. traffic engineering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/24—Traffic characterised by specific attributes, e.g. priority or QoS
    • H04L47/2483—Traffic characterised by specific attributes, e.g. priority or QoS involving identification of individual flows
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/70—Admission control; Resource allocation
    • H04L47/72—Admission control; Resource allocation using reservation actions during connection setup
    • H04L47/726—Reserving resources in multiple paths to be used simultaneously
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/08—Protocols for interworking; Protocol conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/18—Multiprotocol handlers, e.g. single devices capable of handling multiple protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/30—Definitions, standards or architectural aspects of layered protocol stacks
    • H04L69/32—Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
    • H04L69/321—Interlayer communication protocols or service data unit [SDU] definitions; Interfaces between layers

Abstract

本发明实施例提供一种物联网资源接入系统及资源接入方法。系统包括协议管理子系统用于从协议数据包共享存储队列中获取协议帧，使用协议栈将协议帧解析为原始数据载荷，并提供给数据转换子系统；数据转换子系统用于协议管理、资源绑定和数据转换，加载物联网资源并通过多线程并发方式将原始数据载荷转换为观测数据；负载均衡子系统用于将物联网资源通过虚拟IP接入系统并通过负载均衡服务器连接至后台服务节点，将协议帧发送至协议数据包共享存储队列。本发明实施例提出的物联网资源接入系统在物联网资源接入、资源管理、协议解析等方面既实现端、边、云同时适用，还支持自适应、保证足够程度的灵活性，支持多种系统部署方式。

Description

一种物联网资源接入系统及资源接入方法
技术领域
本发明涉及物联网技术领域，尤其涉及一种物联网资源接入系统及资源接入方法。
背景技术
在物联网应用中，物联网服务资源接入系统有着举足轻重的地位，它用于将物联网资源接入网络并对物联网资源进行访问和控制，作为物联网应用的基石，是物联网中不可或缺的。随着物联网技术的不断发展，更多的物联网应用需要接入大规模的异构传感器，同时要求物联网接入系统保持稳定运行。这对物联网资源接入系统提出了更高要求，主要表现在以下几点：1)提高高并发场景下的系统承载能力，能够支撑大规模物联网资源接入；2)灵活扩展系统，实现异构物联网资源的动态配置及动态加载；3)有效的高可用和状态转移机制，提升物联网资源接入系统的可靠性。
目前主流的物联网资源接入解决方案包括阿里云IoT、百度天工IoT、思科Jasper等。阿里云IoT、百度天工IoT主要基于云平台对物联网资源接入进行处理，对边和端的支持较弱。思科Jasper在一定程度上加强了对边的支持，提供在分布式网络基础设施内转换物联网传感器数据和执行控制功能的能力，对云和端的支持较弱。而随着新时代5G技术的推广，物联网资源接入解决方案在云、边、端进一步一体化已成为大势所趋。
发明内容
本发明实施例提供一种物联网资源接入系统及资源接入方法，用以解决现有技术中物联网接入存在资源分配不均衡，对于各节点无法做到同等程度的支持，部署不够灵活等缺陷。
第一方面，本发明实施例提供一种物联网资源接入系统，包括：
协议管理子系统、数据转换子系统和负载均衡子系统；其中：
所述协议管理子系统用于从协议数据包共享存储队列中获取协议帧，使用协议栈将所述协议帧解析为原始数据载荷，并将所述原始数据载荷提供给所述数据转换子系统；
所述数据转换子系统用于协议管理、资源绑定和数据转换，加载物联网资源并通过多线程并发方式将所述原始数据载荷转换为观测数据；
所述负载均衡子系统用于将所述物联网资源通过虚拟IP接入系统并通过负载均衡服务器连接至后台服务节点，将所述协议帧发送至所述协议数据包共享存储队列。
优选地，所述协议管理子系统包括协议与协议栈动态加载模块、协议栈生成模块和协议解析模块，其中：
所述协议与协议栈动态加载模块用于采用预设配置方式动态加载协议和所述协议栈；
所述协议栈生成模块用于采用所述预设配置方式生成所述协议栈；
所述协议解析模块用于使用所述协议栈对所述协议帧进行逐层解析。
优选地，所述预设配置方式包括手动配置和自动配置。
优选地，所述数据转换子系统包括资源管理模块、资源绑定模块和数据转换模块；其中：
所述资源管理模块用于将所述物联网资源进行实例化；
所述资源绑定模块用于将所述物联网资源与语义信息进行绑定；
所述数据转换模块用于对所述原始数据载荷的数据解释和使用。
优选地，所述负载均衡子系统包括连接管理模块、线程监测与切换触发功能模块、负载均衡功能模块和服务节点状态迁移机制模块；其中：
所述连接管理模块用于在服务节点与所述物联网资源之间建立并管理数据通路；
所述线程监测与切换触发功能模块用于基于内存取证技术，监控系统前置线程的运行状态，在所述前置线程状态异常时构造线程健康状态事件，触发所述服务节点切换；
所述负载均衡功能模块用于基于改进负载均衡算法，将所述物联网资源的连接请求转发至可用服务节点；
所述服务节点状态迁移机制模块用于所述数据通路出现异常情况下，读取通信过程的检查点，完成所述服务节点状态迁移。
优选地，所述改进负载均衡算法通过由负载均衡服务器提供的双通道判决、连接请求合并以及基于若干个服务器性能得到。
第二方面，本发明实施例提供一种物联网资源接入方法，包括：
构建协议管理子系统，所述协议管理子系统用于从协议数据包共享存储队列中获取协议帧，使用协议栈将所述协议帧解析为原始数据载荷，并将所述原始数据载荷提供给所述数据转换子系统；
构建数据转换子系统，所述数据转换子系统用于协议管理、资源绑定和数据转换，加载物联网资源并通过多线程并发方式将所述原始数据载荷转换为观测数据；
构建负载均衡子系统，所述负载均衡子系统用于将所述物联网资源通过虚拟IP接入系统并通过负载均衡服务器连接至后台服务节点，将所述协议帧发送至所述协议数据包共享存储队列。
优选地，所述构建协议管理子系统还包括建立协议动态加载功能流程，所述建立协议动态加载功能流程具体包括：
文件监听器执行定时扫描指定的协议程序包存储路径任务；
若所述文件监听器判断获知所述协议程序包的存储位置存在新增协议程序包时，则基于反射机制将协议进行加载。
优选地，所述构建数据转换子系统还包括建立数据解释过程流程，所述建立数据解释过程流程具体包括：
对物联网资源中的原始数据载荷进行协议解析；
获取所述原始数据载荷头部的物联网资源连接的监控单元地址；
若判断获知所述原始数据载荷存在剩余内容，获取所述物联网资源的第一个地址；
根据监控单元地址、传感器地址和子站名称，确定单个物联网资源实体，查询所述物联网资源实体的数据类型和数据转换信息；
根据原始数据长度，从所述原始数据载荷中截取所述物联网资源监测的原始数据；
根据所述数据类型，使用所述数据转换信息将所述原始数据转换为观测数据；
完成所述第一个地址对应的数据解释，返回执行判断所述原始数据载荷存在剩余内容，获取所述物联网资源的其余地址，直至完成所述原始数据载荷的全部数据解释。
优选地，所述构建负载均衡子系统还包括建立基于若干个服务器性能的改进负载均衡算法流程，所述建立基于若干个服务器性能的改进负载均衡算法流程具体包括：
在负载均衡服务器中添加stick table会话黏着表；
由运控终端向服务集群发起连接请求；
所述负载均衡服务器获取所述连接请求，查询所述stick table会话黏着表是否包含所述运控终端的连接记录；
若判断获知所述stick table会话黏着表内包含所述连接记录，则获取所述运控终端前次连接的服务节点IP；
所述负载均衡服务器探测所述运控终端前次连接的服务节点，判断所述服务节点是否存活；
将所述连接请求转发至所述运控终端前次连接的服务节点；
将所述运控终端与所述服务节点的连接关系从所述stick table会话黏着表中移除；
计算所述服务集群内所有可选服务节点的请求处理能力，所述负载均衡器将所述连接请求转发至当前请求处理能力最强的服务器节点；
将所述运控终端与所述当前请求处理能力最强的服务器节点的连接关系存入所述tick table会话黏着表；
所述运控终端与所述服务节点成功建立连接。
本发明实施例提供的物联网资源接入系统及资源接入方法，通过提出的物联网资源接入系统在物联网资源接入、资源管理、协议解析等方面既实现端、边、云同时适用，还支持自适应、保证足够程度的灵活性，支持多种系统部署方式。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的物联网资源接入系统架构图；
图2为本发明实施例提供的协议管理子系统示意图；
图3为本发明实施例提供的数据转换子系统示意图；
图4为本发明实施例提供的负载均衡子系统示意图；
图5为本发明实施例提供的物联网资源接入方法流程图；
图6为本发明实施例提供的协议动态加载功能流程图；
图7为本发明实施例提供的数据解释过程流程示意图；
图8为本发明实施例提供的改进负载均衡算法流程图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
图1为本发明实施例提供的物联网资源接入系统架构图，如图1所示，包括：
协议管理子系统、数据转换子系统和负载均衡子系统；其中：
所述协议管理子系统用于从协议数据包共享存储队列中获取协议帧，使用协议栈将所述协议帧解析为原始数据载荷，并将所述原始数据载荷提供给所述数据转换子系统；
所述数据转换子系统用于协议管理、资源绑定和数据转换，加载物联网资源并通过多线程并发方式将所述原始数据载荷转换为观测数据；
所述负载均衡子系统用于将所述物联网资源通过虚拟IP接入系统并通过负载均衡服务器连接至后台服务节点，将所述协议帧发送至所述协议数据包共享存储队列。
具体地，本发明实施例提出的高可用、高并发的物联网资源接入系统包括协议管理子系统、原始数据到观测数据转换子系统、高可用负载均衡子系统，其中：协议管理子系统是原始数据到观测数据转换子系统的基础，用于从协议数据包共享存储队列中获取协议帧，使用协议栈将协议帧解析为原始数据载荷并提供给原始数据到观测数据转换子系统，使系统能够灵活配置协议、协议栈，支持协议的二次开发；原始数据到观测数据转换子系统，用于协议管理、资源绑定与数据转换，加载物联网资源并通过多线程并发的方式将二进制形式的原始数据载荷转换为具有实际意义的观测数据；高可用负载均衡子系统用于提高系统的并发性与可用性，使物联网资源通过虚拟IP接入系统并经过负载均衡服务器连接至后台服务节点，将物联网资源发来的协议帧发送至协议数据包共享存储队列。通过监控系统线程的运行状态，发现线程异常时迅速触发服务节点切换并进行状态迁移，保证了系统的高可用性。
本发明实施例通过提出的物联网资源接入系统在物联网资源接入、资源管理、协议解析等方面既实现端、边、云同时适用，还支持自适应、保证足够程度的灵活性，支持多种系统部署方式。
基于上述实施例，如图2所示，所述协议管理子系统包括协议与协议栈动态加载模块、协议栈生成模块和协议解析模块，其中：
所述协议与协议栈动态加载模块用于采用预设配置方式动态加载协议和所述协议栈；
所述协议栈生成模块用于采用所述预设配置方式生成所述协议栈；
所述协议解析模块用于使用所述协议栈对所述协议帧进行逐层解析。
其中，所述预设配置方式包括手动配置和自动配置。
具体地，图2为协议管理子系统示意图，包括协议和协议栈动态加载模块、协议栈生成模块和协议解析模块，其中：
协议和协议栈动态加载模块，支持通过手动配置和自动配置两种方式动态加载协议和协议栈。用户通过对协议元数据表、协议栈描述信息表进行手动配置，数据表将改动通知协议和协议栈动态加载模块驱动协议和协议栈的动态加载，此为手动配置方式。自动配置方式通过使用定时任务扫描协议程序包存储位置，在发现新增协议程序包时使用反射机制加载协议，完成协议的动态加载。
协议栈生成模块用于生成协议栈，支持手动配置和协议栈自动适配两种方式。针对手动配置的方式，协议栈生成模块将根据物联网资源连接的运控终端所属站名称获取对应的协议栈描述信息，基于反射机制生成协议栈。协议栈自动适配的方式通常在手动配置方式失败的情景下使用，协议栈生成模块将基于反射机制对内存中已加载协议进行实例化，遍历协议，对每个协议验证是否能够解析已接收的协议帧，对于解析成功的情况，将协议加入协议栈，重复遍历协议、验证解析的过程直至协议帧无法被任一协议解析，协议栈生成，协议栈自适配完成。协议栈生成后，将传递至协议解析模块使用。
协议解析模块用于使用生成的协议栈对协议帧进行逐层解析。在每层协议的解析过程中，协议解析模块将先对协议帧进行CRC校验，校验通过后根据协议规定解析帧头、帧尾，随后获取本层协议的协议数据单元。在经过顶层协议解析后，协议解析模块获得原始数据载荷，完成协议解析，将原始数据载荷传递给原始数据到观测数据转换子系统。
基于上述任一实施例，如图3所示，所述数据转换子系统包括资源管理模块、资源绑定模块和数据转换模块；其中：
所述资源管理模块用于将所述物联网资源进行实例化；
所述资源绑定模块用于将所述物联网资源与语义信息进行绑定；
所述数据转换模块用于对所述原始数据载荷的数据解释和使用。
具体地，图3为数据转换子系统示意图，包括资源管理模块、资源绑定模块和数据转换模块，其中：
资源管理模块读取持久化的物联网资源描述信息，将资源实例化，实现资源物理层面与应用层面的映射，在物联网资源实体与物联网资源标识间建立映射关系。
资源绑定模块读取持久化的物联网资源描述信息，将物联网资源与语义信息绑定，供原始数据与观测数据转换模块查询，以实现对物联网资源观测数据值附加语义信息。
数据转换模块用于对物联网资源原始数据进行数据解释和使用。首先获取物联网资源的标识，根据映射关系将物联网资源标识转换为对应的物联网资源实体，随后查询物联网资源信息描述表，获取物联网资源数据转换类型和转换方法，根据不同的数据转换类型使用不同的计算方式得到观测数据值，完成数据解释。获得物联网资源观测数据值后，原始数据与观测数据转换模块查询物联网资源绑定的语义信息，为物联网资源观测数据值附加语义信息，生成数据消息，同时根据物联网资源观测数据类型查询遥信、遥测表，对观测数据进行越限判断，根据判断结果生成事件消息。原始数据与观测数据转换模块将数据消息和事件消息按主题发送至统一消息空间，完成数据使用过程。其他物联网应用系统根据主题从统一消息空间获取消息。
基于上述任一实施例，如图4所示，所述负载均衡子系统包括连接管理模块、线程监测与切换触发功能模块、负载均衡功能模块和服务节点状态迁移机制模块；其中：
所述连接管理模块用于在服务节点与所述物联网资源之间建立并管理数据通路；
所述线程监测与切换触发功能模块用于基于内存取证技术，监控系统前置线程的运行状态，在所述前置线程状态异常时构造线程健康状态事件，触发所述服务节点切换；
所述负载均衡功能模块用于基于改进负载均衡算法，将所述物联网资源的连接请求转发至可用服务节点；
所述服务节点状态迁移机制模块用于所述数据通路出现异常情况下，读取通信过程的检查点，完成所述服务节点状态迁移。
其中，所述改进负载均衡算法通过由负载均衡服务器提供的双通道判决、连接请求合并以及基于若干个服务器性能得到。
具体地，图4为负载均衡子系统示意图，包括连接管理模块、线程监测与切换触发功能模块、负载均衡功能模块和服务节点状态迁移机制模块，其中：
连接管理模块用于在服务节点与物联网资源连接的运控终端间建立并管理数据通路。
线程监测与切换触发功能模块中，线程监测功能基于内存取证技术，通过定时扫描服务节点的物理内存并进行语义重构和内存分析，监控系统线程的运行状态，在线程状态异常时构造线程健康状态事件，发送线程健康状态事件消息，切换触发功能通过解析线程健康状态事件消息，据此对异常线程进行处理，触发服务节点切换。
负载均衡服务模块启动于运控终端通过双通道向虚拟IP发送连接请求时，经过负载均衡服务器提供的双通道判决、连接请求合并和基于多个服务器性能的改进负载均衡算法，连接请求将被转发至一可用服务节点。
服务节点状态迁移机制模块工作在运控终端与服务节点连接出现异常的情况下，运控终端重新连接至另一服务节点后，通过查询物联网资源分布式存储元数据表加载物联网资源数据，读取物联网协议中间状态描述表中的协议通信过程check point，基于一套适用于本系统的服务节点状态迁移方法实现对服务节点状态的迁移。
图5为本发明实施例提供的物联网资源接入方法流程图，如图5所示，包括：
S1，构建协议管理子系统，所述协议管理子系统用于从协议数据包共享存储队列中获取协议帧，使用协议栈将所述协议帧解析为原始数据载荷，并将所述原始数据载荷提供给所述数据转换子系统；
S2，构建数据转换子系统，所述数据转换子系统用于协议管理、资源绑定和数据转换，加载物联网资源并通过多线程并发方式将所述原始数据载荷转换为观测数据；
S3，构建负载均衡子系统，所述负载均衡子系统用于将所述物联网资源通过虚拟IP接入系统并通过负载均衡服务器连接至后台服务节点，将所述协议帧发送至所述协议数据包共享存储队列。
本发明实施例通过提出的物联网资源接入系统在物联网资源接入、资源管理、协议解析等方面既实现端、边、云同时适用，还支持自适应、保证足够程度的灵活性，支持多种系统部署方式。
基于上述实施例，如图6所示，所述构建数据转换子系统还包括建立数据解释过程流程，所述建立数据解释过程流程具体包括：
对物联网资源中的原始数据载荷进行协议解析；
获取所述原始数据载荷头部的物联网资源连接的监控单元地址；
若判断获知所述原始数据载荷存在剩余内容，获取所述物联网资源的第一个地址；
根据监控单元地址、传感器地址和子站名称，确定单个物联网资源实体，查询所述物联网资源实体的数据类型和数据转换信息；
根据原始数据长度，从所述原始数据载荷中截取所述物联网资源监测的原始数据；
根据所述数据类型，使用所述数据转换信息将所述原始数据转换为观测数据；
完成所述第一个地址对应的数据解释，返回执行判断所述原始数据载荷存在剩余内容，获取所述物联网资源的其余地址，直至完成所述原始数据载荷的全部数据解释。
具体地，图6为协议动态加载功能流程图：
步骤601：文件监听器执行定时扫描指定的协议程序包存储路径的任务；
步骤602：文件监听器发现协议程序包存储位置有新增的协议程序包时，基于反射机制将协议加载。
基于上述任一实施例，如图7所示，所述构建数据转换子系统还包括建立数据解释过程流程，所述建立数据解释过程流程具体包括：
对物联网资源中的原始数据载荷进行协议解析；
获取所述原始数据载荷头部的物联网资源连接的监控单元地址；
若判断获知所述原始数据载荷存在剩余内容，获取所述物联网资源的第一个地址；
根据监控单元地址、传感器地址和子站名称，确定单个物联网资源实体，查询所述物联网资源实体的数据类型和数据转换信息；
根据原始数据长度，从所述原始数据载荷中截取所述物联网资源监测的原始数据；
根据所述数据类型，使用所述数据转换信息将所述原始数据转换为观测数据；
完成所述第一个地址对应的数据解释，返回执行判断所述原始数据载荷存在剩余内容，获取所述物联网资源的其余地址，直至完成所述原始数据载荷的全部数据解释。
具体地，图7为数据解释过程流程示意图：
步骤701：开始对物联网资源原始数据载荷进行协议解析。
步骤702：获取原始数据载荷头部的物联网资源连接的监控单元地址。
步骤703：判断原始数据载荷是否存在剩余内容。
步骤704：获取第一个物联网资源的地址。
步骤705：根据监控单元地址、传感器地址和子站名称，唯一确定一个物联网资源实体。在确定物联网资源实体后，查询该物联网资源的数据类型和数据转换信息。
步骤706：根据原始数据长度，从原始数据载荷内截取该物联网资源监测的原始数据。
步骤707：根据数据类型，使用数据转换信息将物联网资源原始数据转换为观测数据。
步骤708：完成该物联网资源的数据解释，返回步骤703。
步骤709：完成该原始数据载荷内全部物联网资源原始数据的数据解释。
基于上述任一实施例，如图8所示，所述构建负载均衡子系统还包括建立基于若干个服务器性能的改进负载均衡算法流程，所述建立基于若干个服务器性能的改进负载均衡算法流程具体包括：
在负载均衡服务器中添加stick table会话黏着表；
由运控终端向服务集群发起连接请求；
所述负载均衡服务器获取所述连接请求，查询所述stick table会话黏着表是否包含所述运控终端的连接记录；
若判断获知所述stick table会话黏着表内包含所述连接记录，则获取所述运控终端前次连接的服务节点IP；
所述负载均衡服务器探测所述运控终端前次连接的服务节点，判断所述服务节点是否存活；
将所述连接请求转发至所述运控终端前次连接的服务节点；
将所述运控终端与所述服务节点的连接关系从所述stick table会话黏着表中移除；
计算所述服务集群内所有可选服务节点的请求处理能力，所述负载均衡器将所述连接请求转发至当前请求处理能力最强的服务器节点；
将所述运控终端与所述当前请求处理能力最强的服务器节点的连接关系存入所述tick table会话黏着表；
所述运控终端与所述服务节点成功建立连接。
具体地，图8为基于多个服务器性能的改进负载均衡算法流程图，其中，在负载均衡服务器中添加stick table会话黏着表用以实现会话黏着。stick table以键值对的形式存储运控终端与服务器节点的对应关系，键值对的key为运控终端IP，value为后台服务节点的IP。
步骤801：运控终端向服务集群发起连接请求。
步骤802：负载均衡服务器收到来自运控终端的连接请求，查询stick table内是否有该运控终端的连接记录。
步骤803：如stick table内有运控终端的连接记录，获取该运控终端前次连接的服务节点IP。
步骤804：负载均衡服务器探测运控终端前次连接的服务节点，判断其是否存活。
步骤805：将运控终端的连接请求转发至stick table中记录的运控终端前次连接的服务节点。
步骤806：将运控终端与服务节点的连接关系从stick table中移除。
步骤807：计算服务集群内当前所有可选服务节点的请求处理能力。
步骤808：负载均衡器将运控终端的连接请求转发到当前请求处理能力最强的服务器节点。
步骤809：将运控终端与服务节点的连接关系存入stick table中。
步骤810：运控终端与服务节点成功建立连接。
其中，对服务器节点的请求处理能力量化方法如下。
假设在单位时间T内，第i个服务器节点的平均CPU使用率为CP(i)，平均内存使用率为MP(i)，平均带宽占用率为BP(i)。假设第i个服务器节点平均连接数为L(i)，那么该服务器节点的连接数占服务集群总连接数量的比例为：
LP(i)＝L(i)/∑iL(i)
不同的因素对服务器性能的影响不同，记kC、kM、kB、kL分别为CPU、内存、带宽占用率、连接数目对服务器性能的影响因子，且满足：
kC+kM+kB+kL＝1
kC、kM、kB、kL的值均不小于0，根据实际情况设定。
记服务器节点的负载均衡能力为LB(i)，则LB(i)的计算公式为：
LB(i)＝kC×CP(i)+kM×MP(i)+kB×BP(i)+kL×LP(i)
CPU和内存使用率越低，表示机器的CPU和内存更为空闲，可以执行更多任务。网络带宽占用率低，表示机器可以并发地收发更多数据。总连接比例低，表示该机器在整个服务集群中承担任务较少，可以对其发起更多连接。因此，CPU使用率、内存使用率、网络带宽占用率、总连接比例与服务器节点的请求处理能力均为负相关的，即该四项指标数值越小，机器的请求处理能力越强。因此，服务节点的LB(i)值越小，表明该服务节点的请求处理能力越强。在计算完成所有可选服务节点的LB(i)值后，负载均衡服务器将运控终端的连接请求转发至LB(i)值最小的服务节点。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (9)

1.一种物联网资源接入系统，其特征在于，包括：协议管理子系统、数据转换子系统和负载均衡子系统；其中：
所述协议管理子系统用于从协议数据包共享存储队列中获取协议帧，使用协议栈将所述协议帧解析为原始数据载荷，并将所述原始数据载荷提供给所述数据转换子系统；所述协议管理子系统包括协议与协议栈动态加载模块、协议栈生成模块和协议解析模块，其中：
所述协议与协议栈动态加载模块用于采用预设配置方式动态加载协议和所述协议栈；
所述协议栈生成模块用于采用所述预设配置方式生成所述协议栈；
所述协议解析模块用于使用所述协议栈对所述协议帧进行逐层解析；
所述数据转换子系统用于协议管理、资源绑定和数据转换，加载物联网资源并通过多线程并发方式将所述原始数据载荷转换为观测数据；
所述负载均衡子系统用于将所述物联网资源通过虚拟IP接入系统并通过负载均衡服务器连接至后台服务节点，将所述协议帧发送至所述协议数据包共享存储队列。
2.根据权利要求1所述的物联网资源接入系统，其特征在于，所述预设配置方式包括手动配置和自动配置。
3.根据权利要求1所述的物联网资源接入系统，其特征在于，所述数据转换子系统包括资源管理模块、资源绑定模块和数据转换模块；其中：
所述资源管理模块用于将所述物联网资源进行实例化；
所述资源绑定模块用于将所述物联网资源与语义信息进行绑定；
所述数据转换模块用于对所述原始数据载荷的数据解释和使用。
4.根据权利要求1所述的物联网资源接入系统，其特征在于，所述负载均衡子系统包括连接管理模块、线程监测与切换触发功能模块、负载均衡功能模块和服务节点状态迁移机制模块；其中：
所述连接管理模块用于在服务节点与所述物联网资源之间建立并管理数据通路；
所述线程监测与切换触发功能模块用于基于内存取证技术，监控系统前置线程的运行状态，在所述前置线程状态异常时构造线程健康状态事件，触发所述服务节点切换；
所述负载均衡功能模块用于基于改进负载均衡算法，将所述物联网资源的连接请求转发至可用服务节点；
所述服务节点状态迁移机制模块用于所述数据通路出现异常情况下，读取通信过程的检查点，完成所述服务节点状态迁移。
5.根据权利要求4所述的物联网资源接入系统，其特征在于，所述改进负载均衡算法通过由负载均衡服务器提供的双通道判决、连接请求合并以及基于若干个服务器性能得到。
6.一种物联网资源接入方法，其特征在于，包括：
构建协议管理子系统，所述协议管理子系统用于从协议数据包共享存储队列中获取协议帧，使用协议栈将所述协议帧解析为原始数据载荷，并将所述原始数据载荷提供给所述数据转换子系统；所述协议管理子系统包括协议与协议栈动态加载模块、协议栈生成模块和协议解析模块，其中：
所述协议与协议栈动态加载模块用于采用预设配置方式动态加载协议和所述协议栈；
所述协议栈生成模块用于采用所述预设配置方式生成所述协议栈；
所述协议解析模块用于使用所述协议栈对所述协议帧进行逐层解析；
构建数据转换子系统，所述数据转换子系统用于协议管理、资源绑定和数据转换，加载物联网资源并通过多线程并发方式将所述原始数据载荷转换为观测数据；
构建负载均衡子系统，所述负载均衡子系统用于将所述物联网资源通过虚拟IP接入系统并通过负载均衡服务器连接至后台服务节点，将所述协议帧发送至所述协议数据包共享存储队列。
7.根据权利要求6所述的物联网资源接入方法，其特征在于，所述构建协议管理子系统还包括建立协议动态加载功能流程，所述建立协议动态加载功能流程具体包括：
文件监听器执行定时扫描指定的协议程序包存储路径任务；
若所述文件监听器判断获知所述协议程序包的存储位置存在新增协议程序包时，则基于反射机制将协议进行加载。
8.根据权利要求6所述的物联网资源接入方法，其特征在于，所述构建数据转换子系统还包括建立数据解释过程流程，所述建立数据解释过程流程具体包括：
对物联网资源中的原始数据载荷进行协议解析；
获取所述原始数据载荷头部的物联网资源连接的监控单元地址；
若判断获知所述原始数据载荷存在剩余内容，获取所述物联网资源的第一个地址；
根据监控单元地址、传感器地址和子站名称，确定单个物联网资源实体，查询所述物联网资源实体的数据类型和数据转换信息；
根据原始数据长度，从所述原始数据载荷中截取所述物联网资源监测的原始数据；
根据所述数据类型，使用所述数据转换信息将所述原始数据转换为观测数据；
完成所述第一个地址对应的数据解释，返回执行判断所述原始数据载荷存在剩余内容，获取所述物联网资源的其余地址，直至完成所述原始数据载荷的全部数据解释。
9.根据权利要求6所述的物联网资源接入方法，其特征在于，所述构建负载均衡子系统还包括建立基于若干个服务器性能的改进负载均衡算法流程，所述建立基于若干个服务器性能的改进负载均衡算法流程具体包括：
在负载均衡服务器中添加stick table会话黏着表；
由运控终端向服务集群发起连接请求；
所述负载均衡服务器获取所述连接请求，查询所述stick table会话黏着表是否包含所述运控终端的连接记录；
若判断获知所述stick table会话黏着表内包含所述连接记录，则获取所述运控终端前次连接的服务节点IP；
所述负载均衡服务器探测所述运控终端前次连接的服务节点，判断所述服务节点是否存活；
将所述连接请求转发至所述运控终端前次连接的服务节点；
将所述运控终端与所述服务节点的连接关系从所述stick table会话黏着表中移除；
计算所述服务集群内所有可选服务节点的请求处理能力，所述负载均衡器将所述连接请求转发至当前请求处理能力最强的服务器节点；
将所述运控终端与所述当前请求处理能力最强的服务器节点的连接关系存入所述tick table会话黏着表；
所述运控终端与所述服务节点成功建立连接。
CN202010271735.3A 2020-04-07 2020-04-07 一种物联网资源接入系统及资源接入方法 Active CN111641583B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202010271735.3A CN111641583B (zh) 2020-04-07 2020-04-07 一种物联网资源接入系统及资源接入方法
PCT/CN2020/114953 WO2021203623A1 (zh) 2020-04-07 2020-09-14 一种物联网资源接入系统及资源接入方法
US17/958,357 US11729260B2 (en) 2020-04-07 2022-10-01 Internet-of-things resource access system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010271735.3A CN111641583B (zh) 2020-04-07 2020-04-07 一种物联网资源接入系统及资源接入方法

Publications (2)

Publication Number Publication Date
CN111641583A CN111641583A (zh) 2020-09-08
CN111641583B true CN111641583B (zh) 2021-09-03

Family

ID=72331154

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010271735.3A Active CN111641583B (zh) 2020-04-07 2020-04-07 一种物联网资源接入系统及资源接入方法

Country Status (3)

Country Link
US (1) US11729260B2 (zh)
CN (1) CN111641583B (zh)
WO (1) WO2021203623A1 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111641583B (zh) * 2020-04-07 2021-09-03 北京邮电大学 一种物联网资源接入系统及资源接入方法
CN112422565B (zh) * 2020-11-18 2023-02-03 青岛海尔科技有限公司 消息处理方法、装置和存储介质及电子装置
CN113489777A (zh) * 2021-07-01 2021-10-08 厦门悦讯信息科技股份有限公司 一种物联网设备集群化数据采集的方法及系统
CN114070357B (zh) * 2021-11-16 2022-07-01 国网福建省电力有限公司营销服务中心 一种电力物联网感知设备组网系统
CN113824801B (zh) * 2021-11-24 2022-04-05 中国电力科学研究院有限公司 一种智能融合终端统一接入管理组件系统
CN114448842B (zh) * 2021-12-08 2023-06-16 统信软件技术有限公司 一种资源访问方法、装置及计算设备
CN114371919A (zh) * 2021-12-08 2022-04-19 天翼物联科技有限公司 基于多Agent代理的海量数据平滑调度系统、方法及介质
CN114726895B (zh) * 2022-04-02 2022-12-16 广西自贸区见炬科技有限公司 一种智能网联的分布式热电转换传输优化系统
CN114510219B (zh) * 2022-04-19 2022-07-19 合沃物联技术（南京）有限公司 一种基于物联网中间件的工业物模型及其实现方法
CN114827174A (zh) * 2022-04-28 2022-07-29 深圳赛宝工业技术研究院有限公司 面向社会制造的制造资源一实多虚同步方法及系统
CN114598384B (zh) * 2022-05-10 2022-08-02 天津航天中为数据系统科技有限公司 一种网络化加密传输的数据链业务处理系统及方法
CN115086443B (zh) * 2022-05-27 2024-03-22 广东省离散智造科技创新有限公司 一种通讯协议转换方法和系统
CN115589433B (zh) * 2022-11-23 2023-05-30 北京大学 数据处理方法、装置及计算机可读存储介质
CN116383015A (zh) * 2023-06-06 2023-07-04 成都安思科技有限公司 基于可扩展板卡插接式的物理内存无感取证系统及方法
CN116455990B (zh) * 2023-06-19 2023-08-22 中国人民解放军陆军航空兵学院 基于信息交互总线的lvc合同训练环境构建方法及系统

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014193940A1 (en) * 2013-05-28 2014-12-04 Convida Wireless, Llc Load balancing in the internet of things
US9264313B1 (en) * 2013-10-31 2016-02-16 Vmware, Inc. System and method for performing a service discovery for virtual networks
CN103699692A (zh) * 2014-01-11 2014-04-02 樊建 物联网接入平台数据管理方法
CN103812937A (zh) * 2014-02-13 2014-05-21 北京邮电大学 一种物联网设备的接入和适配系统
CN105357142B (zh) * 2015-12-02 2018-06-15 浙江工商大学 一种基于ForCES的网络负载均衡器系统设计方法
US10084754B2 (en) * 2015-12-11 2018-09-25 Microsoft Technology Licensing, Llc Virtual private network aggregation
KR20230035427A (ko) * 2016-05-12 2023-03-13 인터디지탈 패튼 홀딩스, 인크 가상화된 모바일 코어 네트워크들에의 접속
US10630410B2 (en) * 2016-05-13 2020-04-21 Telefonaktiebolaget Lm Ericsson (Publ) Network architecture, methods, and devices for a wireless communications network
US20180248983A1 (en) * 2016-12-21 2018-08-30 Ncore Communications, Inc. Methods and apparatus for aggregating network access within a single unified platform for a myriad of devices
US10433134B2 (en) * 2017-01-24 2019-10-01 Arris Enterprises Llc Video gateway as an internet of things mesh enhancer apparatus and method
CN108011814B (zh) * 2018-01-12 2023-05-12 河北工业大学 一种基于窄带物联网的多协议智能网关及其实现方法
CN109788062A (zh) * 2019-01-24 2019-05-21 王晨明 输电系统服务器负载均衡方法
CN110012121B (zh) * 2019-03-18 2021-08-27 安徽师范大学 基于连接标识的异构物联网节点接入IPv6网络方法
CN110213242B (zh) * 2019-05-09 2020-09-08 浙江大学 一种多路路由背景下的高效路径验证方法
CN115699050A (zh) * 2019-11-05 2023-02-03 强力价值链网络投资组合2019有限公司 价值链网络控制塔和企业管理平台
CN111641583B (zh) * 2020-04-07 2021-09-03 北京邮电大学 一种物联网资源接入系统及资源接入方法

Also Published As

Publication number Publication date
US20230033284A1 (en) 2023-02-02
US11729260B2 (en) 2023-08-15
WO2021203623A1 (zh) 2021-10-14
CN111641583A (zh) 2020-09-08

Similar Documents

Publication Publication Date Title
CN111641583B (zh) 一种物联网资源接入系统及资源接入方法
CN109274707B (zh) 一种负载调度方法及装置
US9143452B2 (en) Data processing
USRE45806E1 (en) System and method for the optimization of database access in data base networks
US9705800B2 (en) Load distribution in data networks
US7225356B2 (en) System for managing operational failure occurrences in processing devices
US9819697B2 (en) Diffusing denial-of-service attacks by using virtual machines
US9075660B2 (en) Apparatus and method for providing service availability to a user via selection of data centers for the user
CN109542659A (zh) 应用多活方法、设备、数据中心集群及可读存储介质
US20220318071A1 (en) Load balancing method and related device
WO2022242361A1 (zh) 数据下载方法、装置、计算机设备和存储介质
CN112398689A (zh) 网络恢复方法、装置、存储介质及电子设备
EP1762069B1 (en) Method of selecting one server out of a server set
CN108650337B (zh) 一种服务器探测方法、系统及存储介质
WO2016180284A1 (zh) 服务节点分配方法、装置、cdn管理服务器及系统
US10681398B1 (en) Video encoding based on viewer feedback
CN111010444B (zh) 一种实现Wowza流媒体引擎分布式集群的系统及方法
CN110661836B (zh) 消息路由方法、装置及系统、存储介质
CN114900526B (zh) 负载均衡方法及系统、计算机存储介质、电子设备
US11558812B2 (en) System and methods for multi-links SD-WAN using cellular device connections
CN108055305B (zh) 一种存储扩展方法及存储扩展装置
CN115280288A (zh) 服务器系统和管理服务器系统的方法
KR101382177B1 (ko) 동적 메시지 라우팅 시스템 및 방법
CN111641732A (zh) 智能调度方法及装置
CN108600025B (zh) 一种系统自动容灾的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant