CN114205889B - 一种基于Zenoh的跨局域网分布式系统内通讯方法 - Google Patents

Abstract

本发明公开了一种基于Zenoh的跨局域网分布式系统内通讯方法及系统，包括：将边缘小站划分节点类别并动态组建全局Zenoh命名数据网络；基于全局Zenoh命名数据网络，接受边缘小站的信息并完成数据传输；所述节点类别包括种子节点和普通节点，所述全局Zenoh命名数据网络为种子节点所在的Zenoh网络。通过使用本发明，不需要经过核心网连接入云主机进行跨局域网的通信，且考虑了考虑了分布式系统的特点，增强系统的稳定性和可用性。本发明作为一种基于Zenoh的跨局域网分布式系统内通讯方法，可广泛应用于跨局域网通信领域。

Description

一种基于Zenoh的跨局域网分布式系统内通讯方法

技术领域

本发明涉及跨局域网通信领域，尤其涉及一种基于Zenoh的跨局域网分布式系统内通讯方法。

背景技术

在移动边缘计算(Mobile Edge Computing)场景中，一些资源受限的边缘设备(如传感器，摄像头，机器人等)每天都将产生大量的数据需要进行处理以提供车联网、人脸识别、监控等服务。此时由于计算资源和能源不足，边缘设备无法较好地完成计算从而按时交付，设备需要将任务卸载到附近的边缘服务器或者云服务器进行计算。在机器人应用中，常常使用机器人操作系统(Robot Operating System,ROS)作为通信手段，通过ROS机器人可将自己收集到的传感器数据、激光雷达数据、摄像头数据等等传输到附近的计算设备上进行计算，在复杂的边缘网络中，服务器和移动边缘设备往往不是处于同一局域网中，而ROS等通信、计算框架有着设备都处于同一局域网的限制。

现有的解决跨局域网通信方案都存在着单点依赖的问题，需要维护一个可访问的公共节点，若节点无法被访问，通信将直接终止。

发明内容

为了解决上述技术问题，本发明的目的是提供一种基于Zenoh的跨局域网分布式系统内通讯方法，不需要经过核心网连接入云主机进行跨局域网的通信。

本发明所采用的第一技术方案是：一种基于Zenoh的跨局域网分布式系统内通讯方法，包括以下步骤：

将边缘小站划分节点类别并动态组建全局Zenoh命名数据网络；

基于全局Zenoh命名数据网络，接受边缘小站的信息并完成数据传输；

所述节点类别包括种子节点和普通节点，所述全局Zenoh命名数据网络为种子节点所在的Zenoh网络。

进一步，所述将边缘小站划分节点类别并动态组建全局Zenoh命名数据网络这一步骤，其具体包括：

将边缘小站通过配置文件划分为种子节点和普通节点；

种子节点周期性地往其Zenoh网络发送种子通知信息直至收到外部的中断信息；

普通节点扫描AP信息并订阅种子通知信息。

进一步，所述普通节点扫描AP信息并订阅种子通知信息这一步骤，其具体包括：

普通节点扫描附近可用的AP信息并过滤得到属于边缘小站的AP，去除当前节点边缘小站的AP，得到过滤后AP信息；

对过滤后AP信息进行排序并生成AP集合，得到排序后的AP集合；

根据排序后的AP集合按顺序选择连接的AP，开启Zenoh网络并根据连接的AP指向该AP对应的一个Zenoh网络；

订阅种子通知信息并等待预设时间；

判断到接收到种子通知信息，确定成功加入全局Zenoh命名数据网络并结束；

判断到没有接收到种子通知信息，断开当前已连接的AP并在收到中断信号结束程序。

进一步，所述根据排序后的AP集合按顺序选择连接的AP这一步骤，具体包括：

根据排序后的AP集合的顺序，依次选择其中一个AP，若附近可用的边缘小站AP都被锁定，选择第一个AP作为接入点连接，否则假设目前选择的是a_i；

从节点所在边缘小站的分布式数据库中检查是否有边缘小站内其他计算设备连接到a_i；

在节点所在边缘小站的分布式数据库中标记a_i已被当前节点锁定。

进一步，对于种子节点，还包括：

开启NATS服务；

订阅普通节点信息；

监听并更新普通节点信息；

周期性更新节点拓扑并发送到全局Zenoh命名数据网络。

进一步，种子节点周期性更新节点拓扑并发送到全局Zenoh命名数据网络，具体包括：

按照普通节点的最后通知时间，根据自定义阈值，若当前时间和普通节点最后通知时间的差值大于自定义阈值，则将该普通节点从记录中剔除；

根据所有剩下的普通节点及其正在连接中的AP，将AP映射为对应的设备节点生成连接的拓扑图发送到全局Zenoh命名数据网络。

进一步，对于普通节点，还包括：

开启NATS服务；

周期性在全局Zenoh命名数据网络中发送普通节点信息；

接收到拓扑信息时更新当前节点到其他节点的路径信息到映射表；

发送信息时根据映射表和目标节点得到路径；

长时监听种子通知信息。

本发明方法及系统的有益效果是：本发明的网络传输全部由边缘架设的网络设备完成，不需要经过核心网连接入云主机进行跨局域网的通信，考虑了分布式系统的特点，使用了分布式数据库，并增加了周期通知机制、过时销毁节点信息等机制来应对分布式场景中可能出现的网络不稳定出现断连导致网络通信失效的情况，增强了系统的稳定性和可用性。

附图说明

图1是本发明一种基于Zenoh的跨局域网分布式系统内通讯方法的流程示意图；

图2是本发明具体实施例监听过程示意图；

图3是本发明具体实施例数据通道示意图。

具体实施方式

下面结合附图和具体实施例对本发明做进一步的详细说明。对于以下实施例中的步骤编号，其仅为了便于阐述说明而设置，对步骤之间的顺序不做任何限定，实施例中的各步骤的执行顺序均可根据本领域技术人员的理解来进行适应性调整。

本发明整个基础网络设施由多个边缘小站组成，每个边缘小站由一个无线路由器和一台计算设备组成，计算设备通过以太网连接无线路由器，即所有计算设备在一开始都有着一个局域网。所有边缘小站的计算设备被统一划分为种子节点和普通节点，动态组网的关键在于使处于不同局域网的设备能够组建成一个全局的Zenoh命名数据网络，在该网络下的设备能够通过Zenoh消息的发布/订阅实现互联互通。传输通信部分是在全局Zenoh命名数据网络已经建立完成的基础上，边缘设备通过连接边缘小站并开启Zenoh指向边缘小站计算设备的Zenoh网络，从而接入全局Zenoh命名数据网络，通过这种方式，只要两个边缘设备加入了同一全局Zenoh命名数据网络即可通过Zenoh进行消息传输。

Zenoh为开源软件，提供发布/订阅的消息通信方式，并且可指定指向的节点，一旦指向并且两者可通信，两设备间将形成连通的Zenoh网络，该连通具有传递性，即A与B连通，B与C连通，则A与C也连通。

参照图1，本发明提供了一种基于Zenoh的跨局域网分布式系统内通讯方法，该方法包括以下步骤：

A、当前节点通过配置文件被手动选定为种子节点。

I、种子节点开启NATS服务器、开启NATS客户端与本地NATS服务连接，监听以种子节点名称开头的所有话题信息。

J、种子节点在其Zenoh网络中订阅普通节点信息。

以下步骤B、K、L为同步执行。

B、种子节点按照预设的时间周期T₁周期性地往其Zenoh网络(即全局Zenoh命名数据网络)发送种子通知信息，直至收到外部的中断信息，在此步骤后，所有成功加入全局Zenoh命名数据网络并订阅了种子通知话题的节点均能周期性地接收到种子通知信息。

具体地，种子节点的所在Zenoh网络被定义为全局Zenoh命名数据网络，种子节点不断地往全局Zenoh命名数据网络中发送通知信息，若普通节点能通过订阅种子通知话题持续收到通知信息，证明该普通节点与种子处于同一Zenoh网络，即加入全局Zenoh命名数据网络成功。

K、种子节点在此阶段持续监听普通节点信息直到接收到中断信息，若在Zenoh网络收到普通节点信息则更新该普通节点的最后通知时间以及其当前连接的AP。

L、周期性更新节点拓扑并发送到全局Zenoh命名数据网络直到接收到中断信息，具体更新和发送步骤包括：

L1、按照普通节点的最后通知时间，根据自定义阈值t，若当前时间和普通节点最后通知时间的差值大于t，则将该普通节点从记录中剔除。

L2、根据所有剩下的普通节点及其正在连接中的AP，将AP映射为对应的设备节点，生成连接的拓扑图并发送到全局Zenoh命名数据网络。

C、当前节点通过配置文件被选定为普通节点。首先边缘小站的计算节点利用网卡设备扫描附近可用的AP的信息，在各个AP中过滤出所有属于边缘小站的AP，并从中去除当前节点所有边缘小站的AP。

D、对AP信息进行排序，本发明按信号强度从强到弱排序，得到排序后的可用AP集合A＝{a₁,a₂,…,a_n}。

E、从集合A中按顺序逐个选择需要连接的AP，具体选择步骤包括：

E1、根据AP排序顺序，依次选择其中一个AP，若此时所有附近可用的边缘小站AP都被锁定，则选择第一个AP作为接入点跳到步骤F，否则假设目前选择的是a_i；

E2、从节点所在边缘小站的分布式数据库etcd中检查是否有边缘小站内其他计算设备连接到a_i，若a_i已被选择，则返回E1；

E3、在节点所在边缘小站的etcd数据库中标记a_i已被当前节点锁定，跳转步骤F。

F、根据配置文件连接选定的AP，此时节点将通过无线网络加入另外一个局域网，节点处于两个不同的局域网内，此时节点开启Zenoh网络并根据连接的AP指向该AP对应的一个Zenoh网络。

G、节点订阅种子通知信息，并等待一定时间t₂，并满足t₂>t₁。若在等待时间内接收到种子通知信息表明已成功加入全局Zenoh命名数据网络并跳转步骤M，否则跳转步骤H。

H、断开当前已连接的AP并检查是否收到中断信号，若无，返回步骤E，否则结束程序。

M、在全局Zenoh命名数据网络订阅节点拓扑信息。

N、开启NATS服务端和客户端实现转发，以此构建数据通道，并监听以当前节点名称开头的所有话题信息。

以下步骤O、P、Q为同步执行。

O、周期性地在全局Zenoh命名数据网络中发送普通节点信息。

具体地，普通节点信息包括当前节点名称和连接的AP等，此消息会被种子节点接收并更新拓扑信息。

P、接收到拓扑信息，按照节点连通信息，利用搜索算法(如深度优先搜索等)计算出当前节点到其他所有节点的路径信息并保存更新到映射表road。

具体地，路径信息由一组顺序的节点名称组成，相邻的节点应有NATS服务相连。

Q、节点若需要往目标节点i发送信息，以节点i的名称作为键，在当前映射表road查找从当前节点到节点i的完整路径。

R、将路径信息作为话题名并将信息通过NATS服务发送到该话题上，完成消息发送，消息将由边缘小站中的计算设备经过步骤N构建的消息通道转发到达目标节点。

S、持续监听种子节点信息，若在自定义时间t₃(t₃>t₁)内未监听到种子通知信息，表示当前节点处于失联状态，将结束整个程序并重启，若是接收到中断信息，则正常结束程序。

普通节点在成功加入全局Zenoh命名数据网络的情况下，由于分布式系统存在不稳定性，运行时可能存在部分节点失效的情况，为了能提高本发明中的分布式系统的健壮性，普通节点需要不断监测是否收到种子节点信息，若经过预设阈值时间后仍未收到信号则表示该节点失联，需要重新不断选择边缘小站AP并尝试加入全局Zenoh命名数据网络，详细监听过程如下，参照图2：

S1、根据预设阈值t₃(t₃>t₁)设置定时器，若定时器超时，跳转步骤S3，否则持续监听种子通知信息，若接收到种子通知信息，跳转步骤S2。

S2、在定时器有效期间接收到种子通知信息，表示当前节点仍与全局Zenoh命名数据网络连接，重置定时器并重新等待下一轮消息监听。

S3、定时器失效，即在预设时间t₃内未接收到种子通知信息，该节点被认定为已失联，即与全局Zenoh命名数据网络断连，重启整个程序并寻找下一个可行的边缘小站AP重新加入全局Zenoh命名数据网络。

在获得完整网络拓扑情况下，可以选择多种方式构建数据通道，如SSH转发，NATS转发等，可以根据具体的业务需求选择通用/专用的转发方案。本发明使用NATS建立数据通道，其中步骤I、N都是为了开启NATS来构建数据通道。

即使NATS要求服务端和客户端之间需要连通，但根据网络拓扑可以实现将在NATS的服务A中的信息指向转发到NATS服务B中，直至转发到目标节点所在的NATS服务中，从而实现消息的传输，在此解释两种节点开启NATS的逻辑：

开启NATS服务：都需要同时开启服务器端和客户端。

对于种子节点：只需开启一个客户端连接到本地NATS服务器端。

对于普通节点：需要开启两个客户端，其中一个客户端连接本机的NATS服务器端。计算设备应已连接到另一边缘小站p2的AP上，另外一个客户端应连接到p2的计算设备的NATS服务器端，两个客户端运行在同一程序中并通过内存转发数据。

当任一客户端接收到以当前节点名称开头的话题消息，客户端会从话题中把当前节点名称去除，再通过本地节点客户端转发到服务端上等待特定客户端接收，或消息被丢弃(无效路径)。

参照图3，(i)对于边缘小站中的计算普通节点B，开启的NATS服务及操作如下：

BS：NATS服务器端，用于进行监听话题注册、消息接收等行为；

BC1：NATS客户端，用于向AS订阅话题以B开头的信息，在接收到信息时将B从话题去除，并将信息通过BC2重新发送到BS；

BC2：NATS客户端，用于向BS订阅话题以B开头的信息，在接收到信息时将B从话题去除，再将信息重新发送到BS并且通过BC1发送到AS；

(ii)对于边缘小站中的计算种子节点A，开启的NATS服务及操作如下：

AS：NATS服务器端，用于进行监听话题注册、消息接收等行为；

AC：NATS客户端，用于向AS订阅话题以A开头的信息，在接收到信息时将B从话题去除再将信息重新发送到AS；

(iii)对于边缘设备X，开启的NATS服务及操作如下：

XS：NATS服务器端，用于进行监听话题注册、消息接收等行为；

XC1：NATS客户端，用于向XS订阅话题以X开头的信息，在接收到信息时将X从话题去除再将信息重新发送到XS，并且通过XC2发送到AS；

XC2：NATS客户端，用于向AS订阅话题以X开头的信息，在接收到信息时将X从话题去除再将信息重新发送到AS，并且通过XC1发送到XS；

XappC：NATS客户端，每个设备上的应用建立一个NATS客户端并在本地NATS服务器XS订阅自身想要的话题。

(iv)对于边缘设备Y，开启的NATS服务及操作如下：

YS：NATS服务器端，用于进行监听话题注册、消息接收等行为；

YC1：NATS客户端，用于向BS订阅话题以Y开头的信息，在接收到信息时将Y从话题去除再将信息重新发送到BS，并且通过YC2发送到YS；

YC2：NATS客户端，用于向YS订阅话题以Y开头的信息，在接收到信息时将Y从话题去除再将信息重新发送到YS，并且通过YC1发送到BS；

YappC：NATS客户端，每个设备上的应用建立一个NATS客户端并在本地NATS服务器YS订阅自身想要的话题。

所以完成传输实际是四大步骤：

1.组建全局Zenoh命名数据网络和数据通道；

2.种子节点监听普通节点信息和汇总全局拓扑并发送至全局Zenoh命名数据网络；

3.应用传输存在一层代理，代理监听全局拓扑和计算当前节点到其他节点的路径信息，并将路径信息转换为话题，转换后将对应数据发送到数据通道；

具体地，数据传输时根据终点(起点为代理所在节点本身)即可获得路径。

4.数据通道根据话题(路径信息)进行数据的转发，完成数据传输。

以上是对本发明的较佳实施进行了具体说明，但本发明创造并不限于所述实施例，熟悉本领域的技术人员在不违背本发明精神的前提下还可作出种种的等同变形或替换，这些等同的变形或替换均包含在本申请权利要求所限定的范围内。

Claims (5)

1.一种基于Zenoh的跨局域网分布式系统内通讯方法，其特征在于，包括：

将边缘小站划分节点类别并动态组建全局Zenoh命名数据网络；

基于全局Zenoh命名数据网络，接受边缘小站的信息并完成数据传输；

所述节点类别包括种子节点和普通节点，所述全局Zenoh命名数据网络为种子节点所在的Zenoh网络；

所述将边缘小站划分节点类别并动态组建全局Zenoh命名数据网络这一步骤，其具体包括：

将边缘小站通过配置文件划分为种子节点和普通节点；

种子节点周期性地往其Zenoh网络发送种子通知信息；

普通节点扫描AP信息并订阅种子通知信息；

所述普通节点扫描AP信息并订阅种子通知信息这一步骤，其具体包括：

普通节点扫描附近可用的AP信息并过滤得到属于边缘小站的AP，去除当前节点边缘小站的AP，得到过滤后AP信息；

对过滤后AP信息进行排序并生成AP集合，得到排序后的AP集合；

根据排序后的AP集合按顺序选择连接的AP，开启Zenoh网络并根据连接的AP指向该AP对应的一个Zenoh网络；

订阅种子通知信息并等待预设时间；

判断到接收到种子通知信息，确定成功加入全局Zenoh命名数据网络并结束；

判断到没有接收到种子通知信息，断开当前已连接的AP。

2.根据权利要求1所述一种基于Zenoh的跨局域网分布式系统内通讯方法，其特征在于，所述根据排序后的AP集合按顺序选择连接的AP这一步骤，具体包括：

根据排序后的AP集合的顺序，依次选择其中一个AP，若附近可用的边缘小站AP都被锁定，选择第一个AP作为接入点连接，否则假设目前选择的是a_i；

从节点所在边缘小站的分布式数据库中检查是否有边缘小站内其他计算设备连接到a_i；

在节点所在边缘小站的分布式数据库中标记a_i已被当前节点锁定。

3.根据权利要求2所述一种基于Zenoh的跨局域网分布式系统内通讯方法，其特征在于，对于种子节点，还包括：

开启NATS服务；

订阅普通节点信息；

监听并更新普通节点信息；

周期性更新节点拓扑并发送到全局Zenoh命名数据网络。

4.根据权利要求3所述一种基于Zenoh的跨局域网分布式系统内通讯方法，其特征在于，种子节点周期性更新节点拓扑并发送到全局Zenoh命名数据网络，具体包括：

按照普通节点的最后通知时间，根据自定义阈值，若当前时间和普通节点最后通知时间的差值大于自定义阈值，则将该普通节点从记录中剔除；

根据所有剩下的普通节点及其正在连接中的AP，将AP映射为对应的设备节点生成连接的拓扑图发送到全局Zenoh命名数据网络。

5.根据权利要求4所述一种基于Zenoh的跨局域网分布式系统内通讯方法，其特征在于，对于普通节点，还包括：

开启NATS服务；

周期性在全局Zenoh命名数据网络中发送普通节点信息；

接收到拓扑信息时更新当前节点到其他节点的路径信息到映射表；

发送信息时根据映射表和目标节点得到路径；

长时监听种子通知信息。