CN111641682B - 一种边缘计算设备的数据同步方法及系统 - Google Patents
一种边缘计算设备的数据同步方法及系统 Download PDFInfo
- Publication number
- CN111641682B CN111641682B CN202010407038.6A CN202010407038A CN111641682B CN 111641682 B CN111641682 B CN 111641682B CN 202010407038 A CN202010407038 A CN 202010407038A CN 111641682 B CN111641682 B CN 111641682B
- Authority
- CN
- China
- Prior art keywords
- data
- data service
- service
- weight
- grade
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明公开了一种边缘计算设备的数据同步方法，对不同的数据业务进行等级划分，并对各个等级的数据业务设置对应的同步可延迟时间，具体包括如下步骤：步骤1，采集若干待数据同步的数据业务；步骤2，基于数据业务的等级获取各数据业务的同步可延迟时间；步骤3，基于数据业务的同步可延迟时间、数据采集时间、当前时间得到各数据业务的权重；步骤4，基于权重由大至小对各数据业务进行排序，得到数据业务队列，并按数据业务队列进行数据同步。在数据同步过程中根据数据业务等级设置各等级可延迟发送时间，并通过计算数据业务的权重，按权重大小发送数据，解决在网络拥塞情况下，按重要数据被延后发送的问题。
Description
技术领域
本发明涉及泵车预警技术领域，具体是一种边缘计算设备的数据同步方法及系统。
背景技术
目前在物联网行业，边缘计算应用越来越广泛，边缘计算设备与云端之间的数据同步场景也越来越常见，由于物联网行业设备多，数据量大的特点，造成在边缘计算设备与云端之间的数据同步实时性和准确性方面出现很多问题，而对于数据实时性要求比较高的系统和业务，数据同步的问题则会对业务处理造成非常严重的影响。
现有的技术在同步数据时，不会考虑数据的重要程度，在网络状况差或数据量大时，所有数据不分重要程度按先后顺序排队等待发送，以致重要数据被积压延迟发送，导致重要业务或实时性要求高的业务处理失败。
发明内容
为了解决上述存在的一个或多个问题，本发明的目的是提供一种边缘计算设备的数据同步方法及系统，在数据同步过程中根据数据业务等级设置各等级可延迟发送时间，并通过计算数据权重，按权重大小发送数据，解决在网络拥塞情况下，按重要数据被延后发送的问题。
为实现上述目的，本发明提供一种边缘计算设备的数据同步方法，对不同的数据业务进行等级划分，并对各个等级的数据业务设置对应的同步可延迟时间，具体包括如下步骤：
步骤1，采集若干待数据同步的数据业务；
步骤2，基于数据业务的等级获取各数据业务的同步可延迟时间；
步骤3，基于数据业务的同步可延迟时间、数据采集时间、当前时间得到各数据业务的权重；
步骤4，基于权重由大至小对各数据业务进行排序，得到数据业务队列，并按数据业务队列进行数据同步。
进一步优选的，所述对不同的数据业务进行等级划分，并对各个等级的数据业务设置对应的同步可延迟时间，具体为：
设置数据业务的等级为A1、A2、…、An共n个等级，即对应的同步可延迟时间为T1、T2、…、Tn，其中，n为大于1的自然数。
进一步优选的，步骤3中，所述权重具体为：
式中，i表示数据业务i，Pi表示数据业务i的权重，j∈[A1，A2，…，An] 表示数据业务i的业务等级，Ti j∈[T1，T2，…，Tn]表示数据业务i的同步可延迟时间，TN表示当前时间，Ui表示数据业务i的数据采集时间。
为实现上述目的，本发明还提供一种边缘计算设备的数据同步系统，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述方法的步骤。
为实现上述目的，本发明还提供一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现上述方法的步骤。
本发明提供的一种边缘计算设备的数据同步方法，在数据同步过程中根据数据业务等级设置各等级可延迟发送时间，并通过计算数据业务的权重，按权重大小发送数据，解决在网络拥塞情况下，按重要数据被延后发送的问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图示出的结构获得其他的附图。
图1为本发明实施例中边缘计算设备的数据同步方法的流程示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明，本发明实施例中所有方向性指示(诸如上、下、左、右、前、后……)仅用于解释在某一特定姿态(如附图所示)下各部件之间的相对位置关系、运动情况等，如果该特定姿态发生改变时，则该方向性指示也相应地随之改变。
另外，在本发明中如涉及“第一”、“第二”等的描述仅用于描述目的，而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。
在本发明中，除非另有明确的规定和限定，术语“连接”、“固定”等应做广义理解，例如，“固定”可以是固定连接，也可以是可拆卸连接，或成一体；可以是机械连接，也可以是电连接，还可以是物理连接或无线通信连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系，除非另有明确的限定。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。
另外，本发明各个实施例之间的技术方案可以相互结合，但是必须是以本领域普通技术人员能够实现为基础，当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在，也不在本发明要求的保护范围之内。
如图1所示的一种边缘计算设备的数据同步方法，该方法对不同的数据业务进行等级划分，并对各个等级的数据业务设置对应的同步可延迟时间，具体包括如下步骤：
步骤1，采集若干待数据同步的数据业务；
步骤2，基于数据业务的等级获取各数据业务的同步可延迟时间；
步骤3，基于数据业务的同步可延迟时间、数据采集时间、当前时间得到各数据业务的权重；
步骤4，基于权重由大至小对各数据业务进行排序，得到数据业务队列，并按数据业务队列进行数据同步。
需要要注意的是，对不同的数据业务进行等级划分，并对各个等级的数据业务设置对应的同步可延迟时间，具体为：
设置数据业务的等级为A1、A2、…、An共n个等级，即对应的同步可延迟时间为T1、T2、…、Tn，其中，n为大于1的自然数。
在步骤3中，所述权重具体为：
式中，i表示数据业务i，Pi表示数据业务i的权重，j∈[A1，A2，…，An] 表示数据业务i的业务等级，Ti j∈[T1，T2，…，Tn]表示数据业务i的同步可延迟时间，TN表示当前时间，Ui表示数据业务i的数据采集时间，通过上述权重公式，使业务等级越高，越重要，发送期限越短的数据，得到的权重越大，从而被放到发送队列前端优先发送，从而减小重要和实时性要求高的数据的延迟时间，提高系统的处理效率和服务质量。
下面以具体的示例对本实施例中的边缘计算设备的数据同步方法作出进一步说明。
首先设置对不同的数据业务进行等级划分，该示例中的业务等级 A1、A2、A3三个等级，其中，A1等级的数据业务为实时数据业务，A2等级的数据业务为数据统计业务，A3等级的数据业务为数据备份业务；
随后设置等级A1的数据业务的可延迟时间为0，等级A2的数据业务的可延迟时间为3小时，等级A3的数据业务的可延迟时间为6小时；
设采集数据业务为D1、D2、D3、D4、D5、D6，其中，数据业务 D1、数据业务D4为PCB板生产直通率，数据业务D2、数据业务D5 为平均每小时生产数量，数据业务D3、数据业务D6为订单生产时间历史记录，设当前时间为6:00，设数据业务D1、数据业务D2、数据业务D3采集时间为4:00，数据业务D4、数据业务D5采集时间为5:00，数据业务D6采集时间为1:00；
通过计算得到数据业务D1，数据业务D2，数据业务D3的权重分别为P1＝2，P2＝0.33，P3＝0.04，P4＝1，P5＝0.17，P6＝0.17；
按权重进行排序，得到发送队列为[D1，D4，D2，D5，D6，D3]，最终按次队列依次发射数据业务。
由上述示例可知：
数据业务D1最早采集，且业务等级最高，计算等到权重排序为1；
数据业务D4采集时间在数据业务D2、数据业务D3之后，但业务等级最高，且业务等级A1为实时数据业务，计算得到权重排序为2；
数据业务D2和数据业务D5等级为A2，由于数据业务D2采集时间更早，可延迟时间较数据业务D5短，所以较数据业务D5优先发送，排序分别为3、4；
数据业务D6、数据业务D3数据业务等级为A3，由于数据业务D6 采集时间早，所以较数据业务D3优先发送，由于数据业务D6权限值与数据业务D5权限值相等，而数据业务D5业务等级高于数据业务 D6，所以数据业务D5优先于数据业务D6发送，得到排序分别为5、6。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明实施例进行了较为详细的说明，但是本发明实施例不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，本发明的范围由所附的权利要求范围决定，而非由实施例的具体描述所界定。
Claims (3)
1.一种边缘计算设备的数据同步方法，其特征在于，对不同的数据业务进行等级划分，并对各个等级的数据业务设置对应的同步可延迟时间，具体包括如下步骤：
步骤1，采集若干待数据同步的数据业务；
步骤2，基于数据业务的等级获取各数据业务的同步可延迟时间；
步骤3，基于数据业务的同步可延迟时间、数据采集时间、当前时间得到各数据业务的权重；
步骤4，基于权重由大至小对各数据业务进行排序，得到数据业务队列，并按数据业务队列进行数据同步；
所述对不同的数据业务进行等级划分，并对各个等级的数据业务设置对应的同步可延迟时间，具体为：
设置数据业务的等级为A1、A2、…、An共n个等级，即对应的同步可延迟时间为T1、T2、…、Tn，其中，n为大于1的自然数；
步骤3中，所述权重具体为：
式中，i表示数据业务i，Pi表示数据业务i的权重，j∈[A1，A2，…，An]表示数据业务i的业务等级，Ti j∈[T1，T2，…，Tn]表示数据业务i的同步可延迟时间，TN表示当前时间，Ui表示数据业务i的数据采集时间。
2.一种边缘计算设备的数据同步系统，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1所述方法的步骤。
3.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010407038.6A CN111641682B (zh) | 2020-05-14 | 2020-05-14 | 一种边缘计算设备的数据同步方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010407038.6A CN111641682B (zh) | 2020-05-14 | 2020-05-14 | 一种边缘计算设备的数据同步方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111641682A CN111641682A (zh) | 2020-09-08 |
| CN111641682B true CN111641682B (zh) | 2022-09-30 |
Family
ID=72331026
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010407038.6A Active CN111641682B (zh) | 2020-05-14 | 2020-05-14 | 一种边缘计算设备的数据同步方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111641682B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112231353B (zh) * | 2020-10-15 | 2023-05-23 | 中电工业互联网有限公司 | 一种数据采集方法及系统 |
| CN113987069A (zh) * | 2021-10-09 | 2022-01-28 | 中汽创智科技有限公司 | 一种数据同步方法、装置、系统、设备、存储介质及车辆 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102012210243B4 (de) * | 2012-06-18 | 2017-12-28 | Siemens Aktiengesellschaft | Verfahren zum Übertragen von Datenpaketen in einem Kommunikationsnetzwerk und Kommunikationsnetzwerk |
| CN108173778B (zh) * | 2017-12-27 | 2021-09-24 | 中国电力科学研究院有限公司 | 基于业务分类的电力信息采集系统数据处理方法 |
-
2020
- 2020-05-14 CN CN202010407038.6A patent/CN111641682B/zh active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN111641682A (zh) | 2020-09-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111641682B (zh) | 一种边缘计算设备的数据同步方法及系统 | |
| CN108667654B (zh) | 服务器集群自动扩容方法及相关设备 | |
| CN109981744B (zh) | 数据的分发方法、装置、存储介质及电子设备 | |
| CN111966289B (zh) | 基于Kafka集群的分区优化方法和系统 | |
| CN110266514A (zh) | 日志获取方法、装置、终端及存储介质 | |
| CN111030945B (zh) | 容灾方法、容灾网关、存储介质、装置以及系统 | |
| CN114780244A (zh) | 容器云资源弹性分配方法、装置、计算机设备及介质 | |
| CN112764920A (zh) | 一种边缘应用部署方法、装置、设备和存储介质 | |
| CN113422808B (zh) | 物联网平台http信息推送方法、系统、装置及介质 | |
| CN113676362A (zh) | 一种基于数据处理的物联网设备绑定方法及系统 | |
| CN113691600A (zh) | 设备状态信息的同步方法以及装置、计算机可读存储介质 | |
| CN109375146A (zh) | 一种用电数据的补采方法、系统及终端设备 | |
| CN111698321A (zh) | 物联网设备数据同步方法、装置及控制中心 | |
| CN108280019A (zh) | 一种评估服务器健康状态的方法 | |
| CN112685261B (zh) | 一种基于观察者模式的微服务运行状态监控方法 | |
| CN113612624B (zh) | 一种节点之间心跳处理方法及装置 | |
| CN111885159B (zh) | 数据采集方法、装置、电子设备及存储介质 | |
| CN114138490A (zh) | 一种基于分布式云平台的云边管理方法及系统 | |
| CN114501374A (zh) | 车联网的动态服务部署方法、系统、装置及存储介质 | |
| CN114124643A (zh) | 一种基于PaaS的网络设备流量采集方法及装置 | |
| CN110134547B (zh) | 一种基于中间件的重复数据删除方法和相关装置 | |
| CN103942346B (zh) | 一种基于抽样的分布式搜索结果合并翻页方法及系统 | |
| CN113608863A (zh) | 一种海量数据分布式采集方法及系统 | |
| CN112398935A (zh) | 一种基于时延的全链路负载均衡算法 | |
| CN112187857A (zh) | 一种云平台消息发送调度方法、系统、终端及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |