CN111966651B - 数据同步方法、装置、电子设备和存储介质 - Google Patents
数据同步方法、装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN111966651B CN111966651B CN202010993426.7A CN202010993426A CN111966651B CN 111966651 B CN111966651 B CN 111966651B CN 202010993426 A CN202010993426 A CN 202010993426A CN 111966651 B CN111966651 B CN 111966651B
- Authority
- CN
- China
- Prior art keywords
- shadow file
- data
- shadow
- file
- edge device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 56
- 230000001360 synchronised effect Effects 0.000 claims abstract description 66
- 230000015654 memory Effects 0.000 claims description 19
- 230000008569 process Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/178—Techniques for file synchronisation in file systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本公开公开了一种数据同步方法、装置、电子设备和存储介质，涉及云计算技术领域。具体实现方案为：创建第一影子文件，所述第一影子文件用于存储云端数据；接收边缘设备上报的影子文件信息，其中，所述影子文件信息为所述边缘设备的第二影子文件的信息；在所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件。本公开可以提高边缘设备的工作性能。
Description
技术领域
本公开涉及数据处理技术，尤其涉及云计算技术。
背景技术
在一些云端应用场景中，云端经常会与一个或者多个边缘设备维持数据同步，以实现边缘设备的正常工作。例如：在物联网、边缘计算、设备孪生、子设备管理等场景云端与边缘设备维持数据同步。但目前云端与边缘设备维持数据同步的方式主要是云端与边缘设备之间采用长连接的方式进行数据同步。
发明内容
本公开提供了一种数据同步方法、装置、电子设备和存储介质。
根据本公开的一方面，提供了一种数据同步方法，包括：
创建第一影子文件，所述第一影子文件用于存储云端数据；
接收边缘设备上报的影子文件信息，其中，所述影子文件信息为所述边缘设备的第二影子文件的信息；
在所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件。
根据本公开的另一方面，提供了一种数据同步方法，包括：
创建第二影子文件，所述第二影子文件用于存储边缘设备数据；
向云端设备发送影子文件信息，其中，所述影子文件信息为所述第二影子文件的信息；
在所述影子文件信息表示所述第二影子文件与云端设备的第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件。
根据本公开的另一方面，提供了一种数据同步装置，包括：
创建模块，用于创建第一影子文件，所述第一影子文件用于存储云端数据；
接收模块，用于接收边缘设备上报的影子文件信息，其中，所述影子文件信息为所述边缘设备的第二影子文件的信息；
同步模块，用于在所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件。
根据本公开的另一方面，提供了一种数据同步装置，包括：
创建模块，用于创建第二影子文件，所述第二影子文件用于存储边缘设备数据；
发送模块，用于向云端设备发送影子文件信息，其中，所述影子文件信息为所述第二影子文件的信息；
同步模块，用于在所述影子文件信息表示所述第二影子文件与云端设备的第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件。
根据本公开的另一方面，提供了一种电子设备，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行本公开提供的任一数据同步方法。
根据本公开的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行本公开提供的任一数据同步方法。
根据本公开的技术方案由于通过云端和边缘设备的影子文件进行数据同步，这样可以实现在网络不稳定或者离线的情况下，边缘设备可以使用影子文件中的数据执行工作，以提高边缘设备的工作性能。
应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案，不构成对本公开的限定。其中：
图1是本公开提供的一种数据同步方法的流程图；
图2是本公开提供的一种数据同步的示意图；
图3是本公开提供的另一种数据同步方法的流程图；
图4是本公开提供的另一种数据同步方法的流程图；
图5是本公开提供的一种数据同步装置的结构图；
图6是本公开提供的一种数据同步装置的结构图；
图7是用来实现本公开实施例的数据同步方法的电子设备的框图。
具体实施方式
以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
请参见图1，图1是本公开提供的一种数据同步方法的流程图，如图1所示，包括以下步骤：
步骤S101、创建第一影子文件，所述第一影子文件用于存储云端数据。
本公开中影子文件可以理解为用于存储数据的容器，也可以直接称作影子。
上述第一影子文件可以用于存储云端需要同步至边缘设备的数据。另外，这些数据可以是用于同步至一个或者多个边缘设备的数据，例如：应用配置、文件、认证信息和证书等数据。
另外，在创建第一影子文件时还可以建立一个或多个模型，这些模型可以用于第一影子文件存储不同类型的数据，例如：建立用于存储湿度、温度、光线强度等数据类型的模型。
步骤S102、接收边缘设备上报的影子文件信息，其中，所述影子文件信息为所述边缘设备的第二影子文件的信息。
上述影子文件信息可以是定时上报，如边缘设备周期性上报，当然，对此不作限定，也可以按需上报。
上述影子文件信息可以是第二影子文件存储的数据、边缘设备的属性状态信息等内容，这些内容可以让云端判断第二影子文件存储的数据与上述第一影子文件中存储的数据是否同步。
本公开中边缘设备上报影子文件可以称作report流程。
本公开中第二影子文件也可以作为边缘设备的设备模型。
步骤S103、在所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件。
上述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步可以是，云端依据第一影子文件的文件信息与上述影子文件信息进行比较，以判断第二影子文件存储的数据是否与第一影子文件存储的数据同步。
上述将所述第一影子文件中的云端数据同步至所述第二影子文件可以是，云端将第一影子文件中同步数据直接发给第二影子文件，该同步数据为第二影子文件中与第一影子文件中未同步的数据；或者，可以是云端通知边缘设备执行数据同步流程，之后依据边缘设备发起的数据同步流程将同步数据同步至第二影子文件。本公开中数据同步流程也可以称作desire流程。
另外，本公开中云端与边缘设备之交交互是影子文件信息，以及影子文件数据的同步，因此，在本公开中可以理解为影子文件之间建立连接，以实现数据同步。
根据本公开的技术方案由于通过云端和边缘设备的影子文件进行数据同步，这样可以实现在网络不稳定或者离线的情况下，边缘设备可以使用影子文件中的数据执行工作，以提高边缘设备的工作性能。
需要说明是，该方法由云端执行，即步骤S101至S103由云端执行。
作为一种可选的实施方式，所述影子文件信息包括如下至少一项：
所述第二影子文件存储的所述边缘设备的属性状态信息；
所述第二影子文件存储的所述边缘设备的数据；
其中，在所述属性状态信息与所述第一影子文件存储的云端数据对应的属性状态信息不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步；或者，在所述边缘设备的数据与所述第一影子文件存储的云端数据不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步。
其中，上述属性状态信息可以是影子文件的影子状态，不同状态对应不同的数据，这样可以通过状态比较就可以判断是否需要数据同步。具体的，上述属性状态信息可以是边缘设备的应用状态。
例如：如图2所示，边缘设备上报影子状态1，如果云端的影子状态也是状态1，则由于状态一致，不需要同步；若云端修改了第一影子文件中的数据，从而云端的第一影子文件的状态变为影子状态2，这样当边缘设备上报影子状态1时，由于状态不一致，需要执行数据同步；之后，边缘设备上报影子状态2，云端的影子状态也是状态2，则由于状态一致，不需要同步。
该实施方式中，由于可以只上报属性状态信息，从而可以节约云端与边缘设备之间的传输开销。
上述边缘设备的数据可以是，边缘设备的应用的数据，这样云端可以直接比较第一影子文件中的数据和第二影子文件中的数据，以直接、简单的方式确定是否需要数据同步。
作为一种可选的实施方式，所述创建第一影子文件包括：
创建第一影子文件，并将云端数据存储至所述第一影子文件，并为所述第一影子文件添加标签；
其中，所述标签关联至少一个边缘设备，所述第一影子文件存储的云端数据用于同步至所述至少一个边缘设备；或者，
所述标签关联至少一个应用，所述第一影子文件存储的云端数据用于同步至所述应用。
该实施方式中，可以创建一个或者多个第一影子文件，且不同第一影子文件分别添加对应的标签。不同的第一影子文件可以对应不同的边缘设备，当然，也不排除部分第一影子文件对应相同的边缘设备；或者，不同的第一影子文件可以对应不同的应用，当然，也不排除部分第一影子文件对应相同的应用。
另外，一个第一影子文件可以添加一个或者多个标签，从而实现一个第一影子文件与一个或者多个边缘、应用对应。当然，不同标签还可以对应不同类型的数据，另外，同一类型的数据也可以存储对不同的影子文件，从而可以实现数据与影子通过标签可以建立一对多、多对一或者多对多的关联。具体云端的存储数据时依据数据对应的标签存储至相应的影子文件。
上述标签关联至少一个边缘设备可以是，边缘设备的标识与第一影子文件的标签对应，例如：云端为边缘设备创建唯一的标识，当然，也可以是边缘设备创建，并上报给云端的。
上述标签关联至少一个应用可以是，标签与应用的标识对应，从而通过应用的标识确定其对应的影子文件。
另外，本公开中第一影子文件和第二影子文件存储数据的方式包括但不限于Etcd、SQLite、MySQL、Oracle、SQL Server，具体可以实现实际场景、业务需求选择。
上述实施方式中，由于为第一影子文件添加标签，这样在接收边缘设备发送的影子文件信息时，云端只需要将影子文件信息与对应的第一影子文件进行比较，以降低云端计算量。
可选的，所述影子文件信息还包括：所述边缘设备的标识或者所述第二影子文件存储的数据的应用标识；
所述在所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件，包括：
在所述边缘设备的标识表示所述边缘设备为所述标签关联的边缘设备，且所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件；或者
在所述应用标识表示所述第二影子文件存储的数据为所述标签关联的应用的数据，且所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件。
该实施方式中，可以是云端接收到影子文件信息后，依据影子文件信息包括的标识查找对应的第一影子文件，从而将对应第一影子文件与影子文件信息进行比较，以确定是否需要对边缘设备的第二影子文件执行数据同步。
该实施方式中，由于边缘设备上报的影子文件信息中包括边缘设备的标识或者第二影子文件存储的数据的应用标识，这样可以使得云端可以找到与其对应的第一影子文件，从而云端只需要将影子文件信息与对应的第一影子文件进行比较，以降低云端计算量。
本公开中，云端可以根据实际情况调整第一影子文件存储的数据，且还可以主动将更新后的数据同步至边缘设备，以减少边缘设备的上报，节约传输资源。
本公开中，边缘设备与云端之间通信所所使用的连接协议包括但不限于HTTP、HTTPS、AMQP、MQTT、WebSocket、QUIC。
本公开中，云端和边缘设备可以是属于同一个集群，例如：云端和边缘设备可以属于同一个kubernetes集群，当然，本公开中云端和边缘设备可以属于不同的集群，这样可以实现基于影子文件的跨集群数据同步，例如：云端属于云端kubernetes集群，可以作为控制面管理边缘设备，而边缘设备属于边缘kubernetes集群，可以：作为边缘设备数据面，以执行云端的相关更改与操作。另外，云端的第一影子文件可以是边缘集群中设备在云端的模型和存储抽象，而边缘设备的第二影子文件可以是边缘集群中设备的抽象与数据存储中心。
根据本公开的技术方案由于通过云端和边缘设备的影子文件进行数据同步，这样可以实现在网络不稳定或者离线的情况下，边缘设备可以使用影子文件中的数据执行工作，以提高边缘设备的工作性能。
请参见图3，图3是本公开提供的另一种数据同步方法的流程图，如图3所示，包括以下步骤：
步骤S301、创建第二影子文件，所述第二影子文件用于存储边缘设备数据。
其中，上述第二影子文件可以是边缘设备初始化时创建第二影子文件。
步骤S302、向云端设备发送影子文件信息，其中，所述影子文件信息为所述第二影子文件的信息。
其中，上述影子文件信息可以参见图1所示的实施例的相应说明，此处不作赘述。
步骤S303、在所述影子文件信息表示所述第二影子文件与云端设备的第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件。
其中，上述同步过程可以参见图1所示的实施例的相应说明，此处不作赘述。
本实施例中，由于通过第二影子文件同步云端第一影子文件的数据，这样即使边缘设备同云端网络断开，边缘设备也可以使用第二影子文件中的数据执行工作，以提高边缘设备的工作性能。
需要说明是，该方法由边缘设备执行，即步骤S301至S303由边缘设备执行。
作为一种可选的实施方式，所述影子文件信息包括如下至少一项：
所述第二影子文件存储的所述边缘设备的属性状态信息；
所述第二影子文件存储的所述边缘设备的数据；
其中，在所述属性状态信息与所述第一影子文件存储的云端数据对应的属性状态信息不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步；或者，在所述边缘设备的数据与所述第一影子文件存储的云端数据不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步。
该实施方式的相关说明可以参见图1所示的实施例的相应说明，此处不作赘述。
作为一种可选的实施方式，所述影子文件信息还包括：所述边缘设备的标识或者所述第二影子文件存储的数据的应用标识。
该实施方式的相关说明可以参见图1所示的实施例的相应说明，此处不作赘述。
本实施例中，由于通过第二影子文件同步云端第一影子文件的数据，从而可以提高边缘设备的工作性能。
请参见图4，图4是本公开提供的另一种数据同步方法的流程图，如图4所示，包括以下步骤：
步骤S401、边缘设备数据定期存储至第二影子文件；
其中，在步骤S401之前，还可以包括以下步骤：
云端可以对建立模型，创建第一影子文件，其中，不同模型用于存储不同类型的数据，以及可以在第一影子文件上添加标签，用于关联数据；其中，在云端创建第一影子文件时会创建设备的唯一标识，以与边缘设备对应，此外，可以为第一影子文件添加多个标签，从而与多种类型和应用的数据关联。
边缘设备所在集群进行初始化，在边缘集群中为边缘设备创建影子与云端对应。边缘设备与云端连接后会可以通过特定方式对自身进行标识；其中，边缘设备中创建第二影子文件，用于存储边缘设备的数据，并与云端的第一影子文件建立连接
另外，在云端中创建需要同步的数据，并为数据添加标签，与具有相同标签的第一影子文件进行关联；其中，数据包括但不限于应用配置、文件、认证信息和证书，且数据与第一影子文件通过标签可以建立一对多、多对一或者多对多的关联。
步骤S402、边缘设备定期向云端上报影子文件信息；
该影子文件信息可以包括边缘设备的当前数据，当然，也可以包括当前属性状态；
该步骤可以是边缘集群中的边缘设备定时将边缘设备当前的属性状态进行存储，第二影子文件定时将设备当前数据上报至云端；另外，边缘设备将自身的属性状态存储至第二影子文件，可以将当前的属性状态与第二影子文件的数据进行对比，判断是否需要进行属性状态的更新与调整。
步骤S403、云端将第一影子文件与边缘设备上报的影子文件信息进行对比；
云端可以将边缘上报的数据进行存储与更新，此外会与云端第一影子文件进行对比，当上报的数据与第一影子文件存储的云端数据不一致时会触发数据同步流程，通知边缘影子同步云端最新数据，否则不同步；
步骤S404、云端通知第二影子文件进行同步；
该步骤可以是云端向边缘设备发送同步通知，以通知第二影子文件同步数据。
步骤S405、第二影子文件同步数据。
在执行步骤S405后，边缘设备的第二影子文件的数据与云端的第一影子文件保持一致，否则会在下一次上报时继续触发数据同步流程，直至第二影子文件与第一影子文件达到最终一致性。
本实施例中，由于通过第二影子文件同步云端第一影子文件的数据，从而可以提高边缘设备的工作性能。
请参见图5，图5是本公开提供的一种数据同步装置，如图5所示，数据同步装置500包括：
创建模块501，用于创建第一影子文件，所述第一影子文件用于存储云端数据；
接收模块502，用于接收边缘设备上报的影子文件信息，其中，所述影子文件信息为所述边缘设备的第二影子文件的信息；
同步模块503，用于在所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件。
可选的，所述影子文件信息包括如下至少一项：
所述第二影子文件存储的所述边缘设备的属性状态信息；
所述第二影子文件存储的所述边缘设备的数据；
其中，在所述属性状态信息与所述第一影子文件存储的云端数据对应的属性状态信息不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步；或者，在所述边缘设备的数据与所述第一影子文件存储的云端数据不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步。
可选的，所述创建模块用于创建第一影子文件，并将云端数据存储至所述第一影子文件，并为所述第一影子文件添加标签；
其中，所述标签关联至少一个边缘设备，所述第一影子文件存储的云端数据用于同步至所述至少一个边缘设备；或者，
所述标签关联至少一个应用，所述第一影子文件存储的云端数据用于同步至所述应用。
可选的，所述影子文件信息还包括：所述边缘设备的标识或者所述第二影子文件存储的数据的应用标识；
所述同步模块用于在所述边缘设备的标识表示所述边缘设备为所述标签关联的边缘设备，且所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件；或者
所述同步模块用于在所述应用标识表示所述第二影子文件存储的数据为所述标签关联的应用的数据，且所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件。
本实施例提供的装置能够实现图1所示的方法实施例中实现的各个过程，且可以达到相同有益效果，为避免重复，这里不再赘述。
请参见图6，图6是本公开提供的一种数据同步装置，如图6所示，数据同步装置600包括：
创建模块601，用于创建第二影子文件，所述第二影子文件用于存储边缘设备数据；
发送模块602，用于向云端设备发送影子文件信息，其中，所述影子文件信息为所述第二影子文件的信息；
同步模块603，用于在所述影子文件信息表示所述第二影子文件与云端设备的第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件。
可选的，所述影子文件信息包括如下至少一项：
所述第二影子文件存储的所述边缘设备的属性状态信息；
所述第二影子文件存储的所述边缘设备的数据；
其中，在所述属性状态信息与所述第一影子文件存储的云端数据对应的属性状态信息不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步；或者，在所述边缘设备的数据与所述第一影子文件存储的云端数据不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步。
可选的，所述影子文件信息还包括：所述边缘设备的标识或者所述第二影子文件存储的数据的应用标识。
本实施例提供的装置能够实现图3所示的方法实施例中实现的各个过程，且可以达到相同有益效果，为避免重复，这里不再赘述。
根据本公开的实施例，本公开还提供了一种电子设备和一种存储有计算机指令的非瞬时计算机可读存储介质。
如图7所示，是根据本公开实施例的数据同步方法的电子设备的框图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图7所示，该电子设备包括：一个或多个处理器701、存储器702，以及用于连接各部件的接口，包括高速接口和低速接口。各个部件利用不同的总线互相连接，并且可以被安装在公共主板上或者根据需要以其它方式安装。处理器可以对在电子设备内执行的指令进行处理，包括存储在存储器中或者存储器上以在外部输入/输出装置(诸如，耦合至接口的显示设备)上显示GUI的图形信息的指令。在其它实施方式中，若需要，可以将多个处理器和/或多条总线与多个存储器和多个存储器一起使用。同样，可以连接多个电子设备，各个设备提供部分必要的操作(例如，作为服务器阵列、一组刀片式服务器、或者多处理器系统)。图7中以一个处理器701为例。
存储器702即为本公开所提供的非瞬时计算机可读存储介质。其中，所述存储器存储有可由至少一个处理器执行的指令，以使所述至少一个处理器执行本公开所提供的数据同步方法。本公开的非瞬时计算机可读存储介质存储计算机指令，该计算机指令用于使计算机执行本公开所提供的数据同步方法。
存储器702作为一种非瞬时计算机可读存储介质，可用于存储非瞬时软件程序、非瞬时计算机可执行程序以及模块，如本公开实施例中的数据同步方法对应的程序指令/模块(例如，附图5所示的创建模块501、接收模块502和同步模块503，又例如，附图5所示的创建模块601、发送模块602和同步模块603)。处理器701通过运行存储在存储器702中的非瞬时软件程序、指令以及模块，从而执行服务器的各种功能应用以及数据处理，即实现上述方法实施例中的数据同步方法。
存储器702可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据数据同步方法的电子设备的使用所创建的数据等。此外，存储器702可以包括高速随机存取存储器，还可以包括非瞬时存储器，例如至少一个磁盘存储器件、闪存器件、或其他非瞬时固态存储器件。在一些实施例中，存储器702可选包括相对于处理器701远程设置的存储器，这些远程存储器可以通过网络连接至数据同步方法的电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
数据同步方法的电子设备还可以包括：输入装置703和输出装置707。处理器701、存储器702、输入装置703和输出装置707可以通过总线或者其他方式连接，图7中以通过总线连接为例。
输入装置703可接收输入的数字或字符信息，以及产生与数据同步方法的电子设备的用户设置以及功能控制有关的键信号输入，例如触摸屏、小键盘、鼠标、轨迹板、触摸板、指示杆、一个或者多个鼠标按钮、轨迹球、操纵杆等输入装置。输出装置707可以包括显示设备、辅助照明装置(例如，LED)和触觉反馈装置(例如，振动电机)等。该显示设备可以包括但不限于，液晶显示器(LCD)、发光二极管(LED)显示器和等离子体显示器。在一些实施方式中，显示设备可以是触摸屏。
此处描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、专用ASIC(专用集成电路)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
这些计算程序(也称作程序、软件、软件应用、或者代码)包括可编程处理器的机器指令，并且可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。如本文使用的，术语“机器可读介质”和“计算机可读介质”指的是用于将机器指令和/或数据提供给可编程处理器的任何计算机程序产品、设备、和/或装置(例如，磁盘、光盘、存储器、可编程逻辑装置(PLD))，包括，接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”指的是用于将机器指令和/或数据提供给可编程处理器的任何信号。
为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，CRT(阴极射线管)或者LCD(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(LAN)、广域网(WAN)和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。
根据本公开的技术方案由于通过云端和边缘设备的影子文件进行数据同步，这样可以实现在网络不稳定或者离线的情况下，边缘设备可以使用影子文件中的数据执行工作，以提高边缘设备的工作性能。
应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本公开公开的技术方案所期望的结果，本文在此不进行限制。
上述具体实施方式，并不构成对本公开保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等，均应包含在本公开保护范围之内。
Claims (10)
1.一种数据同步方法，包括：
创建第一影子文件，所述第一影子文件用于存储云端数据；
接收边缘设备上报的影子文件信息，其中，所述影子文件信息为所述边缘设备的第二影子文件的信息；
在所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件；
其中，所述创建第一影子文件包括：
创建第一影子文件，并创建一个或者多个模型，不同模型用于所述第一影子文件存储不同类型的数据，并将云端数据存储至所述第一影子文件对应的一个或者多个模型中，并为所述第一影子文件添加标签；所述标签关联至少一个边缘设备，所述第一影子文件存储的云端数据用于同步至所述至少一个边缘设备；或者，所述标签关联至少一个应用，所述第一影子文件存储的云端数据用于同步至所述应用；
所述影子文件信息还包括：所述边缘设备的标识或者所述第二影子文件存储的数据的应用标识；
所述在所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件，包括：
在所述边缘设备的标识表示所述边缘设备为所述标签关联的边缘设备，且所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件；或者
在所述应用标识表示所述第二影子文件存储的数据为所述标签关联的应用的数据，且所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件；
所述方法还包括：
在云端中创建需要同步的数据，并为数据添加标签，将所述数据与具有相同标签的所述第一影子文件进行关联，所述数据与所述第一影子文件通过标签建立一对多、多对一或者多对多的关联。
2.根据权利要求1所述的方法，其中，所述影子文件信息包括如下至少一项：
所述第二影子文件存储的所述边缘设备的属性状态信息；
所述第二影子文件存储的所述边缘设备的数据；
其中，在所述属性状态信息与所述第一影子文件存储的云端数据对应的属性状态信息不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步；或者，在所述边缘设备的数据与所述第一影子文件存储的云端数据不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步。
3.一种数据同步方法，包括：
创建第二影子文件，所述第二影子文件用于存储边缘设备数据，所述影子文件信息还包括：所述边缘设备的标识或者所述第二影子文件存储的数据的应用标识；
向云端设备发送影子文件信息，其中，所述影子文件信息为所述第二影子文件的信息；
在所述影子文件信息表示所述第二影子文件与云端设备的第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件；
其中，所述云端设备创建有第一影子文件，并在所述第一影子文件中创建有一个或者多个模型，不同模型用于存储不同类型的数据，且所述云端设备将云端数据存储至所述第一影子文件对应的一个或者多个模型中，并为所述第一影子文件添加标签；所述标签关联至少一个边缘设备，所述第一影子文件存储的云端数据用于同步至所述至少一个边缘设备；或者，所述标签关联至少一个应用，所述第一影子文件存储的云端数据用于同步至所述应用；
所述在所述影子文件信息表示所述第二影子文件与云端设备的第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件，包括：
在所述边缘设备的标识表示所述边缘设备为所述标签关联的边缘设备，且所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件；或者
在所述应用标识表示所述第二影子文件存储的数据为所述标签关联的应用的数据，且所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件。
4.根据权利要求3所述的方法，其中，所述影子文件信息包括如下至少一项：
所述第二影子文件存储的所述边缘设备的属性状态信息；
所述第二影子文件存储的所述边缘设备的数据；
其中，在所述属性状态信息与所述第一影子文件存储的云端数据对应的属性状态信息不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步；或者，在所述边缘设备的数据与所述第一影子文件存储的云端数据不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步。
5.一种数据同步装置，包括：
创建模块，用于创建第一影子文件，所述第一影子文件用于存储云端数据；
接收模块，用于接收边缘设备上报的影子文件信息，其中，所述影子文件信息为所述边缘设备的第二影子文件的信息；
同步模块，用于在所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件；
其中，所述创建模块用于创建第一影子文件，并创建一个或者多个模型，不同模型用于所述第一影子文件存储不同类型的数据，并将云端数据存储至所述第一影子文件对应的一个或者多个模型中，并为所述第一影子文件添加标签；所述标签关联至少一个边缘设备，所述第一影子文件存储的云端数据用于同步至所述至少一个边缘设备；或者，所述标签关联至少一个应用，所述第一影子文件存储的云端数据用于同步至所述应用；
所述影子文件信息还包括：所述边缘设备的标识或者所述第二影子文件存储的数据的应用标识；
所述同步模块用于：
在所述边缘设备的标识表示所述边缘设备为所述标签关联的边缘设备，且所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件；或者
在所述应用标识表示所述第二影子文件存储的数据为所述标签关联的应用的数据，且所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件；
所述装置还用于在云端中创建需要同步的数据，并为数据添加标签，将所述数据与具有相同标签的所述第一影子文件进行关联，所述数据与所述第一影子文件通过标签建立一对多、多对一或者多对多的关联。
6.根据权利要求5所述的装置，其中，所述影子文件信息包括如下至少一项：
所述第二影子文件存储的所述边缘设备的属性状态信息；
所述第二影子文件存储的所述边缘设备的数据；
其中，在所述属性状态信息与所述第一影子文件存储的云端数据对应的属性状态信息不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步；或者，在所述边缘设备的数据与所述第一影子文件存储的云端数据不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步。
7.一种数据同步装置，包括：
创建模块，用于创建第二影子文件，所述第二影子文件用于存储边缘设备数据，所述影子文件信息还包括：所述边缘设备的标识或者所述第二影子文件存储的数据的应用标识；
发送模块，用于向云端设备发送影子文件信息，其中，所述影子文件信息为所述第二影子文件的信息；
同步模块，用于在所述影子文件信息表示所述第二影子文件与云端设备的第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件；
其中，所述云端设备创建有第一影子文件，并在所述第一影子文件中创建有一个或者多个模型，不同模型用于存储不同类型的数据，且所述云端设备将云端数据存储至所述第一影子文件对应的一个或者多个模型中，并为所述第一影子文件添加标签；所述标签关联至少一个边缘设备，所述第一影子文件存储的云端数据用于同步至所述至少一个边缘设备；或者，所述标签关联至少一个应用，所述第一影子文件存储的云端数据用于同步至所述应用；
所述同步模块用于：
在所述边缘设备的标识表示所述边缘设备为所述标签关联的边缘设备，且所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件；或者
在所述应用标识表示所述第二影子文件存储的数据为所述标签关联的应用的数据，且所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步的情况下，将所述第一影子文件中的云端数据同步至所述第二影子文件。
8.根据权利要求7所述的装置，其中，所述影子文件信息包括如下至少一项：
所述第二影子文件存储的所述边缘设备的属性状态信息；
所述第二影子文件存储的所述边缘设备的数据；
其中，在所述属性状态信息与所述第一影子文件存储的云端数据对应的属性状态信息不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步；或者，在所述边缘设备的数据与所述第一影子文件存储的云端数据不匹配时，所述影子文件信息表示所述第二影子文件与所述第一影子文件中数据未同步。
9. 一种电子设备，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-2中任一项所述的方法，或者以使所述至少一个处理器能够执行权利要求3-4中任一项所述的方法。
10.一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行权利要求1-2中任一项所述的方法，或者，所述计算机指令用于使所述计算机执行权利要求3-4中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010993426.7A CN111966651B (zh) | 2020-09-21 | 2020-09-21 | 数据同步方法、装置、电子设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010993426.7A CN111966651B (zh) | 2020-09-21 | 2020-09-21 | 数据同步方法、装置、电子设备和存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111966651A CN111966651A (zh) | 2020-11-20 |
| CN111966651B true CN111966651B (zh) | 2024-01-09 |
Family
ID=73386828
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010993426.7A Active CN111966651B (zh) | 2020-09-21 | 2020-09-21 | 数据同步方法、装置、电子设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111966651B (zh) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112532729B (zh) * | 2020-11-30 | 2023-04-18 | 北京百度网讯科技有限公司 | 用于边缘设备和云端的数据同步方法和装置 |
| CN112799366A (zh) * | 2021-01-08 | 2021-05-14 | 广东工业大学 | 一种物联网实训系统 |
| CN113194116B (zh) * | 2021-03-17 | 2023-02-17 | 金蝶蝶金云计算有限公司 | 业务数据处理方法、装置、计算机设备和存储介质 |
| US11921480B2 (en) * | 2021-03-31 | 2024-03-05 | Hygge Energy Inc. | Optimizing distributed energy resource value |
| CN113824694B (zh) * | 2021-08-24 | 2023-08-22 | 武汉联影医疗科技有限公司 | 文件的解密方法、计算机设备和存储介质 |
| CN114401292B (zh) * | 2022-01-10 | 2023-06-06 | 徐工汉云技术股份有限公司 | 一种基于物影子的设备消息采集系统及方法 |
| CN115225697B (zh) * | 2022-06-16 | 2024-04-09 | 阿里云计算有限公司 | 状态同步方法、装置、设备及存储介质 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7526720B1 (en) * | 2000-11-22 | 2009-04-28 | Adobe Systems Incorporated | System and method for storing data associated with a file |
| CN105426766A (zh) * | 2015-10-27 | 2016-03-23 | 武汉理工大学 | 一种基于影子文件的文件加密系统 |
| CN110351153A (zh) * | 2019-08-19 | 2019-10-18 | 蘑菇物联技术（深圳）有限公司 | 一种基于在线配置和动态下发配置文件的边缘计算系统 |
| CN110460664A (zh) * | 2019-08-13 | 2019-11-15 | 深圳市商汤科技有限公司 | 信息同步方法及装置、电子设备和存储介质 |
| CN111045985A (zh) * | 2019-11-25 | 2020-04-21 | 北京百度网讯科技有限公司 | 文件存储处理方法、服务器、电子设备及存储介质 |
| CN111163002A (zh) * | 2019-12-31 | 2020-05-15 | 广州智光电气股份有限公司 | 一种基于容器的边缘网关系统和能源数据处理方法 |
| CN111259072A (zh) * | 2020-01-08 | 2020-06-09 | 广州虎牙科技有限公司 | 数据同步方法、装置、电子设备和计算机可读存储介质 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20140337284A1 (en) * | 2012-04-24 | 2014-11-13 | Google Inc. | Synchronizing folders using a shadow folder hierarchy |
| US9756138B2 (en) * | 2013-04-08 | 2017-09-05 | Here Global B.V. | Desktop application synchronization to process data captured on a mobile device |
| US20150355977A1 (en) * | 2014-06-10 | 2015-12-10 | Bradley C. Kuszmaul | System and Method for Making a Backup Copy of Live Data |
-
2020
- 2020-09-21 CN CN202010993426.7A patent/CN111966651B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7526720B1 (en) * | 2000-11-22 | 2009-04-28 | Adobe Systems Incorporated | System and method for storing data associated with a file |
| CN105426766A (zh) * | 2015-10-27 | 2016-03-23 | 武汉理工大学 | 一种基于影子文件的文件加密系统 |
| CN110460664A (zh) * | 2019-08-13 | 2019-11-15 | 深圳市商汤科技有限公司 | 信息同步方法及装置、电子设备和存储介质 |
| CN110351153A (zh) * | 2019-08-19 | 2019-10-18 | 蘑菇物联技术（深圳）有限公司 | 一种基于在线配置和动态下发配置文件的边缘计算系统 |
| CN111045985A (zh) * | 2019-11-25 | 2020-04-21 | 北京百度网讯科技有限公司 | 文件存储处理方法、服务器、电子设备及存储介质 |
| CN111163002A (zh) * | 2019-12-31 | 2020-05-15 | 广州智光电气股份有限公司 | 一种基于容器的边缘网关系统和能源数据处理方法 |
| CN111259072A (zh) * | 2020-01-08 | 2020-06-09 | 广州虎牙科技有限公司 | 数据同步方法、装置、电子设备和计算机可读存储介质 |
Non-Patent Citations (4)
| Title |
|---|
| EdgeSum: Edge-Based Video Summarization with Dash Cams;Jayden King等;2020 IEEE International Conference on Cloud Engineering (IC2E);全文 * |
| Niagara Framework技术在云――边协同的智慧建筑管理系统的应用;陈杰;蒋澄;;城市建筑(第16期);全文 * |
| 云存储关键技术研究;张文锦;汪金虎;蓝芳萍;钱振江;;常熟理工学院学报(第02期);全文 * |
| 电子公文交换平台中文档影子化技术的应用;王秋菊;;软件导刊(第03期);全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111966651A (zh) | 2020-11-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111966651B (zh) | 数据同步方法、装置、电子设备和存储介质 | |
| CN112532729B (zh) | 用于边缘设备和云端的数据同步方法和装置 | |
| CN111258609B (zh) | Kubernetes集群的升级方法、装置、电子设备和介质 | |
| CN111770169B (zh) | 设备固件升级的方法、装置、设备以及存储介质 | |
| CN111694857B (zh) | 存储资源数据的方法、装置、电子设备及计算机可读介质 | |
| CN111324417B (zh) | 一种Kubernetes集群的组件控制方法、装置、电子设备和介质 | |
| CN112202746B (zh) | Rpc成员信息获取方法、装置、电子设备和存储介质 | |
| CN111290768B (zh) | 一种容器化应用系统的更新方法、装置、设备和介质 | |
| CN112073994A (zh) | 用于空中升级的方法、装置、电子设备及可读存储介质 | |
| CN111858628B (zh) | 基于数据库的管理方法、平台、电子设备及存储介质 | |
| EP3816802A2 (en) | Method and device for processing mini program data | |
| CN112214547A (zh) | 数据处理方法、数据服务器、电子设备及存储介质 | |
| CN111782254A (zh) | 用于升级对象的方法、装置、设备以及存储介质 | |
| CN111510480B (zh) | 一种请求发送方法、装置以及第一服务器 | |
| CN111581049B (zh) | 分布式系统运行状态监测方法、装置、设备及存储介质 | |
| CN111049690B (zh) | 设备故障监测处理方法、装置、设备及存储介质 | |
| CN110659184B (zh) | 健康状态检查方法、装置及系统 | |
| US11783565B2 (en) | Image processing method, electronic device and readable storage medium for maintaining a face image buffer queue | |
| CN114721686A (zh) | 配置数据更新方法、装置、电子设备和存储介质 | |
| CN112069137B (zh) | 生成信息的方法、装置、电子设备及计算机可读存储介质 | |
| CN112084000A (zh) | 容器集群的测试方法和装置 | |
| CN110609671B (zh) | 声音信号增强方法、装置、电子设备及存储介质 | |
| CN112153754A (zh) | 点对点连接方法、装置、电子设备及存储介质 | |
| CN110719202B (zh) | 对象状态显示方法及装置 | |
| CN113568761A (zh) | 数据处理方法、装置、设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |