CN111414424B - 一种配置数据自动同步redis的方法、系统、介质及设备 - Google Patents

一种配置数据自动同步redis的方法、系统、介质及设备 Download PDF

Info

Publication number
CN111414424B
CN111414424B CN202010209961.9A CN202010209961A CN111414424B CN 111414424 B CN111414424 B CN 111414424B CN 202010209961 A CN202010209961 A CN 202010209961A CN 111414424 B CN111414424 B CN 111414424B
Authority
CN
China
Prior art keywords
data
redis
configuration
daemon
configuration data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010209961.9A
Other languages
English (en)
Other versions
CN111414424A (zh
Inventor
邓运民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Si Tech Information Technology Co Ltd
Original Assignee
Beijing Si Tech Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Si Tech Information Technology Co Ltd filed Critical Beijing Si Tech Information Technology Co Ltd
Priority to CN202010209961.9A priority Critical patent/CN111414424B/zh
Publication of CN111414424A publication Critical patent/CN111414424A/zh
Application granted granted Critical
Publication of CN111414424B publication Critical patent/CN111414424B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G06F16/275—Synchronous replication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28—Databases characterised by their database models, e.g. relational or object models
    • G06F16/284—Relational databases
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种配置数据自动同步redis的方法、系统、介质及设备。方法包括：启动守护进程扫描物理库中的缓存守护表，依次读取缓存守护表的行数据，进行循环处理；其中，缓存守护表用于存储需要同步至redis或需要与redis中数据进行比对的配置数据；在进行循环处理时，根据当前行数据的动作类型字段的值确定所述当前行数据的处理方式，根据确定的处理方式对物理库中的配置数据表和/或redis中数据进行相应处理；其中，配置数据表用于存储配置数据。本发明实现了实时自动加载业务系统配置数据到分布式redis集群，减少人工成本；且能够比对物理库和redis集群数据差异，及时发现系统存在的问题，提高系统安全性。

Description

一种配置数据自动同步redis的方法、系统、介质及设备
技术领域
本发明涉及Redis数据管理领域，尤其涉及一种配置数据自动同步redis的方法、系统、介质及设备。
背景技术
在系统云化背景下，很多业务系统都需要使用Redis分布式缓存技术。业务系统在业务规则发送变化，或者功能变更时需要将物理库中的配置数据及时同步到Redis中，支撑各种业务办理。
现有技术中，通过人为重新启动系统或者进程来同步配置数据到redis中。这样配置数据不能实时同步到redis，在重启系统或者进程过程中会中断系统，影响系统使用；当物理库中的数据和redis数据不一致的情况下，不能及时发现差异，造成系统使用问题。
发明内容
本发明所要解决的技术问题是针对现有技术存在的问题，提供一种配置数据自动同步redis的方法、系统、介质及设备。
为解决上述技术问题，本发明实施例提供一种配置数据自动同步redis的方法，包括：
启动守护进程扫描物理库中的缓存守护表，依次读取所述缓存守护表的行数据，进行循环处理；其中，所述缓存守护表用于存储需要同步至redis或需要与redis中数据进行比对的配置数据；
在进行循环处理时，根据当前行数据的动作类型字段的值确定所述当前行数据的处理方式，根据确定的处理方式对物理库中的配置数据表和/或redis中数据进行相应处理；其中，所述配置数据表用于存储配置数据。
为解决上述技术问题，本发明实施例还提供一种配置数据自动同步redis的系统，包括：
数据读取模块，用于启动守护进程扫描物理库中的缓存守护表，依次读取所述缓存守护表的行数据，进行循环处理；其中，所述缓存守护表用于存储需要同步至redis或需要与redis中数据进行比对的配置数据；
数据处理模块，用于在进行循环处理时，根据当前行数据的动作类型字段的值确定所述当前行数据的处理方式，根据确定的处理方式对物理库中的配置数据表和/或redis中数据进行相应处理；其中，所述配置数据表用于存储配置数据。
为解决上述技术问题，本发明实施例还提供一种计算机可读存储介质，包括指令，当所述指令在计算机上运行时，使所述计算机执行上述技术方案所述的配置数据自动同步redis的方法。
为解决上述技术问题，本发明实施例还提供一种计算机设备，包括存储器、处理器及存储在所述存储器上的并可在所述处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述技术方案所述的配置数据自动同步redis的方法。
本发明的有益效果是：通过缓存守护表记录需要同步至redis或需要与redis中数据进行比对的配置数据，且表中动作类型字段记录数据对应的处理方式，通过守护进程实时扫描缓存守护表，对表中数据进行循环处理，从而实现实时自动加载业务系统配置数据到分布式redis集群，减少人工成本，且实时加载过程中不会中断系统，不影响系统使用；且能够比对物理库和redis集群数据差异，及时发现系统存在的问题，可根据差异数据配置各种短信或者邮件告警，提高系统安全性。
本发明附加的方面及其的优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明实践了解到。
附图说明
图1为本发明一实施例提供的配置数据自动同步redis的方法流程图；
图2为本发明另一实施例提供的配置数据自动同步redis的方法流程图；
图3为本发明实施例提供的配置数据自动同步redis的系统框图。
具体实施方式
以下结合附图对本发明的原理和特征进行描述，所举实例只用于解释本发明，并非用于限定本发明的范围。
图1为本发明实施例提供的配置数据自动同步redis的方法流程图。如图1所示，该方法包括：
110、启动守护进程扫描物理库中的缓存守护表，依次读取所述缓存守护表的行数据，进行循环处理；其中，所述缓存守护表用于存储需要同步至redis或需要与redis中数据进行比对的配置数据；
120、在进行循环处理时，根据当前行数据的动作类型字段的值确定所述当前行数据的处理方式，根据确定的处理方式对物理库中的配置数据表和/或redis中数据进行相应处理；其中，所述配置数据表用于存储配置数据。
上述实施例中，通过缓存守护表记录需要同步至redis或需要与redis中数据进行比对的配置数据，且表中动作类型字段记录数据对应的处理方式，通过守护进程实时扫描缓存守护表，对表中数据进行循环处理，从而实现实时自动加载业务系统配置数据到分布式redis集群，减少人工成本；且能够比对物理库和redis集群数据差异，及时发现系统存在的问题，可根据差异数据配置各种短信或者邮件告警，提高系统安全性。
可选地，所述配置数据表包括产品配置表，产品配置表用于存储电信业务手机用户订购的产品信息；所述产品配置表的字段包括：主键ID、产品编码和产品名称；所述缓存守护表的字段包括：主键ID、配置数据表名、KEY值、动作类型、刷新状态、刷新备注和创建时间；
其中，所述主键为唯一主键；所述配置数据表名包括产品配置表名；表中存放业务系统的配置数据。例如产品配置表td_oss_product，存放电信业务手机用户订购的产品信息；所述KEY值对应所述产品配置表中的产品编码。动作类型可以包含三个动作，分别是缓存刷新R、缓存比对C和缓存删除D；刷新状态可以包含三个状态，分别是初始状态A、刷新完成状态C和失败状态F；创建时间代表入表时间。每行数据处理完成后，更新该行数据的状态，如果处理成功则更新为C，处理失败则更新为F。
另外，缓存守护表还可以包括刷新备注字段，刷新备注字段用于记录刷新成功或失败的备注信息。
上述实施例中，通过配置产品配置表和缓存守护表的各字段，通过主键ID、产品编号、配置数据表名和KEY值等字段关联产品配置表和缓存守护表；通过动作类型字段定义对相应数据的处理方式，通过刷新状态和刷新备注字段记录数据处理结果，通过创建时间记录入表时间。进而进行数据处理时，先根据动作字段类型确定相应数据的处理方式，再根据KEY值确定待处理的数据，从而实现实时自动加载业务系统配置数据到分布式redis集群，减少人工成本；且能够比对物理库和redis集群数据差异，及时发现系统存在的问题，还可根据差异数据配置各种短信或者邮件告警，提高系统安全性。
可选地，所述根据当前行数据的动作类型字段的值确定处理方式包括：如当前行数据的动作类型字段的值为R，则确定处理方式为数据刷新；如当前行数据的动作类型字段的值为D，则确定处理方式为数据删除；如当前行数据的动作类型字段的值为C，则确定处理方式为数据比对。
上述实施例中，通过在缓存守护表中设置动作类型字段，通过该字段定义相应数据的处理方式，在进行数据处理时，可根据该字段快速确定相应数据的处理方式，进而根据确定的处理方式进行相应处理，提高数据处理效率。
如图2所示，本发明另一实施例提供的配置数据自动同步redis的方法，包括：
动守护进程扫描物理库中的缓存守护表，依次读取所述缓存守护表的行数据，进行循环处理；其中，所述缓存守护表用于存储需要同步至redis或需要与redis中数据进行比对的配置数据；
在进行循环处理时，根据当前行数据的动作类型字段的值确定所述当前行数据的处理方式，根据确定的处理方式对物理库中的配置数据表和/或redis中数据进行相应处理；其中，所述配置数据表用于存储配置数据。
所述根据确定的处理方式对物理库中的产品配置表和/或redis中数据进行相应处理，包括：
当确定的处理方式为数据刷新时，守护进程读取缓存守护表中当前行数据的KEY值；
如果KEY值为空，表示需要刷新产品配置表中的所有配置数据，所述守护进程读取所述产品配置表的所有配置数据，根据读取的所有所述配置数据删除redis中对应的数据，然后向redis新增所述产品配置表的所有配置数据；例如读取了产品表配置表5行数据，产品编码分别是BS001,BS002，BS003，BS004，BS005。那么将redis中key是BS001,BS002，BS003，BS004，BS005的数据删除，然后向redis中新增产品配置表中产品编码是BS001,BS002，BS003，BS004，BS005的数据。
如果KEY值不为空，表示只需要刷新KEY值对应的配置数据，所述守护进程根据KEY值删除redis中对应的数据；然后向redis新增所述产品配置表中对应的数据；如果key值是BS001，那么将redis中key是BS001的数据删除，然后向redis中新增产品配置表中产品编码是BS001的数据。
当确定的处理方式为数据删除时，守护进程读取缓存守护表中当前行数据的KEY值；
如果KEY值为空，表示需要删除产品配置表中的所有配置数据，所述守护进程读取所述产品配置表的所有数据，然后根据读取的所有所述配置数据删除redis中对应的数据；
如果key不为空，表示只需要删除KEY值对应的配置数据，所述守护进程根据KEY值删除redis中对应的数据；
当确定的处理方式为数据比对时，守护进程读取缓存守护表中当前行数据的KEY值；
如果KEY值为空，表示需要比对产品配置表中的所有配置数据，所述守护进程读取所述产品配置表的所有配置数据，将所有所述配置数据与redis中对应数据进行比对，将差异数据写入比对结果表中；以下情况属于存在差异数据的情况：
1)产品编码相同而产品名称不相同；
2)产品编码在产品配置表存在而在redis不存在；
3)产品编码在redis存在而在产品配置表不存在。
如果KEY值不为空，所述守护进程根据KEY值分别读取所述产品配置表中对应的配置数据和redis中对应的数据，比较二者之间差异，将差异数据写入比对结果表中；以下情况属于存在差异数据的情况：
1)产品编码相同而产品名称不相同。
另外，上述数据处理完成时，均更新刷新状态至缓存守护表中。
上述实施例中，先根据动作字段类型确定相应数据的处理方式，再根据KEY值确定待处理的数据，如KEY值为空，则以产品配置表中的所有配置数据作为处理对象，如KEY值不为空，则根据KEY值获取对应的待处理数据，进而根据确定的处理方式对待处理数据进行相应处理；从而实现实时自动加载业务系统配置数据到分布式redis集群，减少人工成本；且能够比对物理库和redis集群数据差异，及时发现系统存在的问题，还可根据差异数据配置各种短信或者邮件告警，提高系统安全性。
可选地，在一个实施例中，所述比对结果表的字段包括：主键ID、配置数据表名、KEY值、物理库中数据value值、Redis中数据Value值和创建时间。另外，所述比对结果表还可以包括备注字段。
上述实施例中，通过比对结果表的字段，如主键ID、配置数据表名、KEY值等字段与产品配置表和缓存守护表进行关联，进而在获取差异数据时，可快速准确地记录差异数据，提高数据处理效率。
需要说明的是，上述实施例中，使用oracle建表语句create table新建产品配置表，表名为td_oss_product，该表用于存储电信业务手机用户订购的产品信息；使用oracle建表语句create table新建缓存守护表，表名为ti_bs_cacherefresh，将需要同步redis的数据或者需要比对的数据插入该表。使用oracle建表语句create table缓存比对结果表，表名为TF_BS_CACHECOMPARE，该表用于存放比对之后的差异数据。
上文结合图1至图2，详细描述了根据本发明实施例提供的配置数据自动同步redis的方法。下面结合图3，详细描述本发明实施例提供的配置数据自动同步redis的系统。
如图3所示，本发明实施例还提供一种配置数据自动同步redis的系统，包括数据读取模块和数据处理模块。
数据读取模块，用于启动守护进程扫描物理库中的缓存守护表，依次读取所述缓存守护表的行数据，进行循环处理；其中，所述缓存守护表用于存储需要同步至redis或需要与redis中数据进行比对的配置数据；
数据处理模块，用于在进行循环处理时，根据当前行数据的动作类型字段的值确定所述当前行数据的处理方式，根据确定的处理方式对物理库中的配置数据表和/或redis中数据进行相应处理；其中，所述配置数据表用于存储配置数据。
上述实施例中，通过缓存守护表记录需要同步至redis或需要与redis中数据进行比对的配置数据，且表中动作类型字段记录数据对应的处理方式，通过守护进程实时扫描缓存守护表，对表中数据进行循环处理，从而实现实时自动加载业务系统配置数据到分布式redis集群，减少人工成本；且能够比对物理库和redis集群数据差异，及时发现系统存在的问题，可根据差异数据配置各种短信或者邮件告警，提高系统安全性。
本发明实施例还提供一种计算机可读存储介质，包括指令，当所述指令在计算机上运行时，使所述计算机执行上述实施例所述的配置数据自动同步redis的方法。
本发明实施例还提供一种计算机设备，包括存储器、处理器及存储在所述存储器上的并可在所述处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述实施例所述的配置数据自动同步redis的方法。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。
作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (9)

1.一种配置数据自动同步redis的方法，其特征在于，包括：
启动守护进程扫描物理库中的缓存守护表，依次读取所述缓存守护表的行数据，进行循环处理；其中，所述缓存守护表用于存储需要同步至redis或需要与redis中数据进行比对的配置数据；
在进行循环处理时，根据当前行数据的动作类型字段的值确定所述当前行数据的处理方式，根据确定的处理方式对物理库中的配置数据表和/或redis中数据进行相应处理；其中，所述配置数据表用于存储配置数据；
所述配置数据表包括产品配置表，所述产品配置表的字段包括：主键ID、产品编码和产品名称；所述缓存守护表的字段包括：主键ID、配置数据表名、KEY值、动作类型、刷新状态和创建时间；
其中，所述主键为唯一主键；所述配置数据表名包括产品配置表名；所述KEY值对应所述产品配置表中的产品编码。
2.根据权利要求1所述的方法，其特征在于，所述根据当前行数据的动作类型字段的值确定处理方式包括：
如当前行数据的动作类型字段的值为R，则确定处理方式为数据刷新；如当前行数据的动作类型字段的值为D，则确定处理方式为数据删除；如当前行数据的动作类型字段的值为C，则确定处理方式为数据比对。
3.根据权利要求2所述的方法，其特征在于，所述根据确定的处理方式对物理库中的配置数据表和/或redis中数据进行相应处理，包括：
当确定的处理方式为数据刷新时，守护进程读取缓存守护表中当前行数据的KEY值；
如果KEY值为空，所述守护进程读取所述产品配置表的所有配置数据，根据读取的所有所述配置数据删除redis中对应的数据，然后向redis新增所述产品配置表的所有配置数据；
如果KEY值不为空，所述守护进程根据KEY值删除redis中对应的数据；然后向redis新增所述产品配置表中对应的数据；
当确定的处理方式为数据删除时，守护进程读取缓存守护表中当前行数据的KEY值；
如果KEY值为空，所述守护进程读取所述产品配置表的所有数据，然后根据读取的所有所述配置数据删除redis中对应的数据；
如果key不为空，所述守护进程根据KEY值删除redis中对应的数据；
当确定的处理方式为数据比对时，守护进程读取缓存守护表中当前行数据的KEY值；
如果KEY值为空，所述守护进程读取所述产品配置表的所有配置数据，将所有所述配置数据与redis中对应数据进行比对，将差异数据写入比对结果表中；
如果KEY值不为空，所述守护进程根据KEY值分别读取所述产品配置表中对应的配置数据和redis中对应的数据，比较二者之间差异，将差异数据写入比对结果表中。
4.根据权利要求3所述的方法，其特征在于，所述比对结果表的字段包括：主键ID、配置数据表名、KEY值、物理库中数据value值、Redis中数据Value值和创建时间。
5.根据权利要求4所述的方法，其特征在于，所述缓存守护表还包括刷新备注字段，所述比对结果表还包括备注字段。
6.根据权利要求3所述的方法，其特征在于，所述产品配置表、缓存守护表和比对结果表均为oracle数据表。
7.一种配置数据自动同步redis的系统，其特征在于，包括：
数据读取模块，用于启动守护进程扫描物理库中的缓存守护表，依次读取所述缓存守护表的行数据，进行循环处理；其中，所述缓存守护表用于存储需要同步至redis或需要与redis中数据进行比对的配置数据；
数据处理模块，用于在进行循环处理时，根据当前行数据的动作类型字段的值确定所述当前行数据的处理方式，根据确定的处理方式对物理库中的配置数据表和/或redis中数据进行相应处理；其中，所述配置数据表用于存储配置数据
所述配置数据表包括产品配置表，所述产品配置表的字段包括：主键ID、产品编码和产品名称；所述缓存守护表的字段包括：主键ID、配置数据表名、KEY值、动作类型、刷新状态和创建时间；
其中，所述主键为唯一主键；所述配置数据表名包括产品配置表名；所述KEY值对应所述产品配置表中的产品编码。
8.一种计算机可读存储介质，包括指令，其特征在于，当所述指令在计算机上运行时，使所述计算机执行根据权利要求1-6任一项所述的配置数据自动同步redis的方法。
9.一种计算机设备，包括存储器、处理器及存储在所述存储器上的并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-6任一项所述的配置数据自动同步redis的方法。
CN202010209961.9A 2020-03-23 2020-03-23 一种配置数据自动同步redis的方法、系统、介质及设备 Active CN111414424B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010209961.9A CN111414424B (zh) 2020-03-23 2020-03-23 一种配置数据自动同步redis的方法、系统、介质及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010209961.9A CN111414424B (zh) 2020-03-23 2020-03-23 一种配置数据自动同步redis的方法、系统、介质及设备

Publications (2)

Publication Number Publication Date
CN111414424A CN111414424A (zh) 2020-07-14
CN111414424B true CN111414424B (zh) 2023-08-04

Family

ID=71491470

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010209961.9A Active CN111414424B (zh) 2020-03-23 2020-03-23 一种配置数据自动同步redis的方法、系统、介质及设备

Country Status (1)

Country Link
CN (1) CN111414424B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112463828B (zh) * 2020-11-02 2021-07-27 马上消费金融股份有限公司 一种数据处理方法、装置、设备、系统及可读存储介质
CN112600918B (zh) * 2020-12-10 2024-02-02 厦门牧云数据技术有限公司 一种基于bs架构的工控边缘大数据高效处理方法与系统
CN112749233B (zh) * 2021-01-15 2024-05-17 京东科技控股股份有限公司 数据同步方法、装置、电子设备及存储介质
CN113379431A (zh) * 2021-06-29 2021-09-10 上海中商网络股份有限公司 一种采集数据实时校验方法及系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102331950A (zh) * 2011-09-15 2012-01-25 北京安天电子设备有限公司 基于Linux定时任务的守护进程实现方法和系统
CN105787077A (zh) * 2016-03-02 2016-07-20 百度在线网络技术（北京）有限公司 数据同步方法和装置
CN106997378A (zh) * 2017-03-13 2017-08-01 摩贝（上海）生物科技有限公司 基于Redis的数据库数据聚合同步的方法
CN107391635A (zh) * 2017-06-30 2017-11-24 北京奇虎科技有限公司 数据同步系统及方法
CN107844506A (zh) * 2016-09-21 2018-03-27 阿里巴巴集团控股有限公司 一种实现数据库与缓存的数据同步的方法及装置
CN108694075A (zh) * 2017-04-12 2018-10-23 北京京东尚科信息技术有限公司 处理报表数据的方法、装置、电子设备和可读存储介质
CN109388657A (zh) * 2018-09-10 2019-02-26 平安科技（深圳）有限公司 数据处理方法、装置、计算机设备及存储介质
CN109391487A (zh) * 2017-08-07 2019-02-26 贵州白山云科技股份有限公司 一种配置更新方法和系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7966287B2 (en) * 2008-05-15 2011-06-21 International Business Machines Corporation Apparatus, system, and method for dynamic database driven document synchronization

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102331950A (zh) * 2011-09-15 2012-01-25 北京安天电子设备有限公司 基于Linux定时任务的守护进程实现方法和系统
CN105787077A (zh) * 2016-03-02 2016-07-20 百度在线网络技术（北京）有限公司 数据同步方法和装置
CN107844506A (zh) * 2016-09-21 2018-03-27 阿里巴巴集团控股有限公司 一种实现数据库与缓存的数据同步的方法及装置
CN106997378A (zh) * 2017-03-13 2017-08-01 摩贝（上海）生物科技有限公司 基于Redis的数据库数据聚合同步的方法
CN108694075A (zh) * 2017-04-12 2018-10-23 北京京东尚科信息技术有限公司 处理报表数据的方法、装置、电子设备和可读存储介质
CN107391635A (zh) * 2017-06-30 2017-11-24 北京奇虎科技有限公司 数据同步系统及方法
CN109391487A (zh) * 2017-08-07 2019-02-26 贵州白山云科技股份有限公司 一种配置更新方法和系统
CN109388657A (zh) * 2018-09-10 2019-02-26 平安科技（深圳）有限公司 数据处理方法、装置、计算机设备及存储介质

Also Published As

Publication number Publication date
CN111414424A (zh) 2020-07-14

Similar Documents

Publication Publication Date Title
CN111414424B (zh) 一种配置数据自动同步redis的方法、系统、介质及设备
CN109254733B (zh) 用于存储数据的方法、装置和系统
CN113297166B (zh) 数据处理系统、方法以及装置
US5819272A (en) Record tracking in database replication
US20180121531A1 (en) Data Updating Method, Device, and Related System
CN110083579A (zh) 增量数据同步的方法、装置、计算机设备及计算机存储介质
CN112714359A (zh) 视频推荐方法、装置、计算机设备及存储介质
EP2579168B1 (en) Method and device for inputting data in multimedia service database on embedded device
CN107040576A (zh) 信息推送方法及装置、通讯系统
US20060112083A1 (en) Object relation information management program, method, and apparatus
CN115114232A (zh) 一种历史版本对象列举方法、装置及其介质
CN103503388B (zh) 一种分布式队列消息读取方法及设备、系统
CN114647658A (zh) 一种数据检索方法、装置、设备及机器可读存储介质
CN114297196A (zh) 元数据存储方法、装置、电子设备及存储介质
CN112000850A (zh) 进行数据处理的方法、装置、系统及设备
CN111563123B (zh) 一种hive仓库元数据实时同步方法
CN114138180A (zh) 一种删除对象的方法、装置、设备及可读介质
CN111399774B (zh) 分布式存储系统下基于快照的数据处理方法和装置
CN101431429B (zh) 一种设备中物理实体信息管理方法及设备与设备管理端
CN113032408B (zh) 数据处理方法、系统及设备
CN111045997B (zh) 集中存储数据删除方法及装置
CN113625952A (zh) 一种对象存储方法、装置、设备及存储介质
CN114756628B (zh) 一种高复用可扩展的数据及文件同步的方法
CN112699127B (zh) 一种内存数据库数据操作方法及装置
US11561958B2 (en) Information processing device and information processing system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant