CN107885824A - 一种数据读写方法及系统 - Google Patents

一种数据读写方法及系统 Download PDF

Info

Publication number
CN107885824A
CN107885824A CN201711085850.6A CN201711085850A CN107885824A CN 107885824 A CN107885824 A CN 107885824A CN 201711085850 A CN201711085850 A CN 201711085850A CN 107885824 A CN107885824 A CN 107885824A
Authority
CN
China
Prior art keywords
data
accumulation layer
database
access
state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711085850.6A
Other languages
English (en)
Inventor
谢永恒
周书平
火莽
火一莽
万月亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Ruian Technology Co Ltd
Original Assignee
Beijing Ruian Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Ruian Technology Co Ltd filed Critical Beijing Ruian Technology Co Ltd
Priority to CN201711085850.6A priority Critical patent/CN107885824A/zh
Publication of CN107885824A publication Critical patent/CN107885824A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28—Databases characterised by their database models, e.g. relational or object models
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G06F16/273—Asynchronous replication or reconciliation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28—Databases characterised by their database models, e.g. relational or object models
    • G06F16/284—Relational databases

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例公开了一种数据读写方法及系统，其中，该方法包括：将数据写入存储层数据库，更新存储层中预先建立的数据状态表，其中，数据状态表中记载存储层数据库中数据的状态；利用预定义的同步数据工具监听数据状态表，在监听到数据的状态发生变化时，则将存储层数据库中状态发生变化的数据更新至访问层数据库；响应数据访问请求，读取访问层数据库中的数据。本发明提高了互联网数据并发访问的速度，降低了企业研发的成本。

Description

一种数据读写方法及系统
技术领域
本发明实施例涉及互联网技术，尤其涉及一种数据读写方法及系统。
背景技术
随着互联网的普及，进行互联网访问的用户日益增多。互联网系统的开放性特点，决定了互联网企业设计的系统需要支持所有人的连接与访问。
对于一般的互联网企业而言，搭建出安全可靠且满足业务应用的底层存取架构是非常重要的，这影响着所设计的系统可支持的用户访问量。Mysql(My Structured QueryLanguage)作为一个关系型数据库管理系统，具有开源与稳定的特点。大多数企业在开发系统的过程中出于技术和成本等方面的考虑，选择将Mysql用于底层构架，进行数据读写。但是，在目前互联网环境下，Mysql的缺点也是显而易见的。首先，作为传统的关系型数据库，存储数据的强一致性会引起访问延迟，直接影响了用户的访问速度；其次，在数据量相对较大时，Mysql以行为单位的扁平式存储结构特点不利于对数据的读取，增加数据读取的困难。
发明内容
本发明实施例提供一种数据读写方法及系统，以提高互联网数据并发访问的速度，降低企业研发的成本。
第一方面，本发明实施例提供了一种数据读写方法，该方法包括：
将数据写入存储层数据库，更新存储层中预先建立的数据状态表，其中，所述数据状态表中记载所述存储层数据库中数据的状态；
利用预定义的同步数据工具监听所述数据状态表，在监听到数据的状态发生变化时，则将所述存储层数据库中状态发生变化的数据更新至访问层数据库；
响应数据访问请求，读取所述访问层数据库中的数据。
进一步地，所述将所述存储层数据库中状态发生变化的数据更新至访问层数据库，包括：
将所述存储层数据库中状态发生变化的数据中增量的热度数据更新至所述访问层数据库，其中，所述热度数据是根据来自访问层的数据访问量反馈信息判断出的访问量大的数据。
进一步地，所述将所述存储层数据库中状态发生变化的数据更新至访问层数据库，包括：
将所述存储层数据库中状态发生变化的数据加载至所述同步数据工具的队列中，并清除所述数据状态表中对应数据的状态；
将所述队列中的数据采用异步更新的方式更新至所述访问层数据库。
进一步地，所述利用预定义的同步数据工具监听所述数据状态表，包括：
利用所述预定义的同步数据工具主动监听所述数据状态表，其中所述主动监听是通过所述同步数据工具在所述将数据写入存储层数据库时接收所述存储层的更新提示信息实现；
和/或
利用所述预定义的同步数据工具被动监听所述数据状态表，其中所述被动监听是通过所述同步数据工具在预设时间内检测所述数据状态表实现。
进一步地，所述存储层数据库包括Mysql数据库；所述访问层数据库包括Redis数据库。
第二方面，本发明实施例还提供了一种数据读写系统，该系统包括：
写入模块，用于将数据写入存储层数据库，更新存储层中预先建立的数据状态表，其中，所述数据状态表中记载所述存储层数据库中数据的状态；
更新模块，用于利用预定义的同步数据工具监听所述数据状态表，在监听到数据的状态发生变化时，则将所述存储层数据库中状态发生变化的数据更新至访问层数据库；
读取模块，用于响应数据访问请求，读取所述访问层数据库中的数据。
进一步地，所述更新模块用于：
将所述存储层数据库中状态发生变化的数据中增量的热度数据更新至所述访问层数据库，其中，所述热度数据是根据来自访问层的数据访问量反馈信息判断出的访问量大的数据。
进一步地，所述更新模块包括：
监听单元，用于利用所述预定义的同步数据工具监听所述数据状态表；
加载单元，用于在监听到数据的状态发生变化时，则将所述存储层数据库中状态发生变化的数据加载至所述同步数据工具的队列中，并清除所述数据状态表中对应数据的状态；
第一更新单元，用于将所述队列中的数据采用异步更新的方式更新至所述访问层数据库。
进一步地，所述更新模块包括：
主动监听单元，用于利用所述预定义的同步数据工具主动监听所述数据状态表，其中所述主动监听是通过所述同步数据工具在所述将数据写入存储层数据库时接收所述存储层的更新提示信息实现；
和/或
被动监听单元，用于利用所述预定义的同步数据工具被动监听所述数据状态表，其中所述被动监听是通过所述同步数据工具在预设时间内检测所述数据状态表实现；
第二更新单元，用于在监听到数据的状态发生变化时，则将所述存储层数据库中状态发生变化的数据更新至所述访问层数据库。
进一步地，所述存储层的数据库包括Mysql数据库；所述访问层的数据库包括Redis数据库。
本发明通过在将数据写入存储层数据库中时更新对应的数据状态，利用预定义的同步数据工具监听数据状态的变化，将存储层数据库中状态发生变化的数据更新至访问层数据库，进而实现数据访问，摒弃了现有技术中访问层同时负责数据同步复制与前端访问的机制，利用预定义的同步数据工具对存储层和访问层的数据同步进行管理，访问层只负责前端数据的并发访问，解决了现有技术中由于关系型数据库中存储数据的强一致性引起的访问延迟，以及数据库扁平式存储结构特点不利于读取数据的问题，提高了互联网数据并发访问的速度，降低了企业研发的成本。
附图说明
图1是本发明实施例一所提供的一种数据读写方法的流程图；
图2是本发明实施例二所提供的一种数据读写系统的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1是本发明实施例一所提供的一种数据读写方法的流程图，本实施例可适用于互联网数据的写入与读取情况，该方法可以由数据读写系统来执行，该系统可以采用软件和/或硬件的方式实现。如图1所示，该方法具体包括如下步骤：
S110、将数据写入存储层数据库，更新存储层中预先建立的数据状态表，其中，数据状态表中记载存储层数据库中数据的状态。
其中，研发人员可以直接登陆数据读写系统或者通过调用后台应用程序进入数据读写系统，利用外部输入设备如鼠标、键盘等，将数据加载入系统中，然后系统可以通过执行数据写入的指令等，将数据写入存储层数据库中。研发人员可以预先在存储层数据库中建立数据状态表，记录存储数据的状态。数据状态表中包括数据的唯一性编码(Identity，ID)和字段状态。数据状态表中的数据与存储层写入的数据一一对应，当存储层中的数据发生变化时，对应的数据状态表中的字段状态便会发生更新，存储层数据的变化包括数据的写入、删除和修改等。示例性地，当存储层数据库中的一个数据表中新写入一行数据，则对应到数据状态表中该数据的字段状态便从0更新为1。
可选地，存储层数据库包括Mysql数据库；对应的访问层数据库包括Redis(RemoteDictionary Server)数据库。Mysql数据库作为一个开源、稳定的关系数据库，对于一般中小型互联网企业而言，在搭建系统都会使用Mysql作为底层存储，接收前端研发人员的数据写入。Redis数据库是一种基于内存的非关系型的数据库(Nosql)，支持主从同步，即数据可以从主服务器向任意数量的从服务器上同步，从服务器可以是关联其他从服务器的主服务器。存储层或者访问层的数据库可以配置在一台或者多台服务器的防火墙安全区域内。
S120、利用预定义的同步数据工具监听数据状态表，在监听到数据的状态发生变化时，则将存储层数据库中状态发生变化的数据更新至访问层数据库。
其中，预定义的数据同步工具(Sync Mysql and Redis，SyncMR)通过网络与存储层和访问层的数据库保持通信连接。当同步数据工具监听到存储层中数据状态表的数据发生变化时，即相应的存储层写入的数据发生了变化，则数据读写系统通过执行相应的程序指令将存储层数据库中状态发生变化的数据更新至访问层数据库。利用预定义的同步数据工具对存储层和访问层的数据更新同步进行管理，摒弃了现有技术中访问层同时负责数据同步复制(replication)与前端访问的机制，使得访问层只负责前端数据的并发访问。尤其是对于Redis数据库而言，其不再负责数据同步的事务，只负责应对前端访问，可以更多的发挥数据库本身的专长，让系统研发人员更专注于实际业务。此外，在数据更新至访问层的过程中，并不是每次都将全部数据进行更新同步，而是选择将数据状态发生变化的数据进行更新同步，可以减少需要的带宽。
进一步地，利用预定义的同步数据工具监听数据状态表，在监听到数据的状态发生变化时，将存储层数据库中状态发生变化的数据中增量的热度数据更新至访问层数据库，其中，热度数据是根据来自访问层的数据访问量反馈信息判断出的访问量大的数据。
预定义的同步数据工具在对数据状态表进行监听的过程中，同时接收访问层的数据访问量反馈信息，将访问量大的数据定义为热度数据。因此，在数据更新至访问层的过程中，将增量的热度数据进行更新同步，避免了数据的重复更新，不仅可以减少需要的带宽，还可以增大内存数据的存储量，提高并发访问的速度。无论互联网用户是通过正常访问系统还是极端情况的瞬时访问造成的峰值访问，系统底层都可以稳定地应对，这对提高系统的研发速度也是非常有益的。
可选地，上述步骤S120中将存储层数据库中状态发生变化的数据更新至访问层数据库，包括：
将存储层数据库中状态发生变化的数据加载至同步数据工具的队列中，并清除数据状态表中对应数据的状态；
将同步数据工具的队列中的数据采用异步更新的方式更新至访问层数据库。
其中，同步数据工具跟踪数据状态表中的数据，一旦发现数据变化，数据读写系统将存储层数据库中状态发生变化的数据加载至同步数据工具的队列中，同时清除数据状态表中对应数据的状态，这样可以确保数据状态更新的同步性。队列具有先进先出的特点，在一台或者多台计算机之间采用队列机制，可以提高工作效率。并且，采用异步更新的方式也可以提高程序执行相应请求的效率。这对于提高数据访问速度和数据检索速度都是十分有利的。
在数据更新至访问层数据库的过程中，预定义的同步数据工具与存储层和访问层的数据库之间的服务节点也会相应进行刷新，从而保持服务节点的活跃状态。存储服务节点可放在防火墙安全区域内，访问服务节点可放在与应用程序相同的网段。具体的存储服务节点和访问服务节点可以根据业务发展的实际需要进行扩展，可以采用集群的形式实现。同步数据工具为了保持可靠性，可起动多个服务节点，例如同步数据工具可以同时与配置有存储层数据库的多台服务器进行通信连接，其中一个服务节点保持活跃状态，另外的服务节点以静止状态存在，当一个活跃服务节点宕掉后，另外的静止服务节点会自动切换成活跃服务节点；同理，同步数据工具也可以同时与配置有访问层数据库的多台服务器进行通信连接。
S130、响应数据访问请求，读取访问层数据库中的数据。当互联网数据访问用户登陆访问界面，发起访问请求时，数据读写系统响应用户的数据访问请求，通过活跃的访问服务节点读取访问层数据库中的数据，并将数据展示在系统的显示区域，实现用户的访问。
在上述技术方案的基础上，步骤S120利用预定义的同步数据工具监听数据状态表，进一步优化为：
利用预定义的同步数据工具主动监听数据状态表，其中主动监听是通过同步数据工具在将数据写入存储层数据库时接收存储层的更新提示信息实现；
和/或
利用预定义的同步数据工具被动监听数据状态表，其中被动监听是通过同步数据工具在预设时间内检测数据状态表实现。
其中，具体的监听方式可以根据系统的需要进行设置，保证存储层数据状态监听的效率和准确度。被动监听的预设时间可以根据系统运行的状态或者系统研发人员的具体需要进行设置，预设时间越短，则同步数据工具的监听周期越短。
本发明实施例的技术方案中通过在将数据写入存储层数据库中时更新对应的数据状态，利用预定义的同步数据工具监听数据状态的变化，将存储层数据库中状态发生变化的数据更新至访问层数据库，进而实现数据访问，明确了数据存储层、数据同步层和数据访问层的各自分工，摒弃了现有技术中访问层同时负责数据同步复制与前端访问的机制；利用预定义的同步数据工具对存储层和访问层的数据同步进行管理，存储层负责前端数据的写入，同步层负责存储层与访问层之间的数据更新同步，访问层只负责前端数据的并发访问；解决了现有技术中由于关系型数据库中存储数据的强一致性引起的访问延迟，以及数据库扁平式存储结构特点不利于读取数据的问题；提高了互联网数据并发访问的速度，提高了数据检索的速度，提高了系统研发的速度，降低了企业搭建系统的底层存取架构的成本，降低了企业研发的成本。
实施例二
图2是本发明实施例二所提供的一种数据读写系统的结构示意图，本实施例可适用于互联网数据的写入与读取情况。本发明实施例所提供的数据读写系统可执行本发明任意实施例所提供的数据读写方法，具备执行方法相应的功能模块和有益效果。
如图2所示，本实施例的数据读写系统包括：写入模块210、更新模块220和读取模块230，其中：
写入模块210，用于将数据写入存储层数据库，更新存储层中预先建立的数据状态表，其中，数据状态表中记载存储层数据库中数据的状态。
可选地，存储层的数据库包括Mysql数据库；对应的访问层的数据库包括Redis数据库。
更新模块220，用于利用预定义的同步数据工具监听数据状态表，在监听到数据的状态发生变化时，则将存储层数据库中状态发生变化的数据更新至访问层数据库。
进一步地，更新模块220具体用于将存储层数据库中状态发生变化的数据中增量的热度数据更新至访问层数据库，其中，热度数据是根据来自访问层的数据访问量反馈信息判断出的访问量大的数据。
可选地，更新模块220包括监听单元、加载单元和第一更新单元,其中：
监听单元，用于利用预定义的同步数据工具监听数据状态表；
加载单元，用于在监听到数据的状态发生变化时，则将存储层数据库中状态发生变化的数据加载至同步数据工具的队列中，并清除数据状态表中对应数据的状态；
第一更新单元，用于将同步数据工具的队列中的数据采用异步更新的方式更新至访问层数据库。
读取模块230，用于响应数据访问请求，读取访问层数据库中的数据。
在上述技术方案的基础上，进一步地，更新模块220包括：
主动监听单元，用于利用预定义的同步数据工具主动监听数据状态表，其中主动监听是通过同步数据工具在将数据写入存储层数据库时接收存储层的更新提示信息实现；
和/或
被动监听单元，用于利用预定义的同步数据工具被动监听数据状态表，其中被动监听是通过同步数据工具在预设时间内检测数据状态表实现；
第二更新单元，用于在监听到数据的状态发生变化时，则将存储层数据库中状态发生变化的数据更新至访问层数据库。
本发明实施例的技术方案中通过在将数据写入存储层数据库中时更新对应的数据状态，利用预定义的同步数据工具监听数据状态的变化，将存储层数据库中状态发生变化的数据更新至访问层数据库，进而实现数据访问，摒弃了现有技术中访问层同时负责数据同步复制与前端访问的机制，利用预定义的同步数据工具对存储层和访问层的数据同步进行管理，访问层只负责前端数据的并发访问；解决了现有技术中由于关系型数据库中存储数据的强一致性引起的访问延迟，以及数据库扁平式存储结构特点不利于读取数据的问题；提高了互联网数据并发访问的速度，提高了数据检索的速度，提高了系统研发的速度，降低了企业搭建系统的底层存取架构的成本，降低了企业研发的成本。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种数据读写方法，其特征在于，包括：
将数据写入存储层数据库，更新存储层中预先建立的数据状态表，其中，所述数据状态表中记载所述存储层数据库中数据的状态；
利用预定义的同步数据工具监听所述数据状态表，在监听到数据的状态发生变化时，则将所述存储层数据库中状态发生变化的数据更新至访问层数据库；
响应数据访问请求，读取所述访问层数据库中的数据。
2.根据权利要求1所述的方法，其特征在于，所述将所述存储层数据库中状态发生变化的数据更新至访问层数据库，包括：
将所述存储层数据库中状态发生变化的数据中增量的热度数据更新至所述访问层数据库，其中，所述热度数据是根据来自访问层的数据访问量反馈信息判断出的访问量大的数据。
3.根据权利要求1所述的方法，其特征在于，所述将所述存储层数据库中状态发生变化的数据更新至访问层数据库，包括：
将所述存储层数据库中状态发生变化的数据加载至所述同步数据工具的队列中，并清除所述数据状态表中对应数据的状态；
将所述队列中的数据采用异步更新的方式更新至所述访问层数据库。
4.根据权利要求1～3任一项所述的方法，其特征在于，所述利用预定义的同步数据工具监听所述数据状态表，包括：
利用所述预定义的同步数据工具主动监听所述数据状态表，其中所述主动监听是通过所述同步数据工具在所述将数据写入存储层数据库时接收所述存储层的更新提示信息实现；
和/或
利用所述预定义的同步数据工具被动监听所述数据状态表，其中所述被动监听是通过所述同步数据工具在预设时间内检测所述数据状态表实现。
5.根据权利要求1所述的方法，其特征在于：
所述存储层数据库包括Mysql数据库；
所述访问层数据库包括Redis数据库。
6.一种数据读写系统，其特征在于，包括：
写入模块，用于将数据写入存储层数据库，更新存储层中预先建立的数据状态表，其中，所述数据状态表中记载所述存储层数据库中数据的状态；
更新模块，用于利用预定义的同步数据工具监听所述数据状态表，在监听到数据的状态发生变化时，则将所述存储层数据库中状态发生变化的数据更新至访问层数据库；
读取模块，用于响应数据访问请求，读取所述访问层数据库中的数据。
7.根据权利要求6所述的系统，其特征在于，所述更新模块用于：
将所述存储层数据库中状态发生变化的数据中增量的热度数据更新至所述访问层数据库，其中，所述热度数据是根据来自访问层的数据访问量反馈信息判断出的访问量大的数据。
8.根据权利要求6所述的系统，其特征在于，所述更新模块包括：
监听单元，用于利用所述预定义的同步数据工具监听所述数据状态表；
加载单元，用于在监听到数据的状态发生变化时，则将所述存储层数据库中状态发生变化的数据加载至所述同步数据工具的队列中，并清除所述数据状态表中对应数据的状态；
第一更新单元，用于将所述队列中的数据采用异步更新的方式更新至所述访问层数据库。
9.根据权利要求6～8任一项所述的系统，其特征在于，所述更新模块包括：
主动监听单元，用于利用所述预定义的同步数据工具主动监听所述数据状态表，其中所述主动监听是通过所述同步数据工具在所述将数据写入存储层数据库时接收所述存储层的更新提示信息实现；
和/或
被动监听单元，用于利用所述预定义的同步数据工具被动监听所述数据状态表，其中所述被动监听是通过所述同步数据工具在预设时间内检测所述数据状态表实现；
第二更新单元，用于在监听到数据的状态发生变化时，则将所述存储层数据库中状态发生变化的数据更新至所述访问层数据库。
10.根据权利要求6所述的系统，其特征在于：
所述存储层的数据库包括Mysql数据库；
所述访问层的数据库包括Redis数据库。
CN201711085850.6A 2017-11-07 2017-11-07 一种数据读写方法及系统 Pending CN107885824A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711085850.6A CN107885824A (zh) 2017-11-07 2017-11-07 一种数据读写方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711085850.6A CN107885824A (zh) 2017-11-07 2017-11-07 一种数据读写方法及系统

Publications (1)

Publication Number Publication Date
CN107885824A true CN107885824A (zh) 2018-04-06

Family

ID=61779118

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711085850.6A Pending CN107885824A (zh) 2017-11-07 2017-11-07 一种数据读写方法及系统

Country Status (1)

Country Link
CN (1) CN107885824A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108255621A (zh) * 2018-01-10 2018-07-06 深圳友门鹿网络科技有限公司 一种基于binlog的MySQL增量消息解析方法
CN111104464A (zh) * 2019-12-31 2020-05-05 成都校精灵科技有限公司 一种数据同步修改方法、读取方法及系统、可读存储介质
CN116034351A (zh) * 2020-09-03 2023-04-28 格步计程车控股私人有限公司 用于维护数据库的数据库系统和方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080140627A1 (en) * 2006-12-08 2008-06-12 International Business Machines Corporation Method and apparatus for aggregating database runtime information and analyzing application performance
CN101216832A (zh) * 2007-12-28 2008-07-09 腾讯科技（深圳）有限公司 数据同步方法及装置
CN101369283A (zh) * 2008-09-25 2009-02-18 中兴通讯股份有限公司 一种内存数据库与物理数据库间的数据同步方法及系统
CN102023979A (zh) * 2009-09-09 2011-04-20 中国工商银行股份有限公司 元数据管理方法及系统
CN104572689A (zh) * 2013-10-17 2015-04-29 腾讯科技（深圳）有限公司 数据同步方法、装置及系统
US20170075921A1 (en) * 2015-09-14 2017-03-16 Microsoft Technology Licensing, Llc Hosted file sync with direct access to hosted files

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080140627A1 (en) * 2006-12-08 2008-06-12 International Business Machines Corporation Method and apparatus for aggregating database runtime information and analyzing application performance
CN101216832A (zh) * 2007-12-28 2008-07-09 腾讯科技（深圳）有限公司 数据同步方法及装置
CN101369283A (zh) * 2008-09-25 2009-02-18 中兴通讯股份有限公司 一种内存数据库与物理数据库间的数据同步方法及系统
CN102023979A (zh) * 2009-09-09 2011-04-20 中国工商银行股份有限公司 元数据管理方法及系统
CN104572689A (zh) * 2013-10-17 2015-04-29 腾讯科技（深圳）有限公司 数据同步方法、装置及系统
US20170075921A1 (en) * 2015-09-14 2017-03-16 Microsoft Technology Licensing, Llc Hosted file sync with direct access to hosted files

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108255621A (zh) * 2018-01-10 2018-07-06 深圳友门鹿网络科技有限公司 一种基于binlog的MySQL增量消息解析方法
CN111104464A (zh) * 2019-12-31 2020-05-05 成都校精灵科技有限公司 一种数据同步修改方法、读取方法及系统、可读存储介质
CN116034351A (zh) * 2020-09-03 2023-04-28 格步计程车控股私人有限公司 用于维护数据库的数据库系统和方法

Similar Documents

Publication Publication Date Title
US20130110873A1 (en) Method and system for data storage and management
US10838935B2 (en) Automating the logging of table changes in a database
CN102638584B (zh) 数据分布缓存方法及系统
US8788458B2 (en) Data caching for mobile applications
CN108121755B (zh) 使用基于提示的路由在数据库系统中的工作负载切换
US7899783B1 (en) Monitoring data integrity
CN109189852A (zh) 一种数据同步的方法及用于数据同步的装置
CN100371900C (zh) 数据同步的方法和系统
CN104657459A (zh) 一种基于文件粒度的海量数据存储方法
WO2021184761A1 (zh) 数据访问方法和装置、数据存储方法和装置
CN104506625A (zh) 一种提升云数据库元数据节点可靠性的方法
US11526465B2 (en) Generating hash trees for database schemas
CN101741830A (zh) 实现多客户端数据同步的方法、系统、客户端及服务器
CN110489092B (zh) 一种数据库读写分离架构下读取数据延迟问题的解决方法
US11150996B2 (en) Method for optimizing index, master database node and subscriber database node
CN107885824A (zh) 一种数据读写方法及系统
CN108694218A (zh) 一种数据写入及读取的方法和装置
CN103902548B (zh) 一种访问数据库的系统和方法及注册、订票、网购系统
KR20150083938A (ko) Ｄｄｓ-ｄｂ 연동 시스템
CN110198327A (zh) 一种数据传输方法及相关设备
CN114416868A (zh) 一种数据同步方法、装置、设备及存储介质
CN112506432A (zh) 一种动静分离的电力自动化系统实时数据存储和管理方法及装置
CN107861958A (zh) 一种元数据同步方法及装置
CN116226133A (zh) 一种基于分表的业务数据读取方法、装置及存储介质
CN113886505B (zh) 一种基于搜索引擎和关系型数据库实现动态建模的管理系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180406

RJ01 Rejection of invention patent application after publication