CN113590622A - 分布式数据访问方法及装置 - Google Patents
分布式数据访问方法及装置 Download PDFInfo
- Publication number
- CN113590622A CN113590622A CN202110855424.6A CN202110855424A CN113590622A CN 113590622 A CN113590622 A CN 113590622A CN 202110855424 A CN202110855424 A CN 202110855424A CN 113590622 A CN113590622 A CN 113590622A
- Authority
- CN
- China
- Prior art keywords
- fields
- data
- database
- structured database
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000013507 mapping Methods 0.000 claims abstract description 59
- 238000004590 computer program Methods 0.000 claims description 16
- 238000012545 processing Methods 0.000 claims description 16
- 238000004458 analytical method Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 10
- 238000004891 communication Methods 0.000 description 7
- 239000000872 buffer Substances 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000002955 isolation Methods 0.000 description 2
- 208000003443 Unconsciousness Diseases 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
- G06F16/2255—Hash tables
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2433—Query languages
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- Mathematical Physics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种分布式数据访问方法及装置,所述方法包含:根据预定数据库的建表语句获取热表中所有字段及各字段对应的约束条件;根据各字段的约束条件构建热表中数据与结构化数据库之间的映射规则,通过所述映射规则将热表中数据拉取至结构化数据库;获取并解析访问请求生成查询参数,根据所述映射规则拼接所述查询参数生成查询指令;通过所述查询指令查询所述结构化数据库获得目标数据。
Description
技术领域
本发明涉及数据库领域,可应用于金融领域和其他领域,尤指一种分布式数据访问方法及装置。
背景技术
结构化数据库Redis作为一种高性能的key-value数据库,被广泛用于系统中高频数据的存储,以减小数据库的压力。由于结构化数据库的可靠性不如传统关系型数据库,数据最终还是需要以传统数据库的数据为准。目前大多按需指定映射规则将传统数据库中的数据映射到结构化数据库中以key-value的形式存储,不利于快速更新和扩展。
其次,传统的数据库又存在一定的局限性,当访问次数过多,对设备的性能要求较高;现有的冷热表技术仅能在一定程度对该问题进行缓解,并不能予以克服;为此,业内亟需一种成本较低且有效的方案,予以利用结构化数据库的优点来克服传统数据库上述局限性的方案,予以解决该问题。
发明内容
本发明目的在于提供一种分布式数据访问方法及装置,将传统数据库中的数据快速映射到redis中以key-value形式存储的映射规则,通过该映射规则,上层服务可以用操作数据库的方法操作redis,并解决redis不可用后,无感知切换数据源对上层服务提供服务。
为达上述目的,本发明所提供的一种分布式数据访问方法,所述方法包含:根据预定数据库的建表语句获取热表中所有字段及各字段对应的约束条件;根据各字段的约束条件构建热表中数据与结构化数据库之间的映射规则,通过所述映射规则将热表中数据拉取至结构化数据库;获取并解析访问请求生成查询参数,根据所述映射规则拼接所述查询参数生成查询指令;通过所述查询指令查询所述结构化数据库获得目标数据。
在上述分布式数据访问方法中,优选的,获取并解析访问请求生成查询参数之前还包含:获取所述结构化数据库的运行状态,当所述结构化数据库故障时,将所述查询参数提供至预定数据库进行目标数据查询。
在上述分布式数据访问方法中,优选的,根据各字段的约束条件构建热表中数据与结构化数据库之间的映射规则包含:将所有存在主键约束的字段通过预设连接符与热表表名拼接组成所述结构化数据库的key值;将所有无主键约束的字段通过预设连接符与热表表名拼接构造map作为value。
在上述分布式数据访问方法中,优选的,将所有无主键约束的字段通过预设连接符与热表表名拼接构造map作为value包含:当符合字段数为0,以value为String的类型进行存储,值为任意常量;当符合字段数大于0,以value为Hash的类型进行存储,hashMap的key分别是该表中的无主键约束字段。
在上述分布式数据访问方法中,优选的,通过所述映射规则将热表中数据拉取至结构化数据库包含:根据所述映射规则中的字段于预定数据库的热表中拉取热表数据;通过映射规则替换所述热表数据中对应的字段值构造key,以及,构造map作为value写入所述结构化数据库。
本发明还提供一种分布式数据访问装置,所述装置包含规则模块、拉取模块、解析模块和查询模块;所述规则模块用于根据预定数据库的建表语句获取热表中所有字段及各字段对应的约束条件;以及,根据各字段的约束条件构建热表中数据与结构化数据库之间的映射规则;所述拉取模块用于通过所述映射规则将热表中数据拉取至结构化数据库;所述解析模块用于获取并解析访问请求生成查询参数,根据所述映射规则拼接所述查询参数生成查询指令;所述查询模块用于通过所述查询指令查询所述结构化数据库获得目标数据。
在上述分布式数据访问装置中,优选的,所述装置还包含处理模块,所述处理模块用于在获取并解析访问请求生成查询参数之前,获取所述结构化数据库的运行状态,当所述结构化数据库故障时,将所述查询参数提供至预定数据库进行目标数据查询。
在上述分布式数据访问装置中,优选的,所述规则模块包含第一拼接单元和第二拼接单元;所述第一拼接单元用于将所有存在主键约束的字段通过预设连接符与热表表名拼接组成所述结构化数据库的key值;所述第二拼接单元用于将所有无主键约束的字段通过预设连接符与热表表名拼接构造map作为value。
在上述分布式数据访问装置中,优选的,所述第二拼接单元包含:当符合字段数为0,以value为String的类型进行存储,值为任意常量;当符合字段数大于0,以value为Hash的类型进行存储,hashMap的key分别是该表中的无主键约束字段。
在上述分布式数据访问装置中,优选的,所述拉取模块包含:根据所述映射规则中的字段于预定数据库的热表中拉取热表数据;通过映射规则替换所述热表数据中对应的字段值构造key,以及,构造map作为value写入所述结构化数据库。
本发明还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述方法。
本发明还提供一种计算机可读存储介质,所述计算机可读存储介质存储有执行上述方法的计算机程序。
本发明的有益技术效果在于:快速生成热表数据到redis的映射规则;通过该映射原则拉取数据,查询数据,让应用以操作数据库的方式操作redis数据库;redis故障后,自动隔离redis切换数据源,保证系统持续对外提供服务。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,并不构成对本发明的限定。在附图中:
图1为本发明一实施例所提供的分布式数据访问方法的流程示意图;
图2为本发明一实施例所提供的故障隔离的流程示意图;
图3为本发明一实施例所提供的故障隔离的应用原理示意图;
图4为本发明一实施例所提供的映射规则的生成流程示意图;
图5为本发明一实施例所提供的热表数据拉取的流程示意图;
图6为本发明一实施例所提供的分布式数据访问装置的结构示意图;
图7为本发明一实施例所提供的电子设备的结构示意图。
具体实施方式
以下将结合附图及实施例来详细说明本发明的实施方式,借此对本发明如何应用技术手段来解决技术问题,并达成技术效果的实现过程能充分理解并据以实施。需要说明的是,只要不构成冲突,本发明中的各个实施例及各实施例中的各个特征可以相互结合,所形成的技术方案均在本发明的保护范围之内。
另外,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
请参考图1所示,本发明所提供的一种分布式数据访问方法,所述方法包含:
S101根据预定数据库的建表语句获取热表中所有字段及各字段对应的约束条件;
S102根据各字段的约束条件构建热表中数据与结构化数据库之间的映射规则,通过所述映射规则将热表中数据拉取至结构化数据库;
S103获取并解析访问请求生成查询参数,根据所述映射规则拼接所述查询参数生成查询指令;
S104通过所述查询指令查询所述结构化数据库获得目标数据。
以此,将传统数据库中的数据快速映射到redis中以key-value形式存储的映射规则快速生成的方法,通过该映射规则,上层服务可以用操作数据库的方法操作redis,并解决redis不可用后,无感知切换数据源对上层服务提供服务。
请参考图2所示,本发明一实施例中,获取并解析访问请求生成查询参数之前还包含:
S201获取所述结构化数据库的运行状态;
S202当所述结构化数据库故障时,将所述查询参数提供至预定数据库进行目标数据查询。
在实际工作中,可参考图3所示,当redis故障时,本服务自动从数据库获取数据返给上层服务,具体流程如下:每次执行数据查询操作时,先判断redis可用标志;标志可用,从Redis中获取数据,否则,从数据库中获取数据返回给调用方;连续调用redis操作失败达到上限时,修改redis可用标志。
请参考图4所示,在本发明一实施例中,根据各字段的约束条件构建热表中数据与结构化数据库之间的映射规则包含:
S401将所有存在主键约束的字段通过预设连接符与热表表名拼接组成所述结构化数据库的key值;
S402将所有无主键约束的字段通过预设连接符与热表表名拼接构造map作为value。
其中将所有无主键约束的字段通过预设连接符与热表表名拼接构造map作为value可包含:当符合字段数为0,以value为String的类型进行存储,值为任意常量;当符合字段数大于0,以value为Hash的类型进行存储,hashMap的key分别是该表中的无主键约束字段。
具体的,在实际工作中,快速生成映射规则的流程分为三个部分,第一段是数据在redis中的存储类型,第二段是数据存储在redis中的key映射规则,第三段是数据在redis中的value映射规则,具体流程如下:
(1)根据数据库建表语句,获取热表中的所有字段及其对应的约束;
(2)循环读取所有字段约束进行处理,将所有存在主键约束的字段以某种连接符与表名一起拼接组成redis的key;
(3)将剩余无主键约束字段以相同连接符进行拼接,若符合字段数为0,以value为String的类型进行存储,值为任意常量;若符合字段数大于0,以value为Hash的类型进行存储,hashMap的key分别是该表中的无主键约束字段。
请参考图5所示,在本发明一实施例中,通过所述映射规则将热表中数据拉取至结构化数据库包含:
S501根据所述映射规则中的字段于预定数据库的热表中拉取热表数据;
S502通过映射规则替换所述热表数据中对应的字段值构造key,以及,构造map作为value写入所述结构化数据库。
具体的,在实际工作中,该实施例主要是按照生成的映射规则,将热表数据从数据库拉取到redis,其流程如下:
(1)按照映射规则中的字段,从数据库中获取热表数据;
(2)循环处理每一条数据,按照映射规则替换字段值,构造key,其他数据构造成map作为value,写入redis。
在上述实施例的基础上,当某一服务按照操作数据库的方法操作redis数据时,即可采用以下流程:
(1)按照数据库操作方法增删改查定义服务接口;
(2)根据传入字段和操作方法,按照映射规则拼接需要操作的key,根据操作方法转化成redis对应操作操作redis。
综上,本发明所提供的分布式数据访问方法可快速生成热表数据到redis的映射规则;通过该映射原则拉取数据,查询数据,让应用以操作数据库的方式操作redis数据库;redis故障后,自动隔离redis切换数据源,保证系统持续对外提供服务。
请参考图6所示,本发明还提供一种分布式数据访问装置,所述装置包含规则模块、拉取模块、解析模块和查询模块;所述规则模块用于根据预定数据库的建表语句获取热表中所有字段及各字段对应的约束条件;以及,根据各字段的约束条件构建热表中数据与结构化数据库之间的映射规则;所述拉取模块用于通过所述映射规则将热表中数据拉取至结构化数据库;所述解析模块用于获取并解析访问请求生成查询参数,根据所述映射规则拼接所述查询参数生成查询指令;所述查询模块用于通过所述查询指令查询所述结构化数据库获得目标数据。进一步的,所述装置还可包含处理模块,所述处理模块用于在获取并解析访问请求生成查询参数之前,获取所述结构化数据库的运行状态,当所述结构化数据库故障时,将所述查询参数提供至预定数据库进行目标数据查询。在实际工作中各模块的具体实现方式可参考后续实施例,在此就不再一一详述。
在本发明一实施例中,所述规则模块包含第一拼接单元和第二拼接单元;所述第一拼接单元用于将所有存在主键约束的字段通过预设连接符与热表表名拼接组成所述结构化数据库的key值;所述第二拼接单元用于将所有无主键约束的字段通过预设连接符与热表表名拼接构造map作为value。其中,所述第二拼接单元进一步包含:当符合字段数为0,以value为String的类型进行存储,值为任意常量;当符合字段数大于0,以value为Hash的类型进行存储,hashMap的key分别是该表中的无主键约束字段。在本发明另一实施例中,所述拉取模块包含:根据所述映射规则中的字段于预定数据库的热表中拉取热表数据;通过映射规则替换所述热表数据中对应的字段值构造key,以及,构造map作为value写入所述结构化数据库。其中,所述规则模块和所述拉取模块的具体实现方式已在前述实施例中详细说明,在此就不再一一详述。
本发明的有益技术效果在于:快速生成热表数据到redis的映射规则;通过该映射原则拉取数据,查询数据,让应用以操作数据库的方式操作redis数据库;redis故障后,自动隔离redis切换数据源,保证系统持续对外提供服务。
本发明还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述方法。
本发明还提供一种计算机可读存储介质,所述计算机可读存储介质存储有执行上述方法的计算机程序。
如图7所示,该电子设备600还可以包括:通信模块110、输入单元120、音频处理单元130、显示器160、电源170。值得注意的是,电子设备600也并不是必须要包括图7中所示的所有部件;此外,电子设备600还可以包括图7中没有示出的部件,可以参考现有技术。
如图7所示,中央处理器100有时也称为控制器或操作控件,可以包括微处理器或其他处理器装置和/或逻辑装置,该中央处理器100接收输入并控制电子设备600的各个部件的操作。
其中,存储器140,例如可以是缓存器、闪存、硬驱、可移动介质、易失性存储器、非易失性存储器或其它合适装置中的一种或更多种。可储存上述与失败有关的信息,此外还可存储执行有关信息的程序。并且中央处理器100可执行该存储器140存储的该程序,以实现信息存储或处理等。
输入单元120向中央处理器100提供输入。该输入单元120例如为按键或触摸输入装置。电源170用于向电子设备600提供电力。显示器160用于进行图像和文字等显示对象的显示。该显示器例如可为LCD显示器,但并不限于此。
该存储器140可以是固态存储器,例如,只读存储器(ROM)、随机存取存储器(RAM)、SIM卡等。还可以是这样的存储器,其即使在断电时也保存信息,可被选择性地擦除且设有更多数据,该存储器的示例有时被称为EPROM等。存储器140还可以是某种其它类型的装置。存储器140包括缓冲存储器141(有时被称为缓冲器)。存储器140可以包括应用/功能存储部142,该应用/功能存储部142用于存储应用程序和功能程序或用于通过中央处理器100执行电子设备600的操作的流程。
存储器140还可以包括数据存储部143,该数据存储部143用于存储数据,例如联系人、数字数据、图片、声音和/或任何其他由电子设备使用的数据。存储器140的驱动程序存储部144可以包括电子设备的用于通信功能和/或用于执行电子设备的其他功能(如消息传送应用、通讯录应用等)的各种驱动程序。
通信模块110即为经由天线111发送和接收信号的发送机/接收机110。通信模块(发送机/接收机)110耦合到中央处理器100,以提供输入信号和接收输出信号,这可以和常规移动通信终端的情况相同。
基于不同的通信技术,在同一电子设备中,可以设置有多个通信模块110,如蜂窝网络模块、蓝牙模块和/或无线局域网模块等。通信模块(发送机/接收机)110还经由音频处理器130耦合到扬声器131和麦克风132,以经由扬声器131提供音频输出,并接收来自麦克风132的音频输入,从而实现通常的电信功能。音频处理器130可以包括任何合适的缓冲器、解码器、放大器等。另外,音频处理器130还耦合到中央处理器100,从而使得可以通过麦克风132能够在本机上录音,且使得可以通过扬声器131来播放本机上存储的声音。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (12)
1.一种分布式数据访问方法,其特征在于,所述方法包含:
根据预定数据库的建表语句获取热表中所有字段及各字段对应的约束条件;
根据各字段的约束条件构建热表中数据与结构化数据库之间的映射规则,通过所述映射规则将热表中数据拉取至结构化数据库;
获取并解析访问请求生成查询参数,根据所述映射规则拼接所述查询参数生成查询指令;
通过所述查询指令查询所述结构化数据库获得目标数据。
2.根据权利要求1所述的分布式数据访问方法,其特征在于,获取并解析访问请求生成查询参数之前还包含:
获取所述结构化数据库的运行状态,当所述结构化数据库故障时,将所述查询参数提供至预定数据库进行目标数据查询。
3.根据权利要求1所述的分布式数据访问方法,其特征在于,根据各字段的约束条件构建热表中数据与结构化数据库之间的映射规则包含:
将所有存在主键约束的字段通过预设连接符与热表表名拼接组成所述结构化数据库的key值;
将所有无主键约束的字段通过预设连接符与热表表名拼接构造map作为value。
4.根据权利要求3所述的分布式数据访问方法,其特征在于,将所有无主键约束的字段通过预设连接符与热表表名拼接构造map作为value包含:
当符合字段数为0,以value为String的类型进行存储,值为任意常量;
当符合字段数大于0,以value为Hash的类型进行存储,hashMap的key分别是该表中的无主键约束字段。
5.根据权利要求1所述的分布式数据访问方法,其特征在于,通过所述映射规则将热表中数据拉取至结构化数据库包含:
根据所述映射规则中的字段于预定数据库的热表中拉取热表数据;
通过映射规则替换所述热表数据中对应的字段值构造key,以及,构造map作为value写入所述结构化数据库。
6.一种分布式数据访问装置,其特征在于,所述装置包含规则模块、拉取模块、解析模块和查询模块;
所述规则模块用于根据预定数据库的建表语句获取热表中所有字段及各字段对应的约束条件;以及,根据各字段的约束条件构建热表中数据与结构化数据库之间的映射规则;
所述拉取模块用于通过所述映射规则将热表中数据拉取至结构化数据库;
所述解析模块用于获取并解析访问请求生成查询参数,根据所述映射规则拼接所述查询参数生成查询指令;
所述查询模块用于通过所述查询指令查询所述结构化数据库获得目标数据。
7.根据权利要求6所述的分布式数据访问装置,其特征在于,所述装置还包含处理模块,所述处理模块用于在获取并解析访问请求生成查询参数之前,获取所述结构化数据库的运行状态,当所述结构化数据库故障时,将所述查询参数提供至预定数据库进行目标数据查询。
8.根据权利要求6所述的分布式数据访问装置,其特征在于,所述规则模块包含第一拼接单元和第二拼接单元;
所述第一拼接单元用于将所有存在主键约束的字段通过预设连接符与热表表名拼接组成所述结构化数据库的key值;
所述第二拼接单元用于将所有无主键约束的字段通过预设连接符与热表表名拼接构造map作为value。
9.根据权利要求8所述的分布式数据访问装置,其特征在于,所述第二拼接单元包含:当符合字段数为0,以value为String的类型进行存储,值为任意常量;当符合字段数大于0,以value为Hash的类型进行存储,hashMap的key分别是该表中的无主键约束字段。
10.根据权利要求6所述的分布式数据访问装置,其特征在于,所述拉取模块包含:根据所述映射规则中的字段于预定数据库的热表中拉取热表数据;通过映射规则替换所述热表数据中对应的字段值构造key,以及,构造map作为value写入所述结构化数据库。
11.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至5任一所述方法。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有由计算机执行权利要求1至5任一所述方法的计算机程序。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110855424.6A CN113590622A (zh) | 2021-07-28 | 2021-07-28 | 分布式数据访问方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110855424.6A CN113590622A (zh) | 2021-07-28 | 2021-07-28 | 分布式数据访问方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113590622A true CN113590622A (zh) | 2021-11-02 |
Family
ID=78251109
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110855424.6A Pending CN113590622A (zh) | 2021-07-28 | 2021-07-28 | 分布式数据访问方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113590622A (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105512200A (zh) * | 2015-11-26 | 2016-04-20 | 华为技术有限公司 | 一种分布式数据库处理的方法和设备 |
CN108959562A (zh) * | 2018-07-04 | 2018-12-07 | 北京京东尚科信息技术有限公司 | 应用在区块链上的海量规则数据处理方法和系统 |
CN110109924A (zh) * | 2019-04-23 | 2019-08-09 | 重庆紫光华山智安科技有限公司 | 检索方法及装置 |
CN110688397A (zh) * | 2019-07-30 | 2020-01-14 | 民生科技有限责任公司 | 一种基于sql的分布式数据统一访问系统及方法 |
CN111190928A (zh) * | 2019-12-24 | 2020-05-22 | 平安普惠企业管理有限公司 | 缓存处理方法、装置、计算机设备以及存储介质 |
CN112035479A (zh) * | 2020-08-31 | 2020-12-04 | 平安医疗健康管理股份有限公司 | 医药类数据库的访问方法、装置和计算机设备 |
-
2021
- 2021-07-28 CN CN202110855424.6A patent/CN113590622A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105512200A (zh) * | 2015-11-26 | 2016-04-20 | 华为技术有限公司 | 一种分布式数据库处理的方法和设备 |
CN108959562A (zh) * | 2018-07-04 | 2018-12-07 | 北京京东尚科信息技术有限公司 | 应用在区块链上的海量规则数据处理方法和系统 |
CN110109924A (zh) * | 2019-04-23 | 2019-08-09 | 重庆紫光华山智安科技有限公司 | 检索方法及装置 |
CN110688397A (zh) * | 2019-07-30 | 2020-01-14 | 民生科技有限责任公司 | 一种基于sql的分布式数据统一访问系统及方法 |
CN111190928A (zh) * | 2019-12-24 | 2020-05-22 | 平安普惠企业管理有限公司 | 缓存处理方法、装置、计算机设备以及存储介质 |
CN112035479A (zh) * | 2020-08-31 | 2020-12-04 | 平安医疗健康管理股份有限公司 | 医药类数据库的访问方法、装置和计算机设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9288245B2 (en) | Apparatus and methods of accessing content | |
CN111078672B (zh) | 数据库的数据对比方法及装置 | |
WO2020211766A1 (zh) | 音频处理方法、电路和终端 | |
WO2021057064A1 (zh) | 基于人工智能的数据交互转换方法、装置、设备及介质 | |
CN111984239A (zh) | 一种页面配置方法、装置、服务器及存储介质 | |
CN112350873A (zh) | 应用服务信息处理方法、应用服务调用方法、装置及系统 | |
CN111949614A (zh) | 银行系统文件转换方法及装置 | |
CN113342330B (zh) | 前端工程生成方法及装置 | |
CN111930690B (zh) | 文件生成方法及装置 | |
CN114153856A (zh) | 主机数据双写方法及装置 | |
CN113946565A (zh) | 一种支持异构数据的分库分表迁移方法及系统 | |
CN111432060B (zh) | 手机音频模块的测试方法、装置及存储介质 | |
US20080281852A1 (en) | Method, apparatus and computer program product for providing an adaptive framework for a metadata-context switch | |
CN113590622A (zh) | 分布式数据访问方法及装置 | |
CN115292415A (zh) | 一种数据库访问方法及装置 | |
CN111090530B (zh) | 一种分布式跨进程间通信总线系统 | |
CN110278480A (zh) | 电视机频道预置方法、装置、计算机设备及可读存储介质 | |
CN114840576A (zh) | 数据标准匹配方法及装置 | |
CN114490402A (zh) | 一种报文字段合法性检查方法及装置 | |
CN103618961A (zh) | 一种显示视频标题的方法、系统及浏览器 | |
CN112711602B (zh) | 一种存储过程的运行方法、装置,数据库系统及存储介质 | |
CN111460037A (zh) | 金融数据查询方法及装置 | |
CN118550925A (zh) | 一种低代码跨系统数据复制方法及系统 | |
CN111444225B (zh) | 通用指标解析方法及装置 | |
CN114070902B (zh) | 基于delphi的报文处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |