CN113741889A - 异构数据库智能存取数据的方法及设备 - Google Patents

Abstract

本发明公开了一种异构数据库智能存取数据的方法及设备。其中，该方法包括：将数据模型中的元数据划分为不同的表类型，其中，所述数据模型为数据的唯一标识和不重复的用于描述数据属性的描述信息的集合；所述不同的表类型对应不同的操作方法；在检测到数据操作请求的情况下，从所述不同的表类型中确定与所述数据操作请求对应的目标表类型；确定与所述目标表类型对应的操作方法，对所述数据模型中的元数据进行与所述操作方法对应的操作。本发明解决了用不同的数据库存储不同的表类型来管理同一个数据模型开发效率低下和代码不能复用的技术问题。

Description

异构数据库智能存取数据的方法及设备

技术领域

本发明涉及数据库领域，具体而言，涉及一种异构数据库智能存取数据的方法及设备。

背景技术

在数据库领域，对于同一个数据模型，因为业务的需求的不同，对数据表的存储结构和数据库有不同的要求。对于需要长期存储的数据，需要压缩存储的条数，需要在一行记录里面尽可能放入更多的数据，所以对于数据库的响应速度没有要求。而在有些业务里，项目需要在1秒甚至更苛刻的时间内查询对应的数据，所以一般的数据库和存储结构不能满足这个要求，需要用到更快的数据存储媒介和key-value的存储格式。针对这些需求，一般的解决方法是对应每个数据库和每个存储结构设置一套对应的代码，复杂且不好管理，对不同的数据模型还需要再单独开发，效率低下。

针对上述的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种异构数据库智能存取数据的方法及设备，以至少解决用不同的数据库存储不同的表类型来管理同一个数据模型开发效率低下和代码不能复用的技术问题。

根据本发明实施例的一个方面，提供了一种异构数据库智能存取数据的方法，包括：将数据模型中的元数据划分为不同的表类型，其中，数据模型为数据的唯一标识和不重复的用于描述数据属性的描述信息的集合；不同的表类型对应不同的操作方法；在检测到数据操作请求的情况下，从不同的表类型中确定与数据操作请求对应的目标表类型；确定与目标表类型对应的操作方法，对数据模型中的元数据进行与操作方法对应的操作。

可选地，表类型包括以下至少之一：第一类型和第二类型，其中，第一类型用于指示一键对应多个值，第二类型为一键对应一个值。

可选地，操作方法包括以下至少之一：添加、修改、删除、查询。

可选地，确定与目标表类型对应的操作方法，包括：调用与目标表类型对应的接口方法；确定与接口方法对应的操作方法。

可选地，调用与目标表类型对应的接口方法之后，方法还包括：创建工厂类，工厂类用于定义drive类；通过drive类调用与表类型对应的操作方法。

可选地，确定与接口方法对应的操作方法，包括：将操作方法封装为接口类，其中，接口类包括用于实现以下至少的接口类：添加、修改、删除、查询方法。

可选地，从不同的表类型中确定与数据操作请求对应的目标表类型之前，方法还包括：从数据操作请求提取任务标识，并基于任务标识确定任务标识所对应目标任务的任务类型；判断预设列表是否存在与任务类型相同的类型；在判断结果为是的情况下，对指定数据模型中的数据执行与数据操作请求对应的操作，其中，指定数据模型为：专用于存储与任务类型对应的数据的数据库，数据库中采用与任务类型对应的存储结构。

根据本发明实施例的另一方面，还提供了一种异构数据库智能存取数据的装置，包括：划分模块，用于将数据模型中的元数据划分为不同的表类型，其中，数据模型为数据的唯一标识和不重复的用于描述数据属性的描述信息的集合；不同的表类型对应不同的操作方法；第一确定模块，用于在检测到数据操作请求的情况下，从不同的表类型中确定与数据操作请求对应的目标表类型；第二确定模块，用于确定与目标表类型对应的操作方法；操作模块，用于对数据模型中的元数据进行与操作方法对应的操作。

根据本发明实施例的又一方面，还提供了一种异构数据库智能存取数据的设备，包括：存储器，将用于存储程序指令；处理器，用于执行实现以下功能的程序指令：将数据模型中的元数据划分为不同的表类型，其中，数据模型为数据的唯一标识和不重复的用于描述数据属性的描述信息的集合；不同的表类型对应不同的操作方法；在检测到数据操作请求的情况下，从不同的表类型中确定与数据操作请求对应的目标表类型；确定与目标表类型对应的操作方法，对数据模型中的元数据进行与操作方法对应的操作。

根据本发明实施例的再一方面，还提供了一种非易失性存储介质，该非易失性存储介质包括存储的程序，其中，在程序运行时控制非易失性存储介质所在设备执行以上的异构数据库智能存取数据的方法。

在本发明实施例中，采用将数据存储为不同的表类型的方式，通过调用不同表类型的操作方法，达到了代码复用的目的，从而实现了提高效率和数据库响应速度的技术效果，进而解决了用不同的数据库存储不同的表类型来管理同一个数据模型开发效率低下和代码不能复用技术问题。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据本发明实施例的一种异构数据库智能存取数据的设备的结构图；

图2是根据本发明实施例的一种异构数据库智能存取数据的方法的流程图；

图3是根据本发明实施例的一种调用接口方法的流程图；

图4是根据本发明实施例的一种调用操作方法的流程图；

图5是根据本发明实施例的一种异构数据库智能存取数据的装置的结构图；

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

本发明实施例公开了一种数据存取的工具包，可以方便使用者在确定数据模型下对数据模型的元数据进行管理，该工具用于将已经确认好的数据模型的元数据划分为onekey-many values数据压缩表类型和one key-one value数据查询表类型，数据存储为这两种表类型可以在多个不同的数据库中同时进行添加、修改、删除、查询的操作，当需要对数据进行操作时，先确定数据存储的表类型，通过调用与表类型对应的操作方法，对数据执行相应的操作。

当部署环境变化，使用的数据库和数据表类型变化时，只需要变更配置文件调用不同的接口和实现方法，无需进行代码更新，节省时间。

基于上述原理，本申请实施例提供了一种异构数据库智能存取数据的设备。图1是根据本发明实施例的一种异构数据库智能存取数据的设备的结构图，如图1所示，该设备包括：

存储器102，用于存储程序指令，在本实施例中，该指令指的是数据存取的指令；

处理器104，用于执行存储器102中存储的程序指令，该程序指令用于实现以下功能：将数据模型中的元数据划分为不同的表类型，其中，数据模型为数据的唯一标识和不重复的用于描述数据属性的描述信息的集合，元数据为描述数据属性的信息，在数据库中是指表中存储的数据信息；不同的表类型对应不同的操作方法，其中，表类型包括以下至少之一：第一类型和第二类型，其中，第一类型用于指示一键对应多个值，对应one key-manyvalues表，第二类型为一键对应一个值，对应one key-one value表，键为数据库中对储存数据对象予以的唯一标识，值为数据库中表里包含的数据；在检测到数据操作请求的情况下，从不同的表类型中确定与数据操作请求对应的目标表类型，其中，操作请求包括以下至少之一：添加、修改、删除、查询；确定与目标表类型对应的操作方法，对数据模型中的元数据进行与操作方法对应的操作。

当设备检测到对数据库中的数据进行添加、修改、删除、查询的操作时，从上述两个表类型中确定数据是以哪种表类型的方式进行存储，若数据是以第一类型的表的格式存储，则调取第一类型的表，即one key-many values表对应的添加、修改、删除、查询方法，若数据是以第二类型的表的格式存储，则调取第二类型的表，即one key-one value表对应的添加、修改、删除、查询方法。

在上述运行环境下，本发明实施例，提供了一种异构数据库智能存取数据的方法的实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。

图2是根据本发明实施例的一种异构数据库智能存取数据的方法的流程图，如图2所示，该方法包括如下步骤：

步骤S202，将数据模型中的元数据划分为不同的表类型，其中，数据模型为数据的唯一标识和不重复的用于描述数据属性的描述信息的集合；不同的表类型对应不同的操作方法；

步骤S204，在检测到数据操作请求的情况下，从不同的表类型中确定与数据操作请求对应的目标表类型；

步骤S206，确定与目标表类型对应的操作方法，对数据模型中的元数据进行与操作方法对应的操作。

通过上述步骤，采用将数据存储为不同的表类型的方式，通过调用不同表类型的操作方法，达到了代码复用的目的，从而实现了提高效率和数据库响应速度的技术效果，进而解决了用不同的数据库存储不同的表类型来管理同一个数据模型开发效率低下和代码不能复用技术问题。

在步骤S202中，划分过程包括：获取数据模型中的元数据；将元数据一一写入表中。例如，用户属性包括{姓名；年龄；性别}，将{张三；24；男}的数据写入one key-onevalue表中，则先读取用户的姓名为“张三”，将该数据存储在“姓名”这一列中，再读取“24”，将该数据存储在“年龄”这一列中，最后读取用户的性别“男”，将该数据存储在“性别”这一列中，将用户所有属性全部存储到表中相应的列，即为完成了一条数据划分。

在步骤S202中，元数据为描述数据属性的信息，在数据库中是指表中存储的数据信息，例如，当描述用户的属性时，该信息可以为用户的姓名、年龄、性别等，当描述物品的属性时，该信息可以为编号、生产日期、生产地等。数据模型是描述事务属性的一段数据集合，例如，在学生成绩这个数据模型中，该数据模型由学生的学号和若干门学科的成绩组成，其中，学生的学号作为唯一标识，则数据模型的定义为，数据的唯一标识和不重复的描述数据属性的集合。

在步骤S202中，表类型包括以下至少之一：第一类型和第二类型，其中，第一类型用于指示一键对应多个值，即one key-many values表，第二类型为一键对应一个值，即onekey-one value表，键为数据库中对储存数据对象分配的唯一标识，值为数据库中表里包含的数据。例如当表中存储的是包含学生成绩的数据模型时，学生的学号可作为该数据模型的唯一标识，即将学生的学号这一列作为整张表的键，学号的具体值作为与键对应的值。

在步骤S204中，检测是否有操作请求，包括：对目标表类型对应的接口进行监控，若数据库访问了目标表类型对应的接口，并调用了目标表类型对应的接口方法，则认为进行了操作请求。

在步骤S204中，对于确定与数据操作请求对应的目标表类型，包括：本地维护操作和表类型的映射关系；获取操作请求对应的操作类型；将该操作类型与不同表类型所对应的操作进行匹配。

在步骤S206中，对于确定与目标表类型对应的操作方法，包括：不同的表类型对应不同的添加、修改、删除、查询的方法；获取目标表类型调用的操作方法；根据调用的操作方法查找相应的执行步骤。

在步骤S206中，操作方法包括以下至少之一：添加、修改、删除、查询。

在步骤S206中确定与目标表类型对应的操作方法时，如图3所示，该方法还包括：

步骤S302，调用与目标表类型对应的接口方法；

步骤S304，确定与接口方法对应的操作方法。

在步骤S302调用与目标表类型对应的接口方法之前，先将第一类型和第二类型的表对应的添加、修改、删除、查询的操作抽象成接口方法，接口方法包括第一接口方法和第二接口方法，有市面上流行的数据库，如mysql，sqlserver，orcale，redis，postgresql，hbase，hologres调用并实现上述接口方法。当对存储的数据进行添加、修改、删除、查询的操作时，先确定数据是以哪种表类型的方式进行存储，若数据是以第一类型的表的格式存储，则调取第一类型的表。即one key-many values表对应的第一接口方法，进而确定与第一接口方法对应的添加、修改、删除、查询方法，若数据是以第二类型的表的格式存储，则调取第二类型的表，即one key-one value表对应的第二接口方法，进而确定与第二接口方法对应的添加、修改、删除、查询方法。

在步骤S302调用与目标表类型对应的接口方法之后，如图4所示，该方法还包括：

步骤S402，创建工厂类，工厂类用于定义drive类；

步骤S404，通过drive类调用与表类型对应的操作方法。

其中，操作方法包括以下至少之一：添加、修改、删除、查询，工厂类用于实现工厂模式，工厂模式主要是在数据库中为创建对象提供过渡接口，以便将创建对象的具体过程屏蔽隔离起来，达到提高灵活性的目的。工厂类将不同的数据库类型和其适用的表类型一一对应，生成drive类，通过drive类实现调用不同的表类型中对数据的操作方法，当用户进行操作时，只需要drive.select()，drive.update()的操作就可以完成之前3000行以上的代码功能。

在步骤S304中确定与接口方法对应的操作方法时，该方法还包括：将操作方法封装为接口类，其中，接口类包括用于实现以下至少的接口类：添加、修改、删除、查询方法。封装隐藏了对象的属性和实现细节，仅对外公开接口，同时控制在程序中属性的读和修改的访问级别，提高了数据存取的安全性。

另外，考虑到在实施应用中，有可能会出现大量操作请求同时访问数据库的情况，在该情况下，如果操作请求过多，也可能会导致处理速度降低，此时便有可能影响任务的执行效率，为解决该技术问题，在从不同的表类型中确定与数据操作请求对应的目标表类型之前，还可以执行以下步骤，以对数据操作请求进行筛选：从数据操作请求提取任务标识，并基于任务标识确定任务标识所对应目标任务的任务类型；判断预设列表是否存在与任务类型相同的类型；在判断结果为是的情况下，对指定数据模型中的数据执行与数据操作请求对应的操作，其中，指定数据模型为：专用于存储与任务类型对应的数据的数据库，数据库中采用与任务类型对应的存储结构。基于上述方案，可以针对特定的操作请求采用异构数据库智能存储数据的方案，从而实现操作请求的分流。

需要说明的是，上述指定数据模型及其相应的存储结构是采用上述任务类型对应的开发方式(例如程序代码)进行单独开发得到的。

另外，还需要注意的是，采用上述方案，可以比较合理地将相关技术中的“每个数据库和每个存储结构设置一套对应的代码”的方案与本发明实施例提供的异构数据库智能存取数据的方案相结合，从而也有效利用了已有资源。

上述预设列表可以认为是一个白名单，在预设列表中存在与所述任务类型相同的类型的情况下，则采用上述指定数据模型进行数据的存取，在预设列表中不存在与所述任务类型相同的类型的情况下，则采用异构数据库智能存储数据的方案(即图2所示的方案)。

图5是根据本发明实施例的一种异构数据库智能存取数据的装置的结构图，如图5所示，该装置包括：

划分模块502，用于将数据模型中的元数据划分为不同的表类型，其中，数据模型为元数据的标识和用于描述数据属性的描述信息的集合，元数据为描述数据属性的信息，在数据库中是指表中存储的数据信息；不同的表类型对应不同的操作方法；表类型包括以下至少之一：第一类型和第二类型，其中，第一类型用于指示一键对应多个值，第二类型为一键对应一个值，键为数据库中对储存数据对象予以的唯一标识，值为数据库中表里包含的数据；

第一确定模块504，用于在检测到数据操作请求的情况下，从不同的表类型中确定与数据操作请求对应的目标表类型，其中，操作请求包括以下至少之一：添加、修改、删除、查询；

第二确定模块506，用于确定与目标表类型对应的操作方法；操作模块，用于对数据模型中的元数据进行与操作方法对应的操作。当装置检测到对数据库中的数据进行添加、修改、删除、查询的操作时，从上述两个表类型中确定数据是以哪种表类型的方式进行存储，若数据是以第一类型的表的格式存储，则调取第一类型的表对应的添加、修改、删除、查询方法，若数据是以第二类型的表的格式存储，则调取第二类型的表对应的添加、修改、删除、查询方法。

需要说明的是，图5所示的异构数据库智能存取数据的装置用于执行图2-4所示的异构数据库智能存取数据的方法，因此上述异构数据库智能存取数据的方法中的相关解释说明页适用于该异构数据库智能存取数据的装置，此处不再赘述。

本发明实施例还提供了一种非易失性存储介质，非易失性存储介质包括存储的程序，其中，在程序运行时控制非易失性存储介质所在设备执行以下异构数据库智能存取数据的方法：

将数据模型中的元数据划分为不同的表类型，其中，数据模型为数据的唯一标识和不重复的用于描述数据属性的描述信息的集合；不同的表类型对应不同的操作方法；

在检测到数据操作请求的情况下，从不同的表类型中确定与数据操作请求对应的目标表类型；

确定与目标表类型对应的操作方法，对数据模型中的元数据进行与操作方法对应的操作。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，可以为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种异构数据库智能存取数据的方法，其特征在于，包括：

将数据模型中的元数据划分为不同的表类型，其中，所述数据模型为数据的唯一标识和不重复的用于描述数据属性的描述信息的集合；所述不同的表类型对应不同的操作方法；

在检测到数据操作请求的情况下，从所述不同的表类型中确定与所述数据操作请求对应的目标表类型；

确定与所述目标表类型对应的操作方法，对所述数据模型中的元数据进行与所述操作方法对应的操作。

2.根据权利要求1所述的方法，其特征在于，所述表类型包括以下至少之一：第一类型和第二类型，其中，所述第一类型用于指示一键对应多个值，所述第二类型为一键对应一个值。

3.根据权利要求2所述的方法，其特征在于，确定与所述目标表类型对应的操作方法，包括：

调用与所述目标表类型对应的所述接口方法；

确定与所述接口方法对应的操作方法。

4.根据权利要求3所述的方法，其特征在于，调用与所述目标表类型对应的所述接口方法之后，所述方法还包括：创建工厂类，所述工厂类用于定义drive类；通过所述drive类调用与所述表类型对应的所述操作方法。

5.根据权利要求3所述的方法，其特征在于，确定与所述接口方法对应的操作方法，包括：将所述操作方法封装为接口类，其中，所述接口类包括用于实现以下至少的接口类：添加、修改、删除、查询方法。

6.根据权利要求1所述的方法，其特征在于，所述操作方法包括以下至少之一：添加、修改、删除、查询。

7.根据权利要求1至6中任意一项所述的方法，其特征在于，从所述不同的表类型中确定与所述数据操作请求对应的目标表类型之前，所述方法还包括：

从所述数据操作请求提取任务标识，并基于任务标识确定所述任务标识所对应目标任务的任务类型；

判断预设列表是否存在与所述任务类型相同的类型；

在判断结果为是的情况下，对指定数据模型中的数据执行与所述数据操作请求对应的操作，其中，所述指定数据模型为：专用于存储与所述任务类型对应的数据的数据库，所述数据库中采用与所述任务类型对应的存储结构。

8.一种异构数据库智能存取数据的装置，其特征在于，包括：

划分模块，用于将数据模型中的元数据划分为不同的表类型，其中，所述数据模型为数据的唯一标识和不重复的用于描述数据属性的描述信息的集合；所述不同的表类型对应不同的操作方法；

第一确定模块，用于在检测到数据操作请求的情况下，从所述不同的表类型中确定与所述数据操作请求对应的目标表类型；

第二确定模块，用于确定与所述目标表类型对应的操作方法；

操作模块，用于对所述数据模型中的元数据进行与所述操作方法对应的操作。

9.一种异构数据库智能存取数据的设备，其特征在于，包括：

存储器，用于存储程序指令；

处理器，用于执行实现以下功能的程序指令：

将数据模型中的元数据划分为不同的表类型，其中，所述数据模型为数据的唯一标识和不重复的用于描述数据属性的描述信息的集合；所述不同的表类型对应不同的操作方法；

在检测到数据操作请求的情况下，从所述不同的表类型中确定与所述数据操作请求对应的目标表类型；确定与所述目标表类型对应的操作方法，对所述数据模型中的元数据进行与所述操作方法对应的操作。

10.一种非易失性存储介质，其特征在于，所述非易失性存储介质包括存储的程序，其中，在所述程序运行时控制所述非易失性存储介质所在设备执行权利要求1至7中任意一项所述异构数据库智能存取数据的方法。

Images