CN111651425A - 数据集市的数据提取方法、装置、终端及存储介质 - Google Patents
数据集市的数据提取方法、装置、终端及存储介质 Download PDFInfo
- Publication number
- CN111651425A CN111651425A CN201910160237.9A CN201910160237A CN111651425A CN 111651425 A CN111651425 A CN 111651425A CN 201910160237 A CN201910160237 A CN 201910160237A CN 111651425 A CN111651425 A CN 111651425A
- Authority
- CN
- China
- Prior art keywords
- data
- view
- mart
- request
- field
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013075 data extraction Methods 0.000 title claims abstract description 101
- 238000000034 method Methods 0.000 title claims abstract description 55
- 238000003860 storage Methods 0.000 title claims abstract description 18
- 238000013475 authorization Methods 0.000 claims description 24
- 238000000586 desensitisation Methods 0.000 claims description 22
- 238000004590 computer program Methods 0.000 claims description 3
- 239000002699 waste material Substances 0.000 abstract description 4
- 238000007726 management method Methods 0.000 description 22
- 238000010586 diagram Methods 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013501 data transformation Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012946 outsourcing Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例公开了一种数据集市的数据提取方法、装置、终端及存储介质，其中该方法包括：接收业务终端发送的提取数据请求；根据所述提取数据请求以及所述数据集市的基本表创建数据视图；通过视图查询接口将所述数据视图对应的数据发送至所述业务终端。本发明实施例提供的一种数据集市的数据提取方法、装置、终端及存储介质，减少了数据集市的管理终端的资源浪费。
Description
技术领域
本发明实施例涉及计算机技术，尤其涉及一种数据集市的数据提取方法、装置、终端及存储介质。
背景技术
数据仓库是一个面向主题的、集成的、相对稳定的和反映历史变化的数据集合用于支持管理决策。数据集市是从企业范围的数据库、数据仓库，或者是更加专业的数据仓库中抽取出来的数据集合，其以部门或特殊的分析为主题，迎合了专业用户群体的特殊需求，可以在一定程度上缓解访问数据仓库的瓶颈。
现有技术中，数据集市的数据提取方法主要包括：数据集市的管理终端接收业务终端的提取数据请求，根据提取数据请求创建数据表并将数据表发送至业务终端。
在实现本发明过程中，发明人发现现有技术中至少存在如下问题：
当业务终端提取数据请求相似但涉及数据不同，或提取数据请求不同但涉及到的数据相同时，为满足业务终端的个性需求需创建不同数据表，但不同数据表中存在大量数据冗余，浪费了管理终端的存储资源。
发明内容
有鉴于此，本发明实施例提供了一种数据集市的数据提取方法、装置、终端及存储介质，减少了数据集市的管理终端的资源浪费。
第一方面，本发明实施例提供了一种数据集市的数据提取方法，包括：
接收业务终端发送的提取数据请求；
根据所述提取数据请求以及所述数据集市的基本表创建数据视图；
通过视图查询接口将所述数据视图对应的数据发送至所述业务终端。
第二方面，本发明实施例提供了一种数据集市的数据提取装置，包括：
请求接收模块，用于接收业务终端发送的提取数据请求；
数据视图创建模块，用于根据所述提取数据请求以及所述数据集市的基本表创建数据视图；
数据发送模块，用于通过视图查询接口将所述数据视图对应的数据发送至所述业务终端。
第三方面，本发明实施例提供了一种终端，包括：
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明任一实施例所述的数据集市的数据提取方法。
第四方面，本发明实施例提供了一种存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明任一实施例所述的数据集市的数据提取方法。
本发明实施例提供的一种数据集市的数据提取方法、装置、终端及存储介质，其中该方法包括：数据集市的管理终端接收业务终端发送的提取数据请求，根据提取数据请求以及数据集市的基本表创建数据视图，并通过视图查询接口将数据视图对应的数据发送至业务终端。由于数据集市的管理终端所创建的数据视图为不占内存空间的虚表，因此减少了数据集市的管理终端的资源浪费。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图做一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的一种数据集市的数据提取方法流程图；
图2是本发明实施例二提供的一种数据集市的数据提取方法流程图；
图3是本发明实施例三提供的一种数据集市的数据提取方法流程图；
图4是本发明实施例四提供的一种数据集市的数据提取装置结构示意图；
图5是本发明实施例五提供的一种终端的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，以下将参照本发明实施例中的附图，通过实施方式清楚、完整地描述本发明的技术方案，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。下述各实施例中，每个实施例中同时提供了可选特征和示例，实施例中记载的各个特征可进行组合，形成多个可选方案，不应将每个编号的实施例仅视为一个技术方案。
实施例一
图1是本发明实施例一提供的一种数据集市的数据提取方法流程图，本实施例可适用于数据集市的数据提取的情况，该方法可以由终端实现，例如数据集市的管理终端，具体可通过终端中的软件和/或硬件来实施。参见图1，该数据集市的数据提取方法包括如下步骤：
S110、接收业务终端发送的提取数据请求。
其中，数据集市中包含有至少一张基本表，且至少一张基本表中存放有各字段数据。其中，当数据集市中所存放的字段数据为敏感数据时，数据集市也可以认为是敏感集市。示例性的，当数据集市中的基本表为货物订单表时，敏感数据例如可以是订单表中的客户姓名字段、电话字段和收货地址字段等对应的数据。其中，数据集市的管理终端可以接收业务终端提交的数据提取请求，并可以根据数据提取请求将相应数据反馈至业务终端。
S120、根据提取数据请求以及数据集市的基本表创建数据视图。
其中，数据视图又可以称为数据库视图，数据视图是从一个或多个基本表导出的表。其中，数据视图与基本表的区别包括，数据视图是一个虚表，即数据视图所对应的数据不进行实际存储，通过数据视图看到的数据仍存放在基本表中，数据集市中只存储数据视图的定义；而基本表为数据集市中包含实际数据，占有存储空间的表。
可选的，提取数据请求包括表信息和字段信息；相应的，根据提取数据请求以及数据集市的基本表创建数据视图，包括：
调用视图创建语句创建数据视图；根据表信息从数据集市的基本表中选取待提取基本表；根据字段信息从待提取基本表的字段中选择待提取字段；将待提取字段添加至数据视图。
其中，视图创建语句例如可以是SQL函数库中的CREATE VIEW语句，例如具体可以是CREATE VIEW view_name，其中通过CREATE VIEW语句可以定义一个名称为view_name的数据视图。其中，可以在定义好的数据视图中添加字段，具体可以是根据提取数据请求中的表信息和字段信息选取相应字段，并添加至数据视图中。例如，具体可以通过AS SELECTcolumn_name(s)FROM table_name语句实现，其中column_name(s)可以表示字段信息，table_name可以表示表信息。
可选的，提取数据请求还包括表授权信息；相应的，根据表信息从数据集市的基本表中选取待提取基本表，包括：根据表信息以及表授权信息从数据集市的基本表中选取待提取基本表；
和/或，所述提取数据请求还包括字段授权信息，相应的，根据字段信息从待提取基本表的字段中选择待提取字段，包括：根据字段信息以及字段授权信息从待提取基本表的字段中选择待提取字段。
其中，数据集市的管理终端可以预先为各业务终端授权基本表和/或字段数据的相关权限，并通知各业务终端；各业务终端可以接收并存储表授权信息和/或字段授权信息。当数据集市的管理终端接收到业务终端的提取数据请求时，可以获取提取数据请求中的表授权信息和/或字段授权信息，并通过Web权限控制系统确定该业务终端所发送的提取数据请求中的表授权信息和/或字段授权信息对应的可查看的基本表和/或字段数据，并从该业务终端可查看的基本表和/或字段数据中选取业务终端所需数据作为提取字段。
其中，通过表授权信息和/或字段授权信息的设置，业务终端通过数据视图只能查看其已授权的字段数据，看不到未授权的字段数据。即通过表粒度和/或字段粒度权限的设置，减少数据对外传输，提高了数据集市的数据安全性。
可选的，提取数据请求还包括脱敏信息；相应的，在选择待提取字段之后，还包括：根据脱敏信息对待提取字段进行数据脱敏，得到脱敏字段；相应的，将待提取字段添加至所述数据视图，包括：将脱敏字段添加至数据视图。
其中，当数据集市为敏感集市时，所选择的待提取字段为敏感字段。在创建数据视图时，若业务终端存在数据脱敏需求时，可以在提取数据请求中包括脱敏信息，以进行待提取字段的数据脱敏操作。其中，数据脱敏可以认为是对敏感数据通过脱敏规则进行数据变形，以实现敏感数据的可靠保护。通过数据脱敏操作可以在开发、测试和其它非生产环境以及外包环境中安全地使用脱敏后的真实数据集。其中，通过脱敏规则进行数据变形例如可以包括通过预设加密算法对敏感数据进行加密，其中加密算法例如可以是安全散列算法(Secure Hash Algorithm，SHA)等。
S130、通过视图查询接口将数据视图对应的数据发送至业务终端。
其中，业务终端可以继承管理终端提供的视图查询接口，并可以通过访问该视图查询接口查询所需数据，即数据集市的管理终端可以通过视图查询接口将数据视图对应的数据发送至业务终端。当业务终端通过视图查询接口获取所需数据后，可以进一步进行数据分析和挖掘等工作。
进一步的，若业务终端需要获取其已授权的全部基本表和/或字段数据时，可以发送包含有表授权信息和/或字段授权信息的导出数据请求至数据集市的管理终端；管理终端在确定业务终端的表授权信息和/或字段授权信息后，可将业务终端已授权的全部基本表和/或字段数据批量导出并发送至业务终端。
本实施例提供的数据集市的数据提取方法，数据集市的管理终端接收业务终端发送的提取数据请求，根据提取数据请求以及数据集市的基本表创建数据视图，并通过视图查询接口将数据视图对应的数据发送至业务终端。由于数据集市的管理终端所创建的数据视图为不占内存空间的虚表，因此减少了数据集市的管理终端的资源浪费。
实施例二
本实施例在上述实施例的基础上，优化了数据视图对应数据的解密操作。具体优化方式为：控制视图查询接口调用解密接口将数据视图对应的数据进行解密，并将解密后的数据发送至业务终端。本实施例与上述实施例具有相同的发明构思，与上述实施例相同或相应的术语解释，本实施例不再赘述。
图2是本发明实施例二提供的一种数据集市的数据提取方法流程图。参见图2，该方法包括如下步骤：
S210、接收业务终端发送的提取数据请求；
S220、根据提取数据请求以及数据集市的基本表创建数据视图；
S230、控制视图查询接口调用解密接口将数据视图对应的数据进行解密，并将解密后的数据发送至业务终端。
其中，数据从数据源落入数据仓库之前，数据生产系统可以通过调用安全加密接口将从数据源获取的数据进行加密，并将加密后的数据落入数据仓库，可以认为数据仓库中的各数据集市所存储的字段数据为加密后的数据。
管理终端在通过视图查询接口将数据视图对应的数据发送至业务终端过程中，可以进一步调用解密接口将数据视图对应的数据进行解密；其中，所调用的解密接口与数据生产系统所调用的加密接口相对应，即加密接口采用预设加密算法，则解密接口采用预设加密算法对应的解密算法。
现有技术中，管理终端将加密的数据表同步至业务终端的数据集市，或者将加密的数据表上传至业务终端对应的文件传输协议服务器(File Transfer Protocol Server，又称FTP服务器)，或者通过邮件将加密的数据表发送至业务终端。业务终端需要将接收的加密的数据表进行解密，以获取数据表中数据，因此业务终端必须开发解密程序，已进行数据解密，从而增加了业务终端的开发工作及数据提取步骤。
本实施例提供的数据集市的数据提取方法，在通过视图查询接口将数据视图对应的数据发送至业务终端过程中，调用了解密接口自动进行了数据解密，以使用户无需自行解密数据，简化了用户提取数据步骤，提高了用户体验。此外，本实施例与上述实施例具有相同的发明构思，未在本实施例中详尽描述的技术细节可参见上述实施例，并且本实施例可达到与上述实施例相同的有益效果。
实施例三
本实施例在上述实施例的基础上，对创建数据视图步骤进行了优化。具体优化方式为：在根据提取数据请求以及数据集市的基本表创建数据视图之后，包括：统计数据视图的创建频率，若创建频率高于预设频率，则将数据视图确定为共用视图并进行维护。在接收业务终端发送的提取数据请求之后，包括：判断是否存在与提取数据请求相匹配的共用视图；相应的，通过视图查询接口将数据视图对应的数据发送至业务终端，包括：若存在与提取数据请求相匹配的共用视图，则通过视图查询接口将共用视图对应的数据发送至业务终端；若不存在与提取数据请求相匹配的共用视图，则根据提取数据请求以及数据集市的基本表创建数据视图；通过视图查询接口将数据视图对应的数据发送至业务终端。本实施例与上述实施例具有相同的发明构思，与上述实施例相同或相应的术语解释，本实施例不再赘述。
图3是本发明实施例三提供的一种数据集市的数据提取方法流程图。参见图3，该方法包括如下步骤：
S310、接收业务终端发送的提取数据请求；
S320、判断是否存在与提取数据请求相匹配的共用视图；
S331、若存在与提取数据请求相匹配的共用视图，则通过视图查询接口将共用视图对应的数据发送至业务终端；
S332、若不存在与提取数据请求相匹配的共用视图，则根据提取数据请求以及数据集市的基本表创建数据视图；
S340、统计数据视图的创建频率，若创建频率高于预设频率，则将数据视图确定为共用视图并进行维护；
S350、通过视图查询接口将数据视图对应的数据发送至业务终端。
其中，共用视图可以认为是业务终端经常访问的数据视图，也可以认为是管理终端根据提取数据请求经常创建的数据视图。其中，提取数据请求与共用视图相匹配，可以认为提取请求中的表字段和/或字节字段与共用视图中包含的字段相同。其中，数据集市的管理终端在创建数据视图后，可以进一步判断该数据视图在预设时间内的创建频率，若创建频率高于预设频率，则认为该视图数据为经常创建的数据视图，则可将该数据视图确定为共用视图并进行维护。其中，确定共用视图步骤S340可以在步骤S350之前，可以在步骤S350之后，即对步骤S340与步骤S350的先后顺序不作限定。
管理终端可以将经常创建的数据视图确定为共用视图并进行维护，且当接收的提取数据请求与共用视图相匹配时，可以直接将共用视图的数据发送至业务终端，从而在一定程度上简化了数据提取的步骤，提高了数据提取效率。
本实施例提供的数据集市的数据提取方法，在创建数据视图后，若判断所创建的视图为常用视图则将该视图作为共用视图并进行维护，当接收到提取数据请求与共用视图相匹配时，可直接将共用视图对应的数据发送至业务终端，从而在一定程度上简化了提取数据步骤。此外，本实施例与上述实施例具有相同的发明构思，未在本实施例中详尽描述的技术细节可参见上述实施例，并且本实施例可达到与上述实施例相同的有益效果。
实施例四
图4是本发明实施例四提供的一种数据集市的数据提取装置结构示意图，本实施例可适用于数据集市的数据提取。
参见图4，本实施例中数据集市的数据提取装置，包括：
请求接收模块410，用于接收业务终端发送的提取数据请求；
数据视图创建模块420，用于根据提取数据请求以及数据集市的基本表创建数据视图；
数据发送模块430，用于通过视图查询接口将数据视图对应的数据发送至业务终端。
可选的，提取数据请求包括表信息和字段信息；相应的，数据视图创建模块420，具体用于：调用视图创建语句创建数据视图；根据表信息从数据集市的基本表中选取待提取基本表；根据字段信息从待提取基本表的字段中选择待提取字段；将待提取字段添加至数据视图。
可选的，提取数据请求还包括表授权信息和/或字段授权信息；相应的，数据视图创建模块420，具体用于：根据表信息以及表授权信息从数据集市的基本表中选取待提取基本表；根据字段信息以及字段授权信息从待提取基本表的字段中选择待提取字段。
可选的，提取数据请求还包括脱敏信息；相应的，数据视图创建模块420，还具体用于：根据脱敏信息对待提取字段进行数据脱敏，得到脱敏字段；将脱敏字段添加至数据视图。
可选的，数据发送模块430，具体用于：控制视图查询接口调用解密接口将数据视图对应的数据进行解密，并将解密后的数据发送至业务终端。
可选的，数据集市的数据提取装置还包括：
共用视图确定模块，用于在根据提取数据请求以及数据集市的基本表创建数据视图之后，统计数据视图的创建频率，若创建频率高于预设频率，则将数据视图确定为共用视图并进行维护；
视图判断模块，用于判断是否存在与提取数据请求相匹配的共用视图；
相应的，若存在与提取数据请求相匹配的共用视图，数据发送模块430用于通过视图查询接口将共用视图对应的数据发送至业务终端；
若不存在与提取数据请求相匹配的共用视图，数据视图创建模块420用于根据提取数据请求以及数据集市的基本表创建数据视图；数据发送模块430用于通过视图查询接口将数据视图对应的数据发送至业务终端。
本实施例提供的数据集市的数据提取装置，与实施例一至三提出的数据集市的数据提取方法属于同一发明构思，未在本实施例中详尽描述的技术细节可参见实施例一至三，并且本实施例与实施例一至三具有相同的有益效果。
实施例五
本实施例提供了一种终端，可以用于数据集市的数据提取。图5是本发明实施例五提供的一种终端的结构示意图。参见图5，该终端包括：
一个或多个处理器510；
存储器520，用于存储一个或多个程序；
当一个或多个程序被一个或多个处理器510执行，使得一个或多个处理器510实现如实施例一至三提出的数据集市的数据提取方法。其中主要实现的数据集市的数据提取方法，包括：接收业务终端发送的提取数据请求；根据提取数据请求以及数据集市的基本表创建数据视图；通过视图查询接口将数据视图对应的数据发送至业务终端。
图5中以一个处理器510为例；处理器510和存储器520可以通过总线或其他方式连接，图5中以通过总线连接为例。
存储器520作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的数据集市的数据提取方法对应的程序指令/模块。处理器510通过运行存储在存储器520中的软件程序、指令以及模块，从而执行终端的各种功能应用以及数据处理，即实现上述的数据集市的数据提取方法。
存储器520可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器520可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器520可进一步包括相对于处理器510远程设置的存储器，这些远程存储器可以通过网络连接至终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
本实施例提出的终端与实施例一至三提出的数据集市的数据提取方法属于同一发明构思，未在本实施例中详尽描述的技术细节可参见实施例一至三，并且本实施例与实施例一至三具有相同的有益效果。
实施例六
本实施例提供一种存储介质，其上存储有计算机程序，该程序被处理器执行时实现如实施例一至三提出的数据集市的数据提取方法。其中主要实现的数据集市的数据提取方法，包括：接收业务终端发送的提取数据请求；根据提取数据请求以及数据集市的基本表创建数据视图；通过视图查询接口将数据视图对应的数据发送至业务终端。
本实施例提出的存储介质与实施例一至三提出的数据集市的数据提取方法属于同一发明构思，未在本实施例中详尽描述的技术细节可参见实施例一至三，并且本实施例与实施例一至三具有相同的有益效果。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(RandomAccess Memory，RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例的方法。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种数据集市的数据提取方法，其特征在于，包括：
接收业务终端发送的提取数据请求；
根据所述提取数据请求以及所述数据集市的基本表创建数据视图；
通过视图查询接口将所述数据视图对应的数据发送至所述业务终端。
2.根据权利要求1所述的方法，其特征在于，所述提取数据请求包括表信息和字段信息；相应的，所述根据所述提取数据请求以及所述数据集市的基本表创建数据视图，包括：
调用视图创建语句创建数据视图；
根据所述表信息从所述数据集市的基本表中选取待提取基本表；
根据所述字段信息从所述待提取基本表的字段中选择待提取字段；
将所述待提取字段添加至所述数据视图。
3.根据权利要求2所述的方法，其特征在于，所述提取数据请求还包括表授权信息；相应的，所述根据所述表信息从所述数据集市的基本表中选取待提取基本表，包括：根据所述表信息以及所述表授权信息从所述数据集市的基本表中选取待提取基本表；
和/或，所述提取数据请求还包括字段授权信息，相应的，所述根据所述字段信息从所述待提取基本表的字段中选择待提取字段，包括：根据所述字段信息以及所述字段授权信息从所述待提取基本表的字段中选择待提取字段。
4.根据权利要求2所述的方法，其特征在于，所述提取数据请求还包括脱敏信息；相应的，在选择待提取字段之后，还包括：
根据所述脱敏信息对所述待提取字段进行数据脱敏，得到脱敏字段；
相应的，所述将所述待提取字段添加至所述数据视图，包括：
将所述脱敏字段添加至所述数据视图。
5.根据权利要求1-4任一所述的方法，其特征在于，所述数据视图对应的数据为加密数据；相应的，
通过视图查询接口将所述数据视图对应的数据发送至所述业务终端，包括：
控制所述视图查询接口调用解密接口将所述数据视图对应的数据进行解密，并将解密后的数据发送至所述业务终端。
6.根据权利要求1-4所述的方法，其特征在于，在所述根据所述提取数据请求以及所述数据集市的基本表创建数据视图之后，包括：
统计所述数据视图的创建频率，若所述创建频率高于预设频率，则将所述数据视图确定为共用视图并进行维护。
7.根据权利要求6所述的方法，其特征在于，在所述接收业务终端发送的提取数据请求之后，包括：
判断是否存在与所述提取数据请求相匹配的共用视图；相应的，
所述通过视图查询接口将所述数据视图对应的数据发送至所述业务终端，包括：
若存在与所述提取数据请求相匹配的共用视图，则通过视图查询接口将所述共用视图对应的数据发送至所述业务终端；
若不存在与所述提取数据请求相匹配的共用视图，则根据所述提取数据请求以及所述数据集市的基本表创建数据视图；通过视图查询接口将所述数据视图对应的数据发送至所述业务终端。
8.一种数据集市的数据提取装置，其特征在于，包括：
请求接收模块，用于接收业务终端发送的提取数据请求；
数据视图创建模块，用于根据所述提取数据请求以及所述数据集市的基本表创建数据视图；
数据发送模块，用于通过视图查询接口将所述数据视图对应的数据发送至所述业务终端。
9.一种终端，其特征在于，所述终端包括：
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7中任一所述的数据集市的数据提取方法。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-7中任一所述的数据集市的数据提取方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910160237.9A CN111651425A (zh) | 2019-03-04 | 2019-03-04 | 数据集市的数据提取方法、装置、终端及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910160237.9A CN111651425A (zh) | 2019-03-04 | 2019-03-04 | 数据集市的数据提取方法、装置、终端及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111651425A true CN111651425A (zh) | 2020-09-11 |
Family
ID=72344441
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910160237.9A Pending CN111651425A (zh) | 2019-03-04 | 2019-03-04 | 数据集市的数据提取方法、装置、终端及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111651425A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112597157A (zh) * | 2020-12-16 | 2021-04-02 | 光大兴陇信托有限责任公司 | 一种报送信息存储管理方法和系统 |
| CN112685485A (zh) * | 2021-01-04 | 2021-04-20 | 拉卡拉支付股份有限公司 | 数据获取方法、装置、电子设备、存储介质及程序产品 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2000042553A2 (en) * | 1999-01-15 | 2000-07-20 | Harmony Software, Inc. | Method and apparatus for processing business information from multiple enterprises |
| US20070220004A1 (en) * | 2006-03-17 | 2007-09-20 | Microsoft Corporation | Security view-based, external enforcement of business application security rules |
| US20090144252A1 (en) * | 2007-11-30 | 2009-06-04 | Koch Wolfgang M | System and method for translating and executing update requests |
| US20120173478A1 (en) * | 2010-12-30 | 2012-07-05 | Cerner Innovation, Inc. | Custom data mart creation |
| CN108446341A (zh) * | 2018-03-02 | 2018-08-24 | 平安普惠企业管理有限公司 | 业务状态查询方法、装置、计算机设备和存储介质 |
| CN108737333A (zh) * | 2017-04-17 | 2018-11-02 | 腾讯科技（深圳）有限公司 | 一种数据检测方法以及装置 |
| CN108829781A (zh) * | 2018-05-31 | 2018-11-16 | 中国平安人寿保险股份有限公司 | 客户信息查询方法、装置、计算机设备和存储介质 |
| CN109271411A (zh) * | 2018-09-28 | 2019-01-25 | 中国平安财产保险股份有限公司 | 报表生成方法、装置、计算机设备及存储介质 |
| CN109408535A (zh) * | 2018-09-28 | 2019-03-01 | 中国平安财产保险股份有限公司 | 大数据量匹配方法、装置、计算机设备及存储介质 |
-
2019
- 2019-03-04 CN CN201910160237.9A patent/CN111651425A/zh active Pending
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2000042553A2 (en) * | 1999-01-15 | 2000-07-20 | Harmony Software, Inc. | Method and apparatus for processing business information from multiple enterprises |
| US20070220004A1 (en) * | 2006-03-17 | 2007-09-20 | Microsoft Corporation | Security view-based, external enforcement of business application security rules |
| US20090144252A1 (en) * | 2007-11-30 | 2009-06-04 | Koch Wolfgang M | System and method for translating and executing update requests |
| US20120173478A1 (en) * | 2010-12-30 | 2012-07-05 | Cerner Innovation, Inc. | Custom data mart creation |
| CN108737333A (zh) * | 2017-04-17 | 2018-11-02 | 腾讯科技（深圳）有限公司 | 一种数据检测方法以及装置 |
| CN108446341A (zh) * | 2018-03-02 | 2018-08-24 | 平安普惠企业管理有限公司 | 业务状态查询方法、装置、计算机设备和存储介质 |
| CN108829781A (zh) * | 2018-05-31 | 2018-11-16 | 中国平安人寿保险股份有限公司 | 客户信息查询方法、装置、计算机设备和存储介质 |
| CN109271411A (zh) * | 2018-09-28 | 2019-01-25 | 中国平安财产保险股份有限公司 | 报表生成方法、装置、计算机设备及存储介质 |
| CN109408535A (zh) * | 2018-09-28 | 2019-03-01 | 中国平安财产保险股份有限公司 | 大数据量匹配方法、装置、计算机设备及存储介质 |
Non-Patent Citations (3)
| Title |
|---|
| ANDREW TOKMAKOFF等: "AusPlots Rangelands Field Data Collection and Publication: Infrastructure for Ecological Monitoring", 《2014 IEEE 10TH INTERNATIONAL CONFERENCE ON E-SCIENCE》, 4 December 2014 (2014-12-04) * |
| 吴志岐;李剑萍;: "固原市自动气象站实时资料查询与监控系统设计与实现", 宁夏工程技术, no. 02 * |
| 周骁波, 曹渠江: "在物业收费系统中构建面向OLAP的数据集市", 计算机与现代化, no. 12 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112597157A (zh) * | 2020-12-16 | 2021-04-02 | 光大兴陇信托有限责任公司 | 一种报送信息存储管理方法和系统 |
| CN112685485A (zh) * | 2021-01-04 | 2021-04-20 | 拉卡拉支付股份有限公司 | 数据获取方法、装置、电子设备、存储介质及程序产品 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6671687B1 (en) | Method and apparatus for protecting data retrieved from a database | |
| US10541811B2 (en) | Systems and methods for securing data | |
| US11507683B2 (en) | Query processing with adaptive risk decisioning | |
| JP2020030866A (ja) | 機密情報処理方法、装置、及び、サーバ、ならびに、セキュリティ決定システム | |
| CN108154038B (zh) | 数据处理方法及装置 | |
| Li et al. | Tees: An efficient search scheme over encrypted data on mobile cloud | |
| CN109766707B (zh) | 基于区块链的数据处理方法、装置、设备和介质 | |
| CN107733639B (zh) | 密钥管理方法、装置及可读存储介质 | |
| CN105491058B (zh) | 一种api访问分布式授权方法及其系统 | |
| CN111327616A (zh) | 密钥管理方法、装置、设备及计算机可读存储介质 | |
| US8769302B2 (en) | Encrypting data and characterization data that describes valid contents of a column | |
| CN113642014A (zh) | 一种基于混合云的数据访问系统及公有云服务器 | |
| CN114428972A (zh) | 支持外包计算的隐私保护查询方法、装置及相关设备 | |
| WO2023087760A1 (zh) | 一种数据共享方法、装置、设备及存储介质 | |
| CN112765218A (zh) | 一种多层级安全保护的流数据处理方法及系统 | |
| CN111651425A (zh) | 数据集市的数据提取方法、装置、终端及存储介质 | |
| CN112287371B (zh) | 一种存储工业数据的方法、装置和计算机设备 | |
| CN113609147A (zh) | 数据共享方法、装置及电子设备 | |
| CN112926084A (zh) | 访问权限管理方法及系统 | |
| CN115277593B (zh) | 一种基于区块链的链下数据安全存储的方法及系统 | |
| EP2784973A1 (en) | Method, system, and device for digital content transmission | |
| CN111090616A (zh) | 一种文件管理方法、对应装置、设备及存储介质 | |
| CN111666509A (zh) | 基于跨网络地理数据的云查询方法及系统 | |
| CN113609077A (zh) | 一种文件检索方法、系统、存储介质及设备 | |
| CN113051418A (zh) | 一种图像来源追踪方法、装置、存储介质及电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |