CN105243333A - 多数据源远程接入方法 - Google Patents

多数据源远程接入方法 Download PDF

Info

Publication number
CN105243333A
CN105243333A CN201510538079.8A CN201510538079A CN105243333A CN 105243333 A CN105243333 A CN 105243333A CN 201510538079 A CN201510538079 A CN 201510538079A CN 105243333 A CN105243333 A CN 105243333A
Authority
CN
China
Prior art keywords
data
data source
configuration
metadata
carry out
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510538079.8A
Other languages
English (en)
Inventor
王云鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SUZHOU GUOYUN DATA TECHNOLOGY Co Ltd
Original Assignee
SUZHOU GUOYUN DATA TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SUZHOU GUOYUN DATA TECHNOLOGY Co Ltd filed Critical SUZHOU GUOYUN DATA TECHNOLOGY Co Ltd
Priority to CN201510538079.8A priority Critical patent/CN105243333A/zh
Publication of CN105243333A publication Critical patent/CN105243333A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/248Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2221/00Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/21Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/2141Access rights, e.g. capability lists, access control lists, access tables, access matrices

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • General Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Bioethics (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Storage Device Security (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本案为多数据源远程接入方法,其特征在于,包括初始化接入过程和二次使用过程,两者为两个独立过程,可配合进行,或单独进行其中任一过程,其中,所述初始化接入过程包括:步骤1)参数配置:在待接入数据源上进行授权配置并创建专门用于数据接入的用户,填写配置参数;步骤2)连接验证:尝试根据配置进行数据源连接,直至连接成功;步骤3)元数据的获取与保存;所述二次使用过程包括:步骤Ⅰ)选择加载数据源:指定数据源后,系统解密相应数据源的配置信息和元数据信息,进行数据源连接并将元数据展示给使用者;步骤Ⅱ)数据请求:按业务需求操作请求由系统自动生成对数据源的远程数据请求,获取原始数据,并进行可视化分析展示逻辑。

Description

多数据源远程接入方法
技术领域
本发明涉及数据源接入方法,特别是涉及一种多数据源远程接入方法。
背景技术
现有的数据分析系统,往往只支持对本地数据(或本局域网内)的连接,而现在越来越多的数据存储在不同位置,例如一个公司的数据库服务器分别放在北京上海和深圳,想要在一台服务器上对三个地点的数据进行接入分析,现有的可视化分析工具或系统是很难解决的,数据的传输安全更加难以确保。
发明内容
为克服现有技术的不足,本发明的目的在于提供一种多数据源远程接入方法,旨在保证数据传输安全的前提下,突破时空限制,将数据接入系统进行分析和可视化展示。
为实现上述目的,本发明通过以下技术方案实现:
多数据源远程接入方法,包括初始化接入过程和二次使用过程,两者为两个独立过程,可配合进行,或单独进行其中任一过程,
其中,所述初始化接入过程包括:
步骤1)参数配置:在待接入数据源上进行授权配置并创建专门用于数据接入的用户,接下来在魔镜产品的相应页面,填写配置参数;
步骤2)连接验证:尝试根据配置进行数据源连接,若连接验证成功,则进行下一步;若连接验证失败,则返回步骤1)重新填写配置参数,再次执行步骤2),直至连接成功;
步骤3)元数据的获取与保存:连接验证成功后,读取指定库的元数据,并与配置信息一并加密存储;
所述二次使用过程包括:
步骤Ⅰ)选择加载数据源:指定数据源后,系统解密相应数据源的配置信息和元数据信息,进行数据源连接并将元数据展示给使用者;
步骤Ⅱ)数据请求:按业务需求操作请求由系统自动生成对数据源的远程数据请求,获取原始数据,并进行可视化分析展示逻辑。
本发明的有益效果:通过远程授权及参数配置,使数据分析系统以远程的方式接入数据源,保存加密的数据源配置信息和元数据信息,从而让用户直接操作元数据,进而进行数据分析及可视化展示的过程;在保证数据传输安全的前提下,突破时空限制,将数据接入系统进行分析和可视化展示;将不同类型数据源接入系统进行分析和可视化展示,且使用方便,一次性接入后后续无需考虑数据源连接问题。
附图说明
图1为本发明一实施例所述的多数据源远程接入方法中的流程示意图。
具体实施方式
下面结合附图对本发明做进一步的详细说明,以令本领域技术人员参照说明书文字能够据以实施。
多数据源远程接入方法,包括初始化接入过程和二次使用过程,两者为两个独立过程,可配合进行,或单独进行其中任一过程,
其中,所述初始化接入过程包括:
步骤1)参数配置:在待接入数据源上进行授权配置并创建专门用于数据接入的用户,接下来在魔镜产品的相应页面,填写配置参数;
步骤2)连接验证:尝试根据配置进行数据源连接,若连接验证成功,则进行下一步;若连接验证失败,则返回步骤1)重新填写配置参数,再次执行步骤2),直至连接成功;
步骤3)元数据的获取与保存:连接验证成功后,读取指定库的元数据,并与配置信息一并加密存储;
所述二次使用过程包括:
步骤Ⅰ)选择加载数据源:指定数据源后,系统解密相应数据源的配置信息和元数据信息,进行数据源连接并将元数据展示给使用者;
步骤Ⅱ)数据请求:按业务需求操作请求由系统自动生成对数据源的远程数据请求,获取原始数据,并进行可视化分析展示逻辑。
其中,魔镜产品是指魔镜大数据可视化分析工具,是一款智能数据可视化分析产品,基本原理是,用户先将数据源接入本系统,本系统获取了数据源的元数据,接下来用户能在操作界面将元数据配置为维度度量、并设定图表类型,系统会自动从数据源获取数据并进行转换,在前端界面渲染生成指定类型的图表,从而帮助用户进行数据可视化分析。
即数据源通过远程接入的方式接入系统,采用以下方式实现:
1.在数据库所在服务器上,可直接向魔镜系统反向授予查看权限,魔镜数据分析系统所在服务器有足够的权限去请求目标服务器并获取数据。
2.在魔镜数据分析系统中配置参数(加密的),接下来魔镜可借助一系列配置参数对数据源进行远程访问,数据提取,从而进行分析挖掘及可视化展示。
尽管本发明的实施方案已公开如上,但其并不仅仅限于说明书和实施方式中所列运用,它完全可以被适用于各种适合本发明的领域,对于熟悉本领域的人员而言,可容易地实现另外的修改,因此在不背离权利要求及等同范围所限定的一般概念下,本发明并不限于特定的细节和这里示出与描述的图例。

Claims (1)

1.多数据源远程接入方法,其特征在于,包括初始化接入过程和二次使用过程,两者为两个独立过程,可配合进行,或单独进行其中任一过程,
其中,所述初始化接入过程包括:
步骤1)参数配置:在待接入数据源上进行授权配置并创建专门用于数据接入的用户,接下来在魔镜产品的相应页面,填写配置参数;
步骤2)连接验证:尝试根据配置进行数据源连接,若连接验证成功,则进行下一步;若连接验证失败,则返回步骤1)重新填写配置参数,再次执行步骤2),直至连接成功;
步骤3)元数据的获取与保存:连接验证成功后,读取指定库的元数据,并与配置信息一并加密存储;
所述二次使用过程包括:
步骤Ⅰ)选择加载数据源:指定数据源后,系统解密相应数据源的配置信息和元数据信息,进行数据源连接并将元数据展示给使用者;
步骤Ⅱ)数据请求:按业务需求操作请求由系统自动生成对数据源的远程数据请求,获取原始数据,并进行可视化分析展示逻辑。
CN201510538079.8A 2015-08-28 2015-08-28 多数据源远程接入方法 Pending CN105243333A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510538079.8A CN105243333A (zh) 2015-08-28 2015-08-28 多数据源远程接入方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510538079.8A CN105243333A (zh) 2015-08-28 2015-08-28 多数据源远程接入方法

Publications (1)

Publication Number Publication Date
CN105243333A true CN105243333A (zh) 2016-01-13

Family

ID=55040975

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510538079.8A Pending CN105243333A (zh) 2015-08-28 2015-08-28 多数据源远程接入方法

Country Status (1)

Country Link
CN (1) CN105243333A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106815371A (zh) * 2017-02-06 2017-06-09 浪潮通用软件有限公司 一种通过可视化配置实现跨数据源的数据读取方法
CN107317722A (zh) * 2017-05-27 2017-11-03 北京奇艺世纪科技有限公司 一种数据源可扩展系统及方法
CN109933623A (zh) * 2018-09-04 2019-06-25 中国平安人寿保险股份有限公司 将数据源接入bi工具的方法、设备和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101094231A (zh) * 2007-07-10 2007-12-26 北京易路联动技术有限公司 一种分布式可同步的多源数据的控制方法和装置
US20100179940A1 (en) * 2008-08-26 2010-07-15 Gilder Clark S Remote data collection systems and methods
CN102118446A (zh) * 2011-03-09 2011-07-06 成都四方信息技术有限公司 基于web的高性能智能报表系统
CN102426575A (zh) * 2011-07-28 2012-04-25 中兴通讯股份有限公司 Iptv数据采集方法及系统
CN104573065A (zh) * 2015-01-23 2015-04-29 广东能龙教育股份有限公司 一种基于元数据的报表展示引擎

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101094231A (zh) * 2007-07-10 2007-12-26 北京易路联动技术有限公司 一种分布式可同步的多源数据的控制方法和装置
US20100179940A1 (en) * 2008-08-26 2010-07-15 Gilder Clark S Remote data collection systems and methods
CN102118446A (zh) * 2011-03-09 2011-07-06 成都四方信息技术有限公司 基于web的高性能智能报表系统
CN102426575A (zh) * 2011-07-28 2012-04-25 中兴通讯股份有限公司 Iptv数据采集方法及系统
CN104573065A (zh) * 2015-01-23 2015-04-29 广东能龙教育股份有限公司 一种基于元数据的报表展示引擎

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106815371A (zh) * 2017-02-06 2017-06-09 浪潮通用软件有限公司 一种通过可视化配置实现跨数据源的数据读取方法
CN107317722A (zh) * 2017-05-27 2017-11-03 北京奇艺世纪科技有限公司 一种数据源可扩展系统及方法
CN107317722B (zh) * 2017-05-27 2020-01-31 北京奇艺世纪科技有限公司 一种数据源可扩展系统及方法
CN109933623A (zh) * 2018-09-04 2019-06-25 中国平安人寿保险股份有限公司 将数据源接入bi工具的方法、设备和存储介质

Similar Documents

Publication Publication Date Title
JP7370371B2 (ja) 楕円曲線暗号法による分散暗号鍵の提供及び記憶のための方法及びシステム
US10382404B2 (en) Secure cloud-based clipboard for touch devices
US20200120073A1 (en) File security method and apparatus for same
US20220021534A1 (en) Location aware cryptography
US10409990B2 (en) Encryption and decryption method and apparatus in virtualization system, and system
US9349023B2 (en) Database encryption system, method, and program
WO2019179534A3 (en) System and method for creating decentralized identifiers
SG11201903671WA (en) Data transmission method, apparatus and system
CN103049466B (zh) 一种基于分布式密文存储的全文检索方法及系统
JPWO2013069770A1 (ja) データベース装置と方法及びプログラム
EP2722787A1 (en) Method and apparatus for writing and reading encrypted hard disk data
CN105893861A (zh) 用于生成二维码的方法和系统
CN105243333A (zh) 多数据源远程接入方法
CN102811212A (zh) 重复数据删除的数据加密方法及其系统
CN105099653A (zh) 分布式数据处理方法、装置及系统
CN104750784A (zh) 一种基于Merkle树结构的空间查询完整性验证方法
CN106022145A (zh) 一种基于密文索引的数据查询方法
CN112839013B (zh) 一种密钥传输方法、装置及计算机可读存储介质
CN111914277A (zh) 交集数据的生成方法和基于交集数据的联邦模型训练方法
CN103745170B (zh) 磁盘数据的处理方法及装置
CN105227530A (zh) 一种基于加密卡的数据安全存储交流方法
CN103778383A (zh) 一种基于草绘的cad模型局部加密方法
WO2016078382A1 (zh) Hsm加密信息同步实现方法、装置和系统
CN109726584A (zh) 云数据库密钥管理系统
CN107357559B (zh) 远端执行服务器的信息控制方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160113

RJ01 Rejection of invention patent application after publication