CN112328683A - 一种支持数据库与库直接的数据传输方法、系统及存储介质 - Google Patents
一种支持数据库与库直接的数据传输方法、系统及存储介质 Download PDFInfo
- Publication number
- CN112328683A CN112328683A CN202011212931.XA CN202011212931A CN112328683A CN 112328683 A CN112328683 A CN 112328683A CN 202011212931 A CN202011212931 A CN 202011212931A CN 112328683 A CN112328683 A CN 112328683A
- Authority
- CN
- China
- Prior art keywords
- database
- data
- target database
- push
- pushing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 230000005540 biological transmission Effects 0.000 title claims abstract description 32
- 238000012216 screening Methods 0.000 claims abstract description 16
- 238000012795 verification Methods 0.000 claims abstract description 13
- 238000012546 transfer Methods 0.000 claims description 5
- 230000008520 organization Effects 0.000 claims description 3
- 238000013475 authorization Methods 0.000 claims description 2
- 238000005516 engineering process Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000009365 direct transmission Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013075 data extraction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005065 mining Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种支持数据库与库直接的数据传输方法、系统及存储介质，方法包括：获取待推送数据的目标数据库信息及其发送的数据推送请求；根据数据推送请求筛选出符合要求的推送数据库；配置目标数据库与推送数据库的链接源，推送数据库中按照同种频率直接向目标数据库推送数据。通过预设数据同步频率，将目标数据库与推送数据库的链接源进行同步，提取目标数据库信息中预设的关键字，根据关键字查询对应的推送数据库，还包括数据推送之前的验证步骤，验证目标数据库登录的账号，验证通过后由平台授权并分配推送数据范围。本发明实现授权一个数据库的推送请求之后配置目标数据库与推送数据库的链接源，将推送数据库的数据直接推送给目标数据库。
Description
技术领域
本发明涉及网络数据传输技术领域，特别是涉及一种支持数据库与库直接的数据传输方法、系统及存储介质。
背景技术
大数据是指以多元形式，许多来源搜集而来的庞大数据组，往往具有实时性。在企业对企业销售的情况下，这些数据可能得自社交网络、电子商务网站、顾客来访纪录，还有许多其他来源。这些数据，并非公司顾客关系管理数据库的常态数据组。从技术上看，大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理，必须采用分布式计算架构。它的特色在于对海量数据的挖掘，但它必须依托云计算的分布式处理、分布式数据库、云存储和/或虚拟化技术。
大数据技术在文化和旅游行业中也得到了很好的发展，涉及到多种多样的数据库，实现各个数据库之间的数据传输成为当下的一个问题，尤其是在旅游业中，当地的实时获取的统计数据与省厅等更高级别的数据传输、共享成为困难。
发明内容
本发明主要提供一种支持数据库与库直接的数据传输方法、系统及存储介质，能够解决现有技术文化旅游业中数据推送共享不及时、不精确、不安全的问题。
为解决上述技术问题，本发明采用的一个技术方案是：提供一种支持数据库与库直接的数据传输方法。
所述方法包括以下内容：
获取待推送数据的目标数据库信息及其发送的数据推送请求；根据数据推送请求筛选出符合要求的推送数据库；配置所述目标数据库与推送数据库的链接源，推送数据库中按照同种频率直接向目标数据库推送数据。
优选地，一种支持数据库与库直接的数据传输方法，所述目标数据库信息包括数据库名称、数据库地址、数据库所属机构、数据种类和数据类型。
优选地，一种支持数据库与库直接的数据传输方法，所述配置所述目标数据库与推送数据库的链接源包括：预设数据同步频率，将目标数据库与推送数据库的链接源进行同步。
优选地，一种支持数据库与库直接的数据传输方法，所述同步频率包括：定时定点同步、时间间隔同步、时间区间里的时间间隔同步。
优选地，一种支持数据库与库直接的数据传输方法，所述根据数据推送请求筛选出符合要求的推送数据库包括：提取目标数据库信息中预设的关键字，根据所述关键字查询对应的推送数据库。
优选地，一种支持数据库与库直接的数据传输方法，还包括数据推送之前的验证步骤，所述验证步骤包括：验证目标数据库登录的账号，验证通过后由平台授权并分配推送数据范围。
优选地，一种支持数据库与库直接的数据传输方法，所述验证目标数据库登录的账号包括：生成一个token作目标数据库进行请求的一个令牌，通过token验证目标数据库的用户名和密码。
优选地，一种支持数据库与库直接的数据传输方法，所述验证通过后由平台授权包括：首次验证目标数据库的用户名和密码通过后，下次请求时无需再次验证用户名和密码。
为解决上述技术问题，本发明提供一种支持数据库与库直接的数据传输系统，所述系统包括：
数据获取模块：获取待推送数据的目标数据库信息及其发送的数据推送请求；
数据筛选模块：根据数据推送请求筛选出符合要求的推送数据库；
链接配置模块：配置所述目标数据库与推送数据库的链接源；
数据推送模块：推送数据库中按照同种频率直接向目标数据库推送数据。
为解决上述技术问题，本发明提供一种存储介质，所述存储介质上存储有执行所述一种支持数据库与库直接的数据传输方法的指令。
本发明的有益效果是：(1)区别于现有技术的情况，本发明根据数据推送请求筛选出符合要求的推送数据库；配置所述目标数据库与推送数据库的链接源，推送数据库中按照同种频率直接向目标数据库推送数据，通过筛选在系统中找到最符合要求的推送数据库，实现精确推送，通过将目标数据库与推送数据库的链接源进行同步，提高数据推送的稳定性，实现数据库与库之间的直接、同频率的数据推送；(2)验证目标数据库登录的账号，验证通过后由平台授权并分配推送数据范围，保证数据推送的安全。
附图说明
图1是本发明一种支持数据库与库直接的数据传输方法的流程图；
图2是本发明一种库与库直接推送数据的过程示意图；
具体实施方式
为了使本发明的目的、技术方案和有益效果更加清楚和完整，以下实施例结合附图对本发明作进一步地阐述。
实施例1
在一示例性实施例中，提供一种支持数据库与库直接的数据传输方法。如图1所示，所述方法包括以下内容：
获取待推送数据的目标数据库信息及其发送的数据推送请求；根据数据推送请求筛选出符合要求的推送数据库；配置所述目标数据库与推送数据库的链接源，推送数据库中按照同种频率直接向目标数据库推送数据。
该数据推送方法实现的原理为：验证目标数据库登录的账号，验证通过后，获取待推送数据的目标数据库信息及其发送的数据推送请求，由平台授权并分配推送数据范围，筛选出符合要求的推送数据库，接着配置所述目标数据库与推送数据库的链接源，建立目标数据库与推送数据库之间的推送规范，方便推送数据库及时、快速、准确的向目标数据库推送数据。
进一步地，一种支持数据库与库直接的数据传输方法，所述目标数据库信息包括数据库名称、数据库地址、数据库所属机构、数据种类和数据类型。
进一步地，一种支持数据库与库直接的数据传输方法，所述根据数据推送请求筛选出符合要求的推送数据库包括：提取目标数据库信息中预设的关键字，根据所述关键字查询对应的推送数据库。
实施例2
为解决上述技术问题，本发明提供一种支持数据库与库直接的数据传输系统，所述系统包括：
数据获取模块：获取待推送数据的目标数据库信息及其发送的数据推送请求；
数据筛选模块：根据数据推送请求筛选出符合要求的推送数据库；
链接配置模块：配置所述目标数据库与推送数据库的链接源；
数据推送模块：推送数据库中按照同种频率直接向目标数据库推送数据。
如图2所示，一个大数据平台系统具有数据推送的功能，数据接入属于数据获取模块的功能，获取目标数据库发送的请求和相关数据，系统通过数据推送的功能筛选出符合要求的推送数据库，并进行链接配置，对目标数据库与推送数据库的链接源均经过授权之后，按照同种频率直接进行数据推送。
实施例3
在大数据时代，数据同步显得越来越重要。不管是数据的加工生产过程中，还是数据的提取和传输过程中，都需要用到数据同步。一套功能完善，稳定性强，自动化水平高的数据同步系统就显得尤为重要。同步系统可以代替人工实现数据从一处到另外一处的转移和重新组织的工作，减少人力成本。对于互联网或金融行业的公司，一套稳定且安全的数据同步系统，可以在很大程度上保障数据的安全性和服务的稳定性。而在实际使用中系统的稳定性及安全性不易保障，无法提供较好的容错性和自动化错误处理，无法实现断点续传，保证数据的完整性和数据同步的稳定性，并且数据同步方式单一，用户体验差，这些都是现有技术中亟待解决的技术问题。
在实施例1的基础上，提供一种一种支持数据库与库直接的数据传输方法，实现数据库与库之间直接、同步推送数据的方法。
进一步地，一种支持数据库与库直接的数据传输方法，所述配置所述目标数据库与推送数据库的链接源包括：预设数据同步频率，将目标数据库与推送数据库的链接源进行同步。
进一步地，一种支持数据库与库直接的数据传输方法，所述同步频率包括：定时定点同步、时间间隔同步、时间区间里的时间间隔同步。
进一步地，一种支持数据库与库直接的数据传输方法，所述根据数据推送请求筛选出符合要求的推送数据库包括：提取目标数据库信息中预设的关键字，根据所述关键字查询对应的推送数据库。
进一步地，一种支持数据库与库直接的数据传输方法，还包括数据推送之前的验证步骤，所述验证步骤包括：验证目标数据库登录的账号，验证通过后由平台授权并分配推送数据范围。
进一步地，一种支持数据库与库直接的数据传输方法，所述验证目标数据库登录的账号包括：生成一个token作目标数据库进行请求的一个令牌，通过token验证目标数据库的用户名和密码。
进一步地，一种支持数据库与库直接的数据传输方法，所述验证通过后由平台授权包括：首次验证目标数据库的用户名和密码通过后，下次请求时无需再次验证用户名和密码。
以上所述仅为本发明的实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种支持数据库与库直接的数据传输方法，其特征在于，所述方法包括以下内容：
获取待推送数据的目标数据库信息及其发送的数据推送请求；根据数据推送请求筛选出符合要求的推送数据库；配置所述目标数据库与推送数据库的链接源，推送数据库中按照同种频率直接向目标数据库推送数据。
2.根据权利要求1所述的一种支持数据库与库直接的数据传输方法，其特征在于，所述目标数据库信息包括数据库名称、数据库地址、数据库所属机构、数据种类和数据类型。
3.根据权利要求1所述的一种支持数据库与库直接的数据传输方法，其特征在于，所述配置所述目标数据库与推送数据库的链接源包括：预设数据同步频率，将目标数据库与推送数据库的链接源进行同步。
4.根据权利要求3所述的一种支持数据库与库直接的数据传输方法，其特征在于，所述同步频率包括：定时定点同步、时间间隔同步、时间区间里的时间间隔同步。
5.根据权利要求1所述的一种支持数据库与库直接的数据传输方法，其特征在于，所述根据数据推送请求筛选出符合要求的推送数据库包括：提取目标数据库信息中预设的关键字，根据所述关键字查询对应的推送数据库。
6.根据权利要求1所述的一种支持数据库与库直接的数据传输方法，其特征在于，还包括数据推送之前的验证步骤，所述验证步骤包括：验证目标数据库登录的账号，验证通过后由平台授权并分配推送数据范围。
7.根据权利要求6所述的一种支持数据库与库直接的数据传输方法，其特征在于，所述验证目标数据库登录的账号包括：生成一个token作目标数据库进行请求的一个令牌，通过token验证目标数据库的用户名和密码。
8.根据权利要求7所述的一种支持数据库与库直接的数据传输方法，其特征在于，所述验证通过后由平台授权包括：首次验证目标数据库的用户名和密码通过后，下次请求时无需再次验证用户名和密码。
9.一种支持数据库与库直接的数据传输系统，其特征在于，所述系统包括：
数据获取模块：获取待推送数据的目标数据库信息及其发送的数据推送请求；
数据筛选模块：根据数据推送请求筛选出符合要求的推送数据库；
链接配置模块：配置所述目标数据库与推送数据库的链接源；
数据推送模块：推送数据库中按照同种频率直接向目标数据库推送数据。
10.一种存储介质，其特征在于，所述存储介质上存储有执行权利要求1-8中任意一项所述方法的指令。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011212931.XA CN112328683A (zh) | 2020-11-02 | 2020-11-02 | 一种支持数据库与库直接的数据传输方法、系统及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011212931.XA CN112328683A (zh) | 2020-11-02 | 2020-11-02 | 一种支持数据库与库直接的数据传输方法、系统及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112328683A true CN112328683A (zh) | 2021-02-05 |
Family
ID=74323245
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011212931.XA Pending CN112328683A (zh) | 2020-11-02 | 2020-11-02 | 一种支持数据库与库直接的数据传输方法、系统及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112328683A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115952515A (zh) * | 2022-12-05 | 2023-04-11 | 广州柏瀚信息科技有限公司 | 一种基于大数据的数据安全处理方法及装置 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106649378A (zh) * | 2015-11-02 | 2017-05-10 | 北大方正集团有限公司 | 一种数据同步方法及装置 |
| CN107704607A (zh) * | 2017-10-17 | 2018-02-16 | 武汉楚鼎信息技术有限公司 | 一种数据库数据同步的方法 |
| CN109309683A (zh) * | 2018-10-30 | 2019-02-05 | 泰华智慧产业集团股份有限公司 | 基于token的客户端身份验证的方法及系统 |
| CN110647540A (zh) * | 2019-08-13 | 2020-01-03 | 平安普惠企业管理有限公司 | 业务数据查询方法、装置、计算机设备和存储介质 |
-
2020
- 2020-11-02 CN CN202011212931.XA patent/CN112328683A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106649378A (zh) * | 2015-11-02 | 2017-05-10 | 北大方正集团有限公司 | 一种数据同步方法及装置 |
| CN107704607A (zh) * | 2017-10-17 | 2018-02-16 | 武汉楚鼎信息技术有限公司 | 一种数据库数据同步的方法 |
| CN109309683A (zh) * | 2018-10-30 | 2019-02-05 | 泰华智慧产业集团股份有限公司 | 基于token的客户端身份验证的方法及系统 |
| CN110647540A (zh) * | 2019-08-13 | 2020-01-03 | 平安普惠企业管理有限公司 | 业务数据查询方法、装置、计算机设备和存储介质 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115952515A (zh) * | 2022-12-05 | 2023-04-11 | 广州柏瀚信息科技有限公司 | 一种基于大数据的数据安全处理方法及装置 |
| CN115952515B (zh) * | 2022-12-05 | 2023-09-26 | 广州柏瀚信息科技有限公司 | 一种基于大数据的数据安全处理方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2020184774A (ja) | ブロックチェーンを介したアイデンティティと証明書の保護及び検証とのための方法及びシステム | |
| KR20200108231A (ko) | 서비스 프로세스 시스템，서비스 데이터 처리 방법 및 장치 | |
| WO2022179008A1 (zh) | 基于区块链的供应链金融AI DaaS算法仓库平台 | |
| US20110302277A1 (en) | Methods and apparatus for web-based migration of data in a multi-tenant database system | |
| CN107464151B (zh) | 高并发业务的订单数据处理方法及装置 | |
| CN103533023B (zh) | 基于云服务特征的云服务应用集群同步系统及同步方法 | |
| RU2662405C2 (ru) | Автоматическое формирование сертификационных документов | |
| US20190050435A1 (en) | Object data association index system and methods for the construction and applications thereof | |
| US20190251096A1 (en) | Synchronization of offline instances | |
| CN112148689A (zh) | 一种用于城市级数据中台的数据共享交换系统 | |
| CN110659418A (zh) | 内容搜索方法、装置、存储介质及计算设备 | |
| CN104298761A (zh) | 一种异构软件系统间主数据匹配的实现方法 | |
| Choi et al. | Improving database system performance by applying NoSQL | |
| CN112328683A (zh) | 一种支持数据库与库直接的数据传输方法、系统及存储介质 | |
| CN110069565B (zh) | 一种分布式数据库数据批量处理的方法及装置 | |
| CN110109757B (zh) | 一种基于云计算的高性能计算方法 | |
| CN112306992A (zh) | 一种基于互联网的大数据平台 | |
| CN113011960A (zh) | 基于区块链的数据访问方法、装置、介质及电子设备 | |
| CN116366353A (zh) | 基于x86平台的业务登录方法、装置、介质及平台 | |
| CN108959309B (zh) | 数据分析的方法和装置 | |
| CN113742386B (zh) | 一种对区块链账本的区块数据的加工解析方法 | |
| CN108959952B (zh) | 数据平台权限控制方法、装置和设备 | |
| CN113610527B (zh) | 联盟链的交易方法、装置、系统、终端设备及存储介质 | |
| CN111966650B (zh) | 一种运维大数据共享数据表的处理方法、装置及存储介质 | |
| CN112380217B (zh) | 数据处理方法、装置、设备及介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210205 |
|
| RJ01 | Rejection of invention patent application after publication |