CN112861495A - 一种基于Excel模板文件生成ImpalaSQL语句的方法 - Google Patents

一种基于Excel模板文件生成ImpalaSQL语句的方法 Download PDF

Info

Publication number
CN112861495A
CN112861495A CN202110237825.5A CN202110237825A CN112861495A CN 112861495 A CN112861495 A CN 112861495A CN 202110237825 A CN202110237825 A CN 202110237825A CN 112861495 A CN112861495 A CN 112861495A
Authority
CN
China
Prior art keywords
generating
carrying
excel template
excel
sql
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110237825.5A
Other languages
English (en)
Inventor
李泛洪
张南华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Liaoning Zhenxing Bank Co ltd
Original Assignee
Liaoning Zhenxing Bank Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Liaoning Zhenxing Bank Co ltd filed Critical Liaoning Zhenxing Bank Co ltd
Publication of CN112861495A publication Critical patent/CN112861495A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/10—Payment architectures specially adapted for electronic funds transfer [EFT] systems; specially adapted for home banking systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28—Databases characterised by their database models, e.g. relational or object models
    • G06F16/284—Relational databases
    • G06F16/285—Clustering or classification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
    • G06Q20/325—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices using wireless networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/401—Transaction verification
    • G06Q20/4016—Transaction verification involving fraud or risk level assessment in transaction processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/02—Banking, e.g. interest calculation or account maintenance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1073—Registration or de-registration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/51—Discovery or management thereof, e.g. service location protocol [SLP] or web services

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Theoretical Computer Science (AREA)
  • Finance (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Databases & Information Systems (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Signal Processing (AREA)
  • Marketing (AREA)
  • Technology Law (AREA)
  • Multimedia (AREA)
  • Computing Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种基于Excel模板文件生成ImpalaSQL语句的方法，涉及计算机办公技术领域，其包括Excel模板内容、生成ImpalaSQL语句流程，Excel模板内容中设置有目标库表。该基于Excel模板文件生成ImpalaSQL语句的方法，通过该方法将数据分离转化形成极为简化的EXCEL模板，进而提高业务分析人员的映射配置效率，并且在EXCEL模板中有配置每个字段的来源，避免开发人员编写的sql语句不规范和错误，从而在保证了该方法便于开发人员使用的情况下解决了目前市场上没有针对业务分析人员提供更快、更简洁的映射配置并且一部分针对业务分析人员的映射配置中的Impala这类大数据的引擎支持度不高同时生成的文件都写入服务器中导致业务分析人员无法获取相关数据进行分析的问题。

Description

一种基于Excel模板文件生成ImpalaSQL语句的方法
技术领域
本发明涉及计算机办公技术领域，具体为一种基于Excel模板文件生成ImpalaSQL语句的方法。
背景技术
Impala：Impala是Cloudera公司主导开发的新型查询系统，它提供SQL语义，能查询存储在Hadoop的HDFS和HBase中的PB级大数据，Impala性能优化要点有如下几点:1. 为数据存储选择合适的文件格式(如:Parquet)通常对于大数据量来说，Parquet文件格式是最佳的；2. 防止入库时产生大量的小文件(insert ... values会产生大量小文件，应该避免使用)在impala外生成数据时，最好是text格式或者Avro，这样你就可以逐行的构建文件，到了impala之后，再通过简单的insert ... select语句将其转换为Parquet格式；3.根据实际的数据量大小选择合适的分区粒度合适的分区策略可以对数据进行物理拆分，在查询的时候就可以忽略掉无用数据，提高查询效率，通常建议分区数量在3万以下(太多的分区也会造成元数据管理的性能下降)；4. 为分区key选择最小的整数类型虽然使用string类型也可以作为分区key，因为分区key最后都是作为HDFS目录使用，但是使用最小的整数类型作为分区key可以降低内存消耗；5. 选择合适的Parquet块大小默认情况下，Impala的insert ... select语句创建的Parquet文件都是每个分区256M(在2.0之后改为1G了)，通过Impala写入的Parquet文件只有一个块，因而只能被一个机器当作一个单元进行处理，如果在你的Parquet表中只有一个或者几个分区，或者一个查询只能访问一个分区，那么你的性能会非常慢，因为没有足够的数据来利用Impala并发分布式查询的优势；6.在追求性能或者大数据量查询的时候，要先获取所需要的表的统计指标(如:执行computestats)7. 减少传输到client端的数据量；进而能够实现通过EXCEL配置映射关系，程序根据EXCEL内容生成ImpalaSQL语句。通过EXCEL配置，能降低数据映射开发门槛，让分析人员专注于数据表间关系，而不是SQL语句的编写，而且基于的技术栈和工具不同，SQL语句生成的工具较多，然而基于EXCEL文件作为配置的较少，并且目前市场上大部分开发工具，都是针对开发人员简化开发人员开发过程而开发，而没有针对业务分析人员提供更快、更简洁的映射配置，而且现今虽然也有EXCEL生成SQL文件的专利，但是对Impala这类大数据的引擎支持度不高，同时生成的文件都写入服务器中导致业务分析人员无法获取相关数据进行分析，因此提出了一种基于Excel模板文件生成ImpalaSQL语句的方法来解决这个问题。
发明内容
（一）解决的技术问题
针对现有技术的不足，本发明提供了一种基于Excel模板文件生成ImpalaSQL语句的方法，解决了目前市场上没有针对业务分析人员提供更快、更简洁的映射配置并且一部分针对业务分析人员的映射配置中的Impala这类大数据的引擎支持度不高同时生成的文件都写入服务器中导致业务分析人员无法获取相关数据进行分析的问题。
（二）技术方案
为达到以上目的，本发明采取的技术方案是：一种基于Excel模板文件生成ImpalaSQL语句的方法，包括Excel模板内容、生成ImpalaSQL语句流程，所述Excel模板内容中设置有目标库表、来源表及关联关系，字段映射、过滤调节配置、分组列表以及分组后调节配置；
所述生成ImpalaSQL语句的流程包括以下步骤：
S1、拿取利用所述Excel模板即Excel配置文件；
S2、根据Excel配置文件的目标库表生成Inter into/update/delete/drop子句；
S3、检查S2中生成的子句以及Excel配置文件是否存在虚拟表，若是进行S4，若否进行S5；
S4、根据虚拟表配置生成子查询SQL语句，之后进行S5；
S5、根据数据数据模板即Excel模板中的来源表及关联关系生成FROM子句并包括关联语句，之后进行S6；
S6、根据目标字段映射关系生成每个字段的SQL子句，之后进行S7；
S7、检查是否存在调节配置，若是进行S8，若否进行S9；
S8、根据调节配置生成调节SQL语句，之后进行S9；
S9、检查是否存在分组配置，若是进行S10，若否进行S11；
S10、根据分组配置生成分组SQL语句，之后进行S11；
S11、检查是否存在分组后条件配置，若是进行S12，若否进行S13；
S12、根据分组配置生成分组后条件SQL语句，之后进行S13；
S13、将S2、S4、S5、S6、S8、S10以及S12中生成的SQL子语句组合生成完整SQL语句，之后进行S14；
S14、将生成的SQL语句保存放置入相应位置并结束流程；
优选的，所述来源表及关联关系能够支持多个和虚拟表。
优选的，所述字段映射表示目标字段即来源字段及规则。
一种基于Excel模板文件生成ImpalaSQL语句方法的使用，包括以下步骤：
首先将数据需要处理的数据放置入Excel模板中，之后根据生成ImpalaSQL语句的流程逐次进行S1、S2、S3、S4、S5、S6、S7、S8、S9、S10、S11、S12、S13以及S14，进而使得Excel模板中整理形成开发者人员以及业务分析人员均需要的数据，进而在增加了业务分析人员的分析效率以及分析速度的情况下方便开发人员能够根据EXCEL模板生成对应的SQL语句避免开发人员编写的SQL语句不规范和错误,从而保证了该方法的实用性以及功能性，而且该种方法中整理形成的数据并不是直接传输到服务器中的，是能够根据使用人员需要进行留取备份的。
（三）有益效果
本发明的有益效果在于：
该基于Excel模板文件生成ImpalaSQL语句的方法，通过该方法将数据分离转化形成极为简化的EXCEL模板，进而提高业务分析人员的映射配置效率，而且使用虚拟表来规范表间复杂关系，进一步增加了业务分析人员的分析效率以及分析速度，并且在EXCEL模板中有配置每个字段的来源，进而方便开发人员能够根据EXCEL模板生成对应的SQL语句，继而避免开发人员编写的sql语句不规范和错误，从而在保证了该方法便于开发人员使用的情况下解决了目前市场上没有针对业务分析人员提供更快、更简洁的映射配置并且一部分针对业务分析人员的映射配置中的Impala这类大数据的引擎支持度不高同时生成的文件都写入服务器中导致业务分析人员无法获取相关数据进行分析的问题，并且该方法以Excel文件为配置文件，极大降低了使用的门槛，而且通过复杂的SQL支持以及本方法使用的虚拟表方式使得该方法优于其它相关工具，进而进一步提高了该方法的实用性。
附图说明
图1为本发明生成ImpalaSQL的EXCEL模板结构示意图；
图2为本发明生成ImpalaSQL的方法和流程结构示意图；
图3为本发明EXCEL模板生成结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
如图1-3所示，本发明提供一种技术方案：一种基于Excel模板文件生成ImpalaSQL语句的方法，包括Excel模板内容、生成ImpalaSQL语句流程，Excel模板内容中设置有目标库表、来源表及关联关系，字段映射、过滤调节配置、分组列表以及分组后调节配置；
生成ImpalaSQL语句的流程包括以下步骤：
S1、拿取利用Excel模板即Excel配置文件；
S2、根据Excel配置文件的目标库表生成Inter into/update/delete/drop子句；
S3、检查S2中生成的子句以及Excel配置文件是否存在虚拟表，若是进行S4，若否进行S5；
S4、根据虚拟表配置生成子查询SQL语句，之后进行S5；
S5、根据数据数据模板即Excel模板中的来源表及关联关系生成FROM子句并包括关联语句，之后进行S6；
S6、根据目标字段映射关系生成每个字段的SQL子句，之后进行S7；
S7、检查是否存在调节配置，若是进行S8，若否进行S9；
S8、根据调节配置生成调节SQL语句，之后进行S9；
S9、检查是否存在分组配置，若是进行S10，若否进行S11；
S10、根据分组配置生成分组SQL语句，之后进行S11；
S11、检查是否存在分组后条件配置，若是进行S12，若否进行S13；
S12、根据分组配置生成分组后条件SQL语句，之后进行S13；
S13、将S2、S4、S5、S6、S8、S10以及S12中生成的SQL子语句组合生成完整SQL语句，之后进行S14；
S14、将生成的SQL语句保存放置入相应位置并结束流程；
来源表及关联关系能够支持多个和虚拟表。
字段映射表示目标字段即来源字段及规则。
一种基于Excel模板文件生成ImpalaSQL语句方法的使用，包括以下步骤：
首先将数据需要处理的数据放置入Excel模板中，之后根据生成ImpalaSQL语句的流程逐次进行S1、S2、S3、S4、S5、S6、S7、S8、S9、S10、S11、S12、S13以及S14，进而使得Excel模板中整理形成开发者人员以及业务分析人员均需要的数据，进而在增加了业务分析人员的分析效率以及分析速度的情况下方便开发人员能够根据EXCEL模板生成对应的SQL语句避免开发人员编写的SQL语句不规范和错误,从而保证了该方法的实用性以及功能性，而且该种方法中整理形成的数据并不是直接传输到服务器中的，是能够根据使用人员需要进行留取备份的。
本发明的操作步骤为：
首先将数据需要处理的数据放置入Excel模板中，之后根据生成ImpalaSQL语句的流程逐次进行S1、S2、S3、S4、S5、S6、S7、S8、S9、S10、S11、S12、S13以及S14，进而使得Excel模板中整理形成开发者人员以及业务分析人员均需要的数据，进而在增加了业务分析人员的分析效率以及分析速度的情况下方便开发人员能够根据EXCEL模板生成对应的SQL语句避免开发人员编写的SQL语句不规范和错误,从而保证了该方法的实用性以及功能性，而且该种方法中整理形成的数据并不是直接传输到服务器中的，是能够根据使用人员需要进行留取备份的，进而进一步保证了该方法的功能实用性。
以上所述的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施方式而已，并不用于限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (3)

1.一种基于Excel模板文件生成ImpalaSQL语句的方法，包括Excel模板内容、生成ImpalaSQL语句流程，其特征在于：所述Excel模板内容中设置有目标库表、来源表及关联关系，字段映射、过滤调节配置、分组列表以及分组后调节配置；
所述生成ImpalaSQL语句的流程包括以下步骤：
S1、拿取利用所述Excel模板即Excel配置文件；
S2、根据Excel配置文件的目标库表生成Inter into/update/delete/drop子句；
S3、检查S2中生成的子句以及Excel配置文件是否存在虚拟表，若是进行S4，若否进行S5；
S4、根据虚拟表配置生成子查询SQL语句，之后进行S5；
S5、根据数据数据模板即Excel模板中的来源表及关联关系生成FROM子句并包括关联语句，之后进行S6；
S6、根据目标字段映射关系生成每个字段的SQL子句，之后进行S7；
S7、检查是否存在调节配置，若是进行S8，若否进行S9；
S8、根据调节配置生成调节SQL语句，之后进行S9；
S9、检查是否存在分组配置，若是进行S10，若否进行S11；
S10、根据分组配置生成分组SQL语句，之后进行S11；
S11、检查是否存在分组后条件配置，若是进行S12，若否进行S13；
S12、根据分组配置生成分组后条件SQL语句，之后进行S13；
S13、将S2、S4、S5、S6、S8、S10以及S12中生成的SQL子语句组合生成完整SQL语句，之后进行S14；
S14、将生成的SQL语句保存放置入相应位置并结束流程；
根据权利要求1所述的一种基于Excel模板文件生成ImpalaSQL语句的方法，其特征在于：所述来源表及关联关系能够支持多个和虚拟表。
2.根据权利要求1所述的一种基于Excel模板文件生成ImpalaSQL语句的方法，其特征在于：所述字段映射表示目标字段即来源字段及规则。
3.根据权利要求1所述的一种基于Excel模板文件生成ImpalaSQL语句方法的使用，包括以下步骤：
首先将数据需要处理的数据放置入Excel模板中，之后根据生成ImpalaSQL语句的流程逐次进行S1、S2、S3、S4、S5、S6、S7、S8、S9、S10、S11、S12、S13以及S14，进而使得Excel模板中整理形成开发者人员以及业务分析人员均需要的数据，进而在增加了业务分析人员的分析效率以及分析速度的情况下方便开发人员能够根据EXCEL模板生成对应的SQL语句避免开发人员编写的SQL语句不规范和错误,从而保证了该方法的实用性以及功能性，而且该种方法中整理形成的数据并不是直接传输到服务器中的，是能够根据使用人员需要进行留取备份的。
CN202110237825.5A 2020-11-24 2021-03-04 一种基于Excel模板文件生成ImpalaSQL语句的方法 Pending CN112861495A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202011331194 2020-11-24
CN2020113311945 2020-11-24

Publications (1)

Publication Number Publication Date
CN112861495A true CN112861495A (zh) 2021-05-28

Family

ID=75991545

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202110237825.5A Pending CN112861495A (zh) 2020-11-24 2021-03-04 一种基于Excel模板文件生成ImpalaSQL语句的方法
CN202110237818.5A Pending CN112967048A (zh) 2020-11-24 2021-03-04 一种基于分布式架构的代收代付智能路由

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202110237818.5A Pending CN112967048A (zh) 2020-11-24 2021-03-04 一种基于分布式架构的代收代付智能路由

Country Status (1)

Country Link
CN (2) CN112861495A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113641572A (zh) * 2021-07-02 2021-11-12 多点生活(成都)科技有限公司 一种基于sql的海量大数据计算开发的调试方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150278334A1 (en) * 2014-03-25 2015-10-01 AtScale, Inc. Interpreting relational database statements using a virtual multidimensional data model
CN108280082A (zh) * 2017-01-06 2018-07-13 北京京东尚科信息技术有限公司 一种统计数据的即席查询方法及系统
CN108829884A (zh) * 2018-06-27 2018-11-16 中国建设银行股份有限公司 数据映射方法及装置
WO2019205415A1 (zh) * 2018-04-22 2019-10-31 平安科技（深圳）有限公司 数据导入管理方法、装置、移动终端和存储介质
WO2020015150A1 (zh) * 2018-07-18 2020-01-23 平安科技（深圳）有限公司 数据表动态导出方法、装置、计算机设备及存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105590203A (zh) * 2015-03-02 2016-05-18 中国银联股份有限公司 一种智能路由器及基于该智能路由器实现的支付方法
CN106130862A (zh) * 2016-06-23 2016-11-16 广州鲁邦通物联网科技有限公司 一种多个分布式路由器的虚拟专用网络的管理方法和系统
CN108320147A (zh) * 2018-02-28 2018-07-24 深圳前海桔子信息技术有限公司 一种交易管理方法、装置、服务器及存储介质
CN109936628A (zh) * 2019-02-25 2019-06-25 南京世界村云数据产业集团有限公司 一种数据中心云平台构架
CN111127192B (zh) * 2019-12-28 2023-10-27 辽宁振兴银行股份有限公司 基于分布式框架的代付路由+Zuul网关

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150278334A1 (en) * 2014-03-25 2015-10-01 AtScale, Inc. Interpreting relational database statements using a virtual multidimensional data model
CN108280082A (zh) * 2017-01-06 2018-07-13 北京京东尚科信息技术有限公司 一种统计数据的即席查询方法及系统
WO2019205415A1 (zh) * 2018-04-22 2019-10-31 平安科技（深圳）有限公司 数据导入管理方法、装置、移动终端和存储介质
CN108829884A (zh) * 2018-06-27 2018-11-16 中国建设银行股份有限公司 数据映射方法及装置
WO2020015150A1 (zh) * 2018-07-18 2020-01-23 平安科技（深圳）有限公司 数据表动态导出方法、装置、计算机设备及存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113641572A (zh) * 2021-07-02 2021-11-12 多点生活(成都)科技有限公司 一种基于sql的海量大数据计算开发的调试方法

Also Published As

Publication number Publication date
CN112967048A (zh) 2021-06-15

Similar Documents

Publication Publication Date Title
JP7130600B2 (ja) ファーストクラスデータベース要素としての半構造データの実装
CN107038207B (zh) 一种数据查询方法、数据处理方法及装置
CN106897322B (zh) 一种数据库和文件系统的访问方法和装置
CN110321344B (zh) 关联数据的信息查询方法、装置、计算机设备及存储介质
CN100462979C (zh) 分布式索引文件的检索方法、检索系统及检索服务器
US9026538B2 (en) Method for performing transactions on data and a transactional database
US20170193041A1 (en) Document-partitioned secondary indexes in a sorted, distributed key/value data store
Băzăr et al. The Transition from RDBMS to NoSQL. A Comparative Analysis of Three Popular Non-Relational Solutions: Cassandra, MongoDB and Couchbase.
US20140351239A1 (en) Hardware acceleration for query operators
WO2017019879A1 (en) Multi-query optimization
CN103440288A (zh) 一种大数据存储方法及装置
CN107329987A (zh) 一种基于mongo数据库的搜索系统
CN106682148A (zh) 一种基于Solr数据搜索的方法及装置
CN106599091B (zh) 基于键值存储的rdf图结构存储和索引方法
CN102982095B (zh) 一种基于叙词表的本体自动生成系统及其方法
WO2023179787A1 (zh) 分布式文件系统的元数据管理方法和装置
CN112861495A (zh) 一种基于Excel模板文件生成ImpalaSQL语句的方法
Lawson et al. Using a robust metadata management system to accelerate scientific discovery at extreme scales
CN107273443B (zh) 一种基于大数据模型元数据的混合索引方法
CN112988796B (zh) 一种系统数据检索的系统与方法
CN110569243B (zh) 一种数据查询方法、数据查询插件和数据查询服务器
US20170031909A1 (en) Locality-sensitive hashing for algebraic expressions
Jin et al. The research for storage scheme based on Hadoop
Sangat et al. Nimble join: A parallel star join for main memory column‐stores
Guo et al. Memory database index optimization

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination