CN110019274A - 一种数据库系统以及查询数据库的方法和装置 - Google Patents

一种数据库系统以及查询数据库的方法和装置 Download PDF

Info

Publication number
CN110019274A
CN110019274A CN201711482536.1A CN201711482536A CN110019274A CN 110019274 A CN110019274 A CN 110019274A CN 201711482536 A CN201711482536 A CN 201711482536A CN 110019274 A CN110019274 A CN 110019274A
Authority
CN
China
Prior art keywords
inquiry
query
database
request
inquiry request
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711482536.1A
Other languages
English (en)
Other versions
CN110019274B (zh
Inventor
张广舟
林晓斌
范孝剑
窦贤明
曾文旌
周正中
熊亮春
张文杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201711482536.1A priority Critical patent/CN110019274B/zh
Priority to JP2020533622A priority patent/JP7440007B2/ja
Priority to PCT/CN2018/123437 priority patent/WO2019128978A1/zh
Priority to US16/954,286 priority patent/US11789957B2/en
Priority to EP18895044.8A priority patent/EP3734476A4/en
Publication of CN110019274A publication Critical patent/CN110019274A/zh
Application granted granted Critical
Publication of CN110019274B publication Critical patent/CN110019274B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G06F16/278—Data partitioning, e.g. horizontal or vertical partitioning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
    • G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
    • G06F11/2069—Management of state, configuration or failover
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/2097—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements maintaining the standby controller/processing unit updated
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • G06F11/3433—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment for load management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating
    • G06F16/2365—Ensuring data consistency and integrity
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2453—Query optimisation
    • G06F16/24534—Query rewriting; Transformation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2455—Query execution
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2455—Query execution
    • G06F16/24553—Query execution of query operations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2471—Distributed queries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G06F16/275—Synchronous replication

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Computing Systems (AREA)
  • Computer Hardware Design (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种数据库系统，应用所述数据库系统的查询操作相关的方法及装置，所述系统包括：主用数据库，至少一个从属数据库和查询处理单元，所述主用数据库与所述从属数据库间具有数据连接，所述从属数据库与所述查询处理单元间具有数据连接；所述查询处理单元，用于将查询请求拆分为查询范围没有交集的查询操作指令，将拆分的查询操作指令发送至相同或不同的从属数据库进行所述查询操作，并反馈查询结果。本申请可提供查询的效率。

Description

一种数据库系统以及查询数据库的方法和装置
技术领域
本发明涉及数据库，具体涉及一种数据库系统。本发明同时涉及一种查询数据库的方法和一种查询数据库的装置。还涉及一种分配查询任务的方法和一种分配查询任务的装置。还涉及一种执行数据库查询的方法和一种执行数据库查询的装置。还涉及一种进行数据库查询的方法和一种进行数据库查询的装置。
背景技术
非分布式数据库一般采用一个主用数据库加一个从属数据库或一个主用数据库加多个从属数据库的主从架构。
这种架构中，主用数据库为对外可写的。主用数据库上的数据有更新时，会通过事务日志同步到从属数据库。一般一个主用数据库会对应一个或多个从属数据库，每个从属数据库都有一份完整的、和主用数据库保持一致的数据。
在主用数据库故障时，每个从属数据库都可以作为备用数据库代替主用数据库，增强了可用性。每个从属数据库都可以执行查询请求，可以分离主用数据库的查询负担。
在目前的架构中，一个SQL查询操作只能在一个数据库中执行，即一个SQL查询只能在主用数据库中执行或只能在一个从属数据库中执行。这可能导致一个从属数据库繁忙进行一个复杂的大型SQL查询操作的执行而负荷较重，响应速度缓慢，而其他从属数据库空闲的情况。特别地，从属数据库除了日常作为查询数据库，一般还会在每天特定时间(如凌晨)，执行生成报表、数据核对等复杂操作。这种情况下，执行复杂的大型SQL查询操作甚至可能会由于过负荷运行而导致无法提供查询服务的情况。
可见，现有的非分布式主从架构的数据库，对于复杂查询，无法利用其它备用数据库资源，会导致查询响应速度慢，效率低下的问题。
发明内容
本申请提供一种数据库系统，以解决现有主从架构的数据库的上述的问题。本发明另外提供一种查询数据库的方法、一种分配查询操作的方法、一种执行数据库查询的方法、一种进行数据库查询的方法及前述方法相应的装置。
本申请提供一种数据库系统，特包括：主用数据库，至少一个从属数据库和查询处理单元，所述主用数据库与所述从属数据库间具有数据连接，所述从属数据库与所述查询处理单元间具有数据连接；
所述查询处理单元，用于将查询请求拆分为查询范围没有交集的查询操作指令，将拆分的查询操作指令发送至相同或不同的从属数据库进行所述查询操作，并反馈查询结果。
此外，本申请还提供一种查询数据库的方法，包括：
获取对数据库的查询请求；
将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令；
执行所述对从属数据库的查询操作指令；
向所述查询请求的请求者提供所述查询请求的结果。
此外，本申请还提供一种分配查询操作的方法，包括：
获取对数据库的查询请求；
将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作。
此外，本申请还提供一种执行数据库查询的方法，包括：
获取查询任务；
执行所述查询任务所指定的查询操作；
将所述查询操作的结果提供给所述查询任务指定的接收者。
此外，本申请还提供一种进行数据库查询的方法，包括：
获取查询任务；
获取所述查询任务所指定的其他查询操作的查询结果；
整合所述查询结果；
将整合的结果提供给所述查询任务所指定的接收者。
此外，本申请还提供一种查询数据库的装置，包括：
获取单元，用于获取查询数据库的查询请求；
拆分单元，用于将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令；
执行单元，用于执行所述对从属数据库的查询操作指令；
提供单元，用于向所述请求的请求者提供所述查询请求的查询结果。
此外，本申请还提供一种分配查询操作的装置，包括：
获取单元，用于获取对数据库的查询请求；
拆分单元，用于将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作。
此外，本申请还提供一种执行数据库查询的装置，包括：
获取单元，用于获取查询任务；
执行单元，用于执行所述查询任务所指定的查询操作指令；
提供单元，用于将所述查询操作的结果提供给所述查询任务指定的接收者。
此外，本申请还提供一种进行数据库查询的装置，包括：
获取单元，用于获取查询任务；
第二获取单元，用于获取所述查询任务所指定的其他查询操作的查询结果；
整合单元，用于整合所述查询结果；
提供单元，用于将整合的结果提供给所述查询任务所指定的接收者。
与现有技术相比，本申请提供的一种数据库系统的其中一个方面具有以下优点:通过查询处理单元，将查询请求拆分为查询范围没有交集的查询操作指令，将拆分的查询操作指令发送至相同或不同的从属数据库进行所述查询操作，从而可以有效利用从属数据库资源，避免某一或单一从属数据库查询压力较大，并能够达到提高查询效率的效果。
与现有技术相比，本申请提供的一种查询数据库的方法的其中一个方面具有以下优点:将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作，从而将查询分散到从属数据库，起到有效利用从属数据库资源的作用，达到提高查询效率的效果。
与现有技术相比，本申请提供的一种分配查询操作的方法的其中一个方面具有以下优点:将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作，从而将查询分散到从属数据库，起到有效利用从属数据库资源的作用，达到提高查询效率的效果。
与现有技术相比，本申请提供的一种执行数据库查询的方法的其中一个方面具有以下优点:能够将查询任务所指定的查询操作的结果发送给指定的接收者，起到灵活查询和充分利用资源分担查询负担的作用。
与现有技术相比，本申请提供的一种进行数据库查询的方法的其中一个方面具有以下优点:能够将获取到的查询操作的结果进行整合，并将整合的结果提供给查询任务指定的接收者。起到充分利用资源分担查询负担的作用。
附图说明
图1是本申请第一实施例一种数据库系统的结构示意图；
图2是本申请第二实施例一种查询数据库的方法的流程示意图；
图3是本申请第三实施例一种分配查询操作的方法的流程示意图；
图4是本申请第四实施例一种执行数据库查询的方法的流程示意图；
图5是本申请第五实施例一种进行数据库查询的方法的流程示意图；
图6是本申请第六实施例一种查询数据库的装置的结构框图；
图7是本申请第七实施例一种分配查询操作的装置的结构框图；
图8是本申请第八实施例一种执行数据库查询的装置的结构框图
图9是本申请第九实施例一种进行数据库查询的装置的结构框图。
具体实施方式
在下面的描述中阐述了很多具体细节以便于充分理解本发明。但是本发明能够以很多不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本发明内涵的情况下做类似推广，因此本发明不受下面公开的具体实施的限制。
本申请第一实施例提供一种数据库系统，其结构示意图如图1所示，包括：主用数据库U101，从属数据库U102，从属数据库U103，从属数据库U104和查询处理单元U105，所述主用数据库U101与所述各个从属数据库(U102，U103和U104)之间，以及所述各个从属数据库(U102，U103和U104)与所述查询处理单元U105之间具有数据连接。
所述数据连接，包括硬件连接和软件连接，所述硬件连接可以是有线网络连接如以太网，也可以使无线网络连接如蓝牙或无线局域网，所述软件连接可以是各种软件协议或程序进程间的接口连接。通过所述数据连接，可以交换数据和信息。
所述主用数据库U101，从外部接收并执行对数据库进行的更新操作，如增加记录，修改记录，删除记录等。更新数据库信息。
所述从属数据库U102,从属数据库U103和从属数据库U104(编号分别为0，1，2)。分别与主用数据库保持同步，使其保持一份与主用数据库一致的数据库数据，从而在主用数据库故障时，可以替代主用数据库对外提供原主用数据库提供的服务。
所述从属数据库(U102,U103和U104)与主用数据库保持同步可以有多种方式，既可以是主用数据库在更新时将更新信息主动发送给各个从属数据库，各个从属数据库再根据所述主用数据库的更新信息更新自身的数据库数据；也可以是各个从属数据库根据自身的状况，定时向主用数据库或保存有主用数据库更新信息的单元检查更新信息，一旦有更新就更新自身数据库数据。
所述从属数据库(U102,U103和U104)还从所述查询处理单元U105接受并响应查询操作。各个从属数据库通过与主用数据库同步，保持有与主用数据库一致的数据库数据，可以用于提供数据库的查询功能。
本实施例所述的查询处理单元U105用于将查询请求发送至至相应的从属数据库，或者将查询请求拆分为查询范围没有交集的查询操作指令，将拆分的查询操作指令发送至相同或不同的从属数据库进行所述查询操作，并反馈查询结果。
具体而言，查询处理单元U105一方面可以接受对数据库的查询请求，根据所述查询请求生成相应的查询操作指令，然后将查询操作指令发送至某一或指定的从属数据库，执行对从属数据库的查询操作，例如，查询操作指令针对的数据查询较为简单，仅查询某一从属数据库即可，或者查询操作指令指定的为提供查询操作的从属数据库；或者根据需要，查询处理单元U105将将查询请求转化为查询范围没有交集的查询操作指令，将查询指令分发至相同或不同的从属数据库，对不同数据库执行不同的查询操作，从而实现多个从属数据库的合理利用，有利于提高效率，并减轻单一从属数据库查询的数据处理压力。
在下面的实例中，以查询处理单元可以将查询请求拆分后分发至不同从属数据库执行查询操作的处理方式进行详细说明。
查询处理单元接受对数据库的查询请求后，将外部查询请求拆分为查询范围没有交集的查询操作指令，对所述从属数据库(U102,U103和U104)进行所述查询操作。
所述查询范围没有交集的查询操作是指对各个从属数据库进行的查询操作没有交集，即对不同的从属数据库查询不同的记录。
将外部查询请求拆分为查询范围没有交集的查询操作的方式可以有多种，
本实施例提供以下几种方式：
方式一，根据外部查询请求的查询对象所对应的分布列值，将查询请求拆分为对于各个从属数据库查询范围没有交集的查询操作。所述查询对象所对应的分布列值是指被查询对象每条记录对应一个可以用于指定从属数据库的值。该值被称为分布列值。根据对所述分布列值进行处理，可以得到其所对应的从属数据库的标识。
例如，被查询对象为一个人口数据表，表的每条记录包括城市，人口数量等信息，其分布列值为该表的一列数据，其中每个数据对应所述人口数据表的一行记录。
所述的查询处理单元U105在获取到外部对所述人口数据表的查询请求后，获取所述人口数据表所对应的分布列值，将所述查询请求转换为对所述人口数据表的指定的分布列值项进行查询，可以对每一分布列值进行哈希运算后按照从属数据库的数量(本实施例中为3)进行取模，根据取模后的余数确定对相应的从属数据库进行查询操作。
例如，对于分布列值A0，B0，C0，D0……A1，B1，C1，D1……A2，B2，C2，D2……进行上述处理后，
余数为0的分布列值包括A0，B0，C0，D0……
余数为1的分布列值包括A1，B1，C1，D1……
余数为2的分布列值包括A2，B2，C2，D2……
则对编号为0的从属数据库U102进行的查询操作为余数为0的A0，B0，C0，D0等分布列值所对应的各条记录。
对编号为1的从属数据库U103进行的查询操作为余数为1的A1，B1，C1，D1等分布列值所对应的各条记录。
对编号为2的从属数据库U104进行的查询操作为余数为2的A2，B2，C2，D2等分布列值所对应的各条记录。
所述查询对象所对应的分布列值包括以下几种：
一，预先保存的所述查询对象的分布列值。
可以事先生成数据库的各个查询对象所对应的分布列值表，例如事先由数据库的所有者编辑生成数据库的各个查询对象的每一行记录的分布列值。生成所述各个查询对象的分布列值表后，存储起来，并在数据库更新时进行同步更新。当查询处理单元U105接收到外部的查询请求时，从保存的所述数据库的各个查询对象所对应的分布列值表中获取本次查询请求对应的查询对象的分布列值。
从保存的查询对象的分布列指表获取分布列值能够简化查询的步骤，提高查询效率。并且由于所述分布列值事先有数据库的所有者生成，能够最大限度的将对其所对应的记录的查询分散到各个从属数据库。
二，所述查询对象任意列的列值。
当接收到外部的查询请求时，也可以将所述查询请求对应的查询对象的任意列的值作为该查询对象的分布列值。可以将查询请求所指定的的列的值作为分布列值。
例如，对于查询各个城市的人口数据的情况，可以先查询所述人口数据表城市列所有的城市名称值，将城市名称值作为分布列值。
将所述查询请求所对应的查询对象的列的值作为分布列值，能够充分利用查询请求的信息，无需事先生成并维护分布列指表，具有减轻数据库维护工作量的作用。
三，所述查询对象的第一列的值。
对于没有指定查询对象的列的查询请求，可以将其所需要查询的查询对象的第一列的值作为分布列值。
将所述查询对象的第一列的值作为分布列值，能够在查询请求没有指定查询对象的列的情况下，利用查询对象必然具有的列的值作为分布列值，简化了数据库的维护工作。
四，所述查询请求所指定的列的值。
当接收到外部的查询请求时，还可以将所述查询请求所包含的列的值作为查询对象的分布列值。
例如，对于查询各个城市的人口数据的情况，查询请求指定了“城市”，可以先查询所述人口数据表城市列所有的城市名称值，将城市名称值作为分布列值。
将所述查询请求所指定的列的值作为分布列值，能够充分利用查询请求的信息，无需事先生成并维护分布列指表，具有减轻数据库维护工作量的作用。
对于查询数据库的多个表的情况，可以选取关联条件的列的值作为分布列值。例如，对于查询请求对性的查询对象为表t1和t2，其中t1表的c1列与t2表的c2列相关联的情况，可以分别选取t1表的c1列和t2表的c2列作为t1和t2的分布列，获取分布列值的操作为select*from t1,t2where t1.c1＝t2.c2。
根据分布列值将所述查询请求拆分为查询范围没有交集的对从属数据库的查询任务，不仅适用于查询单个查询对象的情况，也适用于查询多个查询对象的情况，具有普遍适用性。
方式二，根据所述查询请求对应的查询对象的记录的唯一键，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作。
所述唯一键指查询对象每条记录对应的键的值，每条记录的所述键值都不同。可以预先把键值的值域划分成与参与查询的从属数据库相等数目的多个值域，并指定每个从属数据库(根据唯一键索引)访问对应值域的数据。
例如，c1为唯一键，对于本实施例中三个从属数据库，分成三个值域[0,60]，[60,100]和[100,150]，每个从属数据库分别访问对应值域的记录数据。
此方式适合于查询单独查询对象的情况。
方式三，根据所述查询请求对应的查询对象的数据页的编号，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作。
可以预先把查询对象的数据页的编号分成与参与查询的从属数据库相等数目的多个范围。例如，查询对象的数据页编号为0-1500，从属数据库为三个，则可以分成[0-500],[500,1000]和[1000-1500]3个范围，由三个从属数据库分别处理。
此方式适合于查询单独查询对象的情况。
所述查询处理单元分别对所述从属数据库(U102,U103和U104)执行所述查询操作，所述从属数据库(U102,U103和U104)将查询操作的结果反馈给所述查询处理单元U105。
例如，从属数据库U102将对人口数据表的分布列值为A0，B0，C0，D0等的查询操作的结果返回给所述查询处理单元U105；从属数据库U103将对人口数据表的分布列值为A1，B1，C1，D1等的查询操作的结果返回给所述查询处理单元U105；从属数据库U104将对人口数据表的分布列值为A2，B2，C2，D2等的查询操作的结果返回给所述查询处理单元U105。
所述查询处理单元U105接收到所述查询操作的执行结果后，对外向所所述查询请求的请求者提供查询结果。
例如，所述查询处理单元U105分别接收到从属数据库U102反馈的对所述人口数据表的分布列值为A0，B0，C0，D0等记录的查询操作的执行结果，从属数据库U103反馈的对所述人口数据表的分布列值为A1，B1，C1，D1等记录的查询操作的执行结果和从属数据库U104反馈的对所述人口数据表的分布列值为A2，B2，C2，D2等记录的查询操作的执行结果后，将所述执行结果反馈给所述外部查询请求的请求者。
至此，本实施例提供的数据库系统完成一次对外部查询请求的响应。
本实施例提供的数据库系统的查询处理单元还可以用于发送查询任务，接受其他查询处理单元发送的查询任务和查询操作的结果，执行所接受的查询任务所指定的数据库查询操作，整合所述查询操作的结果，将对所述从属数据库查询操作的结果或所述整合后的结果提供给查询任务所指定的接收者。
所述整合所述查询操作的查询结果包括对查询操作的执行结果进行排序，合并等。
所述查询处理单元U105还可以根据查询所涉及的数据的统计信息，例如查询对应的表的大小，动态决定参与查询的从属数据库的数目，将拆分的查询操作指令发送至所决定的从属数据库进行所述查询操作，并反馈查询结果。简言之，所述查询处理单元可以根据查询请求所涉及的工作量的大小或者查询对象的大小决定有多少个从属数据库参与查询，工作量小或者查询对应的数据表小，可以分配少量的从属数据库甚至由一个从属数据库参与查询操作，反之，则尽可能分配给更多的从属数据库参与查询操作，以均衡或尽可能对每一从属数据库执行查询操作的工作量，提高效率。
所述查询处理单元可以与所述从属数据库位于同一物理节点上，即每一从属数据库的节点上都同时具有一个从属数据库和一个查询处理单元。这样有利于充分利用多个从属数据库的能力处理大型复杂的对数据库的查询请求。
例如，除了上述的主用数据库，从属数据库和查询处理单元外，数据库系统可以还包括与各个从属数据库相对应的各个查询处理单元，所述查询处理单元分别位于其所对应的从属数据库所在的节点上。对于查询几个城市的人口数据的情况，查询处理单元U105接受到的外部查询请求为select c1,count(c2)from t1group by c1。其中人口数据表t1的c1列为城市名称，c2列为人口数量值。
查询处理单元U105将其转换为对各个从属数据库(U102，U103和U104)的查询任务并分发给各个从属数据库所对应的查询处理单元，所述查询任务可以包括对各个从属数据库的查询范围没有交集的查询操作。
所述各个从属数据库所对应的各个查询处理单元接受所述查询任务，若所述查询任务不包括对各个从属数据库的查询范围没有交集的查询操作，则根据所接受的查询任务和所对应的从属数据库形成对所述各个从属数据库查询范围没有交集的查询操作。
例如，对所述数据库系统的各个从属数据库对应的查询处理单元形成的查询任务如下：
从属数据库U102所在的节点的查询处理单元所对应的查询任务为查询分布列值为A0，B0，C0，D0等的所述城市的人口数量数据，并将查询结果发送给从属数据库U104所在的节点的查询处理单元。
从属数据库U103所在的节点的查询处理单元所对应的查询任务为查询分布列值为A1，B1，C1，D1等的所述城市的人口数量数据，并将查询结果发送给从属数据库U104所在的节点的查询处理单元。
从属数据库U104所在的节点的查询处理单元所对应的查询任务为查询分布列值为A2，B2，C2，D2等的所述城市的人口数量数据，接收从属数据库U102和从属数据库U103所发送的所述城市的人口数量数据，计算各个城市的人口数量的总和并将结果发送给所述查询处理单元U105。
与所述各个从属数据库位于同一节点的各个查询处理单元对本节点的从属数据库执行相应查询任务所对应的查询操作：
从属数据库U102所在的节点的查询处理单元对所述从属数据库U102执行查询分布列值为A0，B0，C0，D0等的所述城市的人口数量数据的操作，并将查询操作的执行结果发送给从属数据库U104所在的节点的查询处理单元。
从属数据库U103所在的节点的查询处理单元对所述从属数据库U103执行查询分布列值为A1，B1，C1，D1等的所述城市的人口数量数据的操作，并将查询操作的执行结果发送给从属数据库U104所在的节点的查询处理单元。
从属数据库U104所在的节点的查询处理单元对所述从属数据库U104执行查询分布列值为A2，B2，C2，D2等的所述城市的人口数量数据的操作，接收从属数据库U102和U103所在的节点发送来的各个城市的人口数量数据，将接收到的各个城市的人口数量的数据和整合起来，得到所述各个城市的人口数量的数据，将所述整合后的各个城市的人口数量的数据发送给所述查询处理单元U105。
本申请第二实施例提供一种查询数据库的方法，其流程示意图如图2所示，包括以下步骤：
步骤S201，获取对数据库的查询请求。
所述查询请求通常可以包括指定的数据库信息的查询对象的信息。所述查询对象的信息可以包括需要查询的表的名称，需要查询的表的列的值等信息。
本步骤的详细说明可以参考本申请第一实施例中查询处理单元的相关描述，在此不做赘述。
步骤S202，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
所述查询范围没有交集的对从属数据库的查询操作是指对各个从属数据库执行的查询操作没有交集，即对不同的两个个从属数据库查询不同的记录。
将所述查询请求拆分为查询范围没有交集的对从属数据库的查询擦苹果可以有多种方式，本实施例提供以下的方式将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作：
方式一，根据查询对象所对应的分布列值将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
所述请求对应的查询对象所对应的分布列值包括以下至少一项：
一，预先保存的所述查询对象的分布列值。
二，所述查询对象的任意列的值。
三，所述查询对象的第一列的值。
四，所述查询请求所指定的列的值。
相应的详细的说明，可以参考本申请第一实施例中查询处理单元的相关描述，在此不做赘述。
方式二，根据所述查询请求对应的查询对象的记录的唯一键，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
方式三，根据所述查询请求对应的查询对象的数据页的编号，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
步骤S203，执行所述对从属数据库的查询操作指令。
本步骤详细的说明可以参考本申请第一实施例中查询处理单元的相关描述，在此不做赘述。
在本步骤后，还可以包括对所述查询操作的结果进行整合的步骤，相关说明可以参考本申请第一实施例中的相关描述们再次不做赘述。
步骤S204，向所述查询请求的请求者提供所述查询请求的结果。
根据对从属数据库的查询操作的执行结果，或整合的结果，将查询数据库请求的结果反馈给所述请求的请求者。从而完成本次对数据库的查询。
本申请第三实施例提供一种分配查询操作的方法，其流程示意图如图3所示，包括以下步骤：
步骤S301，获取对数据库的查询请求。
本步骤的详细说明可以参考本申请第一实施例中查询处理单元的相关描述，在此不做赘述。
步骤S302，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作可以有多种方式，本实施例提供以下的方式将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作：
方式一，根据查询对象所对应分布列值将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
所述查询对象所对应的分布列值包括以下至少一项：
一，预先保存的所述查询对象的分布列值。
二，所述查询对象任意列的值。
三，所述查询对象的第一列的值。
四，所述查询请求所指定的列的值。
方式二，根据所述查询请求对应的查询对象的记录的唯一键，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
方式三，根据所述查询请求对应的查询对象的数据页的编号，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
相应的详细的说明，可以参考本申请第一实施例中查询处理单元的相关描述，在此不做赘述。
本申请第四实施例提供一种执行数据库查询的方法，其流程示意图如图4所示，包括以下步骤：
步骤S401，获取查询任务。
步骤S402，执行所述查询任务所指定的查询操作。
步骤S403，将所述查询操作的结果提供给所述查询任务指定的接收者。
本实施例各步骤的详细说明可以参考本申请第一实施例中查询处理单元的相关描述，在此不做赘述。
本申请第五实施例提供一种进行数据库查询的方法，其流程示意图如图5所示，包括以下步骤：
步骤S501，获取执行查询任务。
步骤S502，获取所述查询任务所指定的其他查询操作的查询结果。
步骤S503，整合所述查询结果。
本步骤前，还可以包括执行所述查询任务所指定的查询操作获得查询结果的步骤。
步骤S504，将整合的结果提供给所述查询任务所指定的接收者。
本实施例各步骤的详细说明可以参考本申请第一实施例中查询处理单元的相关描述，在此不做赘述。
本申请第六实施例提供一种查询数据库的装置，其结构框图如图6所示，包括：获取单元U601，拆分单元U602，执行单元U603和提供单元U604。
所述获取单元U601，用于获取查询数据库的查询请求。
所述拆分单元U602，用于将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作。
所述拆分单元具体用于：根据查询对象所对应分布列值将所述查询请求拆分为查询范围没有交集的对从属数据库的查询任务。
所述查询对象所对应分布列值包括以下至少一项：预先保存的所述查询对象的分布列值；所述查询对象任意列的值；所述查询对象的第一列的值；所述查询请求所指定的列的值。
所述拆分单元还可以具体用于：根据所述查询请求对应的查询对象的记录的唯一键，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作。
所述拆分单元还可以具体用于：根据所述查询请求对应的查询对象的数据页的编号，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作。
所述执行单元U603，用于执行所述对从属数据库的查询操作。
所述提供单元U604，用于向所述请求的请求者提供所述查询请求的查询结果。
本实施例所提供的装置还可以包括整合单元，用于整合所述查询操作的结果。
本申请第七实施例提供一种分配查询操作的装置，其结构框图如图7所示，包括：获取单元U701和拆分单元U702。
所述获取单元U701，用于获取对数据库的查询请求；
所述拆分单元U702，用于将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作。
所述拆分单元U702可以具体用于：根据查询对象所对应的分布列值将所述查询请求拆分为查询范围没有交集的对从属数据库的查询任务。
所述分布列值包括以下至少一项：预先保存的所述查询对象的分布列值；所述查询查询对象任意列的值；所述查询对象的第一列的值；所述查询请求所指定的列的值。
所述拆分单元U702还可以具体用于：根据所述查询请求对应的查询对象的记录的唯一键，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作。
所述拆分单元U702还可以具体用于：根据所述查询请求对应的查询对象的数据页的编号，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作。
本申请第八实施例提供一种执行数据库查询的装置，其结构框图如图8所示，包括：获取单元U801，执行单元U802和提供单元U803。
所述获取单元U801，用于获取查询任务；
所述执行单元U802，用于执行所述查询任务所指定的查询操作；
所述提供单元U803，用于将所述查询操作的结果提供给所述查询任务指定的接收者。
本申请第九实施例提供一种进行数据库查询的装置，其结构框图如图9所示，包括：获取单元U901，第二获取单元U902，整合单元U903和提供单元U904。
所述获取单元U901，用于获取查询任务；
所述第二获取单元U902，用于获取所述查询任务所指定的其他查询操作的查询结果；
所述整合单元U903，用于整合所述查询结果；
所述提供单元U904，用于将整合的结果提供给所述查询任务所指定的接收者。
本实施例提供的进行数据库查询的装置，还可以包括执行单元。所述执行单元用于执行所述查询任务所指定的查询操作获得查询结果。
本发明虽然以较佳实施例公开如上，但其并不是用来限定本发明，任何本领域技术人员在不脱离本发明的精神和范围内，都可以做出可能的变动和修改，因此本发明的保护范围应当以本发明权利要求所界定的范围为准。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
1、计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括非暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
2、本领域技术人员应明白，本申请的实施例可提供为方法、系统或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

Claims (28)

1.一种数据库系统，其特征在于，包括：主用数据库，至少一个从属数据库和查询处理单元，所述主用数据库与所述从属数据库间具有数据连接，所述从属数据库与所述查询处理单元间具有数据连接；
所述查询处理单元，用于将查询请求拆分为查询范围没有交集的查询操作指令，将拆分的查询操作指令发送至相同或不同的从属数据库进行所述查询操作，并反馈查询结果。
2.根据权利要求1所述的数据库系统，其特征在于，所述查询处理单元具体用于接受查询请求，根据所述查询请求对应的查询对象所对应的分布列值，将所述查询请求拆分为查询范围没有交集的查询操作指令，将拆分的查询操作指令发送至相同或不同的从属数据库进行所述查询操作，并反馈查询结果。
3.根据权利要求2所述的数据库系统，其特征在于，所述查询对象所对应的分布列值包括以下至少一项：预先保存的所述查询对象的分布列值；所述查询对象任意列的值；所述查询对象的第一列的值；
所述查询请求所指定的列的值。
4.根据权利要求1所述的数据库系统，其特征在于，所述查询处理单元具体用于接受查询请求，根据所述查询请求对应的查询对象的记录的唯一键，将所述查询请求拆分为查询范围没有交集的查询操作指令，将拆分的查询操作指令发送至相同或不同的从属数据库进行所述查询操作，并反馈查询结果。
5.根据权利要求1所述的数据库系统，其特征在于，所述查询处理单元具体用于接受查询请求，根据所述查询请求对应的查询对象的数据页的编号，将所述查询请求拆分为查询范围没有交集的查询操作指令，将拆分的查询操作指令发送至相同或不同的从属数据库进行所述查询操作，并反馈查询结果。
6.根据权利要求1所述的数据库系统，其特征在于，所述查询处理单元还用于发送查询任务，接受其他查询处理单元发送的查询任务和查询操作的结果，执行所接受的查询任务所指定的数据库查询操作，整合所述查询操作的结果，将对所述从属数据库进行查询操作的结果或所述整合后的结果提供给查询任务所指定的接收者。
7.根据权利要求6所述的数据库系统，其特征在于，所述查询处理单元与所述从属数据库位于同一物理节点上。
8.根据权利要求1所述的数据库系统，其特征在于，所述查询处理单元，用于具体用于将查询请求拆分为查询范围没有交集的查询操作指令，根据查询所涉及的数据的统计信息，动态决定参与查询的从属数据库的数目，将拆分的查询操作指令发送至所决定的从属数据库进行所述查询操作，并反馈查询结果。
9.根据权利要求1所述的数据块系统，其特征在于，所述查询处理单元，还用于将查询请求发送至相应的从属数据库。
10.一种查询数据库的方法，其特征在于，包括：
获取对数据库的查询请求；
将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令；
执行所述对从属数据库的查询操作指令；
向所述查询请求的请求者提供所述查询请求的结果。
11.根据权利要求10所述的查询数据库的方法，其特征在于，所述将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令包括：
根据查询对象所对应的分布列值将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
12.根据权利要求11所述的查询数据库的方法，其特征在于，所述查询对象所对应的分布列值包括一下至少一项：
预先保存的所述查询对象的分布列值；
所述查询对象的任意列的值；
所述查询对象的第一列的值；
所述查询请求所指定的列的值。
13.根据权利要求10所述的查询数据库的方法，其特征在于，所述将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令包括：
根据所述查询请求对应的查询对象的记录的唯一键，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
14.根据权利要求10所述的查询数据库的方法，其特征在于，所述将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令包括：
根据所述查询请求对应的查询对象的数据页的编号，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
15.根据权利要求10所述的查询数据库的方法，其特征在于，所述向所述查询请求的请求者提供所述查询请求的结果的步骤前还包括：
整合所述查询操作的结果。
16.根据权利要求10所述的查询数据库的方法，其特征在于，所述执行所述对从属数据库的查询操作指令具体为：
根据查询所涉及的数据的统计信息，决定参与查询的从属数据库的数目，对所决定的从属数据库执行所述查询操作指令。
17.一种分配查询操作的方法，其特征在于，包括：
获取对数据库的查询请求；
将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作。
18.根据权利要求17所述的分配操作任务的方法，其特征在于，所述将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令包括：
根据所述分布列值将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
19.根据权利要求18所述的分配查询操作的方法，其特征在于，所述查询对象所对应的分布列值包括以下至少一项：
预先保存的所述查询对象的分布列值；
所述查询对象任意列的值；
所述查询对象的第一列的值；
所述查询请求所指定的列的值。
20.根据权利要求17所述的分配查询操作的方法，其特征在于，所述将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令包括：
根据所述查询请求对应的查询对象的记录的唯一键，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
21.根据权利要求17所述的分配查询操作的方法，其特征在于，所述将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令包括：
根据所述查询请求对应的查询对象的数据页的编号，将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令。
22.一种执行数据库查询的方法，其特征在于，包括：
获取查询任务；
执行所述查询任务所指定的查询操作；
将所述查询操作的结果提供给所述查询任务指定的接收者。
23.一种进行数据库查询的方法，其特征在于，包括：
获取查询任务；
获取所述查询任务所指定的其他查询操作的查询结果；
整合所述查询结果；
将整合的结果提供给所述查询任务所指定的接收者。
24.根据权利要求23所述的进行数据库查询的方法，其特征在于，所述整合所述查询结果的步骤前还包括：执行所述查询任务所指定的查询操作获得查询结果。
25.一种查询数据库的装置，其特征在于，包括：
获取单元，用于获取查询数据库的查询请求；
拆分单元，用于将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作指令；
执行单元，用于执行所述对从属数据库的查询操作指令；
提供单元，用于向所述请求的请求者提供所述查询请求的查询结果。
26.一种分配查询操作的装置，其特征在于，包括：
获取单元，用于获取对数据库的查询请求；
拆分单元，用于将所述查询请求拆分为查询范围没有交集的对从属数据库的查询操作。
27.一种执行数据库查询的装置，其特征在于，包括：
获取单元，用于获取查询任务；
执行单元，用于执行所述查询任务所指定的查询操作指令；
提供单元，用于将所述查询操作的结果提供给所述查询任务指定的接收者。
28.一种进行数据库查询的装置，其特征在于，包括：
获取单元，用于获取查询任务；
第二获取单元，用于获取所述查询任务所指定的其他查询操作的查询结果；
整合单元，用于整合所述查询结果；
提供单元，用于将整合的结果提供给所述查询任务所指定的接收者。
CN201711482536.1A 2017-12-29 2017-12-29 一种数据库系统以及查询数据库的方法和装置 Active CN110019274B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201711482536.1A CN110019274B (zh) 2017-12-29 2017-12-29 一种数据库系统以及查询数据库的方法和装置
JP2020533622A JP7440007B2 (ja) 2017-12-29 2018-12-25 データベースをクエリするためのシステム、方法および装置
PCT/CN2018/123437 WO2019128978A1 (zh) 2017-12-29 2018-12-25 一种数据库系统以及查询数据库的方法和装置
US16/954,286 US11789957B2 (en) 2017-12-29 2018-12-25 System, method, and apparatus for querying a database
EP18895044.8A EP3734476A4 (en) 2017-12-29 2018-12-25 DATABASE SYSTEM AND METHOD AND DEVICE FOR REQUESTING A DATABASE

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711482536.1A CN110019274B (zh) 2017-12-29 2017-12-29 一种数据库系统以及查询数据库的方法和装置

Publications (2)

Publication Number Publication Date
CN110019274A true CN110019274A (zh) 2019-07-16
CN110019274B CN110019274B (zh) 2023-09-26

Family

ID=67066574

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711482536.1A Active CN110019274B (zh) 2017-12-29 2017-12-29 一种数据库系统以及查询数据库的方法和装置

Country Status (5)

Country Link
US (1) US11789957B2 (zh)
EP (1) EP3734476A4 (zh)
JP (1) JP7440007B2 (zh)
CN (1) CN110019274B (zh)
WO (1) WO2019128978A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111159106A (zh) * 2019-12-30 2020-05-15 亚信科技（中国）有限公司 一种数据查询方法及装置

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11568065B2 (en) * 2021-01-15 2023-01-31 Bank Of America Corporation System for securing electronic data by aggregation of distributed electronic database entries
CN115048416A (zh) * 2022-06-20 2022-09-13 北京人大金仓信息技术股份有限公司 数据查询方法、装置和设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101120340A (zh) * 2004-02-21 2008-02-06 数据迅捷股份有限公司 超无共享并行数据库
CN102254031A (zh) * 2011-08-03 2011-11-23 无锡浙潮科技有限公司 基于批处理请求的Microsoft SQL Server数据库集群
US20120331010A1 (en) * 2011-06-24 2012-12-27 Douglass Adam Christie Systems And Methods For Performing A Query On A Distributed Database
CN103123652A (zh) * 2013-03-14 2013-05-29 曙光信息产业(北京)有限公司 数据查询方法和集群数据库系统
US20140114994A1 (en) * 2012-10-24 2014-04-24 Marklogic Corporation Apparatus and Method for Securing Preliminary Information About Database Fragments for Utilization in Mapreduce Processing
US20160294975A1 (en) * 2015-03-31 2016-10-06 Sap Se Telecommunication method for handling a database query in a telecommunication system and telecommunication system
CN106326309A (zh) * 2015-07-03 2017-01-11 阿里巴巴集团控股有限公司 一种数据查询方法和装置
CN107451154A (zh) * 2016-05-31 2017-12-08 华为技术有限公司 一种数据表的处理方法、装置及系统

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5694546A (en) 1994-05-31 1997-12-02 Reisman; Richard R. System for automatic unattended electronic information transport between a server and a client by a vendor provided transport software with a manifest list
US7181438B1 (en) 1999-07-21 2007-02-20 Alberti Anemometer, Llc Database access system
US6795819B2 (en) 2000-08-04 2004-09-21 Infoglide Corporation System and method for building and maintaining a database
US6778977B1 (en) 2001-04-19 2004-08-17 Microsoft Corporation Method and system for creating a database table index using multiple processors
PL374305A1 (en) 2001-12-28 2005-10-03 Jeffrey James Jonas Real time data warehousing
US8620937B2 (en) 2002-12-27 2013-12-31 International Business Machines Corporation Real time data warehousing
US7403942B1 (en) 2003-02-04 2008-07-22 Seisint, Inc. Method and system for processing data records
CA2744925C (en) * 2003-04-08 2014-06-03 Grant L. Hutchison Method and system for executing a database query
US8200775B2 (en) 2005-02-01 2012-06-12 Newsilike Media Group, Inc Enhanced syndication
US7490113B2 (en) 2003-08-27 2009-02-10 International Business Machines Corporation Database log capture that publishes transactions to multiple targets to handle unavailable targets by separating the publishing of subscriptions and subsequently recombining the publishing
US8543566B2 (en) 2003-09-23 2013-09-24 Salesforce.Com, Inc. System and methods of improving a multi-tenant database query using contextual knowledge about non-homogeneously distributed tenant data
US7707039B2 (en) 2004-02-15 2010-04-27 Exbiblio B.V. Automatic modification of web pages
US7499917B2 (en) 2005-01-28 2009-03-03 International Business Machines Corporation Processing cross-table non-Boolean term conditions in database queries
US7672930B2 (en) * 2005-04-05 2010-03-02 Wal-Mart Stores, Inc. System and methods for facilitating a linear grid database with data organization by dimension
US7908242B1 (en) 2005-04-11 2011-03-15 Experian Information Solutions, Inc. Systems and methods for optimizing database queries
US7831620B2 (en) * 2006-08-31 2010-11-09 International Business Machines Corporation Managing execution of a query against a partitioned database
US8468244B2 (en) 2007-01-05 2013-06-18 Digital Doors, Inc. Digital information infrastructure and method for security designated data and with granular data stores
US20090012932A1 (en) * 2007-07-03 2009-01-08 Xeround Systems Ltd. Method and System For Data Storage And Management
US8489622B2 (en) 2008-12-12 2013-07-16 Sas Institute Inc. Computer-implemented systems and methods for providing paginated search results from a database
US8078825B2 (en) 2009-03-11 2011-12-13 Oracle America, Inc. Composite hash and list partitioning of database tables
US8880549B2 (en) * 2009-11-09 2014-11-04 International Business Machines Corporation Concurrent database access by production and prototype applications
US8655867B2 (en) 2010-05-13 2014-02-18 Salesforce.Com, Inc. Method and system for optimizing queries in a multi-tenant database environment
CN101916280A (zh) * 2010-08-17 2010-12-15 上海云数信息科技有限公司 并行计算系统及按查询内容进行负载均衡的方法
EP2780835B1 (en) 2011-11-15 2019-08-07 Ab Initio Technology LLC Data clustering, segmentation, and parallelization
US9110947B1 (en) * 2011-12-30 2015-08-18 Teradata Us, Inc. Column-oriented task execution in a row-partitioned database system
JP5800720B2 (ja) 2012-01-24 2015-10-28 三菱電機株式会社 情報処理装置及び情報処理方法及びプログラム
US9928287B2 (en) * 2013-02-24 2018-03-27 Technion Research & Development Foundation Limited Processing query to graph database
US9235618B2 (en) * 2013-04-06 2016-01-12 Citrix Systems, Inc. Systems and methods for caching of SQL responses using integrated caching
JP6107429B2 (ja) * 2013-05-30 2017-04-05 富士通株式会社 データベースシステム、検索方法およびプログラム
US9063710B2 (en) 2013-06-21 2015-06-23 Sap Se Parallel programming of in memory database utilizing extensible skeletons
US9720992B2 (en) * 2013-11-22 2017-08-01 Sap Se DML replication with logical log shipping
US10394818B2 (en) * 2014-09-26 2019-08-27 Oracle International Corporation System and method for dynamic database split generation in a massively parallel or distributed database environment
US10496642B2 (en) * 2014-10-03 2019-12-03 The Regents Of The University Of Michigan Querying input data
US10642833B2 (en) * 2015-08-11 2020-05-05 Sybase, Inc. Accelerating database queries using composite union enumeration
US10678792B2 (en) * 2015-10-23 2020-06-09 Oracle International Corporation Parallel execution of queries with a recursive clause
CN106339432A (zh) 2016-08-19 2017-01-18 上海巨数信息科技有限公司 一种按查询内容进行负载均衡的系统及其方法
CN106372177B (zh) 2016-08-30 2019-09-27 东华大学 支持混合数据类型的关联查询及模糊分组的查询扩展方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101120340A (zh) * 2004-02-21 2008-02-06 数据迅捷股份有限公司 超无共享并行数据库
US20120331010A1 (en) * 2011-06-24 2012-12-27 Douglass Adam Christie Systems And Methods For Performing A Query On A Distributed Database
CN102254031A (zh) * 2011-08-03 2011-11-23 无锡浙潮科技有限公司 基于批处理请求的Microsoft SQL Server数据库集群
US20140114994A1 (en) * 2012-10-24 2014-04-24 Marklogic Corporation Apparatus and Method for Securing Preliminary Information About Database Fragments for Utilization in Mapreduce Processing
CN103123652A (zh) * 2013-03-14 2013-05-29 曙光信息产业(北京)有限公司 数据查询方法和集群数据库系统
US20160294975A1 (en) * 2015-03-31 2016-10-06 Sap Se Telecommunication method for handling a database query in a telecommunication system and telecommunication system
CN106326309A (zh) * 2015-07-03 2017-01-11 阿里巴巴集团控股有限公司 一种数据查询方法和装置
CN107451154A (zh) * 2016-05-31 2017-12-08 华为技术有限公司 一种数据表的处理方法、装置及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111159106A (zh) * 2019-12-30 2020-05-15 亚信科技（中国）有限公司 一种数据查询方法及装置
CN111159106B (zh) * 2019-12-30 2023-04-07 亚信科技（中国）有限公司 一种数据查询方法及装置

Also Published As

Publication number Publication date
US11789957B2 (en) 2023-10-17
JP2021508867A (ja) 2021-03-11
JP7440007B2 (ja) 2024-02-28
WO2019128978A1 (zh) 2019-07-04
EP3734476A1 (en) 2020-11-04
EP3734476A4 (en) 2021-09-15
US20210097075A1 (en) 2021-04-01
CN110019274B (zh) 2023-09-26

Similar Documents

Publication Publication Date Title
US9152669B2 (en) System and method for distributed SQL join processing in shared-nothing relational database clusters using stationary tables
TWI740029B (zh) 分散式搜索及索引更新方法、系統、伺服器及電腦設備
CN102567495B (zh) 一种海量信息存储系统及实现方法
CN111258978B (zh) 一种数据存储的方法
US11614970B2 (en) High-throughput parallel data transmission
CN106708917B (zh) 一种数据处理方法、装置以及olap系统
CN109933631A (zh) 基于Infiniband网络的分布式并行数据库系统及数据处理方法
US9576026B2 (en) System and method for distributed SQL join processing in shared-nothing relational database clusters using self directed data streams
CN105930407B (zh) 一种分布式数据库跨库关联查询方法及系统
US20140229506A1 (en) Data stream processing apparatus and method using query partitioning
CN102201010A (zh) 无共享架构的分布式数据库系统及其实现方法
CN102208991A (zh) 一种日志处理方法、设备和系统
CN110019274A (zh) 一种数据库系统以及查询数据库的方法和装置
CN107888666A (zh) 一种跨地域数据存储系统以及数据同步方法和装置
CN102761602A (zh) 一种基于Hadoop的海量数据实时分析处理方法
CN103823846A (zh) 一种基于图论的大数据存储及查询方法
CN102779160B (zh) 海量数据信息索引系统和索引构建方法
CN107180034A (zh) MySQL数据库的集群系统
CN105975345A (zh) 一种基于分布式内存的视频帧数据动态均衡存储管理方法
CN105608228A (zh) 一种高效的分布式的rdf数据存储方法
Shen et al. Leveraging a compound graph-based DHT for multi-attribute range queries with performance analysis
CN111400301B (zh) 一种数据查询方法、装置及设备
CN106940715B (zh) 一种基于索引表的查询的方法及设备
CN114416868A (zh) 一种数据同步方法、装置、设备及存储介质
CN106776810B (zh) 一种大数据的数据处理系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40010803

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant