JP2018514028A5 - - Google Patents

Download PDF

Info

Publication number
JP2018514028A5
JP2018514028A5 JP2017550489A JP2017550489A JP2018514028A5 JP 2018514028 A5 JP2018514028 A5 JP 2018514028A5 JP 2017550489 A JP2017550489 A JP 2017550489A JP 2017550489 A JP2017550489 A JP 2017550489A JP 2018514028 A5 JP2018514028 A5 JP 2018514028A5
Authority
JP
Japan
Prior art keywords
database
shard
connection
client application
access
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017550489A
Other languages
English (en)
Other versions
JP2018514028A (ja
JP6675419B2 (ja
Filing date
Publication date
Application filed filed Critical
Priority claimed from PCT/US2016/028420 external-priority patent/WO2016172195A1/en
Publication of JP2018514028A publication Critical patent/JP2018514028A/ja
Publication of JP2018514028A5 publication Critical patent/JP2018514028A5/ja
Application granted granted Critical
Publication of JP6675419B2 publication Critical patent/JP6675419B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (16)

  1. シャードされたデータベースへのアクセスを提供するためのシステムであって、前記システムは、
    プロセッサを含むコンピュータと、
    データを格納し提示するための複数のシャードを有するデータベースへのアクセスを提供するアプリケーションサーバまたはデータベース環境とを備え、
    前記データベースは、
    データベースドライバと、
    前記データベースに対して使用するための接続のプールを生成し維持する接続プールとに対応付けられており、
    前記接続プールおよび前記データベースドライバはともに動作することにより、前記接続を用いて、前記データベースに格納されているデータへのクライアントアプリケーションによるアクセスを提供し、
    前記データベースドライバは、接続要求の処理において使用するために、シャードトポロジとして、シャードキー範囲を前記データベース内のシャードの位置にキャッシュし、
    前記データベースドライバは、接続要求の一部として、クライアントアプリケーションが前記データベースにアクセスすることを可能にするように構成されており、前記クライアントアプリケーションが前記データベースにアクセスすることを可能にすることは、前記データベース内の適切なシャードの位置を判断することと、前記シャードトポロジを使用することと、前記データベースの前記適切なシャードへの前記クライアントアプリケーションによるアクセスを提供することとを含む、システム。
  2. シャードトポロジレイヤは、後続の接続要求が、シャードディレクタまたはリスナーコンポーネントをバイパスして代わりに適切なシャードまたはチャンクへの高速キー経路アクセスを使用することを可能にするように構成されており、前記シャードディレクタまたはリスナーコンポーネントは、データベースシャードへのソフトウェアクライアントアプリケーションによるアクセスを提供するように動作する、請求項1に記載のシステム。
  3. 前記接続プールおよび前記データベースドライバは、前記データベースへの接続のチェックアウト中または後の時点のうちの少なくとも一方においてクライアントアプリケーションがシャードキー情報を提供することを可能にするように構成されており、
    前記システムは、前記シャードキー情報を用いて、前記クライアントアプリケーションが使用する前記データベースの適切なシャードへの、前記クライアントアプリケーションによるダイレクトアクセスを提供するように、構成されている、請求項1または2に記載のシステム。
  4. シャードされたデータベースへのアクセスを提供するためのシステムであって、前記システムは、
    プロセッサを含むコンピュータと、
    データを格納し提示するための複数のシャードを有するデータベースへのアクセスを提供するアプリケーションサーバまたはデータベース環境とを備え、
    前記データベースは、
    データベースドライバと、
    前記データベースに対して使用するための接続のプールを生成し維持する接続プールとに対応付けられており、
    前記接続プールおよび前記データベースドライバはともに動作することにより、前記接続を用いて、前記データベースに格納されているデータへのクライアントアプリケーションによるアクセスを提供し、
    前記接続プールおよび前記データベースドライバは、前記データベースへの接続のチェックアウト中または後の時点のうちの少なくとも一方においてクライアントアプリケーションがシャードキー情報を提供することを可能にするように構成されており、
    前記シャードキー情報は前記システムによって用いられて、前記クライアントアプリケーションが使用する前記データベースの適切なシャードへの、前記クライアントアプリケーションによるダイレクトアクセスを提供する、システム。
  5. 前記データベースドライバおよび前記接続プールは、前記クライアントアプリケーションによって指定されたシャードキーを認識するように、かつ、前記クライアントアプリケーションが前記クライアントアプリケーションに対応付けられた特定のシャードおよびチャンクに接続することを可能にするように、構成されている、請求項3または4に記載のシステム。
  6. 前記接続プールは、接続をそのシャードキーによって識別するように、かつ、同じシャードキーの要求をクライアントアプリケーションから受けたときは接続を再使用することを許可するように構成されている、請求項1〜5のいずれかに記載のシステム。
  7. 特定のシャードまたはチャンクへの接続が前記接続プールにない場合は、別のチャンクへの既存の利用できる接続を、その用途を変更して再使用することを試みる、請求項1〜6のいずれかに記載のシステム。
  8. シャードされたデータベースへのアクセスを提供する方法であって、前記方法は、
    コンピュータにより、データを格納し提示するための複数のシャードを有するデータベースへのアクセスを提供するステップを含み、
    前記データベースは、
    データベースドライバと、
    前記データベースに対して使用するための接続のプールを生成し維持する接続プールとに対応付けられており、
    前記接続プールおよび前記データベースドライバはともに動作することにより、前記接続を用いて、前記データベースに格納されているデータへのクライアントアプリケーションによるアクセスを提供し、
    前記データベースドライバは、接続要求の処理において使用するために、シャードトポロジとして、シャードキー範囲を前記データベース内のシャードの位置にキャッシュし、
    前記データベースドライバは、接続要求の一部として、クライアントアプリケーションが前記データベースにアクセスすることを可能にするように構成されており、前記クライアントアプリケーションが前記データベースにアクセスすることを可能にすることは、前記データベース内の適切なシャードの位置を判断することと、前記シャードトポロジを使用することと、前記データベースの前記適切なシャードへの前記クライアントアプリケーションによるアクセスを提供することとを含む、方法。
  9. シャードトポロジレイヤは、後続の接続要求が、シャードディレクタまたはリスナーコンポーネントをバイパスして代わりに適切なシャードまたはチャンクへの高速キー経路アクセスを使用することを可能にするように構成されており、前記シャードディレクタまたはリスナーコンポーネントは、データベースシャードへのソフトウェアクライアントアプリケーションによるアクセスを提供するように動作する、請求項8に記載の方法。
  10. 前記接続プールおよび前記データベースドライバは、前記データベースへの接続のチェックアウト中または後の時点のうちの少なくとも一方においてクライアントアプリケーションがシャードキー情報を提供することを可能にするように構成されており、
    前記シャードキー情報を用いて、前記クライアントアプリケーションが使用する前記データベースの適切なシャードへの、前記クライアントアプリケーションによるダイレクトアクセスを提供する、請求項8または9に記載の方法。
  11. シャードされたデータベースへのアクセスを提供する方法であって、前記方法は、
    コンピュータにより、データを格納し提示するための複数のシャードを有するデータベースへのアクセスを提供するステップを含み、
    前記データベースは、
    データベースドライバと、
    前記データベースに対して使用するための接続のプールを生成し維持する接続プールとに対応付けられており、
    前記接続プールおよび前記データベースドライバはともに動作することにより、前記接続を用いて、前記データベースに格納されているデータへのクライアントアプリケーションによるアクセスを提供し、
    前記接続プールおよび前記データベースドライバは、前記データベースへの接続のチェックアウト中または後の時点のうちの少なくとも一方においてクライアントアプリケーションがシャードキー情報を提供することを可能にするように構成されており、
    前記シャードキー情報を用いて、前記クライアントアプリケーションが使用する前記データベースの適切なシャードへの、前記クライアントアプリケーションによるダイレクトアクセスを提供する、方法。
  12. 前記データベースドライバおよび前記接続プールは、前記クライアントアプリケーションによって指定されたシャードキーを認識するように、かつ、前記クライアントアプリケーションが前記クライアントアプリケーションに対応付けられた特定のシャードおよびチャンクに接続することを可能にするように、構成されている、請求項10または11に記載の方法。
  13. 前記接続プールは、接続をそのシャードキーによって識別するように、かつ、同じシャードキーの要求をクライアントアプリケーションから受けたときは接続を再使用することを許可するように構成されている、請求項8〜12のいずれかに記載の方法。
  14. 特定のシャードまたはチャンクへの接続が前記接続プールにない場合は、別のチャンクへの既存の利用できる接続を、その用途を変更して再使用することを試みる、請求項8〜13のいずれかに記載の方法。
  15. 令を含コンピュータ読取可能なプログラムであって、前記命令は、1つ以上のコンピュータによって読出されて実行されたときに、前記1つ以上のコンピュータに、請求項8〜14のいずれかに記載の方法を実行させる、ンピュータ読取可能なプログラム
  16. 請求項8〜14のいずれか1項に記載の方法を1つ以上のコンピュータに実行させるためのプログラム。
JP2017550489A 2015-04-20 2016-04-20 シャードされたデータベースへのアクセスをキャッシュおよびシャードトポロジを用いて提供するためのシステムおよび方法 Active JP6675419B2 (ja)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201562150188P 2015-04-20 2015-04-20
US201562150191P 2015-04-20 2015-04-20
US62/150,188 2015-04-20
US62/150,191 2015-04-20
US201562198958P 2015-07-30 2015-07-30
US62/198,958 2015-07-30
PCT/US2016/028420 WO2016172195A1 (en) 2015-04-20 2016-04-20 System and method for providing access to a sharded database using a cache and a shard topology

Publications (3)

Publication Number Publication Date
JP2018514028A JP2018514028A (ja) 2018-05-31
JP2018514028A5 true JP2018514028A5 (ja) 2019-01-17
JP6675419B2 JP6675419B2 (ja) 2020-04-01

Family

ID=55910387

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017550489A Active JP6675419B2 (ja) 2015-04-20 2016-04-20 シャードされたデータベースへのアクセスをキャッシュおよびシャードトポロジを用いて提供するためのシステムおよび方法

Country Status (5)

Country Link
US (3) US10545935B2 (ja)
EP (1) EP3286664B1 (ja)
JP (1) JP6675419B2 (ja)
CN (1) CN107408128B (ja)
WO (1) WO2016172195A1 (ja)

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3286664B1 (en) * 2015-04-20 2021-10-13 Oracle International Corporation System and method for providing access to a sharded database using a cache and a shard topology
US10268710B2 (en) 2015-10-07 2019-04-23 Oracle International Corporation Relational database organization for sharding
CN106599711A (zh) * 2015-10-15 2017-04-26 华为技术有限公司 一种数据库访问控制方法,及装置
US10606864B2 (en) 2016-08-16 2020-03-31 Quintessencelabs Pty Ltd. Fault-tolerant key management system
US10997557B2 (en) 2016-10-14 2021-05-04 Slack Technologies, Inc. Method, apparatus, and computer program product for authorizing and authenticating user communication within an enterprise group-based communication platform
US10565524B2 (en) * 2017-01-31 2020-02-18 Hewlett Packard Enterprise Development Lp Performing privacy-preserving multi-party analytics on horizontally partitioned local data
US10536437B2 (en) 2017-01-31 2020-01-14 Hewlett Packard Enterprise Development Lp Performing privacy-preserving multi-party analytics on vertically partitioned local data
US10938878B2 (en) 2017-05-16 2021-03-02 Red Hat, Inc. Separate cache servers for storing objects in different dedicated size ranges
US10503714B2 (en) 2017-06-02 2019-12-10 Facebook, Inc. Data placement and sharding
US10541825B2 (en) 2017-07-20 2020-01-21 Slack Technologies, Inc. Method, apparatus and computer program product for generating externally shared communication channels
US11341093B2 (en) 2017-07-20 2022-05-24 Slack Technologies, Llc Method, apparatus and computer program product for generating externally shared communication channels
US10402371B2 (en) 2017-07-20 2019-09-03 Slack Technologies, Inc. Method, apparatus and computer program product for generating externally shared communication channels
US10810268B2 (en) * 2017-12-06 2020-10-20 Futurewei Technologies, Inc. High-throughput distributed transaction management for globally consistent sharded OLTP system and method of implementing
US10855767B1 (en) * 2018-03-05 2020-12-01 Amazon Technologies, Inc. Distribution of batch data to sharded readers
US10346378B1 (en) * 2018-11-30 2019-07-09 Slack Technologies, Inc. Data storage architecture for an enterprise communication system
US10698770B1 (en) * 2019-04-10 2020-06-30 Capital One Services, Llc Regionally agnostic in-memory database arrangements with reconnection resiliency
CN110471935B (zh) * 2019-08-15 2022-02-18 上海达梦数据库有限公司 一种数据操作的执行方法、装置、设备和存储介质
US11151124B2 (en) 2019-09-09 2021-10-19 Oracle International Corporation Automatic derivation of shard key values and transparent multi-shard transaction and query support
US11194773B2 (en) 2019-09-12 2021-12-07 Oracle International Corporation Integration of existing databases into a sharding environment
CN111061801A (zh) * 2019-12-25 2020-04-24 天津南大通用数据技术股份有限公司 一种事务型数据库读写分离实现方法
CN111159219B (zh) * 2019-12-31 2023-05-23 湖南亚信软件有限公司 一种数据管理方法、装置、服务器及存储介质
CN111782632B (zh) 2020-06-28 2024-07-09 百度在线网络技术(北京)有限公司 数据处理方法、装置、设备和存储介质
EP4258129A1 (en) * 2020-12-04 2023-10-11 Geun Seok Kim Data sharding system, data sharding method, and program stored in recording medium
KR102287483B1 (ko) * 2020-12-04 2021-08-06 김근석 데이터 샤딩 시스템, 데이터 샤딩 방법 및 기록 매체에 저장된 프로그램
US11310142B1 (en) * 2021-04-23 2022-04-19 Trend Micro Incorporated Systems and methods for detecting network attacks
US11888929B1 (en) * 2022-11-15 2024-01-30 SimpliSafe, Inc. Load balancing device connections
KR20240077233A (ko) * 2022-11-24 2024-05-31 재단법인대구경북과학기술원 샤딩 기반의 키-값 캐싱 시스템 및 방법

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2744925C (en) * 2003-04-08 2014-06-03 Grant L. Hutchison Method and system for executing a database query
CN100337235C (zh) * 2003-06-23 2007-09-12 华为技术有限公司 访问数据库的方法及装置
US7953860B2 (en) 2003-08-14 2011-05-31 Oracle International Corporation Fast reorganization of connections in response to an event in a clustered computing system
JP2006259790A (ja) 2005-03-15 2006-09-28 Nomura Research Institute Ltd データベースを有するアプリケーションシステム、データベースのアクセス方法、及びデータベースへアクセスするためのコンピュータプログラム
CN101777047A (zh) * 2009-01-08 2010-07-14 国际商业机器公司 多租户环境下访问数据库的系统、设备和方法
US8510267B2 (en) * 2011-03-08 2013-08-13 Rackspace Us, Inc. Synchronization of structured information repositories
US8782762B2 (en) 2011-08-17 2014-07-15 International Business Machines Corporation Building data security in a networked computing environment
US8700683B2 (en) * 2011-10-24 2014-04-15 Nokia Corporation Method and apparatus for providing a key-value based storage interface
KR101365464B1 (ko) 2012-03-05 2014-02-20 네이버비즈니스플랫폼 주식회사 데이터베이스 미들웨어를 이용한 데이터 관리 시스템 및 방법
CN103365929B (zh) * 2012-04-10 2016-09-28 阿里巴巴集团控股有限公司 一种数据库连接的管理方法及系统
US8898109B2 (en) * 2012-07-27 2014-11-25 Microsoft Corporation Automatic transaction retry after session failure
US8838535B2 (en) 2012-10-05 2014-09-16 Oracle International Corporation Providing services across systems that manage distributed replicas
KR101544356B1 (ko) * 2012-10-31 2015-08-13 삼성에스디에스 주식회사 메타데이터 및 트랜잭션 발생량을 고려한 동적 샤딩 기능을 지원하는 분산 데이터베이스 관리 방법 및 그 구성 노드
US9628345B2 (en) 2012-12-13 2017-04-18 Level 3 Communications, Llc Framework supporting content delivery with collector services network
US9268798B2 (en) * 2013-04-26 2016-02-23 Oracle International Corporation Support for cloud-based multi-tenant environments using connection labeling
US9747341B2 (en) * 2013-06-06 2017-08-29 Oracle International Corporation System and method for providing a shareable global cache for use with a database environment
CN103605727B (zh) * 2013-11-19 2017-07-28 浪潮电子信息产业股份有限公司 基于连接池的多用户数据库访问高效率优化方法及系统
US9813516B2 (en) * 2014-02-18 2017-11-07 Salesforce.Com, Inc. Transparent sharding of traffic across messaging brokers
US10025710B2 (en) * 2014-04-30 2018-07-17 Walmart Apollo, Llc Pattern for integrating primary and secondary data stores in a sharded data domain
US10043208B2 (en) * 2014-05-30 2018-08-07 Walmart Apollo, Llc Smart order management and database sharding
US9817726B2 (en) * 2015-01-09 2017-11-14 Ariba, Inc. Delta replication of index fragments to enhance disaster recovery
EP3286664B1 (en) * 2015-04-20 2021-10-13 Oracle International Corporation System and method for providing access to a sharded database using a cache and a shard topology
US10268710B2 (en) * 2015-10-07 2019-04-23 Oracle International Corporation Relational database organization for sharding
CN105673010B (zh) 2016-03-08 2017-12-05 中煤张家口煤矿机械有限责任公司 一种用于刨煤机的调向装置及调向方法

Similar Documents

Publication Publication Date Title
JP2018514028A5 (ja)
WO2019120328A3 (en) Processing and storing blockchain data under a trusted execution environment
US8782323B2 (en) Data storage management using a distributed cache scheme
RU2017107019A (ru) Безопасный доступ к данным после сбоя хранилища
US20170364304A1 (en) Tracking hot areas of disk drive
RU2015155711A (ru) Центры обработки данных конечных точек с разными наборами арендаторов
WO2019120327A3 (en) Processing blockchain data based on smart contract operations executed in a trusted execution environment
JP2017529627A5 (ja)
WO2015043420A1 (zh) 权限控制方法和装置
JP2018503154A5 (ja)
JP2018505501A5 (ja)
US9063786B2 (en) Preferential CPU utilization for tasks
JP2016526199A5 (ja)
JP2016173826A5 (ja) コンシステントハッシュ法を用いたグローバルネームスペースのための方法およびシステム
JP2017518594A5 (ja)
JP2017528845A5 (ja)
JP2007538326A5 (ja)
US8661175B2 (en) Multiprocessor synchronization using region locks
JP2004528659A5 (ja)
JP2020525909A5 (ja)
JP2017538194A5 (ja)
JP2018533090A5 (ja)
JP2018504695A5 (ja)
CA3057038C (en) Data filtering method, apparatus, electronic apparatus and storage medium
JP2019502980A5 (ja)