JP2005301329A5 - - Google Patents
Download PDFInfo
- Publication number
- JP2005301329A5 JP2005301329A5 JP2004109421A JP2004109421A JP2005301329A5 JP 2005301329 A5 JP2005301329 A5 JP 2005301329A5 JP 2004109421 A JP2004109421 A JP 2004109421A JP 2004109421 A JP2004109421 A JP 2004109421A JP 2005301329 A5 JP2005301329 A5 JP 2005301329A5
- Authority
- JP
- Japan
- Prior art keywords
- changes
- change
- source
- tables
- event
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Claims (22)
- 宛先データベースでトランザクション整合性のある一群のテーブルを維持する、コンピューティングデバイスによって実行される方法であって、
複数のソーステーブルを有するソースデータベースから複数の変更を取り込むステップであって、
各イベントが変更のそれぞれのイベントに対応し、各イベントがソーステーブルの1つにおける活動に対応する、複数のイベントを認識するステップと、
各変更追跡のトリガが、イベントに対応する活動が発生したソーステーブルの1つに関連したトリガコードを有する、イベントの各々に対して変更追跡のトリガを発火するステップと
を含む、複数の変更を取り込むステップと、
少なくとも1つの整合性のある集合の形に変更をグループ化するステップと、
少なくとも1つの整合性のある変更の集合を前記宛先データベースでの一群のテーブルに適用するステップであって、変更の集合は、変更の集合におけるいずれの変更についても、前記宛先データベースでの一群のテーブルに関してトランザクション整合性があり、全ての他の変更は、それらのテーブルに関連しており、所与の変更がまた集合内にあるときに同じトランザクション内でコミットされる、適用するステップと
を備えることを特徴とする方法。 - 前記複数の変更を取り込むステップは、複数のイベントのそれぞれについて、
前記イベントについて識別番号を生成するステップと、
前記イベントおよび前記識別番号に関するデータを、変更として変更追跡テーブルに格納するステップとを含む
ことを特徴とする請求項1に記載の方法。 - 前記変更をグループ化するステップは、
前記少なくとも1つの整合性のある変更の集合を識別するステップと、
前記少なくとも1つの整合性のある集合を回復するための情報を整合性集合テーブルに格納するステップとを含む
ことを特徴とする請求項2に記載の方法。 - 各整合性のある集合は、前記複数の変更の一部分を含み、該一部分内の各変更について、同じトランザクション内でコミットされたソーステーブルに対する他の変更もまたすべて集合内にある
ことを特徴とする請求項1に記載の方法。 - 少なくとも1つの整合性のある変更の集合を前記宛先データベースに適用するステップは、
整合性のある集合内のメンバシップに基づいて、変更追跡テーブルから変更の集合を抽出するステップと、
前記変更の集合を1つのトランザクションで前記宛先データベースに適用するステップとを含む
ことを特徴とする請求項1に記載の方法。 - 前記取り込むステップ、前記グループ化するステップ、および前記適用するステップは同期している
ことを特徴とする請求項1に記載の方法。 - 各変更は、ソースデータベース内のデータに対する挿入、更新、および削除のうちの1つである
ことを特徴とする請求項1に記載の方法。 - 宛先データベースでトランザクション整合性のある一組の宛先テーブルを維持する方法を実行するためのコンピュータ実行可能命令を記憶しているコンピュータ読み取り可能な記録媒体であって、前記命令は、
複数のソーステーブルを有するソースデータベースから複数の変更を取り込むステップであって、
各イベントが変更のそれぞれのイベントに対応し、各イベントがソーステーブルの1つにおける活動に対応する、複数のイベントを認識するステップと、
各変更追跡のトリガが、イベントに対応する活動が発生したソーステーブルの1つに関連したトリガコードを有する、イベントの各々に対して変更追跡のトリガを発火するステップと
を含む、複数の変更を取り込むステップと、
少なくとも1つの整合性のある集合の形に変更をグループ化するステップと、
少なくとも1つの整合性のある変更の集合を前記宛先データベースでの一群のテーブルに適用するステップであって、変更の集合は、変更の集合におけるいずれの変更についても、前記宛先データベースでの一群のテーブルに関してトランザクション整合性があり、全ての他の変更は、それらのテーブルに関連しており、所与の変更がまた集合内にあるときに同じトランザクション内でコミットされる、適用するステップと
を備えることを特徴とするコンピュータ読み取り可能な記録媒体。 - 前記複数の変更を取り込むステップは、複数のイベントのそれぞれについて、
前記イベントについて識別番号を生成するステップと、
前記イベントおよび前記識別番号に関するデータを、変更として変更追跡テーブルに格納するステップとを含む
ことを特徴とする請求項8に記載のコンピュータ読み取り可能な記録媒体。 - 前記変更をグループ化するステップは、
前記少なくとも1つの整合性のある変更の集合を識別するステップと、
前記少なくとも1つの整合性のある集合を回復するための情報を整合性集合テーブルに格納するステップとを含む
ことを特徴とする請求項9に記載のコンピュータ読み取り可能な記録媒体。 - 各整合性のある集合は、前記複数の変更の一部分を含み、該一部分内の各変更について、同じトランザクション内でコミットされたソーステーブルに対する他の変更もまたすべて前記集合内にある
ことを特徴とする請求項8に記載のコンピュータ読み取り可能な記録媒体。 - 少なくとも1つの整合性のある変更の集合を前記宛先データベースに適用するステップは、
整合性のある集合内のメンバシップに基づいて、変更追跡テーブルから変更の集合を抽出するステップと、
前記変更の集合を1つのトランザクションで前記宛先データベースに適用するステップとを含む
ことを特徴とする請求項8に記載のコンピュータ読み取り可能な記録媒体。 - 前記取り込むステップ、前記グループ化するステップ、および前記適用するステップは同期している
ことを特徴とする請求項8に記載のコンピュータ読み取り可能な記録媒体。 - 各変更は、ソースデータベース内のデータに対する挿入、更新、および削除のうちの1つである
ことを特徴とする請求項8に記載のコンピュータ読み取り可能な記録媒体。 - ソースデータベース内のソーステーブル群と宛先データベース内の宛先テーブル群との間で、トランザクション整合性を維持するためのシステムであって、
各ソーステーブルが前記ソースデータベースに関連付けられ、イベントに応答して実行する関連したトリガを有する少なくとも1つのソーステーブルであって、各トリガが、イベントに対応する活動が発生したソーステーブルに関連したトリガコードを有する、少なくとも1つのソーステーブルと、
前記イベントに関するデータを記録するための少なくとも1つの変更追跡テーブルと、
少なくとも1つの変更追跡テーブルのエントリを、少なくとも1つの順序付けられた整合性のある変更の集合の形にグループ化する整合性集合テーブルであって、整合性のある変更の集合が前記宛先データベースでの一群のテーブルに適用され、変更の集合は、変更の集合におけるいずれの変更についても、前記宛先データベースでの一群のテーブルに関してトランザクション整合性があり、全ての他の変更は、それらのテーブルに関連しており、所与の変更がまた集合内にあるときに同じトランザクション内でコミットされる、整合性集合テーブルと
を備えたことを特徴とするシステム。 - 前記ソーステーブル群のそれぞれは、少なくとも1つの対応する変更追跡テーブルを有する
ことを特徴とする請求項15に記載のシステム。 - 前記変更追跡テーブルは、前記トリガの実行に応答して、前記イベント、および前記イベントについての識別番号に関するデータが投入される
ことを特徴とする請求項15に記載のシステム。 - エントリが、整合性のある変更の集合の形にグループ化される
ことを特徴とする請求項17に記載のシステム。 - 変更に対応する複数のイベントについて、各整合性のある集合は、複数の変更の一部分を含み、該一部分内の各変更について、同じトランザクション内でコミットされたソーステーブルに対する他の変更もまたすべて前記一部分内にある
ことを特徴とする請求項15に記載のシステム。 - 前記変更追跡テーブルは、前記宛先データベースに適用すべき少なくとも1つの変更を含む
ことを特徴とする請求項15に記載のシステム。 - 前記整合性集合テーブルを介して識別された整合性のある変更の集合内のメンバシップに基づいて、前記変更追跡テーブルからデータが抽出される
ことを特徴とする請求項15に記載のシステム。 - 1組の抽出された変更が、1つのトランザクションで前記宛先データベースに適用される
ことを特徴とする請求項21に記載のシステム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US10/404,229 US20040199552A1 (en) | 2003-04-01 | 2003-04-01 | Transactionally consistent change tracking for databases |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005301329A JP2005301329A (ja) | 2005-10-27 |
JP2005301329A5 true JP2005301329A5 (ja) | 2007-05-24 |
Family
ID=32850586
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004109421A Pending JP2005301329A (ja) | 2003-04-01 | 2004-04-01 | データベースのためのトランザクション整合性のある変更追跡 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20040199552A1 (ja) |
EP (1) | EP1465085A3 (ja) |
JP (1) | JP2005301329A (ja) |
KR (1) | KR20040088397A (ja) |
CN (1) | CN100386736C (ja) |
Families Citing this family (51)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8738568B2 (en) * | 2011-05-05 | 2014-05-27 | Oracle International Corporation | User-defined parallelization in transactional replication of in-memory database |
US8589346B2 (en) | 2011-04-26 | 2013-11-19 | Oracle International Corporation | Techniques for combining statement level, procedural, and row level replication |
US7155633B2 (en) * | 2003-12-08 | 2006-12-26 | Solid Data Systems, Inc. | Exchange server method and system |
KR100789771B1 (ko) * | 2005-12-08 | 2007-12-28 | 한국전자통신연구원 | 트리거를 이용한 입력 데이터 스트림과 저장 데이터의 통합질의 처리 시스템 및 그 방법 |
US20070162516A1 (en) * | 2005-12-30 | 2007-07-12 | Microsoft Corporation | Computing asynchronous transaction log replication progress based on file change notifications |
EP1811404A1 (de) * | 2006-01-20 | 2007-07-25 | Ubs Ag | Technik zum Beliefern eines Data Warehouse unter Gewährleistung einer konsistenten Datensicht |
US7730538B2 (en) * | 2006-06-02 | 2010-06-01 | Microsoft Corporation | Combining virus checking and replication filtration |
US7685189B2 (en) * | 2006-12-27 | 2010-03-23 | Microsoft Corporation | Optimizing backup and recovery utilizing change tracking |
US7801867B2 (en) * | 2006-12-27 | 2010-09-21 | Microsoft Corporation | Optimizing backup and recovery utilizing change tracking |
KR100926880B1 (ko) * | 2007-05-21 | 2009-11-16 | 엔에이치엔(주) | Dbms에서의 데이터 복제 방법 및 시스템 |
JP5020005B2 (ja) * | 2007-09-06 | 2012-09-05 | 三洋電機株式会社 | 放送信号受信装置 |
US7483922B1 (en) | 2007-11-07 | 2009-01-27 | International Business Machines Corporation | Methods and computer program products for transaction consistent content replication |
US8306951B2 (en) | 2009-09-18 | 2012-11-06 | Oracle International Corporation | Automated integrated high availability of the in-memory database cache and the backend enterprise database |
KR101024494B1 (ko) * | 2008-07-18 | 2011-03-31 | (주)디에프아이비즈 | 메타데이타를 이용한 변경 데이타 추출방법 |
KR101014524B1 (ko) * | 2008-09-22 | 2011-02-14 | 콘티넨탈 오토모티브 시스템 주식회사 | 데이터 일관성을 유지하는 임베디드 시스템의 데이터 리드 방법 |
US20110082832A1 (en) * | 2009-10-05 | 2011-04-07 | Ramkumar Vadali | Parallelized backup and restore process and system |
US20110258160A1 (en) * | 2010-04-15 | 2011-10-20 | Po-Yen Lee | Data synchronization methods for synchronizing data in communication system and communication systems |
US8738583B2 (en) * | 2011-02-09 | 2014-05-27 | Cisco Technology, Inc. | Efficiently delivering event messages using compiled indexing and paginated reporting |
US9128974B2 (en) * | 2011-07-19 | 2015-09-08 | Infosys Limited | Methods for tracking database changes and devices thereof |
US8521699B2 (en) * | 2011-09-13 | 2013-08-27 | Microsoft Corporation | Tracking changes across collection of data tables |
US8818947B2 (en) * | 2011-11-16 | 2014-08-26 | Sap Ag | Landscape transformation replication server |
KR101535703B1 (ko) * | 2012-09-28 | 2015-07-09 | 삼성에스디에스 주식회사 | 데이터 객체 변환 장치 및 방법 |
US9589041B2 (en) | 2013-07-25 | 2017-03-07 | Oracle International Corporation | Client and server integration for replicating data |
US10311154B2 (en) | 2013-09-21 | 2019-06-04 | Oracle International Corporation | Combined row and columnar storage for in-memory databases for OLTP and analytics workloads |
CN105718491A (zh) | 2014-12-04 | 2016-06-29 | 阿里巴巴集团控股有限公司 | 数据库之间更新的方法及其装置 |
US9864816B2 (en) | 2015-04-29 | 2018-01-09 | Oracle International Corporation | Dynamically updating data guide for hierarchical data objects |
US11829349B2 (en) | 2015-05-11 | 2023-11-28 | Oracle International Corporation | Direct-connect functionality in a distributed database grid |
US10191944B2 (en) | 2015-10-23 | 2019-01-29 | Oracle International Corporation | Columnar data arrangement for semi-structured data |
US20170235770A1 (en) * | 2016-02-17 | 2017-08-17 | International Business Machines Corporation | Method for restoring containers in a database based on priorities of the containers |
US11442823B2 (en) | 2016-06-03 | 2022-09-13 | International Business Machines Corporation | Transaction consistency query support for replicated data from recovery log to external data stores |
US10216582B2 (en) | 2016-08-15 | 2019-02-26 | International Business Machines Corporation | Recovery log analytics with a big data management platform |
KR101956236B1 (ko) * | 2016-11-16 | 2019-03-11 | 주식회사 실크로드소프트 | 데이터베이스 관리 시스템에서의 데이터 복제 기법 |
GB201704973D0 (en) * | 2017-03-28 | 2017-05-10 | Gb Gas Holdings Ltd | Data replication system |
US10803039B2 (en) | 2017-05-26 | 2020-10-13 | Oracle International Corporation | Method for efficient primary key based queries using atomic RDMA reads on cache friendly in-memory hash index |
US10719446B2 (en) | 2017-08-31 | 2020-07-21 | Oracle International Corporation | Directly mapped buffer cache on non-volatile memory |
US10956335B2 (en) | 2017-09-29 | 2021-03-23 | Oracle International Corporation | Non-volatile cache access using RDMA |
US10732836B2 (en) | 2017-09-29 | 2020-08-04 | Oracle International Corporation | Remote one-sided persistent writes |
US11086876B2 (en) | 2017-09-29 | 2021-08-10 | Oracle International Corporation | Storing derived summaries on persistent memory of a storage device |
US10802766B2 (en) | 2017-09-29 | 2020-10-13 | Oracle International Corporation | Database with NVDIMM as persistent storage |
US11675761B2 (en) | 2017-09-30 | 2023-06-13 | Oracle International Corporation | Performing in-memory columnar analytic queries on externally resident data |
WO2019097563A1 (ja) * | 2017-11-14 | 2019-05-23 | 川崎重工業株式会社 | 車両監視システム |
US11151111B2 (en) * | 2017-11-30 | 2021-10-19 | Futurewei Technologies, Inc. | Redistributing table data in a database cluster |
US11170002B2 (en) | 2018-10-19 | 2021-11-09 | Oracle International Corporation | Integrating Kafka data-in-motion with data-at-rest tables |
US11086840B2 (en) | 2018-12-07 | 2021-08-10 | Snowflake Inc. | Transactional streaming of change tracking data |
US11886439B1 (en) * | 2019-08-27 | 2024-01-30 | Amazon Technologies, Inc. | Asynchronous change data capture for direct external transmission |
US20220014598A1 (en) * | 2020-07-09 | 2022-01-13 | Ge Aviation Systems Llc | Data service tracker module for a communication system and method of determining a set of data couplings |
KR102271486B1 (ko) * | 2020-10-13 | 2021-07-02 | (주)소만사 | 데이터베이스에 저장된 개인정보의 보유현황 관리방법 및 장치 |
US11704327B2 (en) | 2021-03-19 | 2023-07-18 | International Business Machines Corporation | Querying distributed databases |
US11727022B2 (en) * | 2021-03-19 | 2023-08-15 | International Business Machines Corporation | Generating a global delta in distributed databases |
US11853319B1 (en) | 2021-03-25 | 2023-12-26 | Amazon Technologies, Inc. | Caching updates appended to an immutable log for handling reads to the immutable log |
US11803324B2 (en) * | 2021-12-10 | 2023-10-31 | Nxp B.V. | System and method for managing transactions in integrated circuits |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5701480A (en) * | 1991-10-17 | 1997-12-23 | Digital Equipment Corporation | Distributed multi-version commitment ordering protocols for guaranteeing serializability during transaction processing |
US5613113A (en) * | 1993-10-08 | 1997-03-18 | International Business Machines Corporation | Consistent recreation of events from activity logs |
US5553279A (en) * | 1993-10-08 | 1996-09-03 | International Business Machines Corporation | Lossless distribution of time series data in a relational data base network |
US5590181A (en) * | 1993-10-15 | 1996-12-31 | Link Usa Corporation | Call-processing system and method |
US5758150A (en) * | 1995-10-06 | 1998-05-26 | Tele-Communications, Inc. | System and method for database synchronization |
US5926819A (en) * | 1997-05-30 | 1999-07-20 | Oracle Corporation | In-line triggers |
SE510050C2 (sv) * | 1997-07-21 | 1999-04-12 | Ericsson Telefon Ab L M | Metod för insamlande av logginformation vid förändring av databas |
US6125360A (en) * | 1998-07-02 | 2000-09-26 | Oracle Corporation | Incremental maintenance of materialized views containing one-to-N lossless joins |
US6925476B1 (en) * | 2000-08-17 | 2005-08-02 | Fusionone, Inc. | Updating application data including adding first change log to aggreagate change log comprising summary of changes |
US6609126B1 (en) * | 2000-11-15 | 2003-08-19 | Appfluent Technology, Inc. | System and method for routing database requests to a database and a cache |
US7111023B2 (en) * | 2001-05-24 | 2006-09-19 | Oracle International Corporation | Synchronous change data capture in a relational database |
US7024584B2 (en) * | 2003-01-09 | 2006-04-04 | International Business Machines Corporation | Method, system, and article of manufacture for maintaining data integrity |
-
2003
- 2003-04-01 US US10/404,229 patent/US20040199552A1/en not_active Abandoned
-
2004
- 2004-04-01 CN CNB2004100352346A patent/CN100386736C/zh not_active Expired - Fee Related
- 2004-04-01 EP EP04008015A patent/EP1465085A3/en not_active Ceased
- 2004-04-01 KR KR1020040022572A patent/KR20040088397A/ko not_active Application Discontinuation
- 2004-04-01 JP JP2004109421A patent/JP2005301329A/ja active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2005301329A5 (ja) | ||
CN105138635B (zh) | 一种利用哈希值比对进行数据增量复制的方法 | |
JP2008533612A5 (ja) | ||
CN101329676B (zh) | 一种数据并行抽取方法、装置和数据库系统 | |
CN105938457B (zh) | 数据的过滤方法、装置及数据读取系统 | |
CN104239443B (zh) | 一种序列化数据操作日志的存储方法 | |
CN104268159B (zh) | 一种基于动态镜像的实时数据仓库数据预存取方法 | |
CN102750317B (zh) | 数据持久化处理方法、装置及数据库系统 | |
CN104899295B (zh) | 一种异构数据源数据关联分析方法 | |
JP2004532480A5 (ja) | ||
CN106777270A (zh) | 一种基于提交点时间线同步的异构数据库复制并行执行系统及方法 | |
JP2017188137A5 (ja) | ||
CN102521225A (zh) | 增量数据抽取装置和增量数据抽取方法 | |
CA2483039A1 (en) | Method and apparatus for change data capture in a database system | |
US20140207820A1 (en) | Method for parallel mining of temporal relations in large event file | |
CN106484906A (zh) | 一种分布式对象存储系统闪回方法及装置 | |
CN104834700A (zh) | 一种基于轨迹变更的移动数据增量捕获方法 | |
CN104484131B (zh) | 多磁盘服务器的数据处理装置及对应的处理方法 | |
CN107229721A (zh) | 一种变更数据抽取的方法及装置 | |
KR102038529B1 (ko) | 인-메모리 데이터베이스의 실시간 데이터 변경 처리 시스템 | |
GB2547361A (en) | System generator module for electronic document and electronic file | |
CN106407360A (zh) | 一种数据的处理方法及装置 | |
CN102779138A (zh) | 实时数据的硬盘存取方法 | |
CN105740462A (zh) | 一种支持不同环境之间的数据迁移方法 | |
CN105630934A (zh) | 一种数据统计方法及系统 |