JP2005301329A5 - - Google Patents

Download PDF

Info

Publication number
JP2005301329A5
JP2005301329A5 JP2004109421A JP2004109421A JP2005301329A5 JP 2005301329 A5 JP2005301329 A5 JP 2005301329A5 JP 2004109421 A JP2004109421 A JP 2004109421A JP 2004109421 A JP2004109421 A JP 2004109421A JP 2005301329 A5 JP2005301329 A5 JP 2005301329A5
Authority
JP
Japan
Prior art keywords
changes
change
source
tables
event
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004109421A
Other languages
English (en)
Other versions
JP2005301329A (ja
Filing date
Publication date
Priority claimed from US10/404,229 external-priority patent/US20040199552A1/en
Application filed filed Critical
Publication of JP2005301329A publication Critical patent/JP2005301329A/ja
Publication of JP2005301329A5 publication Critical patent/JP2005301329A5/ja
Pending legal-status Critical Current

Links

Claims (22)

  1. 宛先データベースでトランザクション整合性のある一群のテーブルを維持する、コンピューティングデバイスによって実行される方法であって、
    複数のソーステーブルを有するソースデータベースから複数の変更を取り込むステップであって、
    各イベントが変更のそれぞれのイベントに対応し、各イベントがソーステーブルの1つにおける活動に対応する、複数のイベントを認識するステップと、
    各変更追跡のトリガが、イベントに対応する活動が発生したソーステーブルの1つに関連したトリガコードを有する、イベントの各々に対して変更追跡のトリガを発火するステップと
    を含む、複数の変更を取り込むステップと、
    少なくとも1つの整合性のある集合の形に変更をグループ化するステップと、
    少なくとも1つの整合性のある変更の集合を前記宛先データベースでの一群のテーブルに適用するステップであって、変更の集合は、変更の集合におけるいずれの変更についても、前記宛先データベースでの一群のテーブルに関してトランザクション整合性があり、全ての他の変更は、それらのテーブルに関連しており、所与の変更がまた集合内にあるときに同じトランザクション内でコミットされる、適用するステップと
    を備えることを特徴とする方法。
  2. 前記複数の変更を取り込むステップは、複数のイベントのそれぞれについて、
    前記イベントについて識別番号を生成するステップと、
    前記イベントおよび前記識別番号に関するデータを、変更として変更追跡テーブルに格納するステップとを含む
    ことを特徴とする請求項1に記載の方法。
  3. 前記変更をグループ化するステップは、
    前記少なくとも1つの整合性のある変更の集合を識別するステップと、
    前記少なくとも1つの整合性のある集合を回復するための情報を整合性集合テーブルに格納するステップとを含む
    ことを特徴とする請求項2に記載の方法。
  4. 各整合性のある集合は、前記複数の変更の一部分を含み、該一部分内の各変更について、同じトランザクション内でコミットされたソーステーブルに対する他の変更もまたすべて集合内にある
    ことを特徴とする請求項1に記載の方法。
  5. 少なくとも1つの整合性のある変更の集合を前記宛先データベースに適用するステップは、
    整合性のある集合内のメンバシップに基づいて、変更追跡テーブルから変更の集合を抽出するステップと、
    前記変更の集合を1つのトランザクションで前記宛先データベースに適用するステップとを含む
    ことを特徴とする請求項1に記載の方法。
  6. 前記取り込むステップ、前記グループ化するステップ、および前記適用するステップは同期している
    ことを特徴とする請求項1に記載の方法。
  7. 各変更は、ソースデータベース内のデータに対する挿入、更新、および削除のうちの1つである
    ことを特徴とする請求項1に記載の方法。
  8. 宛先データベースでトランザクション整合性のある一組の宛先テーブルを維持する方法を実行するためのコンピュータ実行可能命令を記憶しているコンピュータ読み取り可能な記録媒体であって、前記命令は、
    複数のソーステーブルを有するソースデータベースから複数の変更を取り込むステップであって、
    各イベントが変更のそれぞれのイベントに対応し、各イベントがソーステーブルの1つにおける活動に対応する、複数のイベントを認識するステップと、
    各変更追跡のトリガが、イベントに対応する活動が発生したソーステーブルの1つに関連したトリガコードを有する、イベントの各々に対して変更追跡のトリガを発火するステップと
    を含む、複数の変更を取り込むステップと、
    少なくとも1つの整合性のある集合の形に変更をグループ化するステップと、
    少なくとも1つの整合性のある変更の集合を前記宛先データベースでの一群のテーブルに適用するステップであって、変更の集合は、変更の集合におけるいずれの変更についても、前記宛先データベースでの一群のテーブルに関してトランザクション整合性があり、全ての他の変更は、それらのテーブルに関連しており、所与の変更がまた集合内にあるときに同じトランザクション内でコミットされる、適用するステップと
    を備えることを特徴とするコンピュータ読み取り可能な記録媒体。
  9. 前記複数の変更を取り込むステップは、複数のイベントのそれぞれについて、
    前記イベントについて識別番号を生成するステップと、
    前記イベントおよび前記識別番号に関するデータを、変更として変更追跡テーブルに格納するステップとを含む
    ことを特徴とする請求項8に記載のコンピュータ読み取り可能な記録媒体。
  10. 前記変更をグループ化するステップは、
    前記少なくとも1つの整合性のある変更の集合を識別するステップと、
    前記少なくとも1つの整合性のある集合を回復するための情報を整合性集合テーブルに格納するステップとを含む
    ことを特徴とする請求項9に記載のコンピュータ読み取り可能な記録媒体。
  11. 各整合性のある集合は、前記複数の変更の一部分を含み、該一部分内の各変更について、同じトランザクション内でコミットされたソーステーブルに対する他の変更もまたすべて前記集合内にある
    ことを特徴とする請求項8に記載のコンピュータ読み取り可能な記録媒体。
  12. 少なくとも1つの整合性のある変更の集合を前記宛先データベースに適用するステップは、
    整合性のある集合内のメンバシップに基づいて、変更追跡テーブルから変更の集合を抽出するステップと、
    前記変更の集合を1つのトランザクションで前記宛先データベースに適用するステップとを含む
    ことを特徴とする請求項8に記載のコンピュータ読み取り可能な記録媒体。
  13. 前記取り込むステップ、前記グループ化するステップ、および前記適用するステップは同期している
    ことを特徴とする請求項8に記載のコンピュータ読み取り可能な記録媒体。
  14. 各変更は、ソースデータベース内のデータに対する挿入、更新、および削除のうちの1つである
    ことを特徴とする請求項8に記載のコンピュータ読み取り可能な記録媒体。
  15. ソースデータベース内のソーステーブル群と宛先データベース内の宛先テーブル群との間で、トランザクション整合性を維持するためのシステムであって、
    各ソーステーブルが前記ソースデータベースに関連付けられ、イベントに応答して実行する関連したトリガを有する少なくとも1つのソーステーブルであって、各トリガが、イベントに対応する活動が発生したソーステーブルに関連したトリガコードを有する、少なくとも1つのソーステーブルと、
    前記イベントに関するデータを記録するための少なくとも1つの変更追跡テーブルと、
    少なくとも1つの変更追跡テーブルのエントリを、少なくとも1つの順序付けられた整合性のある変更の集合の形にグループ化する整合性集合テーブルであって、整合性のある変更の集合が前記宛先データベースでの一群のテーブルに適用され、変更の集合は、変更の集合におけるいずれの変更についても、前記宛先データベースでの一群のテーブルに関してトランザクション整合性があり、全ての他の変更は、それらのテーブルに関連しており、所与の変更がまた集合内にあるときに同じトランザクション内でコミットされる、整合性集合テーブルと
    を備えたことを特徴とするシステム。
  16. 前記ソーステーブル群のそれぞれは、少なくとも1つの対応する変更追跡テーブルを有する
    ことを特徴とする請求項15に記載のシステム。
  17. 前記変更追跡テーブルは、前記トリガの実行に応答して、前記イベント、および前記イベントについての識別番号に関するデータが投入される
    ことを特徴とする請求項15に記載のシステム。
  18. エントリが、整合性のある変更の集合の形にグループ化される
    ことを特徴とする請求項17に記載のシステム。
  19. 変更に対応する複数のイベントについて、各整合性のある集合は、複数の変更の一部分を含み、該一部分内の各変更について、同じトランザクション内でコミットされたソーステーブルに対する他の変更もまたすべて前記一部分内にある
    ことを特徴とする請求項15に記載のシステム。
  20. 前記変更追跡テーブルは、前記宛先データベースに適用すべき少なくとも1つの変更を含む
    ことを特徴とする請求項15に記載のシステム。
  21. 前記整合性集合テーブルを介して識別された整合性のある変更の集合内のメンバシップに基づいて、前記変更追跡テーブルからデータが抽出される
    ことを特徴とする請求項15に記載のシステム。
  22. 1組の抽出された変更が、1つのトランザクションで前記宛先データベースに適用される
    ことを特徴とする請求項21に記載のシステム。
JP2004109421A 2003-04-01 2004-04-01 データベースのためのトランザクション整合性のある変更追跡 Pending JP2005301329A (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US10/404,229 US20040199552A1 (en) 2003-04-01 2003-04-01 Transactionally consistent change tracking for databases

Publications (2)

Publication Number Publication Date
JP2005301329A JP2005301329A (ja) 2005-10-27
JP2005301329A5 true JP2005301329A5 (ja) 2007-05-24

Family

ID=32850586

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004109421A Pending JP2005301329A (ja) 2003-04-01 2004-04-01 データベースのためのトランザクション整合性のある変更追跡

Country Status (5)

Country Link
US (1) US20040199552A1 (ja)
EP (1) EP1465085A3 (ja)
JP (1) JP2005301329A (ja)
KR (1) KR20040088397A (ja)
CN (1) CN100386736C (ja)

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8738568B2 (en) * 2011-05-05 2014-05-27 Oracle International Corporation User-defined parallelization in transactional replication of in-memory database
US8589346B2 (en) 2011-04-26 2013-11-19 Oracle International Corporation Techniques for combining statement level, procedural, and row level replication
US7155633B2 (en) * 2003-12-08 2006-12-26 Solid Data Systems, Inc. Exchange server method and system
KR100789771B1 (ko) * 2005-12-08 2007-12-28 한국전자통신연구원 트리거를 이용한 입력 데이터 스트림과 저장 데이터의 통합질의 처리 시스템 및 그 방법
US20070162516A1 (en) * 2005-12-30 2007-07-12 Microsoft Corporation Computing asynchronous transaction log replication progress based on file change notifications
EP1811404A1 (de) * 2006-01-20 2007-07-25 Ubs Ag Technik zum Beliefern eines Data Warehouse unter Gewährleistung einer konsistenten Datensicht
US7730538B2 (en) * 2006-06-02 2010-06-01 Microsoft Corporation Combining virus checking and replication filtration
US7685189B2 (en) * 2006-12-27 2010-03-23 Microsoft Corporation Optimizing backup and recovery utilizing change tracking
US7801867B2 (en) * 2006-12-27 2010-09-21 Microsoft Corporation Optimizing backup and recovery utilizing change tracking
KR100926880B1 (ko) * 2007-05-21 2009-11-16 엔에이치엔(주) Dbms에서의 데이터 복제 방법 및 시스템
JP5020005B2 (ja) * 2007-09-06 2012-09-05 三洋電機株式会社 放送信号受信装置
US7483922B1 (en) 2007-11-07 2009-01-27 International Business Machines Corporation Methods and computer program products for transaction consistent content replication
US8306951B2 (en) 2009-09-18 2012-11-06 Oracle International Corporation Automated integrated high availability of the in-memory database cache and the backend enterprise database
KR101024494B1 (ko) * 2008-07-18 2011-03-31 (주)디에프아이비즈 메타데이타를 이용한 변경 데이타 추출방법
KR101014524B1 (ko) * 2008-09-22 2011-02-14 콘티넨탈 오토모티브 시스템 주식회사 데이터 일관성을 유지하는 임베디드 시스템의 데이터 리드 방법
US20110082832A1 (en) * 2009-10-05 2011-04-07 Ramkumar Vadali Parallelized backup and restore process and system
US20110258160A1 (en) * 2010-04-15 2011-10-20 Po-Yen Lee Data synchronization methods for synchronizing data in communication system and communication systems
US8738583B2 (en) * 2011-02-09 2014-05-27 Cisco Technology, Inc. Efficiently delivering event messages using compiled indexing and paginated reporting
US9128974B2 (en) * 2011-07-19 2015-09-08 Infosys Limited Methods for tracking database changes and devices thereof
US8521699B2 (en) * 2011-09-13 2013-08-27 Microsoft Corporation Tracking changes across collection of data tables
US8818947B2 (en) * 2011-11-16 2014-08-26 Sap Ag Landscape transformation replication server
KR101535703B1 (ko) * 2012-09-28 2015-07-09 삼성에스디에스 주식회사 데이터 객체 변환 장치 및 방법
US9589041B2 (en) 2013-07-25 2017-03-07 Oracle International Corporation Client and server integration for replicating data
US10311154B2 (en) 2013-09-21 2019-06-04 Oracle International Corporation Combined row and columnar storage for in-memory databases for OLTP and analytics workloads
CN105718491A (zh) 2014-12-04 2016-06-29 阿里巴巴集团控股有限公司 数据库之间更新的方法及其装置
US9864816B2 (en) 2015-04-29 2018-01-09 Oracle International Corporation Dynamically updating data guide for hierarchical data objects
US11829349B2 (en) 2015-05-11 2023-11-28 Oracle International Corporation Direct-connect functionality in a distributed database grid
US10191944B2 (en) 2015-10-23 2019-01-29 Oracle International Corporation Columnar data arrangement for semi-structured data
US20170235770A1 (en) * 2016-02-17 2017-08-17 International Business Machines Corporation Method for restoring containers in a database based on priorities of the containers
US11442823B2 (en) 2016-06-03 2022-09-13 International Business Machines Corporation Transaction consistency query support for replicated data from recovery log to external data stores
US10216582B2 (en) 2016-08-15 2019-02-26 International Business Machines Corporation Recovery log analytics with a big data management platform
KR101956236B1 (ko) * 2016-11-16 2019-03-11 주식회사 실크로드소프트 데이터베이스 관리 시스템에서의 데이터 복제 기법
GB201704973D0 (en) * 2017-03-28 2017-05-10 Gb Gas Holdings Ltd Data replication system
US10803039B2 (en) 2017-05-26 2020-10-13 Oracle International Corporation Method for efficient primary key based queries using atomic RDMA reads on cache friendly in-memory hash index
US10719446B2 (en) 2017-08-31 2020-07-21 Oracle International Corporation Directly mapped buffer cache on non-volatile memory
US10956335B2 (en) 2017-09-29 2021-03-23 Oracle International Corporation Non-volatile cache access using RDMA
US10732836B2 (en) 2017-09-29 2020-08-04 Oracle International Corporation Remote one-sided persistent writes
US11086876B2 (en) 2017-09-29 2021-08-10 Oracle International Corporation Storing derived summaries on persistent memory of a storage device
US10802766B2 (en) 2017-09-29 2020-10-13 Oracle International Corporation Database with NVDIMM as persistent storage
US11675761B2 (en) 2017-09-30 2023-06-13 Oracle International Corporation Performing in-memory columnar analytic queries on externally resident data
WO2019097563A1 (ja) * 2017-11-14 2019-05-23 川崎重工業株式会社 車両監視システム
US11151111B2 (en) * 2017-11-30 2021-10-19 Futurewei Technologies, Inc. Redistributing table data in a database cluster
US11170002B2 (en) 2018-10-19 2021-11-09 Oracle International Corporation Integrating Kafka data-in-motion with data-at-rest tables
US11086840B2 (en) 2018-12-07 2021-08-10 Snowflake Inc. Transactional streaming of change tracking data
US11886439B1 (en) * 2019-08-27 2024-01-30 Amazon Technologies, Inc. Asynchronous change data capture for direct external transmission
US20220014598A1 (en) * 2020-07-09 2022-01-13 Ge Aviation Systems Llc Data service tracker module for a communication system and method of determining a set of data couplings
KR102271486B1 (ko) * 2020-10-13 2021-07-02 (주)소만사 데이터베이스에 저장된 개인정보의 보유현황 관리방법 및 장치
US11704327B2 (en) 2021-03-19 2023-07-18 International Business Machines Corporation Querying distributed databases
US11727022B2 (en) * 2021-03-19 2023-08-15 International Business Machines Corporation Generating a global delta in distributed databases
US11853319B1 (en) 2021-03-25 2023-12-26 Amazon Technologies, Inc. Caching updates appended to an immutable log for handling reads to the immutable log
US11803324B2 (en) * 2021-12-10 2023-10-31 Nxp B.V. System and method for managing transactions in integrated circuits

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5701480A (en) * 1991-10-17 1997-12-23 Digital Equipment Corporation Distributed multi-version commitment ordering protocols for guaranteeing serializability during transaction processing
US5613113A (en) * 1993-10-08 1997-03-18 International Business Machines Corporation Consistent recreation of events from activity logs
US5553279A (en) * 1993-10-08 1996-09-03 International Business Machines Corporation Lossless distribution of time series data in a relational data base network
US5590181A (en) * 1993-10-15 1996-12-31 Link Usa Corporation Call-processing system and method
US5758150A (en) * 1995-10-06 1998-05-26 Tele-Communications, Inc. System and method for database synchronization
US5926819A (en) * 1997-05-30 1999-07-20 Oracle Corporation In-line triggers
SE510050C2 (sv) * 1997-07-21 1999-04-12 Ericsson Telefon Ab L M Metod för insamlande av logginformation vid förändring av databas
US6125360A (en) * 1998-07-02 2000-09-26 Oracle Corporation Incremental maintenance of materialized views containing one-to-N lossless joins
US6925476B1 (en) * 2000-08-17 2005-08-02 Fusionone, Inc. Updating application data including adding first change log to aggreagate change log comprising summary of changes
US6609126B1 (en) * 2000-11-15 2003-08-19 Appfluent Technology, Inc. System and method for routing database requests to a database and a cache
US7111023B2 (en) * 2001-05-24 2006-09-19 Oracle International Corporation Synchronous change data capture in a relational database
US7024584B2 (en) * 2003-01-09 2006-04-04 International Business Machines Corporation Method, system, and article of manufacture for maintaining data integrity

Similar Documents

Publication Publication Date Title
JP2005301329A5 (ja)
CN105138635B (zh) 一种利用哈希值比对进行数据增量复制的方法
JP2008533612A5 (ja)
CN101329676B (zh) 一种数据并行抽取方法、装置和数据库系统
CN105938457B (zh) 数据的过滤方法、装置及数据读取系统
CN104239443B (zh) 一种序列化数据操作日志的存储方法
CN104268159B (zh) 一种基于动态镜像的实时数据仓库数据预存取方法
CN102750317B (zh) 数据持久化处理方法、装置及数据库系统
CN104899295B (zh) 一种异构数据源数据关联分析方法
JP2004532480A5 (ja)
CN106777270A (zh) 一种基于提交点时间线同步的异构数据库复制并行执行系统及方法
JP2017188137A5 (ja)
CN102521225A (zh) 增量数据抽取装置和增量数据抽取方法
CA2483039A1 (en) Method and apparatus for change data capture in a database system
US20140207820A1 (en) Method for parallel mining of temporal relations in large event file
CN106484906A (zh) 一种分布式对象存储系统闪回方法及装置
CN104834700A (zh) 一种基于轨迹变更的移动数据增量捕获方法
CN104484131B (zh) 多磁盘服务器的数据处理装置及对应的处理方法
CN107229721A (zh) 一种变更数据抽取的方法及装置
KR102038529B1 (ko) 인-메모리 데이터베이스의 실시간 데이터 변경 처리 시스템
GB2547361A (en) System generator module for electronic document and electronic file
CN106407360A (zh) 一种数据的处理方法及装置
CN102779138A (zh) 实时数据的硬盘存取方法
CN105740462A (zh) 一种支持不同环境之间的数据迁移方法
CN105630934A (zh) 一种数据统计方法及系统