CN111400275A - 一种定制并自动进行数据老化的方法 - Google Patents
一种定制并自动进行数据老化的方法 Download PDFInfo
- Publication number
- CN111400275A CN111400275A CN201911300202.7A CN201911300202A CN111400275A CN 111400275 A CN111400275 A CN 111400275A CN 201911300202 A CN201911300202 A CN 201911300202A CN 111400275 A CN111400275 A CN 111400275A
- Authority
- CN
- China
- Prior art keywords
- data
- database
- cleaning
- parent
- production database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 19
- 230000032683 aging Effects 0.000 title claims abstract description 10
- 238000004519 manufacturing process Methods 0.000 claims abstract description 67
- 230000005012 migration Effects 0.000 claims abstract description 60
- 238000013508 migration Methods 0.000 claims abstract description 57
- 230000014759 maintenance of location Effects 0.000 claims abstract description 14
- 238000004140 cleaning Methods 0.000 claims description 57
- 238000004088 simulation Methods 0.000 claims description 17
- 238000012360 testing method Methods 0.000 claims description 6
- 230000010076 replication Effects 0.000 claims description 4
- 238000013500 data storage Methods 0.000 claims description 3
- 230000009286 beneficial effect Effects 0.000 abstract description 2
- 238000004321 preservation Methods 0.000 abstract description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/214—Database migration support
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/219—Managing data history or versioning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
Abstract
本发明公开了一种定制并自动进行数据老化的方法，包括如下步骤：在不需要对生产数据库进行停机的情况下，本发明生产数据库保留保存时间不超过TC的数据，通过将生产数据库中超过保存时间TC的数据保存到历史数据库中，然后再根据迁移规则清除生产数据库上相应的数据，完成数据迁移。本发明具有如下有益效果：自动化实现历史数据迁移，保留一定年份的生产数据库历史数据；完成历史数据迁移后，可通过限制生产数据库的数据滞留量提高生产库的性能；迁移前生产数据库与历史数据库表结构自同步，能够实现父子表的数据迁移，能设置表数据保留时间，不影响生产业务正常运行，可修改对应基表配置信息。
Description
技术领域
本发明涉及数据传输技术领域，尤其是涉及一种能够定时进行历史数据迁移，不影响生产业务运行，提高生产库性能，的定制并自动进行数据老化的方法。
背景技术
Oracle数据库是现在使用最多的数据库之一，Oracle数据库支持数据的逻辑迁移，物理迁移。
现在的企业的业务数据库所能提供的用于数据迁移的停机时间并不长，甚至有些迁移需要在业务运行时进行，且不能影响业务的正常运作。
当用户需要将生产库的历史数据迁移至另外的数据库即历史库时，传统的逻辑迁移与物理迁移都会对生产库的生产业务产生影响，需要先进行测试，再申请生产库的停机时间，进行数据迁移。且难以实现定期的数据迁移，对于历史库中数据的保留时间到后的数据删除，还需要对历史数据库另行设定。
发明内容
本发明为了克服现有技术中存在的难以实现定期数据迁移，数据进行迁移时需要业务的暂停，或者在业务运行时迁移会影响业务的运行，以及迁移完成后对数据保留时间的处理的不足，提供了一种能够定时进行历史数据迁移，不影响生产业务运行，提高生产库性能，的定制并自动进行数据老化的方法。
为了实现上述目的，本发明采用了以下技术方案：
一种定制并自动进行数据老化的方法，包括如下步骤：
(1-1)设置数据的保存时间TC和数据迁移的时间间隔ΔTQ；
(1-2)每次数据迁移结束时，计时器置0，重新开始计时，时间间隔用ΔT表示，如果ΔT＝ΔTQ,确定生产数据库中需要迁移的表之间的父子关系，
如果需要迁移的表之间具有父子关系，获得父表的时间字段和关联字段，获得子表的关联字段，转入步骤(1-3)；
如果需要迁移的表之间不具有父子关系，需要迁移的表为单一表，获得单一表的时间字段，转入步骤(1-3)；
其中，需要迁移的表为数据保存时间大于TC的表；
(1-3)搭建历史数据库，创建相同的用户和表结构，仅保留主键和索引，配置数据迁移的基础表格；
(1-4)检查生产数据库是否有delete触发器，如果有delete触发器，关闭delete触发器，转入步骤(1-5)，如果没有delete触发器，转入步骤(1-5)；
(1-5)运行脚本，进行生产数据库和历史数据库之间的数据迁移；
(1-6)验证数据迁移是否完成，如果没有完成，转入步骤(1-5)。
在不需要对生产数据库进行停机的情况下，本发明生产数据库保留保存时间不超过TC的数据，通过将生产数据库中超过保存时间TC的数据保存到历史数据库中，然后再根据迁移规则清除生产数据库上相应的数据，减少生产数据库的数据量，加快生产库的业务响应速度。
作为优选，步骤(1-5)到步骤(1-6)的具体步骤如下：
(2-1)准备历史数据库中用于存放历史数据的表空间；
(2-2)部署数据迁移脚本，在生产数据库和历史数据库之间建立数据库链接DBLINK；
(2-3)导入测试验证过的数据清理规则；
(2-4)对生产数据库中需要迁移的表的数据进行数据复制，复制到历史数据库中；
(2-5)完成数据复制后，根据数据清理规则对生产数据库中已迁移的表进行数据清理；
(2-6)验证数据复制和数据清理是否完成，如果没有完成，转入步骤(2-4)。
作为优选，步骤(2-3)中数据清理规则的测试验证方法如下：
(3-1)准备2个ORACLE数据库，一个模拟生产数据库，另一个模拟历史数据库；
(3-2)从生产数据库上备份一份数据至模拟生产数据库中，制定一份测试数据；
(3-3)部署数据迁移软件，在模拟生产数据库和模拟历史数据库之间建立数据库链接DBLINK；
(3-4)配置表格清理的对象和清理规则；
(3-5)根据清理规则进行数据清理；
(3-6)确定数据清理是否完成，如果数据清理没有完成，转入步骤(3-5)。
作为优选，步骤(3-4)中的清理规则包括单一表的清理规则SIMPLE，单一表的清理规则SIMPLE具体为：根据配置表中时间条件，直接将时间大于TC的单一表中的数据删除。
作为优选，步骤(3-4)中的清理规则包括存在父子关系的表的清理规则CASCADE，存在父子关系的表的清理规则CASCADE包括CASCADE_DEPEND和DEPEND；存在父子关系的表的清理规则CASCADE具体为：先清理与父表有关的子表中的数据，再清理父表中的数据。
作为优选，CASCADE_DEPEND配置在父表的配置信息里；采用CASCADE_DEPEND方式清除子表相关数据时，先检查子表在配置表中的条件，如果符合配置条件，清理子表数据，然后再清除父表数据；如果不符合配置条件，不能清理子表数据，父表中的相关数据也不能清理。
作为优选，DEPEND配置在子表的配置信息里；清理数据时按配置表格的列排序依次进行清理，在清理到配置成DEPEND方式的子表时，程序不对数据作任何操作；清理到与配置成DEPEND方式的子表相关联的父表时，才对配置成DEPEND方式的子表进行数据清理。
因此，本发明具有如下有益效果：自动化实现历史数据迁移，保留一定年份的生产数据库历史数据；完成历史数据迁移后，可通过限制生产数据库的数据滞留量提高生产库的性能；迁移前生产数据库与历史数据库表结构自同步，能够实现父子表的数据迁移，能设置表数据保留时间，不影响生产业务正常运行，可修改对应基表配置信息。
附图说明
图1是本发明的一种流程图。
具体实施方式
下面结合附图与具体实施方式对本发明做进一步描述：
如图1所示的实施例是一种定制并自动进行数据老化的方法，包括如下步骤：
步骤100，进行数据清理规则的测试验证；
步骤101，准备2个ORACLE数据库，一个模拟生产数据库，另一个模拟历史数据库；
步骤102，从生产数据库上备份一份数据至模拟生产数据库中，制定一份测试数据；
步骤103，部署数据迁移软件，在模拟生产数据库和模拟历史数据库之间建立数据库链接DBLINK；
步骤104，配置表格清理的对象和清理规则；
步骤105，根据清理规则进行数据清理；
步骤106，确定数据清理是否完成，如果数据清理没有完成，转入步骤105；
步骤200，设置数据的保存时间TC和数据迁移的时间间隔ΔTQ；
其中，清理规则包括单一表的清理规则SIMPLE和存在父子关系的表的清理规则CASCADE；存在父子关系的表的清理规则CASCADE包括CASCADE_DEPEND和DEPEND；单一表的清理规则SIMPLE具体为：根据配置表中时间条件，直接将时间大于TC的单一表中的数据删除；CASCADE_DEPEND配置在父表的配置信息里；采用CASCADE_DEPEND方式清除子表相关数据时，先检查子表在配置表中的条件，如果符合配置条件，清理子表数据，然后再清除父表数据；如果不符合配置条件，不能清理子表数据，父表中的相关数据也不能清理；DEPEND配置在子表的配置信息里；清理数据时按配置表格的列排序依次进行清理，在清理到配置成DEPEND方式的子表时，程序不对数据作任何操作；清理到与配置成DEPEND方式的子表相关联的父表时，才对配置成DEPEND方式的子表进行数据清理；DEPEND也可配置于没有任何关联关系的单一表，表示不对表格数据进行处理；
CASCADE_DEPEND的部分代码为：when'CASCADE DEPEND'thenTwinMbase.DeleteCascade(v_JobName,v_site_id,v_config_id,v_owner,v_tname,'CASCADEDEPEND_D',”,i_opr_type)；
DEPEND的部分代码为when'DEPEND'then TwinMbase.DeleteDepend；
步骤300，每次数据迁移结束时，计时器置0，重新开始计时，时间间隔用ΔT表示，如果ΔT＝ΔTQ,确定生产数据库中需要迁移的表之间的父子关系，
如果需要迁移的表之间具有父子关系，获得父表的时间字段和关联字段，获得子表的关联字段，转入步骤400；
如果需要迁移的表之间不具有父子关系，需要迁移的表为单一表，获得单一表的时间字段，转入步骤400；
其中，需要迁移的表为数据保存时间大于TC的表；
步骤400，搭建历史数据库，创建相同的用户和表结构，仅保留主键和索引，配置数据迁移的基础表格；
其中，基础表格为4个，分别为mc$rep_tables、mc$winm_table_rules、mc$winm_depend_rule和mc$winm_windows；通过四张基础表格mc$rep_tables、mc$winm_table_rules、mc$winm_depend_rule、mc$winm_windows生成多个匿名块，通过DBLINK方式将数据传输到历史数据库，最后删除生产数据库中的数据，完成历史数据迁移；
mc$rep_tables：所有需要进行历史数据迁移的表都配置在mc$rep_tables表格中，根据实际情况填写迁移表的所属者OWNER、迁移表的表名TABLE_NAME，指定迁移表的IDCONFIG_ID依次递增，可视为主键，不可与已有的CONFIG_ID，如表1所示；
表1
mc$winm_table_rules：迁移规则基表，用于指定每个表格的迁移方式，例如：CASCADEDEPEND_D为父表，必须填写用于迁移的时间字段与时间格式；DEPEND_D为子表；SIMPLE_D为单一表；DELETE_KEY：迁移时间字段，DATE_FORMAT：时间格式，RULE_NAME：表的性质，如表2所示；
表2
mc$winm_depend_rule：用于配置子表的信息，DELETE_KEY为子表中的迁移字段，如果多个需添加括号，DEPEND_KEY为主表的关联字段，注意：此处的CONFIG_ID为主表的CONFIG_ID如表3所示；
表3
mc$winm_windows：此基表用于配置数据保留时间，根据实际情况添写WINDOW_LENGTH字段，单位为月，WINDOW_LENGTH：保留时间，GRANULARITY：时间单位，如表4所示；
表4
| SITE_ID | OWNER | TABLE_NAME | WINDOW_LENGTH | GRANULARITY | GRAN_TYPE |
| 1 | HOSTDB | ACT_7041_LOG | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | ACT_CFS_WEIGH | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | ACT_CHANGCTNDOOR | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | ACT_EVACUATE_PLAN | 19 | MONTH | CALENDAR |
| 1 | HOSTDa | ACT_INTERFACE_LOG | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | ACT_INVENTORY_GKX | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | ACT_MONITOR | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | ACT_SRTCTN | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | ACT_TOSPLAN_MOVEMENT | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | ACT_TRANSSHIP_LOG | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | ACT_TRUCK_PUNISH | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | BAPLIE_MESSAGE_FIND | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | BIL_SHIP_CTN_GROUP | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | BOK_TONGDAO_CTN | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | BOK_INTERNAL_CTN_KX | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | CAN_DELIVERY | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | CAN_INVENTORY | 19 | MONTH | CALENDAR |
| 1 | HOSTDB | CAN_INVENTORY_BL | 19 | MONTH | CALENDAR |
步骤500，检查生产数据库是否有delete触发器，如果有delete触发器，关闭delete触发器，转入步骤600，如果没有delete触发器，转入步骤600；
通过语句【select a.TABLE_NAME，trigger_body，status from dba_triggers awhere table_name in(select table_name from rep_user.mc$rep_tables)andtriggering_event＝’DELETE’and status＝’ENABLED’】检查生产数据库是否有delete触发器；如果有delete触发器，通过语句【alter trigger trigger_name disable；】关闭delete触发器，转入步骤600，如果没有delete触发器，转入步骤600；
步骤600，运行脚本，进行生产数据库和历史数据库之间的数据迁移直至全部数据迁移完成；
步骤601，准备历史数据库中用于存放历史数据的表空间；
步骤602，部署数据迁移脚本，运行迁移指令(runWinMJob(’Y’，’Y’，’Y’)，在生产数据库和历史数据库之间建立数据库链接DBLINK；其中三个参数Y分别为：第一个参数Y表示进行基表配置信息检查，第二个参数Y表示进行表结构同步检查，第三个参数Y表示进行历史数据迁移；
步骤603，导入测试验证过的数据清理规则；
步骤604，对生产数据库中需要迁移的表的数据进行数据复制，复制到历史数据库中；
步骤605，完成数据复制后，根据数据清理规则对生产数据库中已迁移的表进行数据清理；
步骤606，验证数据复制和数据清理是否完成；
通过表rep_user.mc$sql_record验证数据复制和数据清理是否完成，表rep_user.mc$sql_record用于存放迁移过程中产生的错误日志，如果表rep_user.mc$sql_record中存在错误日志，数据复制和数据清理没有完成，根据错误信息解决问题，转入步骤604；
其中，模拟生产库的数据库版本为在11.2.0.4；模拟历史库的数据库版本建议为11.2.0.4，历史数据库版本为11.2.0.4；在数据迁移过程中，关注生产数据库的归档生成情况，保证生产库在迁移过程中产生的大量归档日志不会填满归档空间，在归档日志过多时删除部分归档日志，确保业务正常运行；数据迁移完成后，可根据不同的需求进行碎片整理、收集统计信息和重建索引操作，对生产数据库进行性能优化。
应理解，本实施例仅用于说明本发明而不用于限制本发明的范围。此外应理解，在阅读了本发明讲授的内容之后，本领域技术人员可以对本发明作各种改动或修改，这些等价形式同样落于本申请所附权利要求书所限定的范围。
Claims (7)
1.一种定制并自动进行数据老化的方法，其特征在于，包括如下步骤：
(1-1)设置数据的保存时间TC和数据迁移的时间间隔ΔTQ；
(1-2)每次数据迁移结束时，计时器置0，重新开始计时，时间间隔用ΔT表示，如果ΔT＝ΔTQ,确定生产数据库中需要迁移的表之间的父子关系，
如果需要迁移的表之间具有父子关系，获得父表的时间字段和关联字段，获得子表的关联字段，转入步骤(1-3)；
如果需要迁移的表之间不具有父子关系，需要迁移的表为单一表，获得单一表的时间字段，转入步骤(1-3)；
其中，需要迁移的表为数据保存时间大于TC的表；
(1-3)搭建历史数据库，创建相同的用户和表结构，仅保留主键和索引，配置数据迁移的基础表格；
(1-4)检查生产数据库是否有delete触发器，如果有delete触发器，关闭delete触发器，转入步骤(1-5)，如果没有delete触发器，转入步骤(1-5)；
(1-5)运行脚本，进行生产数据库和历史数据库之间的数据迁移；
(1-6)验证数据迁移是否完成，如果没有完成，转入步骤(1-5)。
2.根据权利要求1所述的一种定制并自动进行数据老化的方法，其特征在于，步骤(1-5)到步骤(1-6)的具体步骤如下：
(2-1)准备历史数据库中用于存放历史数据的表空间；
(2-2)部署数据迁移脚本，在生产数据库和历史数据库之间建立数据库链接DBLINK；
(2-3)导入测试验证过的数据清理规则；
(2-4)对生产数据库中需要迁移的表的数据进行数据复制，复制到历史数据库中；
(2-5)完成数据复制后，根据数据清理规则对生产数据库中已迁移的表进行数据清理；
(2-6)验证数据复制和数据清理是否完成，如果没有完成，转入步骤(2-4)。
3.根据权利要求2所述的一种定制并自动进行数据老化的方法，其特征在于，步骤(2-3)中数据清理规则的测试验证方法如下：
(3-1)准备2个ORACLE数据库，一个模拟生产数据库，另一个模拟历史数据库；
(3-2)从生产数据库上备份一份数据至模拟生产数据库中，制定一份测试数据；
(3-3)部署数据迁移软件，在模拟生产数据库和模拟历史数据库之间建立数据库链接DBLINK；
(3-4)配置表格清理的对象和清理规则；
(3-5)根据清理规则进行数据清理；
(3-6)确定数据清理是否完成，如果数据清理没有完成，转入步骤(3-5)。
4.根据权利要求3所述的一种定制并自动进行数据老化的方法，其特征在于，步骤(3-4)中的清理规则包括单一表的清理规则SIMPLE，单一表的清理规则SIMPLE具体为：根据配置表中时间条件，直接将时间大于TC的单一表中的数据删除。
5.根据权利要求3所述的一种定制并自动进行数据老化的方法，其特征在于，步骤(3-4)中的清理规则包括存在父子关系的表的清理规则CASCADE，存在父子关系的表的清理规则CASCADE包括CASCADE_DEPEND和DEPEND；存在父子关系的表的清理规则CASCADE具体为：先清理与父表有关的子表中的数据，再清理父表中的数据。
6.根据权利要求5所述的一种定制并自动进行数据老化的方法，其特征在于，CASCADE_DEPEND配置在父表的配置信息里；采用CASCADE_DEPEND方式清除子表相关数据时，先检查子表在配置表中的条件，如果符合配置条件，清理子表数据，然后再清除父表数据；如果不符合配置条件，不能清理子表数据，父表中的相关数据也不能清理。
7.根据权利要求5所述的一种定制并自动进行数据老化的方法，其特征在于，DEPEND配置在子表的配置信息里；清理数据时按配置表格的列排序依次进行清理，在清理到配置成DEPEND方式的子表时，程序不对数据作任何操作；清理到与配置成DEPEND方式的子表相关联的父表时，才对配置成DEPEND方式的子表进行数据清理。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911300202.7A CN111400275B (zh) | 2019-12-16 | 2019-12-16 | 一种定制并自动进行数据老化的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911300202.7A CN111400275B (zh) | 2019-12-16 | 2019-12-16 | 一种定制并自动进行数据老化的方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111400275A true CN111400275A (zh) | 2020-07-10 |
| CN111400275B CN111400275B (zh) | 2024-01-05 |
Family
ID=71434043
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201911300202.7A Active CN111400275B (zh) | 2019-12-16 | 2019-12-16 | 一种定制并自动进行数据老化的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111400275B (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112380193A (zh) * | 2020-12-09 | 2021-02-19 | 北京海量数据技术股份有限公司 | 数据库中历史数据的处理方法、装置及系统 |
| CN117555883A (zh) * | 2024-01-11 | 2024-02-13 | 梅州客商银行股份有限公司 | 一种银行系统数据分库的方法、装置、存储器和电子设备 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020095408A1 (en) * | 2000-11-24 | 2002-07-18 | Qi Cheng | Method and apparatus for deleting data in a database |
| CN1963818A (zh) * | 2005-11-10 | 2007-05-16 | 国际商业机器公司 | 用于数据处理的方法和系统 |
| US20080126367A1 (en) * | 2006-11-08 | 2008-05-29 | International Business Machines Corporation | Deletion of Data From Child Tables with Multiple Parents |
| CN104572867A (zh) * | 2014-12-18 | 2015-04-29 | 上海新炬网络信息技术有限公司 | 一种基于Oracle的数据处理方法 |
| CN108733671A (zh) * | 2017-04-14 | 2018-11-02 | 北京京东尚科信息技术有限公司 | 数据历史归档的方法和装置 |
| CN108959400A (zh) * | 2018-06-05 | 2018-12-07 | 中国银行股份有限公司 | 银行系统历史数据清理方法及装置 |
-
2019
- 2019-12-16 CN CN201911300202.7A patent/CN111400275B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020095408A1 (en) * | 2000-11-24 | 2002-07-18 | Qi Cheng | Method and apparatus for deleting data in a database |
| CN1963818A (zh) * | 2005-11-10 | 2007-05-16 | 国际商业机器公司 | 用于数据处理的方法和系统 |
| US20080126367A1 (en) * | 2006-11-08 | 2008-05-29 | International Business Machines Corporation | Deletion of Data From Child Tables with Multiple Parents |
| CN104572867A (zh) * | 2014-12-18 | 2015-04-29 | 上海新炬网络信息技术有限公司 | 一种基于Oracle的数据处理方法 |
| CN108733671A (zh) * | 2017-04-14 | 2018-11-02 | 北京京东尚科信息技术有限公司 | 数据历史归档的方法和装置 |
| CN108959400A (zh) * | 2018-06-05 | 2018-12-07 | 中国银行股份有限公司 | 银行系统历史数据清理方法及装置 |
Non-Patent Citations (3)
| Title |
|---|
| 刘宝珠: "\"历史数据的维护及利用\"", no. 11, pages 1918 - 1919 * |
| 司巧梅: ""银行数据归档管理平台设计与实现"", no. 03, pages 138 - 3408 * |
| 梁天健 等: "\"Oracle超大型数据库逻辑迁移实践\"", vol. 40, no. 05, pages 28 - 30 * |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112380193A (zh) * | 2020-12-09 | 2021-02-19 | 北京海量数据技术股份有限公司 | 数据库中历史数据的处理方法、装置及系统 |
| CN117555883A (zh) * | 2024-01-11 | 2024-02-13 | 梅州客商银行股份有限公司 | 一种银行系统数据分库的方法、装置、存储器和电子设备 |
| CN117555883B (zh) * | 2024-01-11 | 2024-04-05 | 梅州客商银行股份有限公司 | 一种银行系统数据分库的方法、装置、存储器和电子设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111400275B (zh) | 2024-01-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11288243B2 (en) | Systems and methods for assessing data quality | |
| CN110300963B (zh) | 大规模数据储存库中的数据管理系统 | |
| CN107810500A (zh) | 数据质量分析 | |
| US9679021B2 (en) | Parallel transactional-statistics collection for improving operation of a DBMS optimizer module | |
| CN107301214B (zh) | 在hive中数据迁移方法、装置及终端设备 | |
| US9235607B1 (en) | Specifying a predetermined degree of inconsistency for test data | |
| CN111400275A (zh) | 一种定制并自动进行数据老化的方法 | |
| US7664790B2 (en) | Cascade delete processing | |
| Kvet et al. | Complex time management in databases | |
| CN106611064A (zh) | 分布式关系数据库的数据处理方法和装置 | |
| CN112199394A (zh) | 告警信息推送方法、系统、智能终端及存储介质 | |
| Szárnyas et al. | The LDBC social network benchmark: Business intelligence workload | |
| JP6419667B2 (ja) | テストｄｂデータ生成方法及び装置 | |
| CN109753490A (zh) | 基于漏洞修复的数据库优化方法、系统、设备及介质 | |
| CN107463555A (zh) | 删除中间层数据的方法、系统和装置 | |
| US8548980B2 (en) | Accelerating queries based on exact knowledge of specific rows satisfying local conditions | |
| CN110825816A (zh) | 对分片数据库数据采集的系统和方法 | |
| US10970176B2 (en) | Managing data with restoring from purging | |
| EP0797161A2 (en) | Computer system and computerimplemented process for applying database segment definitions to a database | |
| CN111782733A (zh) | 多级数据汇总的方法、分布式数据管理系统及汇总数据管理系统 | |
| US10552387B1 (en) | Managing data using a simulation of purging | |
| CN109241205A (zh) | 一种可用于大批量生成关系型模拟数据的方法 | |
| CN112783773B (zh) | 软件自动化测试方法及装置 | |
| CN108920256A (zh) | 检核任务执行方法及装置 | |
| CN112632953B (zh) | 一种快速准确侦测多次上传的物料清单属于同一产品的方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP03 | Change of name, title or address |
Address after: 310000, Room 301, 3rd Floor, Building 4, Zhongfu Future Xingchen Jinzuo, Wuchang Street, Yuhang District, Hangzhou City, Zhejiang Province Patentee after: Hangzhou Meichuang Technology Co.,Ltd. Address before: 12 / F, building 7, Tianxing International Center, 508 Fengtan Road, Gongshu District, Hangzhou City, Zhejiang Province 310011 Patentee before: HANGZHOU MEICHUANG TECHNOLOGY CO.,LTD. |
|
| CP03 | Change of name, title or address |