CN112988514A - 一种用于库表与文件交换的监控方法及系统 - Google Patents

一种用于库表与文件交换的监控方法及系统 Download PDF

Info

Publication number
CN112988514A
CN112988514A CN202110283648.4A CN202110283648A CN112988514A CN 112988514 A CN112988514 A CN 112988514A CN 202110283648 A CN202110283648 A CN 202110283648A CN 112988514 A CN112988514 A CN 112988514A
Authority
CN
China
Prior art keywords
exchange
data
task
module
log
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110283648.4A
Other languages
English (en)
Other versions
CN112988514B (zh
Inventor
李连伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Cloud Information Technology Co Ltd
Original Assignee
Inspur Cloud Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Cloud Information Technology Co Ltd filed Critical Inspur Cloud Information Technology Co Ltd
Priority to CN202110283648.4A priority Critical patent/CN112988514B/zh
Publication of CN112988514A publication Critical patent/CN112988514A/zh
Application granted granted Critical
Publication of CN112988514B publication Critical patent/CN112988514B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/13—File access structures, e.g. distributed indices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/14—Details of searching files based on file metadata
    • G06F16/148—File search processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
    • G06F16/1815—Journaling file systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Computing Systems (AREA)
  • Quality & Reliability (AREA)
  • Mathematical Physics (AREA)
  • Library & Information Science (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种用于库表与文件交换的监控方法及系统，属于Java Web应用开发领域；所述的方法具体步骤包括：S1利用库表交换任务的运行实例步骤划分规则；S2利用文件交换任务的运行实例步骤划分规则；S3将交换任务运行情况日志与交换任务业务信息分离监控；S4利用上层业务系统控制库表以及文件交换任务的业务信息；本发明通过合理的交换运行实例步骤划分，数据采用大数据存储方式进行存储，建立搜索引擎索引，能够从交换任务的大量日志数据中快速检索出需要的数据，组织页面功能；将运行数据与业务数据进行了分离，可以支持多个库表文件交换通道，只要通道记录的日志采用标准格式，可以适配多个数据交换通道，进行多通道的数据交换任务监控。

Description

一种用于库表与文件交换的监控方法及系统
技术领域
本发明公开一种用于库表与文件交换的监控方法及系统，涉及Java Web应用开发技术领域。
背景技术
库表以及文件交换任务，交换数据量大，任务数量多，在现在的数据交换产品中，核查交换任务的运行情况，对交换任务进行实时监控是一个老大难的关键问题。要想稳定的进行数据共享，必须解决库表以及文件交换任务监控的问题，不仅仅是能够及时发现交换异常的任务，还要求能够根据异常的任务，快速发现问题点，定位问题所处的阶段以及责任方等，以便能够快速推动异常任务的解决，保障数据交换的平稳运行；故现发明一种用于库表与文件交换的监控方法及系统，以解决上述问题。
发明内容
本发明针对现有技术的问题，提供一种用于库表与文件交换的监控方法及系统，所采用的技术方案为：一种用于库表与文件交换的监控方法，所述的方法具体步骤包括：
S1利用库表交换任务的运行实例步骤划分规则；
S2利用文件交换任务的运行实例步骤划分规则；
S3将交换任务运行情况日志与交换任务业务信息分离监控；
S4利用上层业务系统控制库表以及文件交换任务的业务信息。
所述S1利用库表交换任务的运行实例步骤划分规则，将一次库表交换的运行步骤划分为交换实例运行开始、前置规则检查完成、库表交换的条数统计完成、库表数据读库日志、库表数据发送日志、库表数据接收日志、库表数据写入日志、后置规则处理完成、交换实例运行结束9个步骤。
所述S2利用文件交换任务的运行实例步骤划分规则，将一次文件交换的运行步骤划分交换实例运行开始、前置规则处理完成、交换文件数量统计完成、交换传输过程日志、所有文件传输完成、所有文件接收并写入完成、后置规则处理完成、交换实例运行结束8个步骤。
所述S3将交换任务运行情况日志与交换任务业务信息分离监控的具体步骤包括：
S301采集日志数据并进行加工处理；
S302将业务信息放入缓存数据库中；
S303利用交换任务的运行实例ID将多条日志合并为一条日志数据；
S304获取缓存中的交换任务缓存信息，将交换产生的数据运行情况日志与任务业务信息结合；
S305将合并后的数据存入大数据存储平台形成数据索引；
S306利用索引对每个步骤检测异常任务。
一种用于库表与文件交换的监控系统，所述的系统具体包括第一划分模块、第二划分模块、分离监控模块和信息控制模块：
第一划分模块：利用库表交换任务的运行实例步骤划分规则；
第二划分模块：利用文件交换任务的运行实例步骤划分规则；
分离监控模块：将交换任务运行情况日志与交换任务业务信息分离监控；
信息控制模块：利用上层业务系统控制库表以及文件交换任务的业务信息。所述第一划分模块利用库表交换任务的运行实例步骤划分规则，将一次库表交换的运行步骤划分为交换实例运行开始、前置规则检查完成、库表交换的条数统计完成、库表数据读库日志、库表数据发送日志、库表数据接收日志、库表数据写入日志、后置规则处理完成、交换实例运行结束9个步骤。
所述第二划分模块利用文件交换任务的运行实例步骤划分规则，将一次文件交换的运行步骤划分交换实例运行开始、前置规则处理完成、交换文件数量统计完成、交换传输过程日志、所有文件传输完成、所有文件接收并写入完成、后置规则处理完成、交换实例运行结束8个步骤。
所述分离监控模块具体包括数据处理模块、信息缓存模块、日志合并模块、信息结合模块、索引建立模块和任务检测模块：
数据处理模块：采集日志数据并进行加工处理；
信息缓存模块：将业务信息放入缓存数据库中；
日志合并模块：利用交换任务的运行实例ID将多条日志合并为一条日志数据；
信息结合模块：获取缓存中的交换任务缓存信息，将交换产生的数据运行情况日志与任务业务信息结合；
索引建立模块：将合并后的数据存入大数据存储平台形成数据索引；
任务检测模块：利用索引对每个步骤检测异常任务。
本发明的有益效果为：本发明通过合理的交换运行实例步骤划分，记录详细的运行过程步骤信息，辅助运维人员及时发现交换任务运行过程中的异常情况，并且能够及时定位问题点；数据采用大数据存储方式进行存储，建立搜索引擎索引，能够从交换任务的大量日志数据中快速检索出需要的数据，组织页面功能；将运行数据与业务数据进行了分离，可以支持多个库表文件交换通道，只要通道记录的日志采用标准格式，可以适配多个数据交换通道，进行多通道的数据交换任务监控。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明方法的流程图；图2是本发明系统的结构示意图。
具体实施方式
下面结合附图和具体实施例对本发明作进一步说明，以使本领域的技术人员可以更好地理解本发明并能予以实施，但所举实施例不作为对本发明的限定。
实施例一：
一种用于库表与文件交换的监控方法，所述的方法具体步骤包括：
S1利用库表交换任务的运行实例步骤划分规则；
S2利用文件交换任务的运行实例步骤划分规则；
S3将交换任务运行情况日志与交换任务业务信息分离监控；
S4利用上层业务系统控制库表以及文件交换任务的业务信息；
Figure BDA0002979513260000041
底层交换通道提供前置机连通情况日志、关键进程运行情况日志、交换物理链路连通情况监控日志、数据源连通情况日志、表结构检查日志、库表/文件交换任务运行情况日志等运行状态数据。
上层数据处理中心对运行状态的日志数据进行实时采集，通过单个交换任务多个步骤的日志数据进行合并，并且打上一些日志的扩展属性标签，比如交换通道类型、此步骤是否成功等。然后进行业务数据的合并，将运行数据与业务数据进行合并。
最后将数据放入大数据存储中心，由系统自动进行索引以及建立时间分片，提供数据搜索能力；
进一步的，所述S1利用库表交换任务的运行实例步骤划分规则，将一次库表交换的运行步骤划分为交换实例运行开始、前置规则检查完成、库表交换的条数统计完成、库表数据读库日志、库表数据发送日志、库表数据接收日志、库表数据写入日志、后置规则处理完成、交换实例运行结束9个步骤；
进一步的，所述S2利用文件交换任务的运行实例步骤划分规则，将一次文件交换的运行步骤划分交换实例运行开始、前置规则处理完成、交换文件数量统计完成、交换传输过程日志、所有文件传输完成、所有文件接收并写入完成、后置规则处理完成、交换实例运行结束8个步骤；
将库表交换分为以下几个步骤，当交换任务每次正常运行时，每个步骤记录一次日志：
步骤编号 步骤名称
1 交换实例运行开始
2 前置规则检查完成
3 库表交换的条数统计完成
4 库表数据读库日志
5 库表数据发送日志
6 库表数据接收日志
7 库表数据写入日志
8 后置规则处理完成
9 交换实例运行结束
当交换发生异常时，可能上述9个步骤并不能全部记录，则只记录能够记录的部分，其中要求交换任务运行开始必须记录；示例：
如交换任务运行，但是没有前置规则检查，也没有抽取到应该交换的库表数据，则1、3、9三个步骤必须记录；
如库表交换任务在部分数据入库过程中出现异常(某些数据提交失败了)，则会记录1、2、3、4、5、6、7(部分库表数据提交失败，其他库表交换正常记录)、8、9；
首先定义监控基础数据的标准，文件交换分为下述8个步骤，每个步骤记录一次日志，
Figure BDA0002979513260000051
Figure BDA0002979513260000061
当交换发生异常时，可能上述8个步骤并不能全部记录，则只记录能够记录的部分，其中要求交换任务运行开始必须记录；示例：
如交换任务运行，但是没有抽取到应该交换的文件，则1、2、8三个步骤必须记录。
如文件交换任务在某个文件传输过程中出现异常(单个文件交换失败了)，则会记录1、2、3、4(失败的文件记录传输失败，其他文件正常记录)、5、所有文件传输完成(记录失败1个)、6、7、8；
再进一步的，所述S3将交换任务运行情况日志与交换任务业务信息分离监控的具体步骤包括：
S301采集日志数据并进行加工处理；
S302将业务信息放入缓存数据库中；
S303利用交换任务的运行实例ID将多条日志合并为一条日志数据；
S304获取缓存中的交换任务缓存信息，将交换产生的数据运行情况日志与任务业务信息结合；
S305将合并后的数据存入大数据存储平台形成数据索引；
S306利用索引对每个步骤检测异常任务；
当交换系统按照上述步骤产生日志后，需要运行监控系统进行日志数据的采集，并对采集的数据进行加工处理；将库表、文件交换任务的相关业务信息，比如数据的提供方、数据的接收方、数据的名称等放入缓存数据库；将多条日志信息，通过交换任务的运行实例ID，将多条日志，合并为一条日志数据；获取缓存中的交换任务缓存信息，将交换产生的数据运行情况日志与任务业务信息结合；将合并后的数据存入大数据存储平台，利用平台特性，形成数据索引；通过界面对数据进行检索，及时发现每个步骤产生异常的任务，获取此运行实例的所有步骤信息，快速定位问题点；
传统的库表文件交换任务监控，依赖于交换任务运维人员的人工核查；库表以及文件的交换数据量大，任务多，人工核查处理难度较大，不能够及时发现问题；替换为本发明方法后，一次文件交换任务的运行分为8个子步骤，一次库表交换任务的运行分为9个子步骤，针对每个步骤，记录运行时信息，能够及时发现问题故障点，并明确问题责任边界，保障问题及时发现、精准定位；数据采用大数据存储方式进行存储，建立搜索引擎索引，能够从交换任务的大量日志数据中快速检索出需要的数据，组织页面功能；将运行数据与业务数据进行了分离，可以支持多个库表文件交换通道，只要通道记录的日志采用标准格式，可以适配多个数据交换通道，进行多通道的数据交换任务监控。
实施例二：
一种用于库表与文件交换的监控系统，所述的系统具体包括第一划分模块、第二划分模块、分离监控模块和信息控制模块：
第一划分模块：利用库表交换任务的运行实例步骤划分规则；
第二划分模块：利用文件交换任务的运行实例步骤划分规则；
分离监控模块：将交换任务运行情况日志与交换任务业务信息分离监控；
信息控制模块：利用上层业务系统控制库表以及文件交换任务的业务信息。
进一步的，所述第一划分模块利用库表交换任务的运行实例步骤划分规则，将一次库表交换的运行步骤划分为交换实例运行开始、前置规则检查完成、库表交换的条数统计完成、库表数据读库日志、库表数据发送日志、库表数据接收日志、库表数据写入日志、后置规则处理完成、交换实例运行结束9个步骤；
进一步的，所述第二划分模块利用文件交换任务的运行实例步骤划分规则，将一次文件交换的运行步骤划分交换实例运行开始、前置规则处理完成、交换文件数量统计完成、交换传输过程日志、所有文件传输完成、所有文件接收并写入完成、后置规则处理完成、交换实例运行结束8个步骤；
再进一步的，所述分离监控模块具体包括数据处理模块、信息缓存模块、日志合并模块、信息结合模块、索引建立模块和任务检测模块：
数据处理模块：采集日志数据并进行加工处理；
信息缓存模块：将业务信息放入缓存数据库中；
日志合并模块：利用交换任务的运行实例ID将多条日志合并为一条日志数据；
信息结合模块：获取缓存中的交换任务缓存信息，将交换产生的数据运行情况日志与任务业务信息结合；
索引建立模块：将合并后的数据存入大数据存储平台形成数据索引；
任务检测模块：利用索引对每个步骤检测异常任务。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (8)

1.一种用于库表与文件交换的监控方法，其特征是所述的方法具体步骤包括：
S1利用库表交换任务的运行实例步骤划分规则；
S2利用文件交换任务的运行实例步骤划分规则；
S3将交换任务运行情况日志与交换任务业务信息分离监控；
S4利用上层业务系统控制库表以及文件交换任务的业务信息。
2.根据权利要求1所述的方法，其特征是所述S1利用库表交换任务的运行实例步骤划分规则，将一次库表交换的运行步骤划分为交换实例运行开始、前置规则检查完成、库表交换的条数统计完成、库表数据读库日志、库表数据发送日志、库表数据接收日志、库表数据写入日志、后置规则处理完成、交换实例运行结束9个步骤。
3.根据权利要求2所述的方法，其特征是所述S2利用文件交换任务的运行实例步骤划分规则，将一次文件交换的运行步骤划分交换实例运行开始、前置规则处理完成、交换文件数量统计完成、交换传输过程日志、所有文件传输完成、所有文件接收并写入完成、后置规则处理完成、交换实例运行结束8个步骤。
4.根据权利要求3所述的方法，其特征是所述S3将交换任务运行情况日志与交换任务业务信息分离监控的具体步骤包括：
S301采集日志数据并进行加工处理；
S302将业务信息放入缓存数据库中；
S303利用交换任务的运行实例ID将多条日志合并为一条日志数据；
S304获取缓存中的交换任务缓存信息，将交换产生的数据运行情况日志与任务业务信息结合；
S305将合并后的数据存入大数据存储平台形成数据索引；
S306利用索引对每个步骤检测异常任务。
5.一种用于库表与文件交换的监控系统，其特征是所述的系统具体包括第一划分模块、第二划分模块、分离监控模块和信息控制模块：
第一划分模块：利用库表交换任务的运行实例步骤划分规则；
第二划分模块：利用文件交换任务的运行实例步骤划分规则；
分离监控模块：将交换任务运行情况日志与交换任务业务信息分离监控；
信息控制模块：利用上层业务系统控制库表以及文件交换任务的业务信息。
6.根据权利要求5所述的系统，其特征是所述第一划分模块利用库表交换任务的运行实例步骤划分规则，将一次库表交换的运行步骤划分为交换实例运行开始、前置规则检查完成、库表交换的条数统计完成、库表数据读库日志、库表数据发送日志、库表数据接收日志、库表数据写入日志、后置规则处理完成、交换实例运行结束9个步骤。
7.根据权利要求6所述的系统，其特征是所述第二划分模块利用文件交换任务的运行实例步骤划分规则，将一次文件交换的运行步骤划分交换实例运行开始、前置规则处理完成、交换文件数量统计完成、交换传输过程日志、所有文件传输完成、所有文件接收并写入完成、后置规则处理完成、交换实例运行结束8个步骤。
8.根据权利要求7所述的系统，其特征是所述分离监控模块具体包括数据处理模块、信息缓存模块、日志合并模块、信息结合模块、索引建立模块和任务检测模块：
数据处理模块：采集日志数据并进行加工处理；
信息缓存模块：将业务信息放入缓存数据库中；
日志合并模块：利用交换任务的运行实例ID将多条日志合并为一条日志数据；
信息结合模块：获取缓存中的交换任务缓存信息，将交换产生的数据运行情况日志与任务业务信息结合；
索引建立模块：将合并后的数据存入大数据存储平台形成数据索引；
任务检测模块：利用索引对每个步骤检测异常任务。
CN202110283648.4A 2021-03-17 2021-03-17 一种用于库表与文件交换的监控方法及系统 Active CN112988514B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110283648.4A CN112988514B (zh) 2021-03-17 2021-03-17 一种用于库表与文件交换的监控方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110283648.4A CN112988514B (zh) 2021-03-17 2021-03-17 一种用于库表与文件交换的监控方法及系统

Publications (2)

Publication Number Publication Date
CN112988514A true CN112988514A (zh) 2021-06-18
CN112988514B CN112988514B (zh) 2023-02-21

Family

ID=76334105

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110283648.4A Active CN112988514B (zh) 2021-03-17 2021-03-17 一种用于库表与文件交换的监控方法及系统

Country Status (1)

Country Link
CN (1) CN112988514B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060020616A1 (en) * 2004-07-22 2006-01-26 Geoffrey Hardy Indexing operational logs in a distributed processing system
US20060230075A1 (en) * 2005-04-06 2006-10-12 Microsoft Corporation Method and apparatus for exchanging data with a database
JP2007293821A (ja) * 2006-03-30 2007-11-08 Fujitsu Ltd データベースシステム管理方法及びデータベースシステム
WO2010031303A1 (zh) * 2008-09-18 2010-03-25 中兴通讯股份有限公司 一种业务管理平台下处理多渠道请求订购的方法和装置
CN105447176A (zh) * 2015-12-09 2016-03-30 冶金自动化研究设计院 企业异构数据交换平台
CN107357809A (zh) * 2017-05-27 2017-11-17 国家电网公司 海量平台海迅实时库量测数据接入系统
CN107612740A (zh) * 2017-09-30 2018-01-19 武汉光谷信息技术股份有限公司 一种分布式环境下的日志监控系统及方法
CN110851396A (zh) * 2019-11-07 2020-02-28 北京集奥聚合科技有限公司 一种基于建模平台微服务架构统一日志设计方法
US10657099B1 (en) * 2015-11-02 2020-05-19 Quest Software Inc. Systems and methods for transformation and analysis of logfile data
CN111258780A (zh) * 2020-01-15 2020-06-09 深圳市华傲数据技术有限公司 基于前置机进行数据交换的系统及方法
CN111752808A (zh) * 2020-07-01 2020-10-09 浪潮云信息技术股份公司 一种用于数据共享交换业务运行监控系统的实现方法

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060020616A1 (en) * 2004-07-22 2006-01-26 Geoffrey Hardy Indexing operational logs in a distributed processing system
US20060230075A1 (en) * 2005-04-06 2006-10-12 Microsoft Corporation Method and apparatus for exchanging data with a database
JP2007293821A (ja) * 2006-03-30 2007-11-08 Fujitsu Ltd データベースシステム管理方法及びデータベースシステム
WO2010031303A1 (zh) * 2008-09-18 2010-03-25 中兴通讯股份有限公司 一种业务管理平台下处理多渠道请求订购的方法和装置
US10657099B1 (en) * 2015-11-02 2020-05-19 Quest Software Inc. Systems and methods for transformation and analysis of logfile data
CN105447176A (zh) * 2015-12-09 2016-03-30 冶金自动化研究设计院 企业异构数据交换平台
CN107357809A (zh) * 2017-05-27 2017-11-17 国家电网公司 海量平台海迅实时库量测数据接入系统
CN107612740A (zh) * 2017-09-30 2018-01-19 武汉光谷信息技术股份有限公司 一种分布式环境下的日志监控系统及方法
CN110851396A (zh) * 2019-11-07 2020-02-28 北京集奥聚合科技有限公司 一种基于建模平台微服务架构统一日志设计方法
CN111258780A (zh) * 2020-01-15 2020-06-09 深圳市华傲数据技术有限公司 基于前置机进行数据交换的系统及方法
CN111752808A (zh) * 2020-07-01 2020-10-09 浪潮云信息技术股份公司 一种用于数据共享交换业务运行监控系统的实现方法

Also Published As

Publication number Publication date
CN112988514B (zh) 2023-02-21

Similar Documents

Publication Publication Date Title
JP6996812B2 (ja) 分散データベースにおけるデータブロックを処理する方法、プログラム、およびデバイス
CN101004744A (zh) 远程多点文件索引同步系统及方法
CN111245672A (zh) 一种通用可扩展的追踪业务全链路的监控方法及系统
CN102231161A (zh) 数据库同步验证及监控方法
CN102597966A (zh) 运行管理装置以及运行管理方法
CN102142983A (zh) 告警相关性分析方法和装置
CN111314158B (zh) 大数据平台监控方法、装置及设备、介质
CN103902434A (zh) 一种报警日志管理方法及系统
CN110765325A (zh) 一种ceph分布式存储系统的运维分析方法及系统
CN108512726A (zh) 一种数据监控的方法及设备
CN103034650A (zh) 一种数据处理系统和方法
CN117473021B (zh) 一种基于cdc方式的达梦数据库增量同步实现方法
CN112988514B (zh) 一种用于库表与文件交换的监控方法及系统
CN112579552A (zh) 日志存储及调用方法、装置及系统
CN112068979B (zh) 一种业务故障确定方法及装置
CN113553295A (zh) 一种支持多种文件格式的数据预处理系统
CN103399943A (zh) 集群数据库并行查询的通讯方法和通讯装置
CN117056164A (zh) 一种分布式的数据库运行日志管理方法
CN110795261B (zh) 虚拟磁盘故障的检测方法和装置
US10135926B2 (en) Shuffle embedded distributed storage system supporting virtual merge and method thereof
CN116644147A (zh) 一种基于elk的cbtc信号系统车载日志分析系统和方法
CN117112656A (zh) 一种科技志愿服务管理的一体化信息智能管理系统及方法
CN116346576A (zh) 一种用于信息网管故障的智能溯源方法及装置
CN115718690A (zh) 一种数据准确性监控系统和方法
CN115102848A (zh) 日志数据的提取方法、系统、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant