CN112506920A - 一种多金融系统的信息统一收集监控方法及系统 - Google Patents
一种多金融系统的信息统一收集监控方法及系统 Download PDFInfo
- Publication number
- CN112506920A CN112506920A CN202011269735.6A CN202011269735A CN112506920A CN 112506920 A CN112506920 A CN 112506920A CN 202011269735 A CN202011269735 A CN 202011269735A CN 112506920 A CN112506920 A CN 112506920A
- Authority
- CN
- China
- Prior art keywords
- data
- information
- monitoring system
- monitoring
- query
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 109
- 238000000034 method Methods 0.000 title claims abstract description 61
- 238000012545 processing Methods 0.000 claims abstract description 45
- 230000008569 process Effects 0.000 claims abstract description 27
- 230000002159 abnormal effect Effects 0.000 claims description 62
- 238000013480 data collection Methods 0.000 claims description 12
- 238000007726 management method Methods 0.000 claims description 12
- 238000007781 pre-processing Methods 0.000 claims description 11
- 230000005540 biological transmission Effects 0.000 claims description 9
- 238000013500 data storage Methods 0.000 claims description 6
- 230000004044 response Effects 0.000 claims description 6
- 238000004140 cleaning Methods 0.000 claims description 4
- 239000003086 colorant Substances 0.000 claims description 4
- 230000000007 visual effect Effects 0.000 claims description 3
- 230000004069 differentiation Effects 0.000 claims description 2
- 230000010365 information processing Effects 0.000 claims description 2
- 238000012423 maintenance Methods 0.000 description 6
- 230000007774 longterm Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000005856 abnormality Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
- G06F16/2255—Hash tables
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/248—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/50—Monitoring users, programs or devices to maintain the integrity of platforms, e.g. of processors, firmware or operating systems
- G06F21/55—Detecting local intrusion or implementing counter-measures
- G06F21/552—Detecting local intrusion or implementing counter-measures involving long-term monitoring or reporting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/50—Monitoring users, programs or devices to maintain the integrity of platforms, e.g. of processors, firmware or operating systems
- G06F21/55—Detecting local intrusion or implementing counter-measures
- G06F21/56—Computer malware detection or handling, e.g. anti-virus arrangements
- G06F21/566—Dynamic detection, i.e. detection performed at run-time, e.g. emulation, suspicious activities
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Software Systems (AREA)
- Computer Security & Cryptography (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- Computer Hardware Design (AREA)
- Computing Systems (AREA)
- Business, Economics & Management (AREA)
- Computational Linguistics (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Virology (AREA)
- Economics (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- Technology Law (AREA)
- General Business, Economics & Management (AREA)
- Development Economics (AREA)
- Health & Medical Sciences (AREA)
- Mathematical Physics (AREA)
- General Health & Medical Sciences (AREA)
- Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
Abstract
本发明涉及一种多金融系统的信息统一收集监控方法及系统,通过制定处理链的方法实现对不同系统不同数据的便捷化收集与管理,使采集到的数据既可以提现不同系统的不同特性,也能够同时满足不同系统所采集到的数据能够统一整理、统一存储、统一调用,避免收集冗余数据,提高有效数据收集效率,使采集到的数据更加易于分析、处理及展现。
Description
技术领域
本发明涉及金融信息管理技术领域,尤其涉及一种多金融系统的信息统一收集监控方法及系统。
背景技术
现今金融系统越来越多的依赖在线系统进行交易处理,各种不同的系统如电脑、手机等在进行便捷的金融交易的同时也产生了海量的数据。对于这些数据,金融系统需要将其有效收集并合理分析,来实现对交易和系统监控,保证交易执行的成功率和系统运行的稳定。
传统的金融数据收集多为针对某一个特定系统的定制化数据收集,而对于不同框架结构的系统之间难以实现数据的泛用性,也存在不同系统数据统计困难的问题,无法将各个系统的数据统一收集和管理;另一方面,现有技术的数据收集方法缺少便捷的数据筛选制度,无法根据监控需求个性化地选择不同类型的数据,造成收集的数据严重冗余,在处理数据时需要从大量无效或不需要的数据中提取有效数据,数据的利用率较低,处理效率低下。
发明内容
为解决现有技术的不足,本发明提出一种多金融系统的信息统一收集监控方法及系统,通过制定处理链的方法实现对不同系统不同数据的便捷化收集与管理,避免收集冗余数据,提高有效数据收集效率,使采集到的数据更加易于分析、处理及展现。
为实现以上目的,本发明所采用的技术方案包括:
一种多金融系统的信息统一收集监控方法,其特征在于,包括以下流程:
数据收集与数据保存流程,具体包括金融系统后台针对不同数据来源系统依据选择的处理链收集所述数据来源系统的系统数据和流量数据并传输至监控系统后台,所述监控系统后台将收集到的系统数据与流量数据存入数据库;
监控查询请求及反馈流程,具体包括监控系统后台依据监控系统前端发送的查询条件从数据库中获取对应查询条件的查询数据并将查询数据反馈至监控系统前端。
进一步地,所述方法还包括以下流程:
系统异常反馈流程,具体包括金融系统后台针对不同数据来源系统依据选择的异常数据处理链收集系统数据判断数据来源系统运行状态,并对数据来源系统运行异常生成异常信息传输至监控系统后台,监控系统后台将接收到的异常信息传输至监控系统前端。
进一步地,所述方法还包括以下流程:
历史日志管理流程,具体包括定时将系统运行状态存入日志,并将系统运行异常生成的异常信息存入日志。
进一步地,所述处理链包括针对不同数据来源系统所预设的系统数据与流量数据采集项目的集合,和/或,针对不同监控需求所设定的系统数据与流量数据采集项目的集合。
进一步地,所述不同数据来源系统还可以采用相同的处理链。
进一步地,所述系统数据包括内存信息、连接池信息,线程信息、句柄信息;所述流量数据包括数据来源系统、服务地区、产品交易量、交易成功率、平均响应时间。
进一步地,所述数据库包括Redis数据库和储存数据库;所述Redis数据库为支持hash格式存储结构的数据暂存库;所述储存数据库为长期保存所选关键数据的数据库。
进一步地,所述数据收集与数据保存流程还包括所述监控系统后台将收集到的系统数据与流量数据进行数据预处理后存入数据库;所述数据预处理包括数据清洗和/或数据格式标准化。
进一步地,所述监控查询请求及反馈流程还包括所述监控系统前端根据查询数据类型匹配适合的数据展现方式。
进一步地,所述数据展现方式包括折线图、饼图、柱形图、基于不同颜色的视觉区分的任一种或多种组合。
进一步地,所述历史日志管理流程还包括优先展示异常信息日志。
进一步地,所述系统异常反馈流程还包括将异常信息传输至监控系统后台的同时传送针对该异常信息的参考处理意见。
进一步地,所述参考处理意见包括预设的异常处理步骤和/或相同、相近异常信息的在先处理方案记录。
本发明还涉及一种多金融系统的信息统一收集监控系统,其特征在于,包括依次数据连接的金融系统后台、监控系统后台和监控系统前端;
所述金融系统后台包括系统数据和流量数据采集模块以及系统异常监控模块;所述系统数据和流量数据采集模块针对不同数据来源系统依据选择的处理链收集所述数据来源系统的系统数据和流量数据并传输至监控系统后台;所述系统异常监控模块针对不同数据来源系统依据选择的异常数据处理链收集系统数据判断数据来源系统运行状态,并对数据来源系统运行异常生成异常信息传输至监控系统后台;
所述监控系统后台包括数据预处理模块、Redis数据库、储存数据库、数据查询反馈模块和异常信息处置模块;所述数据预处理模块包括数据清洗功能组件和数据格式标准化功能组件;所述Redis数据库为支持hash格式存储结构的数据暂存库;所述储存数据库定期接收所述Redis数据库发送的数据并长期保存;所述数据查询反馈模块依据监控系统前端发送的查询条件从数据库中获取对应查询条件的查询数据并将查询数据反馈至监控系统前端;所述异常信息处置模块接收所述系统异常监控模块发送的异常信息并传送至监控系统前端;
所述监控系统前端包括数据传输模块和信息展示模块;所述数据传输模块向所述监控系统后台发送查询条件并接收所述监控系统后台发送的查询数据和/或异常信息;所述信息展示模块以预设或选定的数据展现方式展现查询数据和/或异常信息。
本发明的有益效果为:
采用本发明所述多金融系统的信息统一收集监控方法及系统对涵盖多种不同系统的金融数据进行采集,可以灵活的根据不同需求对不同系统采用针对性的处理链,使采集到的数据既可以提现不同系统的不同特性,也能够同时满足不同系统所采集到的数据能够统一整理、统一存储、统一调用;同时利用针对于不同系统设立的处理链可以将流量数据与该系统的系统数据进行对应,扩大了数据分析的范围,且有利于应用更高效的存储策略;冗余无效数据的减少避免了系统资源浪费,使数据处理后能够应用更加高效、直观的展现方式。
附图说明
图1为本发明多金融系统的信息统一收集监控方法流程示意图。
图2为本发明多金融系统的信息统一收集监控系统结构示意图。
具体实施方式
为了更清楚的理解本发明的内容,将结合附图和实施例详细说明。
如图1所示为本发明多金融系统的信息统一收集监控方法流程示意图,具体包括:
数据收集与数据保存流程,具体包括金融系统后台针对不同数据来源系统依据选择的处理链收集所述数据来源系统的系统数据和流量数据并传输至监控系统后台,所述监控系统后台将收集到的系统数据与流量数据存入数据库。其中所述数据来源系统可以包括电脑客户端、电脑网页、对应不同操作系统的手机客户端以及还可以包括银行柜台数据采集和银行ATM机数据采集。所述的处理链包括针对不同数据来源系统所预设的系统数据与流量数据采集项目的集合,和/或,针对不同监控需求所设定的系统数据与流量数据采集项目的集合,即数据维护相关操作人员既可以根据数据来源系统直接选择对应的预设处理链实现有效数据的针对性采集,也可以根据实际需求自行选择采集的数据类型形成对应该需求的特殊处理链;通过上述方法得到的处理链也可以同时作用于多个不同的数据来源系统,使多个不同的数据来源系统同步采集相同类型的数据便于统一集中管理、分析。处理链可选的系统数据优选的包括内存信息(例如最大内存、空闲内存和已分配内存等),连接池信息(例如连接池数量、各连接池最大连接数和已用连接数),线程信息(例如最大线程数、占用线程数和排队线程数等),句柄信息(例如最大句柄和当前句柄等);流量数据优选的包括数据来源系统(名称、类型)、服务地区、产品交易量(包括对应不同金融产品的交易量数据)、交易成功率、平均响应时间等。为了提供更佳的数据存储能力,数据库优选的可以采用Redis数据库和储存数据库两级存储结构,所述Redis数据库为支持hash格式存储结构的数据暂存库,例如对于流量数据中的涉及产品交易数据部分(产品交易量、交易成功率)可以使用hash格式暂存在Redis数据库,提高存取效率;所述储存数据库为长期保存所选关键数据的数据库,为了充分利用储存数据库容量以及便于数据查找,可以优选的只将选定的关键数据由Redis数据库转入存储数据库。用于较长时间以后的信息追溯。进一步地,对于收集到的系统数据和流量数据,可有优选的在传输至数据库之前进行一定的数据预处理,例如数据清洗和/或数据格式标准化。通过引入处理链,可以灵活且便捷的设置数据采集类型,对于金融过程中的联机交易和异步任务的交易信息分类管理,同时对于数据来源系统的系统数据可以做到实时更新,获取系统最新运行状态。
监控查询请求及反馈流程,具体包括监控系统后台依据监控系统前端发送的查询条件从数据库中获取对应查询条件的查询数据并将查询数据反馈至监控系统前端;对于查询条件的生成,不依赖于处理链,而是可以根据需要任意选择组合数据库中存储有的数据。针对不同类型数据的特点,可以优选的根据查询数据类型匹配适合的数据展现方式,如折线图、饼图、柱形图、基于不同颜色的视觉区分的任一种或多种组合。具体的,可以采用在前端页面使用折线图来展示单个应用和系统交易量、成功率和响应时间的变化趋势,以分析交易高峰期和系统高负荷时间段;将文件句柄、数据库链接池、应用监听和线程池以饼图的形式展现,便于观察系统即时资源的使用情况;将不同应用或系统的单位时间数据以柱形图的形式展示,以分析各个系统的负载区别;将各个服务器的运行状态统一显示,简化服务器的负载情况,以不同的颜色来展示服务器的运行情况,便于平台管理人员快速获取掌握系统运行状态。
系统异常反馈流程,具体包括金融系统后台针对不同数据来源系统依据选择的异常数据处理链收集系统数据判断数据来源系统运行状态,并对数据来源系统运行异常生成异常信息传输至监控系统后台,监控系统后台将接收到的异常信息传输至监控系统前端;同时优选的还可以同时传送针对该异常信息的参考处理意见。通过设置异常数据处理链,可以实时监控系统运行状态,针对不同的系统数据设计不同的异常判断机制,在检测到异常情况时即时在监控系统内展示并通知系统管理员。根据不同的错误类型可以优选的以错误码来分类,在提供异常的具体信息的同时为各系统管理员提供参考处理意见包括预设的异常处理步骤和/或相同、相近异常信息的在先处理方案记录,也可以设置异常处理的经验分享板块,收集整理长期以来的运维经验,共享异常处理方法。
历史日志管理流程,具体包括定时将系统运行状态存入日志,并将系统运行异常生成的异常信息存入日志,同时为了提高重要信息获取效率,可以优选的优先展示异常信息日志,便于运维人员找到系统问题时间点和前后系统运行状态的变化,减少定位问题需要的时间,便于分析问题影响范围。所述的系统运行状态主要组成为系统数据,也可以包括选定的流量数据;特别是可以设定为将超过预设阈值的流量数据信息存入日志,这部分信息区别于异常信息,仅作为一种提示存入日志,而不会激发系统异常反馈流程。
本发明还涉及一种多金融系统的信息统一收集监控系统,其结构如图2所示,由金融系统后台、监控系统后台和监控系统前端三个部分依次数据连接组成,其中:
所述金融系统后台包括系统数据和流量数据采集模块以及系统异常监控模块;所述系统数据和流量数据采集模块针对不同数据来源系统依据选择的处理链收集所述数据来源系统的系统数据和流量数据并传输至监控系统后台;所述系统异常监控模块针对不同数据来源系统依据选择的异常数据处理链收集系统数据判断数据来源系统运行状态,并对数据来源系统运行异常生成异常信息传输至监控系统后台。
所述监控系统后台包括数据预处理模块、Redis数据库、储存数据库、数据查询反馈模块和异常信息处置模块;所述数据预处理模块包括数据清洗功能组件和数据格式标准化功能组件;所述Redis数据库为支持hash格式存储结构的数据暂存库;所述储存数据库定期接收所述Redis数据库发送的数据并长期保存;所述数据查询反馈模块依据监控系统前端发送的查询条件从数据库中获取对应查询条件的查询数据并将查询数据反馈至监控系统前端;所述异常信息处置模块接收所述系统异常监控模块发送的异常信息并传送至监控系统前端。优选的,所述监控系统后台还包括日志管理模块,所述日志管理模块定时将系统运行状态存入日志,同时将系统发生异常时的关键错误信息写入日志;对不同的数据日志进行分类,并直接为系统管理人员和运维人员提供日志展示接口。
所述监控系统前端包括数据传输模块和信息展示模块;所述数据传输模块向所述监控系统后台发送查询条件并接收所述监控系统后台发送的查询数据和/或异常信息,即所述数据传输模块起到与监控系统后台之间数据传输的接口作用;所述信息展示模块以预设或选定的数据展现方式展现查询数据和/或异常信息。
通过使用所述系统可以实现上述多金融系统的信息统一收集监控方法。
下面以一个具体的实施例进一步说明本发明。
以手机系统的app中某一产品的交易数据为例,金融系统后台针对这一数据采集需要求设定对应的处理链以确定需要采集的数据类型,其中系统数据选择采集手机型号、手机处理器、手机内存信息、手机通信运营商以及手机信号质量信息;流量数据选择采集产品交易量、交易成功率和交易响应时间。同时对于安卓手机与苹果手机两种不同的操作系统框架,选择采用相同的处理链,收集同样的数据。
收集到的系统数据及流量数据传输至监控系统后台,经数据清洗和数据可是标准化处理后暂存入Redis数据库。监控系统前端向监控系统后台发送查询条件,根据查询条件从Redis数据库调取对应信息反馈至监控系统前端进行展示,例如使用折线图来展示单个应用和系统交易量、成功率和响应时间的变化趋势等。
选定系统数据中的手机型号以及流量数据中的产品交易量作为需要长期保存的数据,定期由Redis数据库转发至储存数据库从长期保存。监控系统前端可以根据需要发送对应长期保存数据手机型号和/或产品交易量的查询条件,由监控系统后台从储存数据库中调取数据并反馈。
金融系统后台同时实时监控系统(手机app)状态,当发现系统运行异常,例如侦测到手机app被恶意篡改,可能存在风险时,生产异常信息并经监控系统后台反馈至监控系统前端,同时同步发送针对类似异常信息的在先处理流程,供系统维护人员参考。
对于系统(手机app)运行过程状态以及产生的异常信息,均存入日志,运维人员可以通过调阅日志获得所需信息,便于分析系统运行情况以及异常影响。
以上所述仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换等都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求书的保护范围为准。
Claims (14)
1.一种多金融系统的信息统一收集监控方法,其特征在于,包括以下流程:
数据收集与数据保存流程,具体包括金融系统后台针对不同数据来源系统依据选择的处理链收集所述数据来源系统的系统数据和流量数据并传输至监控系统后台,所述监控系统后台将收集到的系统数据与流量数据存入数据库;
监控查询请求及反馈流程,具体包括监控系统后台依据监控系统前端发送的查询条件从数据库中获取对应查询条件的查询数据并将查询数据反馈至监控系统前端。
2.如权利要求1所述的方法,其特征在于,所述方法还包括以下流程:
系统异常反馈流程,具体包括金融系统后台针对不同数据来源系统依据选择的异常数据处理链收集系统数据判断数据来源系统运行状态,并对数据来源系统运行异常生成异常信息传输至监控系统后台,监控系统后台将接收到的异常信息传输至监控系统前端。
3.如权利要求2所述的方法,其特征在于,所述方法还包括以下流程:
历史日志管理流程,具体包括定时将系统运行状态存入日志,并将系统运行异常生成的异常信息存入日志。
4.如权利要求1至3任一项所述的方法,其特征在于,所述处理链包括针对不同数据来源系统所预设的系统数据与流量数据采集项目的集合,和/或,针对不同监控需求所设定的系统数据与流量数据采集项目的集合。
5.如权利要求4所述的方法,其特征在于,所述不同数据来源系统还可以采用相同的处理链。
6.如权利要求1至3任一项所述的方法,其特征在于,所述系统数据包括内存信息、连接池信息,线程信息、句柄信息;所述流量数据包括数据来源系统、服务地区、产品交易量、交易成功率、平均响应时间。
7.如权利要求1至3任一项所述的方法,其特征在于,所述数据库包括Redis数据库和储存数据库;所述Redis数据库为支持hash格式存储结构的数据暂存库;所述储存数据库为长期保存所选关键数据的数据库。
8.如权利要求1至3任一项所述的方法,其特征在于,所述数据收集与数据保存流程还包括所述监控系统后台将收集到的系统数据与流量数据进行数据预处理后存入数据库;所述数据预处理包括数据清洗和/或数据格式标准化。
9.如权利要求1至3任一项所述的方法,其特征在于,所述监控查询请求及反馈流程还包括所述监控系统前端根据查询数据类型匹配适合的数据展现方式。
10.如权利要求9所述的方法,其特征在于,所述数据展现方式包括折线图、饼图、柱形图、基于不同颜色的视觉区分的任一种或多种组合。
11.如权利要求3所述的方法,其特征在于,所述历史日志管理流程还包括优先展示异常信息日志。
12.如权利要求2或3所述的方法,其特征在于,所述系统异常反馈流程还包括将异常信息传输至监控系统后台的同时传送针对该异常信息的参考处理意见。
13.如权利要求12所述的方法,其特征在于,所述参考处理意见包括预设的异常处理步骤和/或相同、相近异常信息的在先处理方案记录。
14.一种多金融系统的信息统一收集监控系统,其特征在于,包括依次数据连接的金融系统后台、监控系统后台和监控系统前端;
所述金融系统后台包括系统数据和流量数据采集模块以及系统异常监控模块;所述系统数据和流量数据采集模块针对不同数据来源系统依据选择的处理链收集所述数据来源系统的系统数据和流量数据并传输至监控系统后台;所述系统异常监控模块针对不同数据来源系统依据选择的异常数据处理链收集系统数据判断数据来源系统运行状态,并对数据来源系统运行异常生成异常信息传输至监控系统后台;
所述监控系统后台包括数据预处理模块、Redis数据库、储存数据库、数据查询反馈模块和异常信息处置模块;所述数据预处理模块包括数据清洗功能组件和数据格式标准化功能组件;所述Redis数据库为支持hash格式存储结构的数据暂存库;所述储存数据库定期接收所述Redis数据库发送的数据并长期保存;所述数据查询反馈模块依据监控系统前端发送的查询条件从数据库中获取对应查询条件的查询数据并将查询数据反馈至监控系统前端;所述异常信息处置模块接收所述系统异常监控模块发送的异常信息并传送至监控系统前端;
所述监控系统前端包括数据传输模块和信息展示模块;所述数据传输模块向所述监控系统后台发送查询条件并接收所述监控系统后台发送的查询数据和/或异常信息;所述信息展示模块以预设或选定的数据展现方式展现查询数据和/或异常信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011269735.6A CN112506920A (zh) | 2020-11-13 | 2020-11-13 | 一种多金融系统的信息统一收集监控方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011269735.6A CN112506920A (zh) | 2020-11-13 | 2020-11-13 | 一种多金融系统的信息统一收集监控方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112506920A true CN112506920A (zh) | 2021-03-16 |
Family
ID=74957537
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011269735.6A Pending CN112506920A (zh) | 2020-11-13 | 2020-11-13 | 一种多金融系统的信息统一收集监控方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112506920A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114760220A (zh) * | 2022-03-24 | 2022-07-15 | 中国农业银行股份有限公司 | 一种操作系统的监控方法、装置及设备 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102801785A (zh) * | 2012-07-03 | 2012-11-28 | 合一网络技术(北京)有限公司 | 一种对广告投放引擎进行监控的系统及方法 |
CN105352542A (zh) * | 2015-10-14 | 2016-02-24 | 国家电网公司 | 一种换流站全景状态监测系统 |
CN106210021A (zh) * | 2016-07-05 | 2016-12-07 | 中国银行股份有限公司 | 金融应用系统联机业务的实时监控方法以及监控装置 |
CN106960292A (zh) * | 2017-04-18 | 2017-07-18 | 国网福建省电力有限公司 | 一种应用于电力公司的业务流程监测系统及方法 |
CN107273554A (zh) * | 2017-08-04 | 2017-10-20 | 郑州轻工业学院 | 电梯智能监控系统与方法 |
CN107729217A (zh) * | 2017-10-30 | 2018-02-23 | 郑州云海信息技术有限公司 | 一种数据库异常处理方法和终端 |
CN108520369A (zh) * | 2018-07-06 | 2018-09-11 | 西安日间结算登记有限公司 | 基于大数据的中小企业金融监管系统 |
CN109728979A (zh) * | 2019-03-01 | 2019-05-07 | 国网新疆电力有限公司信息通信公司 | 适用于信息运维综合监管平台的自动告警系统及方法 |
CN110764834A (zh) * | 2019-08-31 | 2020-02-07 | 广州海达安控智能科技有限公司 | 一种自动化安全监测平台、管理方法及存储介质 |
CN110851322A (zh) * | 2019-10-11 | 2020-02-28 | 平安科技(深圳)有限公司 | 硬件设备异常监控方法、服务器及计算机可读存储介质 |
-
2020
- 2020-11-13 CN CN202011269735.6A patent/CN112506920A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102801785A (zh) * | 2012-07-03 | 2012-11-28 | 合一网络技术(北京)有限公司 | 一种对广告投放引擎进行监控的系统及方法 |
CN105352542A (zh) * | 2015-10-14 | 2016-02-24 | 国家电网公司 | 一种换流站全景状态监测系统 |
CN106210021A (zh) * | 2016-07-05 | 2016-12-07 | 中国银行股份有限公司 | 金融应用系统联机业务的实时监控方法以及监控装置 |
CN106960292A (zh) * | 2017-04-18 | 2017-07-18 | 国网福建省电力有限公司 | 一种应用于电力公司的业务流程监测系统及方法 |
CN107273554A (zh) * | 2017-08-04 | 2017-10-20 | 郑州轻工业学院 | 电梯智能监控系统与方法 |
CN107729217A (zh) * | 2017-10-30 | 2018-02-23 | 郑州云海信息技术有限公司 | 一种数据库异常处理方法和终端 |
CN108520369A (zh) * | 2018-07-06 | 2018-09-11 | 西安日间结算登记有限公司 | 基于大数据的中小企业金融监管系统 |
CN109728979A (zh) * | 2019-03-01 | 2019-05-07 | 国网新疆电力有限公司信息通信公司 | 适用于信息运维综合监管平台的自动告警系统及方法 |
CN110764834A (zh) * | 2019-08-31 | 2020-02-07 | 广州海达安控智能科技有限公司 | 一种自动化安全监测平台、管理方法及存储介质 |
CN110851322A (zh) * | 2019-10-11 | 2020-02-28 | 平安科技(深圳)有限公司 | 硬件设备异常监控方法、服务器及计算机可读存储介质 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114760220A (zh) * | 2022-03-24 | 2022-07-15 | 中国农业银行股份有限公司 | 一种操作系统的监控方法、装置及设备 |
CN114760220B (zh) * | 2022-03-24 | 2024-06-11 | 中国农业银行股份有限公司 | 一种操作系统的监控方法、装置及设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111049705B (zh) | 一种监控分布式存储系统的方法及装置 | |
CN109412870B (zh) | 告警监控方法及平台、服务器、存储介质 | |
CN110581773A (zh) | 一种自动化服务监控与报警管理系统 | |
CN101632093A (zh) | 用于使用统计学分析来管理性能故障的系统和方法 | |
CN105071969A (zh) | 基于jmx的定制化实时监控及自动化异常处理的系统及方法 | |
CN111740860A (zh) | 日志数据传输链路监控方法及装置 | |
CN110750414B (zh) | 移动数据监控分析方法、装置、计算机设备和存储介质 | |
CN113190415A (zh) | 互联网医院系统监控方法、设备、存储介质及程序产品 | |
CN112269673A (zh) | 一种数据中心智能运维管理系统及方法 | |
CN108304293A (zh) | 一种基于大数据技术的软件系统监控方法 | |
CN112506920A (zh) | 一种多金融系统的信息统一收集监控方法及系统 | |
CN112256548B (zh) | 异常数据的监听方法、装置、服务器及存储介质 | |
CN110011845B (zh) | 日志采集方法及系统 | |
CN110677271A (zh) | 基于elk的大数据告警方法、装置、设备及存储介质 | |
CN113472881B (zh) | 在线终端设备的统计方法和装置 | |
CN114531338A (zh) | 一种基于调用链数据的监控告警和溯源方法及系统 | |
CN114640567A (zh) | Apache日志的分析方法及装置 | |
CN114968710A (zh) | 一种基于分布式架构的单元监控方法及装置 | |
CN115222181A (zh) | 机器人运营状态监控系统及方法 | |
CN109766238B (zh) | 基于session数的运维平台性能监控方法、装置及相关设备 | |
CN114387123A (zh) | 数据采集管理方法 | |
CN111245632A (zh) | 一种基于云分析的安全日志存储与管理系统 | |
CN112416719A (zh) | 针对数据库容器的监控处理方法、系统、设备和存储介质 | |
CN115296976B (zh) | 物联网设备故障检测方法、装置、设备及存储介质 | |
CN116842063A (zh) | 数据处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |