CN111221712A - 一种服务器数据交互异常识别系统 - Google Patents

一种服务器数据交互异常识别系统 Download PDF

Info

Publication number
CN111221712A
CN111221712A CN201911404047.3A CN201911404047A CN111221712A CN 111221712 A CN111221712 A CN 111221712A CN 201911404047 A CN201911404047 A CN 201911404047A CN 111221712 A CN111221712 A CN 111221712A
Authority
CN
China
Prior art keywords
data
server
database
target
interaction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911404047.3A
Other languages
English (en)
Inventor
金根元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Yunmin Intelligent Technology Co Ltd
Original Assignee
Suzhou Yunmin Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Yunmin Intelligent Technology Co Ltd filed Critical Suzhou Yunmin Intelligent Technology Co Ltd
Priority to CN201911404047.3A priority Critical patent/CN111221712A/zh
Publication of CN111221712A publication Critical patent/CN111221712A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466Performance evaluation by tracing or monitoring
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3003Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3006Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/45Network directories; Name-to-address mapping
    • H04L61/4505Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols
    • H04L61/4511Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols using domain name system [DNS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Quality & Reliability (AREA)
  • Mathematical Physics (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Computer Hardware Design (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种服务器数据交互异常识别系统,包括:用户端、服务器、与服务器电性连接的数据库、与数据库连接的拦截器以及修正模块;所述用户端输入操作指令发出数据交互请求,同时生成交互规则,交互合并后的数据信息传输至数据库;数据库包括目标数据库与预设数据库,服务器对目标数据库内的数据节点进行扫描,并通过比对模块进行目标数据库与预设数据库内的目标数据与预设数据进行比对;当目标数据与预设数据出现偏差时,所述拦截器将偏差数据进行拦截,拦截后的偏差数据通过所述服务器进行节点分析,并判断节点属性;修正模块与所述服务器电性连接,所述服务器对所述偏差数据拦截分析后,通过修正模块进行数据修正。

Description

一种服务器数据交互异常识别系统
技术领域
本发明涉及一种识别系统,尤其涉及一种服务器数据交互异常识别系统。
背景技术
目前大部分公司都会用到服务器,且随着企业业务系统的增加,用于部署各个系统的应用服务器也不断增加,面对大量的服务器的情况,不仅给运维人员增加了服务器运维难度,同时服务器数据交互过程中也会出现异常,对开发人员排查系统问题无形中增加了不少障碍。
在服务器数据异常情况下,一般都是需要人工进行判断和处理,然而仅仅通过人工去判断,然后再去处理,哒哒增加了工作量,也会出现判断失误,同时遇到相同问题时,也会增加了重复问题的重复判断,影响效率,此外不在工作时间范围内时,无法及时的对服务器数据异常进行处理,效率较低,同时会错过最佳系统修复时间点。
发明内容
本发明克服了现有技术的不足,提供一种服务器数据交互异常识别系统。
为达到上述目的,本发明采用的技术方案为:一种服务器数据交互异常识别系统,包括:用户端、服务器、与服务器电性连接的数据库、与数据库连接的拦截器以及修正模块;
所述用户端输入操作指令发出数据交互请求,同时生成交互规则,交互合并后的数据信息传输至数据库;
所述数据库包括目标数据库与预设数据库,所述服务器对目标数据库内的数据节点进行扫描,并通过所述比对模块进行目标数据库与预设数据库内的目标数据与预设数据进行比对;
当所述目标数据与预设数据出现偏差时,所述拦截器将偏差数据进行拦截,拦截后的偏差数据通过所述服务器进行节点分析,并判断节点属性;
所述修正模块与所述服务器电性连接,所述服务器对所述偏差数据拦截分析后,通过所述修正模块进行数据修正。
本发明一个较佳实施例中,所述对比规则包括数据字段、传输速度或节点通道中的一种或多种。
本发明一个较佳实施例中,将修正模块的修正数据信息发送至用户端进行信息记录。
本发明一个较佳实施例中,所述目标数据包括所述服务器的负载、中央处理器CPU、内存中的一种或多种的集合。
本发明一个较佳实施例中,所述交互规则包括数据迭代、数据重合或数据替代中的一种或多种。
本发明一个较佳实施例中,所述服务器包括前端服务器与后端服务器,所述前端服务器接收所述后端服务器的网络请求,对目标数据库内的数据字段、通道节点进行分析。
本发明一个较佳实施例中,在比对模块进行目标数据与预设数据进行比对之前,还包括对Zookeeper接口的扫描路径进行扫描,得到接口信息,将所述接口信息注册到Zookeeper中。
本发明一个较佳实施例中,所述Zookeeper能够监听目标数据节点变化,判断Zookeeper事件节点属性,然后通过所述比对模块进行目标数据与所述预设数据的节点变化比对。
本发明解决了背景技术中存在的缺陷,本发明具备以下有益效果:
(1)通过服务器进行对比目标数据库与预设数据库内的数据信息,当出现数据异常时,通过拦截器进行偏差数据拦截,然后进行偏差数据异常批量处理,最后通过修正模块进行异常数据的修正,减少人工干预,降低服务器故障。
(2)Zookeeper是一个分布式的,开放源码的分布式应用程序协调服务,它是一个为分布式应用提供一致性服务的软件,提供的功能包括配置维护、域名服务、分布式同步、组服务等,通过Zookeeper将简单易用的接口和性能高效、功能稳定的系统提供给用户。
附图说明
下面结合附图和实施例对本发明进一步说明;
图1是本发明的优选实施例的异常识别系统框图;
图2是本发明的又一实施例的带有Zookeeper的异常识别系统框图;
具体实施方式
现在结合附图和实施例对本发明作进一步详细的说明,这些附图均为简化的示意图,仅以示意方式说明本发明的基本结构,因此其仅显示与本发明有关的构成。
如图1示出了一种服务器数据交互异常识别系统,本系统通过拦截器进行偏差数据拦截,然后进行偏差数据异常批量处理,最后通过修正模块进行异常数据的修正,减少人工干预,降低服务器故障。
实施例1:一种服务器数据交互异常识别系统,包括用户端、服务器、与服务器电性连接的数据库、与数据库连接的拦截器以及修正模块;
具体而言,用户端输入操作指令发出数据交互请求,同时生成交互规则,交互合并后的数据信息传输至数据库;
数据库包括目标数据库与预设数据库,服务器对目标数据库内的数据节点进行扫描,并通过比对模块进行目标数据库与预设数据库内的目标数据与预设数据进行比对;
当目标数据与预设数据出现偏差时,拦截器将偏差数据进行拦截,拦截后的偏差数据通过服务器进行节点分析,并判断节点属性;
修正模块与服务器电性连接,电性连接为广义的连接,可以是通过电线实现有线连接,也可以是电信号实现无线连接,也可以是通讯协议连接,服务器对偏差数据拦截分析后,通过修正模块进行数据修正,对比规则包括数据字段、或节点通道的比对,将修正模块的修正数据信息发送至用户端进行信息记录。
目标数据包括服务器的负载、中央处理器CPU、内存中的一种或多种的集合,交互规则数据迭代,服务器包括前端服务器与后端服务器,前端服务器接收后端服务器的网络请求,对目标数据库内的数据字段、通道节点进行分析。
在比对模块进行目标数据与预设数据进行比对之前,还包括对Zookeeper接口的扫描路径进行扫描,得到接口信息,将接口信息注册到Zookeeper中,Zookeeper能够监听目标数据节点变化,判断Zookeeper事件节点属性,然后通过比对模块进行目标数据与预设数据的节点变化比对。,Zookeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Hadoop和Hbase的重要组件,它是一个为分布式应用提供一致性服务的软件,提供的功能包括配置维护、域名服务、分布式同步、组服务等,通过ZooKeeper将简单易用的接口和性能高效、功能稳定的系统提供给用户。
实施例2:
图2示出了Zookeeper数据交互异常识别,Zookeeper是一个分布式的,开放源码的分布式应用程序协调服务,通过Zookeeper将简单易用的接口和性能高效、功能稳定的系统提供给用户。
一种服务器数据交互异常识别系统,包括用户端、服务器、与服务器电性连接的数据库、与数据库连接的拦截器以及修正模块;
具体而言,用户端输入操作指令发出数据交互请求,同时生成交互规则,交互合并后的数据信息传输至数据库;交互规则数据迭代,服务器包括前端服务器与后端服务器,前端服务器接收后端服务器的网络请求,对目标数据库内的数据字段、通道节点进行分析,在本实施例中,目标数据库内的数据信息会生成一个日志信息,通过服务器对日志信息进行分析,在进行数据修正时,根据日志信息,或参考日志信息进行数据修复。
数据库包括目标数据库与预设数据库,服务器对目标数据库内的数据节点进行扫描,并通过比对模块进行目标数据库与预设数据库内的目标数据与预设数据进行比对;在比对模块进行目标数据与预设数据进行比对之前,先对Zookeeper接口的扫描路径进行扫描,得到接口信息,将接口信息注册到Zookeeper中,Zookeeper是一个分布式的,开放源码的分布式应用程序协调服务,它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。
Zookeeper的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户。Zookeeper能够监听目标数据节点变化,判断Zookeeper事件节点属性,然后通过比对模块进行目标数据与预设数据的节点变化比对,比对规则为传输速度的比对。
当目标数据与预设数据出现偏差时,拦截器将偏差数据进行拦截,拦截后的偏差数据通过服务器进行节点分析,并判断节点属性;
修正模块与服务器电性连接,服务器对偏差数据拦截分析后,通过修正模块进行数据修正,对比规则包括数据字段、传输速度或节点通道中的一种或多种,将修正模块的修正数据信息发送至用户端进行信息记录。
Zookeeper包含一个简单的原语集,提供Java和C的接口。
Zookeeper代码版本中,提供了分布式独享锁、选举、队列的接口,在Zookeeper中,znode是一个跟Unix文件系统路径相似的节点,可以往这个节点存储或获取数据。如果在创建znode时Flag设置为EPHEMERAL,那么当创建这个znode的节点和Zookeeper失去连接后,这个znode将不再存在在Zookeeper里,Zookeeper使用Watcher察觉事件信息。当客户端接收到事件信息,比如连接超时、节点数据改变、子节点改变,可以调用相应的行为来处理数据。Zookeeper的Wiki页面展示了如何使用Zookeeper来处理事件通知,队列,优先队列,锁,共享锁,可撤销的共享锁,两阶段提交。
通过服务器进行对比目标数据库与预设数据库内的数据信息,当出现数据异常时,通过拦截器进行偏差数据拦截,然后进行偏差数据异常批量处理,最后通过修正模块进行异常数据的修正,减少人工干预,降低服务器故障。
以上依据本发明的理想实施例为启示,通过上述的说明内容,相关人员完全可以在不偏离本项发明技术思想的范围内,进行多样的变更以及修改。本项发明的技术性范围并不局限于说明书上的内容,必须要根据权利要求范围来确定技术性范围。

Claims (8)

1.一种服务器数据交互异常识别系统,包括:用户端、服务器、与服务器电性连接的数据库、与数据库连接的拦截器以及修正模块;其特征在于,
所述用户端输入操作指令发出数据交互请求,同时生成交互规则,交互合并后的数据信息传输至数据库;
所述数据库包括目标数据库与预设数据库,所述服务器对目标数据库内的数据节点进行扫描,并通过所述比对模块进行目标数据库与预设数据库内的目标数据与预设数据进行比对;
当所述目标数据与预设数据出现偏差时,所述拦截器将偏差数据进行拦截,拦截后的偏差数据通过所述服务器进行节点分析,并判断节点属性;
所述修正模块与所述服务器电性连接,所述服务器对所述偏差数据拦截分析后,通过所述修正模块进行数据修正。
2.根据权利要求1所述的一种服务器数据交互异常识别系统,其特征在于:所述对比规则包括数据字段、传输速度或节点通道中的一种或多种。
3.根据权利要求1所述的一种服务器数据交互异常识别系统,其特征在于:将修正模块的修正数据信息发送至用户端进行信息记录。
4.根据权利要求1所述的一种服务器数据交互异常识别系统,其特征在于:所述目标数据包括所述服务器的负载、中央处理器CPU、内存中的一种或多种的集合。
5.根据权利要求1所述的一种服务器数据交互异常识别系统,其特征在于:所述交互规则包括数据迭代、数据重合或数据替代中的一种或多种。
6.根据权利要求1所述的一种服务器数据交互异常识别系统,其特征在于:所述服务器包括前端服务器与后端服务器,所述前端服务器接收所述后端服务器的网络请求,对目标数据库内的数据字段、通道节点进行分析。
7.根据权利要求1所述的一种服务器数据交互异常识别系统,其特征在于:在比对模块进行目标数据与预设数据进行比对之前,还包括对Zookeeper接口的扫描路径进行扫描,得到接口信息,将所述接口信息注册到Zookeeper中。
8.根据权利要求7所述的一种服务器数据交互异常识别系统,其特征在于:所述Zookeeper能够监听目标数据节点变化,判断Zookeeper事件节点属性,然后通过所述比对模块进行目标数据与所述预设数据的节点变化比对。
CN201911404047.3A 2019-12-31 2019-12-31 一种服务器数据交互异常识别系统 Pending CN111221712A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911404047.3A CN111221712A (zh) 2019-12-31 2019-12-31 一种服务器数据交互异常识别系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911404047.3A CN111221712A (zh) 2019-12-31 2019-12-31 一种服务器数据交互异常识别系统

Publications (1)

Publication Number Publication Date
CN111221712A true CN111221712A (zh) 2020-06-02

Family

ID=70832751

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911404047.3A Pending CN111221712A (zh) 2019-12-31 2019-12-31 一种服务器数据交互异常识别系统

Country Status (1)

Country Link
CN (1) CN111221712A (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110245166A (zh) * 2019-05-21 2019-09-17 阿里巴巴集团控股有限公司 数据核对方法及装置
CN110413434A (zh) * 2019-07-08 2019-11-05 合肥移瑞通信技术有限公司 服务器的异常识别方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110245166A (zh) * 2019-05-21 2019-09-17 阿里巴巴集团控股有限公司 数据核对方法及装置
CN110413434A (zh) * 2019-07-08 2019-11-05 合肥移瑞通信技术有限公司 服务器的异常识别方法及装置

Similar Documents

Publication Publication Date Title
US8626908B2 (en) Distributed capture and aggregation of dynamic application usage information
Mizutani Incremental mining of system log format
US7525422B2 (en) Method and system for providing alarm reporting in a managed network services environment
US10284444B2 (en) Visual representation of end user response time in a multi-tiered network application
US6665674B1 (en) Framework for open directory operation extensibility
CA2578957C (en) Agile information technology infrastructure management system
CN103546343B (zh) 网络流量分析系统的网络流量展示方法和系统
US20060233313A1 (en) Method and system for processing fault alarms and maintenance events in a managed network services system
CN108964995A (zh) 基于时间轴事件的日志关联分析方法
US20110258315A1 (en) Network analysis system and method utilizing collected metadata
Kitagawa et al. AspFuzz: A state-aware protocol fuzzer based on application-layer protocols
US20080162690A1 (en) Application Management System
EP3747178A1 (en) Monitoring of iot simulated user experience
Teixeira et al. HOLMES: an event-driven solution to monitor data centers through continuous queries and machine learning
US9578031B2 (en) Non-invasive method and system for automated administration of diverse security constrained servers
US20170011302A1 (en) Action correlation framework
CN111221712A (zh) 一种服务器数据交互异常识别系统
US20140019610A1 (en) Correlated Tracing of Connections through TDS
CN108259493B (zh) 一种安全协议消息构造方法
US20060026466A1 (en) Support methodology for diagnostic patterns
US10020990B2 (en) Network stability reconnaisance tool
US7126964B1 (en) Method and apparatus for network analysis, such as analyzing and correlating identifiers of frame relay circuits in a network
US11762755B2 (en) Systems and methods for non-human account tracking
Špaček et al. Event-Flow Correlation for Anomaly Detection in HTTP/3 Web Traffic
Camacho et al. Automatic Learning coupled with Interpretability: MBDA in Action.

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200602