CN109669982A - 平台接口被调用统计系统及方法 - Google Patents

平台接口被调用统计系统及方法 Download PDF

Info

Publication number
CN109669982A
CN109669982A CN201811595150.6A CN201811595150A CN109669982A CN 109669982 A CN109669982 A CN 109669982A CN 201811595150 A CN201811595150 A CN 201811595150A CN 109669982 A CN109669982 A CN 109669982A
Authority
CN
China
Prior art keywords
interface
statistics
label
platform
log
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811595150.6A
Other languages
English (en)
Inventor
贺红波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Taima Information Network Technology Co Ltd
Original Assignee
Taima Information Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Taima Information Network Technology Co Ltd filed Critical Taima Information Network Technology Co Ltd
Priority to CN201811595150.6A priority Critical patent/CN109669982A/zh
Publication of CN109669982A publication Critical patent/CN109669982A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/085—Retrieval of network configuration; Tracking network configuration history
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14—Network analysis or design
    • H04L41/142—Network analysis or design using statistical or mathematical methods
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/51—Discovery or management thereof, e.g. service location protocol [SLP] or web services

Abstract

一种平台接口被调用统计系统包括：配置模块基于业务配置各个接口的统计标签和每个统计标签所采用的统计算法，同一个业务所用到的接口对应的统计标签为相同的；采集模块采集各个接口的接口调用日志，将接口调用日志发送至消息中间件，接口调用日志包括接口调用请求、请求时间、接口反馈信息和反馈时间，接口调用请求包括接口地址；分析模块订阅消息中间件中的接口调用日志，获取接口调用日志中的接口地址，根据接口地址查询到对应配置的统计标签和统计算法；统计模块执行统计算法统计出对应的统计标签出现的次数并将统计结果存至数据库中。本发明基于统计标签和统计算法统计出接口被调用的次数，统计与业务解耦，统计的实现不会侵入到业务逻辑中。

Description

平台接口被调用统计系统及方法
技术领域
本发明涉及接口调用技术领域，特别是涉及一种平台接口被调用统计系统及方法。
背景技术
随着微服务技术的普及，为第三方企业提供服务的微服务云平台越来越多。在汽车与交通运输领域中，许多接口对安全方面的要求特别高。目前，在对接口被调用的情况进行统计时，统计与业务糅合在一起，统计的实现会侵入到业务逻辑中。当新增统计业务或统计算法时需要二次开发，需要对业务代码进行修改，操作较为麻烦。
发明内容
本发明针对现有技术存在的问题和不足，提供一种平台接口被调用统计系统及方法。
本发明是通过下述技术方案来解决上述技术问题的：
本发明提供一种平台接口被调用统计系统，其特点在于，其包括配置模块、采集模块、消息中间件、分析模块和统计模块；
所述配置模块用于基于业务配置各个接口的统计标签和每个统计标签所采用的统计算法，同一个业务所用到的接口对应的统计标签为相同的；
所述采集模块用于采集各个接口的接口调用日志，并将接口调用日志发送至消息中间件，所述接口调用日志包括接口调用请求、请求时间、接口反馈信息和反馈时间，所述接口调用请求包括接口地址；
所述分析模块用于订阅消息中间件中的接口调用日志，获取接口调用日志中的接口地址，并根据接口地址查询到对应配置的统计标签和统计算法；
所述统计模块用于执行统计算法，统计出对应的统计标签出现的次数并将统计结果存储至数据库中。
较佳地，所述统计算法包括在每统计出一个对应的统计标签时统计次数就加一、或在每统计出一个对应的统计标签且接口反馈信息中含有满足预设条件的信息时统计次数才加一。
较佳地，所述消息中间件采用Kafka消息中间件。
较佳地，所述接口包括平台对外提供的接口和平台调用第三方的接口。
本发明还提供一种平台接口被调用统计方法，其特点在于，其包括以下步骤：
基于业务配置各个接口的统计标签和每个统计标签所采用的统计算法，同一个业务所用到的接口对应的统计标签为相同的；
采集各个接口的接口调用日志，并将接口调用日志发送至消息中间件，所述接口调用日志包括接口调用请求、请求时间、接口反馈信息和反馈时间，所述接口调用请求包括接口地址；
订阅消息中间件中的接口调用日志，获取接口调用日志中的接口地址，并根据接口地址查询到对应配置的统计标签和统计算法；
执行统计算法，统计出对应的统计标签出现的次数并将统计结果存储至数据库中。
较佳地，所述统计算法包括在每统计出一个对应的统计标签时统计次数就加一、或在每统计出一个对应的统计标签且接口反馈信息中含有满足预设条件的信息时统计次数才加一。
较佳地，所述接口包括平台对外提供的接口和平台调用第三方的接口。
在符合本领域常识的基础上，上述各优选条件，可任意组合，即得本发明各较佳实例。
本发明的积极进步效果在于：
本发明统计与业务解耦，统计的实现不会侵入到业务逻辑中。
本发明灵活，当需要新增统计业务时只需要通过后台管理进行简单的配置即可，不需要二次开发；当需要新增一种统计算法时不需要对业务代码做任何修改，只需要实现算法即可。
本发明采集的接口调用日志可以用于问题追踪、二次统计及其他数据分析。
附图说明
图1为本发明较佳实施例的平台接口被调用统计系统的结构框图。
图2为本发明较佳实施例的平台接口被调用统计方法的流程图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
如图1所示，本实施例提供一种平台接口被调用统计系统，其特点在于，其包括配置模块1、采集模块2、Kafka消息中间件3、分析模块4和统计模块5。
所述配置模块1用于基于业务配置各个接口的统计标签和每个统计标签所采用的统计算法，同一个业务所用到的接口对应的统计标签为相同的。
所述统计算法包括在每统计出一个对应的统计标签时统计次数就加一、或在每统计出一个对应的统计标签且接口反馈信息中含有满足预设条件的信息时统计次数才加一。
所述接口包括平台对外提供的接口和平台调用第三方的接口。系统中维护所有对外提供的API接口和调用第三方的接口的接口地址，系统对外提供的API接口可以由系统自动扫描获取；调用的第三方接口地址需要通过后台管理portal进行维护。
所述采集模块2用于采集各个接口的接口调用日志，并将接口调用日志发送至Kafka消息中间件3，所述接口调用日志包括接口调用请求、请求时间、接口反馈信息和反馈时间，所述接口调用请求包括接口地址。
所述分析模块4用于订阅Kafka消息中间件3中的接口调用日志，获取接口调用日志中的接口地址，并根据接口地址查询到对应配置的统计标签和统计算法。
所述统计模块5用于执行统计算法，统计出对应的统计标签出现的次数(即接口被调用的次数)并将统计结果存储至数据库中。统计得到的数据是以天为单位的，在这些数据的基础上可以根据需要基于不同的维度进行二次统计。采集的接口调用日志可以存储(Hbase或ES)用于后续的问题追踪或二次统计。
系统中根据业务需要定义一系列统计标签，每个统计标签代表一类业务(一个分组)的统计，每个统计标签对应一个统计算法。需要对某个业务进行统计时就将相应业务的接口打上对应的统计标签，接口被调用时就会参与该统计标签的统计，如：需要统计所有车辆远程控制的调用，则只需要在所有的车辆远控接口上打上远程控制的统计标签，当调用远程控制接口时就会执行远程控制标签对应的统计算法，该统计算法为每统计出一个对应的统计标签且接口反馈信息中含有接口调用成功的信息时统计次数才加一。
如图2所示，本实施例还提供一种平台接口被调用统计方法，其包括以下步骤：
步骤101、基于业务配置各个接口的统计标签和每个统计标签所采用的统计算法，同一个业务所用到的接口对应的统计标签为相同的；
步骤102、采集各个接口的接口调用日志，并将接口调用日志发送至消息中间件，所述接口调用日志包括接口调用请求、请求时间、接口反馈信息和反馈时间，所述接口调用请求包括接口地址；
步骤103、订阅消息中间件中的接口调用日志，获取接口调用日志中的接口地址，并根据接口地址查询到对应配置的统计标签和统计算法；
步骤104、执行统计算法，统计出对应的统计标签出现的次数并将统计结果存储至数据库中。
平台接口被调用统计主要是针对平台对外提供接口的调用以及平台调用第三方接口进行统计，支持根据业务将接口调用进行分组统计，根据业务的不同的分组可以采用不同的统计逻辑，统计结果以天为单位进行存储，可以根据需要按条件查询并以不同维度(日、月、年)进行二次统计。
数据统计是基于日志的，与具体业务解耦；统计与业务互不影响。
虽然以上描述了本发明的具体实施方式，但是本领域的技术人员应当理解，这些仅是举例说明，本发明的保护范围是由所附权利要求书限定的。本领域的技术人员在不背离本发明的原理和实质的前提下，可以对这些实施方式做出多种变更或修改，但这些变更和修改均落入本发明的保护范围。

Claims (7)

1.一种平台接口被调用统计系统，其特征在于，其包括配置模块、采集模块、消息中间件、分析模块和统计模块；
所述配置模块用于基于业务配置各个接口的统计标签和每个统计标签所采用的统计算法，同一个业务所用到的接口对应的统计标签为相同的；
所述采集模块用于采集各个接口的接口调用日志，并将接口调用日志发送至消息中间件，所述接口调用日志包括接口调用请求、请求时间、接口反馈信息和反馈时间，所述接口调用请求包括接口地址；
所述分析模块用于订阅消息中间件中的接口调用日志，获取接口调用日志中的接口地址，并根据接口地址查询到对应配置的统计标签和统计算法；
所述统计模块用于执行统计算法，统计出对应的统计标签出现的次数并将统计结果存储至数据库中。
2.如权利要求1所述的平台接口被调用统计系统，其特征在于，所述统计算法包括在每统计出一个对应的统计标签时统计次数就加一、或在每统计出一个对应的统计标签且接口反馈信息中含有满足预设条件的信息时统计次数才加一。
3.如权利要求1所述的平台接口被调用统计系统，其特征在于，所述消息中间件采用Kafka消息中间件。
4.如权利要求1所述的平台接口被调用统计系统，其特征在于，所述接口包括平台对外提供的接口和平台调用第三方的接口。
5.一种平台接口被调用统计方法，其特征在于，其包括以下步骤：
基于业务配置各个接口的统计标签和每个统计标签所采用的统计算法，同一个业务所用到的接口对应的统计标签为相同的；
采集各个接口的接口调用日志，并将接口调用日志发送至消息中间件，所述接口调用日志包括接口调用请求、请求时间、接口反馈信息和反馈时间，所述接口调用请求包括接口地址；
订阅消息中间件中的接口调用日志，获取接口调用日志中的接口地址，并根据接口地址查询到对应配置的统计标签和统计算法；
执行统计算法，统计出对应的统计标签出现的次数并将统计结果存储至数据库中。
6.如权利要求5所述的平台接口被调用统计方法，其特征在于，所述统计算法包括在每统计出一个对应的统计标签时统计次数就加一、或在每统计出一个对应的统计标签且接口反馈信息中含有满足预设条件的信息时统计次数才加一。
7.如权利要求5所述的平台接口被调用统计方法，其特征在于，所述接口包括平台对外提供的接口和平台调用第三方的接口。
CN201811595150.6A 2018-12-25 2018-12-25 平台接口被调用统计系统及方法 Pending CN109669982A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811595150.6A CN109669982A (zh) 2018-12-25 2018-12-25 平台接口被调用统计系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811595150.6A CN109669982A (zh) 2018-12-25 2018-12-25 平台接口被调用统计系统及方法

Publications (1)

Publication Number Publication Date
CN109669982A true CN109669982A (zh) 2019-04-23

Family

ID=66146168

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811595150.6A Pending CN109669982A (zh) 2018-12-25 2018-12-25 平台接口被调用统计系统及方法

Country Status (1)

Country Link
CN (1) CN109669982A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110262951A (zh) * 2019-06-10 2019-09-20 天翼电子商务有限公司 一种业务秒级监控方法及系统、存储介质及客户端
CN111158926A (zh) * 2019-12-12 2020-05-15 口碑(上海)信息技术有限公司 业务请求分析方法、装置及设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120143894A1 (en) * 2010-12-02 2012-06-07 Microsoft Corporation Acquisition of Item Counts from Hosted Web Services
CN104219069A (zh) * 2013-05-30 2014-12-17 腾讯科技（深圳）有限公司 访问频率控制方法、装置及控制系统
CN107729214A (zh) * 2017-10-13 2018-02-23 福建富士通信息软件有限公司 一种可视化的分布式系统实时监控运维方法及装置
CN108509323A (zh) * 2018-01-30 2018-09-07 深圳壹账通智能科技有限公司 基于日志分析的业务处理方法、装置及计算机设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120143894A1 (en) * 2010-12-02 2012-06-07 Microsoft Corporation Acquisition of Item Counts from Hosted Web Services
CN104219069A (zh) * 2013-05-30 2014-12-17 腾讯科技（深圳）有限公司 访问频率控制方法、装置及控制系统
CN107729214A (zh) * 2017-10-13 2018-02-23 福建富士通信息软件有限公司 一种可视化的分布式系统实时监控运维方法及装置
CN108509323A (zh) * 2018-01-30 2018-09-07 深圳壹账通智能科技有限公司 基于日志分析的业务处理方法、装置及计算机设备

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110262951A (zh) * 2019-06-10 2019-09-20 天翼电子商务有限公司 一种业务秒级监控方法及系统、存储介质及客户端
CN111158926A (zh) * 2019-12-12 2020-05-15 口碑(上海)信息技术有限公司 业务请求分析方法、装置及设备
CN111158926B (zh) * 2019-12-12 2024-01-30 口碑(上海)信息技术有限公司 业务请求分析方法、装置及设备

Similar Documents

Publication Publication Date Title
US7747461B2 (en) Wireless subscriber loyalty system and method
US8271039B2 (en) Trigger mediation system
US20100069092A1 (en) Scalable Geo-location Event Processing
CN107135276A (zh) 一种微服务架构下的全链路监控方法、装置和系统
CN108062243B (zh) 执行计划的生成方法、任务执行方法及装置
CN110740160B (zh) 一种多源数据地图网格化及数据状态实时推送系统
CN108268529B (zh) 一种基于业务抽象和多引擎调度的数据汇总方法和系统
CN106101178A (zh) 一种订阅消息分发、接收方法、装置及相关系统
CN102724307A (zh) 用于物联网的信息融合引擎及方法
CN109669982A (zh) 平台接口被调用统计系统及方法
CN106210099A (zh) 数据处理系统及方法
CN105183299A (zh) 一种人机界面服务处理系统和方法
US10771426B2 (en) Routing messages based on message type of messages
CN102090039A (zh) 执行数据中间处理的方法以及关联的计算机程序产品、数据中间处理设备和信息系统
CN101068375A (zh) 实现短消息增值业务的系统、平台及方法
US20030126180A1 (en) Arrangement for relating contacts to a context
CN101489102A (zh) 一种设置并执行网络电视内容发布策略的方法及系统
CN107659702A (zh) 固定电话防骚扰方法和系统以及相关设备
CN109933568A (zh) 一种工业大数据平台系统及其查询方法
CN106993060A (zh) 一种基于服务架构的主数据集成方法
US20050132008A1 (en) Database supported message routing
CN102685236A (zh) 一种消息处理方法及系统
CN109426947B (zh) 一种基于树状虚拟节点网络的企业信息交互系统
CN105933200B (zh) 基于任务的多平台信息聚合系统的群邮系统与方法
CN112215529B (zh) 获取数据的方法、系统、设备和计算机可读介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190423