CN110458485A - 数据配送运行状态的监控方法及装置、存储介质、终端、监控系统 - Google Patents

数据配送运行状态的监控方法及装置、存储介质、终端、监控系统 Download PDF

Info

Publication number
CN110458485A
CN110458485A CN201910544910.9A CN201910544910A CN110458485A CN 110458485 A CN110458485 A CN 110458485A CN 201910544910 A CN201910544910 A CN 201910544910A CN 110458485 A CN110458485 A CN 110458485A
Authority
CN
China
Prior art keywords
data
end processor
demander
supplier
dispatching
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201910544910.9A
Other languages
English (en)
Inventor
汤奇峰
毛佳伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Data Trading Center Ltd
Original Assignee
Shanghai Data Trading Center Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Data Trading Center Ltd filed Critical Shanghai Data Trading Center Ltd
Priority to CN201910544910.9A priority Critical patent/CN110458485A/zh
Publication of CN110458485A publication Critical patent/CN110458485A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466Performance evaluation by tracing or monitoring
    • G06F11/3476Data logging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/083Shipping

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Economics (AREA)
  • General Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Development Economics (AREA)
  • Computer Hardware Design (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Debugging And Monitoring (AREA)

Abstract

一种数据配送运行状态的监控方法及装置、存储介质、终端、监控系统,所述监控方法包括:针对所述需方前置机与所述供方前置机之间的每次数据配送,确定当前数据配送的配送状态,其中,所述配送状态选自配送成功以及配送失败;根据一次或多次数据配送的配送状态,分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常。本发明方案可以更准确地监控数据配送运行状态,且有助于提高效率,降低运营成本。

Description

数据配送运行状态的监控方法及装置、存储介质、终端、监控 系统
技术领域
本发明涉及配送技术领域,尤其涉及一种数据配送运行状态的监控方法及装置、存储介质、终端、监控系统。
背景技术
在分布式高并发数据交易系统中,数据需方和数据供方之间的数据传输是交易环节中的最重要的一环。
然而,在目前的数据交易配送流程中,数据需方和数据供方之间通常经由前置机形成点对点数据传输,进而构成网状结构,导致在对数据配送运行状态进行监控时,需要对内部应用本身进行监控,例如通过登录前置机查看日志的方式,监控数据配送运行状态,效率较低且增加运营成本。
发明内容
本发明解决的技术问题是提供一种数据配送运行状态的监控方法及装置、存储介质、终端、监控系统,可以更准确地监控数据配送运行状态,且有助于提高效率,降低运营成本。
为解决上述技术问题,本发明实施例提供一种数据配送运行状态的监控方法,用于监控一个或多个需方前置机,以及一个或多个供方前置机,包括:针对所述需方前置机与所述供方前置机之间的每次数据配送,确定当前数据配送的配送状态,其中,所述配送状态选自配送成功以及配送失败;根据一次或多次数据配送的配送状态,分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常。
可选的,所述的数据配送运行状态的监控方法还包括:在发生服务异常时,向所述需方前置机和/或供方前置机发送第一告警信息。
可选的,所述的数据配送运行状态的监控方法还包括:显示配送状态以及是否发生服务异常。
可选的,针对所述需方前置机与所述供方前置机之间的每次数据配送,确定当前数据配送的配送状态包括:在每次数据配送中设立埋点以采集配送数据;根据采集到的数据确定所述当前数据配送的配送状态。
可选的,所述根据一次或多次数据配送的配送状态,分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常包括:当所述配送状态指示配送失败时,记录当前数据配送的需方前置机和供方前置机的失败次数分别加一;当所述需方前置机的失败次数达到预设需方次数时,分析确定所述需方前置机发生服务异常;和/或,当所述供方前置机的失败次数达到预设供方次数时,分析确定所述供方前置机发生服务异常。
可选的,所述的数据配送运行状态的监控方法还包括:采集每个需方前置机以及每个供方前置机的日志数据,以及与所述日志数据匹配的会员ID;其中,所述日志数据包括交易量、响应时间以及成功率。
可选的,所述日志数据为第一预设时长内的增量日志数据;其中,所述第一预设时长为前一次采集至当前采集之间的时长。
可选的,所述的数据配送运行状态的监控方法还包括:当所述配送状态指示配送失败时,确定当前数据配送的会员ID;针对每个会员ID,确定第二预设时长内匹配的日志数据,或者与预设次数的数据配送相匹配的日志数据;如果所述日志数据的分析值低于预设阈值,则向所述会员ID发送第二告警信息。
可选的,所述日志数据的分析值选自:所述日志数据的平均值、中位数以及趋势曲线的斜率。
可选的,所述的数据配送运行状态的监控方法还包括:根据每个需方前置机的日志数据,对所述需方前置机进行监控;和/或,根据每个供方前置机的日志数据,对所述供方前置机进行监控。
为解决上述技术问题,本发明实施例提供一种数据配送运行状态的监控装置,用于监控一个或多个需方前置机,以及一个或多个供方前置机,包括:配送状态确定模块,用于针对所述需方前置机与所述供方前置机之间的每次数据配送,确定当前数据配送的配送状态,其中,所述配送状态包括配送成功以及配送失败;分析确定模块,与所述配送状态确定模块耦接,用于根据一次或多次数据配送的配送状态,分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常。
可选的,所述的数据配送运行状态的监控装置还包括:第一告警模块,与所述分析确定模块耦接,用于在发生服务异常时,向所述需方前置机和/或供方前置机发送第一告警信息。
可选的,所述的数据配送运行状态的监控装置还包括:显示模块,用于显示配送状态以及是否发生服务异常。
可选的,所述配送状态确定模块包括:埋点采集子模块,用于在每次数据配送中设立埋点以采集配送数据;状态确定子模块,用于根据采集到的数据确定所述当前数据配送的配送状态。
可选的,所述分析确定模块包括:记录子模块,用于当所述配送状态指示配送失败时,记录当前数据配送的需方前置机和供方前置机的失败次数分别加一;分析确定子模块,用于当需方前置机的失败次数达到预设需方次数时,分析确定所述需方前置机发生服务异常;和/或,用于当供方前置机的失败次数达到预设供方次数时,分析确定所述供方前置机发生服务异常。
可选的,所述的数据配送运行状态的监控装置还包括:日志收集模块,用于采集每个需方前置机以及每个供方前置机的日志数据,以及与所述日志数据匹配的会员ID;其中,所述日志数据包括交易量、响应时间以及成功率。
可选的,所述日志数据为第一预设时长内的增量日志数据;其中,所述第一预设时长为前一次采集至当前采集之间的时长。
可选的,所述的数据配送运行状态的监控装置还包括:会员确定模块,用于当所述配送状态指示配送失败时,确定当前数据配送的会员ID;匹配日志确定模块,用于针对每个会员ID,确定第二预设时长内匹配的日志数据,或者与预设次数的数据配送相匹配的日志数据;第二告警模块,用于当所述日志数据的分析值低于预设阈值时,向所述会员ID发送第二告警信息。
可选的,所述日志数据的分析值选自:所述日志数据的平均值、中位数以及趋势曲线的斜率。
可选的,所述的数据配送运行状态的监控装置还包括:需方监控模块,用于根据每个需方前置机的日志数据,对所述需方前置机进行监控;和/或,供方监控模块,用于根据每个供方前置机的日志数据,对所述供方前置机进行监控。
为解决上述技术问题,本发明实施例提供一种存储介质,其上存储有计算机指令,所述计算机指令运行时执行上述的数据配送运行状态的监控方法的步骤。
为解决上述技术问题,本发明实施例提供一种终端,包括存储器和处理器,所述存储器上存储有能够在所述处理器上运行的计算机指令,所述处理器运行所述计算机指令时执行上述的数据配送运行状态的监控方法的步骤。
为解决上述技术问题,本发明实施例提供一种监控系统,所述监控系统分别耦接至一个或多个需方前置机,以及分别耦接至一个或多个供方前置机,所述监控系统包括上述的数据配送运行状态的监控装置。
与现有技术相比,本发明实施例的技术方案具有以下有益效果:
在本发明实施例中,针对所述需方前置机与所述供方前置机之间的每次数据配送,确定当前数据配送的配送状态,其中,所述配送状态选自配送成功以及配送失败;根据一次或多次数据配送的配送状态,分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常。采用上述方案,通过确定当前数据配送的配送状态,以及分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常,可以更准确地监控数据配送运行状态,且有助于提高效率,降低运营成本。
进一步,在本发明实施例中,在发生服务异常时,可以向所述需方前置机和/或供方前置机发送第一告警信息,可以对网络、硬件等问题进行及时有效的提醒,提高用户体验度。
进一步地,在本发明实施例中,通过显示配送状态以及是否发生服务异常,可以使用户能够准确、便利地查询到发生的问题,从而可以进行有效处理,进一步提高用户体验度。
附图说明
图1是现有技术中一种数据配送运行状态的监控方法的工作场景示意图;
图2是本发明实施例中一种数据配送运行状态的监控方法的流程图;
图3是本发明实施例中一种确定当前数据配送的配送状态的步骤的流程图;
图4是本发明实施例中一种数据配送运行状态的监控装置的结构示意图。
具体实施方式
如前所述,在目前的数据交易配送流程中,数据需方和数据供方之间通常经由前置机形成点对点数据传输。
参照图1,图1是现有技术中一种数据配送运行状态的监控方法的工作场景示意图。所述数据配送运行状态的监控方法可以包括步骤S101至步骤S107,以下对各个步骤进行说明。
在步骤S101中,需方11注册。
具体地,需方11可以在平台13上进行注册。
更具体地,需方11可以注册进入平台13,获得会员号(mem_id)。
其中,所述平台13可以理解为数据交易中心向会员同数据交易服务的门户。通过门户,需方11以及供方12作为会员可实现数据交易的商品挂牌、需求发布、数据订购、交易管理、信息查询、清结算等业务,例如可以主要涉及到结算及额度文件推送。
在步骤S102中,供方12注册。
具体地,供方12可以在平台13上进行注册。
更具体地,供方12可以注册进入平台13,获得会员号(mem_id)。
在步骤S103中,平台13向需方前置机14发送工单信息。
具体地,所述工单信息可以是需方11通过平台13下单的,以寻找能够提供数据的需方12。
在步骤S104中,需方11生成并向需方前置机14发送标准(TARGET)文件以及标记(FLAG)文件。
具体地,需方11可以将标识码(Identity,ID)加密后,生成TARGET文件以及FLAG文件,传至需方前置机14。
在步骤S105中,需方前置机14可以向供方前置机15发送TARGET文件。
具体地,需方前置机14可以根据工单文件,确定供方前置机15,然后将TARGET文件发送至供方前置机15。
在步骤S106中,供方12生成SOURCE文件以及FLAG文件,并发送至供方前置机15。
具体地,供方12可以根据需方12的TARGET文件,生成源(SOURCE)文件以及FLAG文件。
进一步地,所述需方12的TARGET文件可以是通过平台13获得的,还可以是通过需方前置机14以及供方前置机15取得的。
在步骤S107中,供方前置机15向需方前置机14发送文件。
具体地,发送的文件可以选自供方12生成的SOURCE文件以及FLAG文件。
本发明的发明人经过研究发现,在现有技术中,数据需方和数据供方之间通常经由前置机形成点对点数据传输,在对数据配送运行状态进行监控时,需要基于需方前置机或供方前置机进行监控,例如在数据配送中,可能会由于各种因素(数据问题、加密模式、网络原因等)造成供需方的数据发送失败。此时技术人员只能采用登录查看日志的方式,登录前置机查询,由于空间限制导致监控难度增加。
在本发明实施例中,针对所述需方前置机与所述供方前置机之间的每次数据配送,确定当前数据配送的配送状态,其中,所述配送状态选自配送成功以及配送失败;根据一次或多次数据配送的配送状态,分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常。采用上述方案,通过确定当前数据配送的配送状态,以及分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常,可以更准确地监控数据配送运行状态,且有助于提高效率,降低运营成本。
为使本发明的上述目的、特征和有益效果能够更为明显易懂,下面结合附图对本发明的具体实施例做详细的说明。
参照图2,图2是本发明实施例中一种数据配送运行状态的监控方法的流程图。所述数据配送运行状态的监控方法可以包括步骤S21至步骤S22,还可以包括步骤S21至步骤S23:
步骤S21:针对所述需方前置机与所述供方前置机之间的每次数据配送,确定当前数据配送的配送状态,其中,所述配送状态选自配送成功以及配送失败;
步骤S22:根据一次或多次数据配送的配送状态,分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常;
步骤S23:在发生服务异常时,向所述需方前置机和/或供方前置机发送第一告警信息。
在步骤S21的具体实施中,需方即为数据的需求方,可以通过平台下单,寻找能够提供数据的供方,以获得想要的数据。
供方即为数据的供应方,可以为数据需方提供数据。
所述前置机可以是一个物理系统,主要起到一个网关的作用,能够连接数据供方和数据需方,实现外网的数据交换。
在具体实施中,可以设置有数据配送系统(Data Distribution System,DDS),主要负责在供方或需方连接业务系统,进行数据配送。其中,所述DDS通常部署于供方前置机以及需方前置机中,需方DDS能够将需要的数据ID传输至供方DDS,供方DDS也能将需要提供的数据传输至需方DDS。
在具体实施中,还可以设置有数据管理平台(Data Management Plat,DMP)。其中,所述DMP可以在交易过程中用于数据流通的供方或需方业务系统。在本发明实施例的一种具体实施中,需方DMP可以发出查询请求,在所述DMP经过数据配送中心路由到供方DMP,供方DMP在接收到请求后返回查询结果。
在本发明实施例中,针对所述需方前置机与所述供方前置机之间的每次数据配送,至少确定当前数据配送的配送状态为配送成功还是配送失败,有助于通过每次数据配送的成败,确定数据配送运行状态,确保数据来源的有效性。
进一步地,针对所述需方前置机与所述供方前置机之间的每次数据配送,确定当前数据配送的配送状态的步骤可以包括:在每次数据配送中设立埋点以采集配送数据;根据采集到的数据确定所述当前数据配送的配送状态。
具体地,通过在数据配送中设立埋点,有助于采集配送数据,进而对数据配送流程进行监控。针对每笔数据交易,服务可以从数据配送系统中获取对应前置机的当前配送情况,根据供方需方的状态来确定前置机的运行状态,可以更加准确的确定当前配送的进行状态。
在步骤S22的具体实施中,根据一次或多次数据配送的配送状态,分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常。
相比于现有技术中,需方前置机以及供方前置机采用点对点数据传输,难以宏观地确定多个前置机的服务情况,采用本发明实施例的方案,可以更准确地监控数据配送运行状态,且有助于提高效率,降低运营成本。
具体地,可以根据配送状态指示的内容,确定是否发生服务异常。
参照图3,图3是本发明实施例中一种确定当前数据配送的配送状态的步骤的流程图。所述确定当前数据配送的配送状态的步骤可以包括步骤S31至步骤S33,以下对各个步骤进行说明。
在步骤S31中,当所述配送状态指示配送失败时,记录当前数据配送的需方前置机和供方前置机的失败次数分别加一。
在步骤S32中,当需方前置机的失败次数达到预设需方次数时,分析确定所述需方前置机发生服务异常。
在步骤S33中,当供方前置机的失败次数达到预设供方次数时,分析确定所述供方前置机发生服务异常。
需要指出的是,所述步骤S32与所述步骤S33之间可以为和/或关系。
在本发明实施例中,通过确定当前数据配送的配送状态,以及分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常,可以更准确地监控数据配送运行状态,且有助于提高效率,降低运营成本。
继续参照图2,在步骤S23的具体实施中,在发生服务异常时,可以向所述需方前置机和/或供方前置机发送第一告警信息。
其中,所述第一告警信息可以选自:声音、文字、数字、符号、图标、图片、视频、动画等多种警示方式,从而给用户带来更好的体验。
在具体实施中,合理、灵活的监控规则可以帮助更快、更精确地发现问题。告警服务可以支持各种自定义规则配置,支持邮件、短信等多种通知方式。告警服务通过数据订阅,直接从数据流中获取所需要的数据,能够过滤掉大部分不必要的数据,更加精确地判断在配送过程中报警的异常点和变点。同时,告警服务也可以做到智能降噪,避免重复消息干扰了对问题处理的影响。
在本发明实施例中,在发生服务异常时,可以向所述需方前置机和/或供方前置机发送第一告警信息,可以对网络、硬件等问题进行及时有效的提醒,提高用户体验度。
进一步地,所述的数据配送运行状态的监控方法还可以包括:显示配送状态以及是否发生服务异常。
在具体实施中,显示页面可以提供给需方以及供方进行展示,可以部署于单个节点也可以部署于多个节点,当需要报表展示的时候,可以从各个节点的分析服务中跨节点调用,将所有数据合并展示给用户。显示页面同时也会将详细的配送流程以及当前配送的状态显示给数据供方和数据需方,方便及时了解目前配送的状态。
在本发明实施例中,通过显示配送状态以及是否发生服务异常,可以使用户能够准确、便利地查询到发生的问题,从而可以进行有效处理,进一步提高用户体验度。
进一步地,所述的数据配送运行状态的监控方法还可以包括日志收集服务。
具体地,所述的数据配送运行状态的监控方法还可以包括:采集每个需方前置机以及每个供方前置机的日志数据,以及与所述日志数据匹配的会员ID;其中,所述日志数据包括交易量、响应时间以及成功率。
在本发明实施例中,通过日志收集服务,分析出每个会员数据配送的情况。相比于现有技术中仅能针对前置机中的多个会员一并进行分析,采用本发明实施例的方案,有助于精准分析出每个会员数据配送的整体情况及问题原因。
其中,所述日志数据可以为第一预设时长内的增量日志数据;其中,所述第一预设时长为前一次采集至当前采集之间的时长。
需要指出的是,所述日志数据可以是经由前置机系统服务器对每个前置机生成的增量日志数据进行收集得到的。其中,所收集到的日志数据与数据供应或数据需方的会员号相匹配,从而可以有针对性的对每个会员进行分析。当配送流程开始时,可以实时监测配送的状态,为配送流程生成一个唯一的配送编号。配送编号将存入内存,作为内存索引,并且可以用于日志数据采集过程。数据采集服务和日志收集服务会将配送产生的各种状态和日志信息,形成多条配送数据流,以配送编号为唯一标识,发送至消息队列(MessageQueue,MQ)中。
进一步地,所述的数据配送运行状态的监控方法还包括对所述日志数据进行分析的步骤。
具体地,当所述配送状态指示配送失败时,确定当前数据配送的会员ID;针对每个会员ID,确定第二预设时长内匹配的日志数据,或者与预设次数的数据配送相匹配的日志数据;如果所述日志数据的分析值低于预设阈值,则向所述会员ID发送第二告警信息。
具体地,根据采集到的配送数据以及日志数据,可以确定数据配送系统中每个服务的运行情况以及每笔交易的数据配送情况,从而实时分析出服务的异常情况,并及时通知用户和技术支持人员。在一个具体应用中,可以首先解析各交易数据流对应的会员和会员信息,随后基于接收数据的数据信息,获得配送过程中的异常信息,将交易异常信息(包括交易超时,交易失败等)发送至预警服务。同时,数据也会进入平台,通过大数据进行计算分析,并最终的结果存入时序型数据库中。
进一步地,所述日志数据的分析值可以选自:所述日志数据的平均值、中位数以及趋势曲线的斜率。
在本发明实施例中,通过日志收集系统可以精确的了解每个会员在各笔交易中的交易量,响应时间和成功率等指标,基于这些指标可以进行趋势分析,提前预警,尽快处理和改进。例如对于某一会员,可能会由于防火墙设置,或者误操作而使得仅仅在自己账号下,发生数据配送失败的问题,采用本发明实施例的方案,有助于针对性发现不同会员ID对应的问题,进一步更准确地监控数据配送运行状态。
进一步地,所述的数据配送运行状态的监控方法还可以包括:根据每个需方前置机的日志数据,对所述需方前置机进行监控;和/或,根据每个供方前置机的日志数据,对所述供方前置机进行监控。
在本发明实施例中,通过对所述需方前置机和/或供方前置机进行监控,可以及时确定是否发生服务异常,还有助于更准确地监控数据配送运行状态,提高效率,降低运营成本。
参照图4,图4是本发明实施例中一种数据配送运行状态的监控装置的结构示意图。所述数据配送运行状态的监控装置用于监控一个或多个需方前置机,以及一个或多个供方前置机,还可以包括:
配送状态确定模块41,用于针对所述需方前置机与所述供方前置机之间的每次数据配送,确定当前数据配送的配送状态,其中,所述配送状态包括配送成功以及配送失败;
分析确定模块42,与所述配送状态确定模块耦接,用于根据一次或多次数据配送的配送状态,分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常;
第一告警模块43,与所述分析确定模块耦接,用于在发生服务异常时,向所述需方前置机和/或供方前置机发送第一告警信息;
显示模块44,用于显示配送状态以及是否发生服务异常;
日志收集模块45,用于采集每个需方前置机以及每个供方前置机的日志数据,以及与所述日志数据匹配的会员ID。其中,所述日志数据可以包括交易量、响应时间以及成功率。
其中,所述配送状态确定模块可以包括:埋点采集子模块,用于在每次数据配送中设立埋点以采集配送数据;状态确定子模块,用于根据采集到的数据确定所述当前数据配送的配送状态。
所述分析确定模块可以包括:记录子模块,用于当所述配送状态指示配送失败时,记录当前数据配送的需方前置机和供方前置机的失败次数分别加一;分析确定子模块,用于当需方前置机的失败次数达到预设需方次数时,分析确定所述需方前置机发生服务异常;和/或,用于当供方前置机的失败次数达到预设供方次数时,分析确定所述供方前置机发生服务异常。
进一步地,所述日志数据可以为第一预设时长内的增量日志数据;其中,所述第一预设时长为前一次采集至当前采集之间的时长。
所述的数据配送运行状态的监控装置还可以包括:会员确定模块,用于当所述配送状态指示配送失败时,确定当前数据配送的会员ID;匹配日志确定模块,用于针对每个会员ID,确定第二预设时长内匹配的日志数据,或者与预设次数的数据配送相匹配的日志数据;第二告警模块,用于当所述日志数据的分析值低于预设阈值时,向所述会员ID发送第二告警信息。
所述日志数据的分析值可以选自:所述日志数据的平均值、中位数以及趋势曲线的斜率。
所述的数据配送运行状态的监控装置还可以包括:需方监控模块,用于根据每个需方前置机的日志数据,对所述需方前置机进行监控;和/或,供方监控模块,用于根据每个供方前置机的日志数据,对所述供方前置机进行监控。
关于该数据配送运行状态的监控装置的原理、具体实现和有益效果请参照前文及图1至图3示出的关于数据配送运行状态的监控方法的相关描述,此处不再赘述。
在本发明实施例中,通过确定当前数据配送的配送状态,以及分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常,可以更准确地监控数据配送运行状态,且有助于提高效率,降低运营成本。
本发明实施例还提供了一种存储介质,其上存储有计算机指令,所述计算机指令运行时执行上述方法的步骤。所述存储介质可以是计算机可读存储介质,例如可以包括非挥发性存储器(non-volatile)或者非瞬态(non-transitory)存储器,还可以包括光盘、机械硬盘、固态硬盘等。
本发明实施例还提供了一种终端,包括存储器和处理器,所述存储器上存储有能够在所述处理器上运行的计算机指令,所述处理器运行所述计算机指令时执行上述方法的步骤。所述终端包括但不限于手机、计算机、平板电脑等终端设备。
本发明实施例还提供了一种监控系统,所述监控系统分别耦接至一个或多个需方前置机,以及分别耦接至一个或多个供方前置机,所述监控系统包括上述数据配送运行状态的监控装置。
虽然本发明披露如上,但本发明并非限定于此。任何本领域技术人员,在不脱离本发明的精神和范围内,均可作各种更动与修改,因此本发明的保护范围应当以权利要求所限定的范围为准。

Claims (23)

1.一种数据配送运行状态的监控方法,用于监控一个或多个需方前置机,以及一个或多个供方前置机,其特征在于,包括:
针对所述需方前置机与所述供方前置机之间的每次数据配送,确定当前数据配送的配送状态,其中,所述配送状态选自配送成功以及配送失败;
根据一次或多次数据配送的配送状态,分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常。
2.根据权利要求1所述的数据配送运行状态的监控方法,其特征在于,还包括:
在发生服务异常时,向所述需方前置机和/或供方前置机发送第一告警信息。
3.根据权利要求1所述的数据配送运行状态的监控方法,其特征在于,还包括:
显示配送状态以及是否发生服务异常。
4.根据权利要求1所述的数据配送运行状态的监控方法,其特征在于,针对所述需方前置机与所述供方前置机之间的每次数据配送,确定当前数据配送的配送状态包括:
在每次数据配送中设立埋点以采集配送数据;
根据采集到的数据确定所述当前数据配送的配送状态。
5.根据权利要求1所述的数据配送运行状态的监控方法,其特征在于,所述根据一次或多次数据配送的配送状态,分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常包括:
当所述配送状态指示配送失败时,记录当前数据配送的需方前置机和供方前置机的失败次数分别加一;
当所述需方前置机的失败次数达到预设需方次数时,分析确定所述需方前置机发生服务异常;
和/或,
当所述供方前置机的失败次数达到预设供方次数时,分析确定所述供方前置机发生服务异常。
6.根据权利要求1所述的数据配送运行状态的监控方法,其特征在于,还包括:
采集每个需方前置机以及每个供方前置机的日志数据,以及与所述日志数据匹配的会员ID;
其中,所述日志数据包括交易量、响应时间以及成功率。
7.根据权利要求6所述的数据配送运行状态的监控方法,其特征在于,所述日志数据为第一预设时长内的增量日志数据;
其中,所述第一预设时长为前一次采集至当前采集之间的时长。
8.根据权利要求6所述的数据配送运行状态的监控方法,其特征在于,还包括:
当所述配送状态指示配送失败时,确定当前数据配送的会员ID;
针对每个会员ID,确定第二预设时长内匹配的日志数据,或者与预设次数的数据配送相匹配的日志数据;
如果所述日志数据的分析值低于预设阈值,则向所述会员ID发送第二告警信息。
9.根据权利要求8所述的数据配送运行状态的监控方法,其特征在于,所述日志数据的分析值选自:
所述日志数据的平均值、中位数以及趋势曲线的斜率。
10.根据权利要求6所述的数据配送运行状态的监控方法,其特征在于,还包括:
根据每个需方前置机的日志数据,对所述需方前置机进行监控;
和/或,
根据每个供方前置机的日志数据,对所述供方前置机进行监控。
11.一种数据配送运行状态的监控装置,用于监控一个或多个需方前置机,以及一个或多个供方前置机,其特征在于,包括:
配送状态确定模块,用于针对所述需方前置机与所述供方前置机之间的每次数据配送,确定当前数据配送的配送状态,其中,所述配送状态包括配送成功以及配送失败;
分析确定模块,与所述配送状态确定模块耦接,用于根据一次或多次数据配送的配送状态,分析确定所述当前数据配送的需方前置机和/或供方前置机是否发生服务异常。
12.根据权利要求11所述的数据配送运行状态的监控装置,其特征在于,还包括:
第一告警模块,与所述分析确定模块耦接,用于在发生服务异常时,向所述需方前置机和/或供方前置机发送第一告警信息。
13.根据权利要求11所述的数据配送运行状态的监控装置,其特征在于,还包括:
显示模块,用于显示配送状态以及是否发生服务异常。
14.根据权利要求11所述的数据配送运行状态的监控装置,其特征在于,所述配送状态确定模块包括:
埋点采集子模块,用于在每次数据配送中设立埋点以采集配送数据;
状态确定子模块,用于根据采集到的数据确定所述当前数据配送的配送状态。
15.根据权利要求11所述的数据配送运行状态的监控装置,其特征在于,所述分析确定模块包括:
记录子模块,用于当所述配送状态指示配送失败时,记录当前数据配送的需方前置机和供方前置机的失败次数分别加一;
分析确定子模块,用于当需方前置机的失败次数达到预设需方次数时,分析确定所述需方前置机发生服务异常;和/或,用于当供方前置机的失败次数达到预设供方次数时,分析确定所述供方前置机发生服务异常。
16.根据权利要求11所述的数据配送运行状态的监控装置,其特征在于,还包括:
日志收集模块,用于采集每个需方前置机以及每个供方前置机的日志数据,以及与所述日志数据匹配的会员ID;
其中,所述日志数据包括交易量、响应时间以及成功率。
17.根据权利要求16所述的数据配送运行状态的监控装置,其特征在于,所述日志数据为第一预设时长内的增量日志数据;
其中,所述第一预设时长为前一次采集至当前采集之间的时长。
18.根据权利要求16所述的数据配送运行状态的监控装置,其特征在于,还包括:
会员确定模块,用于当所述配送状态指示配送失败时,确定当前数据配送的会员ID;
匹配日志确定模块,用于针对每个会员ID,确定第二预设时长内匹配的日志数据,或者与预设次数的数据配送相匹配的日志数据;
第二告警模块,用于当所述日志数据的分析值低于预设阈值时,向所述会员ID发送第二告警信息。
19.根据权利要求18所述的数据配送运行状态的监控装置,其特征在于,所述日志数据的分析值选自:
所述日志数据的平均值、中位数以及趋势曲线的斜率。
20.根据权利要求16所述的数据配送运行状态的监控装置,其特征在于,还包括:
需方监控模块,用于根据每个需方前置机的日志数据,对所述需方前置机进行监控;
和/或,
供方监控模块,用于根据每个供方前置机的日志数据,对所述供方前置机进行监控。
21.一种存储介质,其上存储有计算机指令,其特征在于,所述计算机指令运行时执行权利要求1至10任一项所述的数据配送运行状态的监控方法的步骤。
22.一种终端,包括存储器和处理器,所述存储器上存储有能够在所述处理器上运行的计算机指令,其特征在于,所述处理器运行所述计算机指令时执行权利要求1至10任一项所述的数据配送运行状态的监控方法的步骤。
23.一种监控系统,所述监控系统分别耦接至一个或多个需方前置机,以及分别耦接至一个或多个供方前置机,其特征在于,
所述监控系统包括如权利要求11至20任一项所述的数据配送运行状态的监控装置。
CN201910544910.9A 2019-06-21 2019-06-21 数据配送运行状态的监控方法及装置、存储介质、终端、监控系统 Withdrawn CN110458485A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910544910.9A CN110458485A (zh) 2019-06-21 2019-06-21 数据配送运行状态的监控方法及装置、存储介质、终端、监控系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910544910.9A CN110458485A (zh) 2019-06-21 2019-06-21 数据配送运行状态的监控方法及装置、存储介质、终端、监控系统

Publications (1)

Publication Number Publication Date
CN110458485A true CN110458485A (zh) 2019-11-15

Family

ID=68480727

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910544910.9A Withdrawn CN110458485A (zh) 2019-06-21 2019-06-21 数据配送运行状态的监控方法及装置、存储介质、终端、监控系统

Country Status (1)

Country Link
CN (1) CN110458485A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111159237A (zh) * 2019-12-25 2020-05-15 中国平安财产保险股份有限公司 系统数据分发方法、装置、存储介质及电子设备
CN111898947A (zh) * 2020-07-21 2020-11-06 北京京东振世信息技术有限公司 监控物品配送任务的方法、装置、设备和计算机可读介质
WO2023093561A1 (zh) * 2021-11-23 2023-06-01 深圳市酷开网络科技股份有限公司 基于dmp的人群监控方法、装置、设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101272581A (zh) * 2008-04-25 2008-09-24 广东高新兴通信股份有限公司 基于集中监控系统中前置机的控制装置及方法
CN103457926A (zh) * 2013-01-17 2013-12-18 成都阜特科技股份有限公司 一种cms前置机与服务器的通讯方法
CN106789251A (zh) * 2016-12-23 2017-05-31 中国银行股份有限公司 网银运行状态监控系统及方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101272581A (zh) * 2008-04-25 2008-09-24 广东高新兴通信股份有限公司 基于集中监控系统中前置机的控制装置及方法
CN103457926A (zh) * 2013-01-17 2013-12-18 成都阜特科技股份有限公司 一种cms前置机与服务器的通讯方法
CN106789251A (zh) * 2016-12-23 2017-05-31 中国银行股份有限公司 网银运行状态监控系统及方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111159237A (zh) * 2019-12-25 2020-05-15 中国平安财产保险股份有限公司 系统数据分发方法、装置、存储介质及电子设备
CN111159237B (zh) * 2019-12-25 2023-07-14 中国平安财产保险股份有限公司 系统数据分发方法、装置、存储介质及电子设备
CN111898947A (zh) * 2020-07-21 2020-11-06 北京京东振世信息技术有限公司 监控物品配送任务的方法、装置、设备和计算机可读介质
WO2023093561A1 (zh) * 2021-11-23 2023-06-01 深圳市酷开网络科技股份有限公司 基于dmp的人群监控方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
US9369521B2 (en) Naming of distributed business transactions
US11457029B2 (en) Log analysis based on user activity volume
CN110458485A (zh) 数据配送运行状态的监控方法及装置、存储介质、终端、监控系统
JP6526907B2 (ja) 分散型記憶システムの性能監視
CN105635051B (zh) 数据交互方法及装置、系统
CN102495787A (zh) 跟踪在子系统之间流动的请求
CN106993043B (zh) 基于代理的数据通信系统和方法
CN108880943A (zh) 一种异构云平台的监控系统
CN111355622A (zh) 容器的业务监控方法、系统和计算机可读存储介质
WO2019015670A1 (zh) 跟踪、监控软件行为的方法、装置及设备
CN104980525A (zh) 一种基于状态中间件的普适性移动计算框架
CN110728498A (zh) 一种信息交互方法和装置
CN117608825A (zh) 基于多云管理平台的资源管理方法和相关设备
JP2015225473A (ja) 車載情報システム及びその情報処理方法
CN105160540A (zh) 一种基于线上到线下的服务推广系统和方法
CN115951923B (zh) 订阅事件管理方法、显示系统、设备和存储介质
CN117370053A (zh) 一种面向信息系统业务运行全景监测方法及系统
CN102541563A (zh) 一种监控界面生成方法及系统
CN112288226A (zh) 服务处理方法、装置及系统
CN104240049A (zh) 一种订单综合处理系统
CN101686241B (zh) 一种基于条件的uri选择服务器能力信息提供方法及装置
CN110428246A (zh) 远程控制终端的方法及装置、存储介质、电子装置
CN105005916A (zh) 一种服务圈推广系统和方法
CN115171828A (zh) 问卷调查方法、装置、电子设备及存储介质
CN110827079B (zh) 跟单处理方法、装置及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20191115