CN108154427B - 一种数据检测方法、装置及电子设备 - Google Patents
一种数据检测方法、装置及电子设备 Download PDFInfo
- Publication number
- CN108154427B CN108154427B CN201711247552.2A CN201711247552A CN108154427B CN 108154427 B CN108154427 B CN 108154427B CN 201711247552 A CN201711247552 A CN 201711247552A CN 108154427 B CN108154427 B CN 108154427B
- Authority
- CN
- China
- Prior art keywords
- target
- data source
- activity
- target data
- period
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Finance (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- Technology Law (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请提供一种数据检测方法、装置及电子设备。该数据检测方法包括:计算目标数据源在目标时段内的活跃度;其中,所述目标时段为:以当前时间点为时间截止点且具有预定时长的时段;从预设的关于参考时段与所述目标数据源的参考活跃度的对应关系中,确定与所述目标时段所在参考时段相对应的第一参考活跃度;其中,每一参考活跃度为所述目标数据源在所对应参考时段内处于正常状态时的活跃度;基于所述目标数据源在目标时段内的活跃度与所述第一参考活跃度,确定所述目标数据源是否发生预定类型的异常;其中,所述预定类型为中断或延迟。通过本方案们可以解决现有技术中数据源异常检测的效率较低且需要消耗人工成本的问题。
Description
技术领域
本申请涉及数据检测领域,特别涉及一种数据检测方法、装置及电子设备。
背景技术
金融机构的本地市场数据,如金融机构发布的外汇牌价、用于交易系统的连续金融产品报价或者用于金融资产实时估值的市场报价等,通常是基于第三方机构的市场数据直接确定或加工后所确定,其中,第三方机构的市场数据通常被称为“数据源”。其中,对于金融机构而言,第三方机构可以是相对于该金融机构更高一级的机构,或者,专门提供市场数据的机构。
从第三方机构发出数据源到金融机构接收到数据源的整个传输过程中,如果某一环节或某几个环节出现问题,极有可能导致数据源发生中断或延迟等类型的异常。而为了保证本地市场数据的有效性,金融机构需要及时了解数据源是否发生中断或延迟等类型的异常,并在数据源发生异常时,采取相应的措施。
现有技术中,通过人工方式来检测数据源是否发生异常,导致数据源异常检测的效率较低且需要消耗人工成本。举例而言:管理人员检测到本地市场数据某个时间段内未发生更新,但是以往该时间段内是存在数据更新的,此时,判定出数据源中断。
发明内容
有鉴于此,本申请提供一种数据检测方法、装置及电子设备,以解决现有技术中数据源异常检测的效率较低且需要消耗人工成本的问题。
具体地,本申请是通过如下技术方案实现的:
第一方面,本申请提供了一种数据检测方法,包括:
计算目标数据源在目标时段内的活跃度;其中,所述目标时段为:以当前时间点为时间截止点且具有预定时长的时段;
从预设的关于参考时段与所述目标数据源的参考活跃度的对应关系中,确定与所述目标时段所在参考时段相对应的第一参考活跃度;其中,每一参考活跃度为所述目标数据源在所对应参考时段内处于正常状态时的活跃度;
基于所述目标数据源在目标时段内的活跃度与所述第一参考活跃度,确定所述目标数据源是否发生预定类型的异常;其中,所述预定类型为中断或延迟。
可选地,所述计算目标数据源在目标时段内的活跃度的步骤,包括:
基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度;其中,所述目标本地市场数据为基于所述目标数据源所确定的本地市场数据。
可选地,所述基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度的步骤,包括:
统计目标本地市场数据在各个子时段内的第一更新次数;其中,所述各个子时段均为所述目标时段内的部分时段;
对所述各个子时段的第一更新次数进行求平均,得到第一平均更新次数;
将所述第一平均更新次数作为所述目标数据源在目标时段内的活跃度。
可选地,所述基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度的步骤,包括:
统计目标本地市场数据在目标时段内的第二更新次数;
基于所述第二更新次数,计算所述目标时段内每单位时长对应的第二平均更新次数;
将所述第二平均更新次数确定为所述目标数据源在目标时段内的活跃度。
可选地,所述基于所述目标数据源在目标时段内的活跃度与所述第一参考活跃度,确定所述目标数据源是否发生预定类型的异常的步骤,包括:
计算所述目标数据源在目标时段内的活跃度与所述第一参考活跃度的比值;
当所述比值为0时,确定所述目标数据源发生中断类型的异常;
当所述比值不为0时,如果所述比值低于预设比值阈值,确定所述目标数据源发生延迟类型的异常。
可选地,所述方法还包括:
当确定出所述目标数据源发生延迟类型的异常时,输出第一通知信息;其中,所述第一通知信息用于指示所述目标数据源发生延迟类型的异常;
当确定出所述目标数据源发生中断类型的异常时,输出第二通知信息;其中,所述第二通知信息用于指示所述目标数据源发生中断类型的异常。
第二方面,本申请提供了一种数据检测装置,包括:
活跃度计算单元,用于计算目标数据源在目标时段内的活跃度;其中,所述目标时段为:以当前时间点为时间截止点且具有预定时长的时段;
第一参考活跃度确定单元,用于从预设的关于参考时段与所述目标数据源的参考活跃度的对应关系中,确定与所述目标时段所在参考时段相对应的第一参考活跃度;其中,每一参考活跃度为所述目标数据源在所对应参考时段内处于正常状态时的活跃度;
异常判断单元,用于基于所述目标数据源在目标时段内的活跃度与所述第一参考活跃度,确定所述目标数据源是否发生预定类型的异常;其中,所述预定类型为中断或延迟。
可选地,所述活跃度计算单元包括:
活跃度计算子单元,用于基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度;其中,所述目标本地市场数据为基于所述目标数据源所确定的本地市场数据。
可选地,所述异常判断单元包括:
计算子单元,用于计算所述目标数据源在目标时段内的活跃度与所述第一参考活跃度的比值;
判断子单元,用于当所述比值为0时,确定所述目标数据源发生中断类型的异常;当所述比值不为0时,如果所述比值低于预设比值阈值,确定所述目标数据源发生延迟类型的异常。
第三方面,本申请提供了一种电子设备,包括:内部总线、存储器、处理器和通信接口;其中,所述处理器、所述通信接口、所述存储器通过所述内部总线完成相互间的通信;其中,所述存储器,用于存储数据检测方法对应的机器可行指令;所述处理器,用于读取所述存储器上的所述机器可读指令,以执行本申请所述的数据检测方法。
本申请所提供方案,当需要检测目标数据源是否发生异常时,计算目标数据源在目标时段内的活跃度;从预设的关于参考时段与该目标数据源的参考活跃度的对应关系中,确定与该目标时段所在参考时段相对应的第一参考活跃度;进而,基于该目标数据源在目标时段内的活跃度与该第一参考活跃度,确定该目标数据源是否发生预定类型的异常。可见,本方案通过将目标数据源在目标时段内的活跃度和预设的多个参考活跃度中的第一参考活跃度进行比对,来确定目标数据源是否发生异常,避免了人工手动判断,效率得到有效提高且极大降低人工成本,因此,可以解决现有技术中数据源异常检测的效率较低且需要消耗人工成本的问题。
附图说明
图1为本申请实施例所提供的一种数据检测方法的流程图;
图2为本申请实施例所提供的一种数据检测方法的另一流程图;
图3为本申请实施例所提供的一种数据检测装置的结构示意图;
图4为本申请实施例所提供的一种数据检测装置的另一结构示意图;
图5位本申请实施例所提供的一种电子设备的结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
为了解决现有技术中数据源异常检测的效率较低且需要消耗人工成本的问题,本申请提供了一种数据检测方法、装置及电子设备。
下面首先对本申请所提供的一种数据检测方法进行介绍。
需要说明的是,本申请所提供的数据检测方法可以应用于电子设备中,该电子设备可以是生成金融机构的本地市场数据的设备,也可以是与生成金融机构的本地市场数据的设备相通信的设备,这都是合理的。为了引用方便,下文中将生成金融机构的本地市场数据的设备命名为:目标设备。
可以理解的是,目标设备在接收到第三方机构的数据源后,基于所接收到的数据源自动生成本地市场数据,并输出所生成的本地市场数据。其中,本地市场数据的具体生成方式可以为:直接将所接收到的数据源确定为本地市场数据,或者,按照特定的转换方式,将所接收到的数据源转换为本地市场数据,所谓特定的转换方式可以为现有技术中的转换方式且不同类型的数据源可以对应不同的转换方式,由于不是本申请的发明点,在此不做限定。另外,本地市场数据的输出方式可以为通过远程显示终端输出,也可以通过本地显示终端输出,这都是合理的。
需要强调的是,本申请中所述的本地市场数据可以包括但不局限于:金融机构发布的外汇牌价、用于交易系统的连续金融产品报价或者用于金融资产实时估值的市场报价等。
如图1所示,本申请所提供的一种数据检测方法,可以包括如下步骤:
S101,计算目标数据源在目标时段内的活跃度;
本申请中,当需要检测目标数据源是否发生异常时,可以首先计算目标数据源在目标时段内的活跃度,并根据所计算得到的活跃度进行后续检测。可以理解的是,可以周期性检测目标数据源是否发生异常,或者,在接收到管理人员发出的检测指令后来检测目标数据源是否发生异常,等等,这都是合理的。
其中,该目标时段为:以当前时间点为时间截止点且具有预定时长的时段,所谓的当前时间点即为目标数据源是否发生异常的检测触发时刻,也就是,计算过去预定时长内的活跃度;而所谓的活跃度具体指:表征数据变化频次的参数。在具体应用中,预定时长可以根据实际情况设定,本申请对此不做限定,举例而言:该预定时长可以设定为30s、60s、100s、120s、240s等等。
需求说明的是,由于每当接收到目标数据源时,目标设备均会基于所接收到的目标数据源来生成目标本地市场数据,也就是说,每当接收到目标数据源时,目标本地市场数据均会发生更新,因此,本申请中,通过目标本地市场数据的更新来体现目标数据源的活跃度。基于该种处理思想,所述计算目标数据源在目标时段内的活跃度的步骤,可以包括:
基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度;其中,该目标本地市场数据为基于该目标数据源所确定的本地市场数据。
其中,基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度的具体实现方式存在多种。下面举例介绍两种具体实现方式。
可选地,在一种具体实现方式中,所述基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度的步骤,可以包括:
统计目标本地市场数据在各个子时段内的第一更新次数;其中,该各个子时段均为目标时段内的部分时段;
对该各个子时段的第一更新次数进行求平均,得到第一平均更新次数;
将该第一平均更新次数作为该目标数据源在目标时段内的活跃度。
其中,该种具体实现方式中,将目标时段划分为多个子时段,分别统计目标本地市场数据在各个子时段内的第一更新次数,进而对各个子时段的第一更新次数进行求平均,得到第一平均更新次数,并将该第一平均次数作为该目标数据源在目标时段内的活跃度。举例而言:假设当前时间点为8:00,预定时长为240s,则目标时段为7:56-8:00,那么可以将该目标时段划分为4个子时段,即:8:00-7:59,7:59-7:58,7:58-7:57,7:58-7:56,分别统计各个子时段的第一更新次数,并将各个第一更新次数求平均所得的值确定为目标数据源在目标时段内的活跃度。
可选地,在另一种具体实现方式中,所述基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度的步骤,可以包括:
统计目标本地市场数据在目标时段内的第二更新次数;
基于该第二更新次数,计算该目标时段内每单位时长对应的第二平均更新次数;
将该第二平均更新次数确定为该目标数据源在目标时段内的活跃度。
其中,该具体实现方式中,将目标时段作为整体时段,统计目标市场数据在该整体时段内的第二更新次数,并基于该第二更新次数,计算该目标时段内每单位时长对应的第二平均更新次数,进而将该第二更新次数确定为该目标数据源在该目标时段内的活跃度,其中,单位时长可以根据实际情况设定,例如:单位时长为1s、5s、10s、20s等等。举例而言:假设当前时间点为8:00,预定时长为240s,则目标时段为7:56-8:00,单位时长为10s,那么可以统计7:56-8:00这个时段内的第二更新次数,并基于该第二更新次数,计算该目标时段内每10s对应的第二平均更新次数,并将所计算得到的第二平均更新次数作为该目标数据源在目标时段的活跃度。
需要强调的是,上述所给出的基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度的具体实现方式仅仅作为示例,并不应该构成对本申请的限定。并且,上述的“第一更新次数”中的“第一”“第二更新次数”中的“第二”仅仅用于从命名上区分两种具体实现方式中的更新次数,并不具有任何限定意义;类似的,上述的“第一平均更新次数”中的“第一”“第二平均更新次数”中的“第二”仅仅用于从命名上区分两种具体实现方式中的平均更新次数,并不具有任何限定意义。
S102,从预设的关于参考时段与该目标数据源的参考活跃度的对应关系中,确定与该目标时段所在参考时段相对应的第一参考活跃度;其中,每一参考活跃度为该目标数据源在所对应参考时段内处于正常状态时的活跃度;
在具体应用中,目标数据源在不同的时段所对应的活跃度可以不同,也就是,目标数据源的数据变化频次不同,如:美元人民币价格通常是在中国节假日、以及中国外汇交易中心闭市(如:16:30)以后、到第二天开市(9:30)之前是没有报价,而且在每个工作日下午15:00-16:00这个时段报价比较活跃,即数据变化频次较高。
因此,预先可以构建关于参考时段与该目标数据源的参考活跃度的对应关系;进而,在获得目标数据源在目标时段内的活跃度后,为了进行同时段比对,可以从该对应关系中确定与该目标时段所在参考时段相对应的第一参考活跃度。其中,每一参考活跃度可以是人工设置的,或者,电子设备根据目标数据源的历史数据自行学习到的,这都是合理的。需要强调的是,为了保证比对的有效性,参考活跃度的计算方式与上述计算目标数据源在目标时段内的活跃度的计算方式相同。
S103,基于该目标数据源在目标时段内的活跃度与该第一参考活跃度,确定该目标数据源是否发生预定类型的异常,其中,该预定类型为中断或延迟。
在获得该目标数据源在目标时段内的活跃度与该第一参考活跃度后,可以将所获得的两个活跃度进行比对以确定该目标数据源是否发生预定类型的异常。
可选地,在一种实现方式中,所述基于该目标数据源在目标时段内的活跃度与该第一参考活跃度,确定该目标数据源是否发生预定类型的异常的步骤,可以包括:
计算该目标数据源在目标时段内的活跃度与该第一参考活跃度的比值;
当该比值为0时,确定该目标数据源发生中断类型的异常;
当该比值不为0时,如果该比值低于预设比值阈值,确定该目标数据源发生延迟类型的异常。
需要说明的是,上述所给出的基于该目标数据源在目标时段内的活跃度与该第一参考活跃度,确定该目标数据源是否发生预定类型的异常的具体实现方式仅仅作为示例,并不应该构成对本申请的限定。例如:在确定该目标数据源是否发生预定类型的异常时,可以首先判断该目标数据源在目标时段内的活跃度是否为0,如果为0,则判定该目标数据源发生中断类型的异常;如果不为0,可以计算该第一参考活跃度减去该目标数据源在目标时段内的活跃度所得的差值,如果差值高于预定差值阈值,则确定该目标数据源发生延迟类型的异常。又如:在确定该目标数据源是否发生预定类型的异常时,可以计算该第一参考活跃度减去该目标数据源在目标时段内的活跃度所得的差值,如果差值高于预定差值阈值且低于第一参考活跃度,则确定该目标数据源发生延迟类型的异常,如果差值等于第一参考活跃度,则确定该目标数据源发生中断类型的异常。
本申请所提供方案,当需要检测目标数据源是否发生异常时,计算目标数据源在目标时段内的活跃度;从预设的关于参考时段与该目标数据源的参考活跃度的对应关系中,确定与该目标时段所在参考时段相对应的第一参考活跃度;进而,基于该目标数据源在目标时段内的活跃度与该第一参考活跃度,确定该目标数据源是否发生预定类型的异常。可见,本方案通过将目标数据源在目标时段内的活跃度和预设的多个参考活跃度中的第一参考活跃度进行比对,来确定目标数据源是否发生异常,避免了人工手动判断,效率得到有效提高且极大降低人工成本,因此,可以解决现有技术中数据源异常检测的效率较低且需要消耗人工成本的问题。
进一步的,在目标数据源发生异常时,为了让管理人员及时了解异常情况,从而采用执行相应措施,在包含上述的S101-S103的基础上,如图2所示,本申请所提供的方法还可以包括:
S104,当确定出该目标数据源发生延迟类型的异常时,输出第一通知信息;其中,该第一通知信息用于指示该目标数据源当前发生延迟类型的异常;
S105,当确定出该目标数据源当前发生中断类型的异常时,输出第二通知信息;其中,该第二通知信息用于指示该目标数据源当前发生中断类型的异常。
其中,第一通知信息和第二通知信息的输出方式可以为:短信、邮件、专门的客户端通知,等等。并且,本申请中的“第一通知信息”中的“第一”和“第二通知信息”中的“第二”仅仅用于从命名上区分两种通知信息,并不具有任何限定意义。
相应于上述方法实施例,本申请还提供了一种数据检测装置。如图3所示,所述数据检测装置可以包括:
活跃度计算单元310,用于计算目标数据源在目标时段内的活跃度;其中,所述目标时段为:以当前时间点为时间截止点且具有预定时长的时段;
第一参考活跃度确定单元320,用于从预设的关于参考时段与所述目标数据源的参考活跃度的对应关系中,确定与所述目标时段所在参考时段相对应的第一参考活跃度;其中,每一参考活跃度为所述目标数据源在所对应参考时段内处于正常状态时的活跃度;
异常判断单元330,用于基于所述目标数据源在目标时段内的活跃度与所述第一参考活跃度,确定所述目标数据源是否发生预定类型的异常;其中,所述预定类型为中断或延迟。
本申请所提供方案,当需要检测目标数据源是否发生异常时,计算目标数据源在目标时段内的活跃度;从预设的关于参考时段与该目标数据源的参考活跃度的对应关系中,确定与该目标时段所在参考时段相对应的第一参考活跃度;进而,基于该目标数据源在目标时段内的活跃度与该第一参考活跃度,确定该目标数据源是否发生预定类型的异常。可见,本方案通过将目标数据源在目标时段内的活跃度和预设的多个参考活跃度中的第一参考活跃度进行比对,来确定目标数据源是否发生异常,避免了人工手动判断,效率得到有效提高且极大降低人工成本,因此,可以解决现有技术中数据源异常检测的效率较低且需要消耗人工成本的问题。
可选地,所述活跃度计算单元310可以包括:
活跃度计算子单元,用于基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度;其中,所述目标本地市场数据为基于所述目标数据源所确定的本地市场数据。
可选地,所述活跃度计算子单元可以包括:
第一统计模块,用于统计目标本地市场数据在各个子时段内的第一更新次数;其中,所述各个子时段均为所述目标时段内的部分时段;
第一平均次数计算模块,用于对所述各个子时段的第一更新次数进行求平均,得到第一平均更新次数;
第一活跃度计算模块,用于将所述第一平均更新次数作为所述目标数据源在目标时段内的活跃度。
可选地,所述活跃度计算子单元可以包括:
第二统计模块,用于统计目标本地市场数据在目标时段内的第二更新次数;
第二平均次数计算模块,用于基于所述第二更新次数,计算所述目标时段内每单位时长对应的第二平均更新次数;
第二活跃度计算模块,用于将所述第二平均更新次数确定为所述目标数据源在目标时段内的活跃度。
可选地,所述异常判断单元可以包括:
计算子单元,用于计算所述目标数据源在目标时段内的活跃度与所述第一参考活跃度的比值;
判断子单元,用于当所述比值为0时,确定所述目标数据源发生中断类型的异常;当所述比值不为0时,如果所述比值低于预设比值阈值,确定所述目标数据源发生延迟类型的异常。
可选地,如图4所示,本申请所提供的装置还可以包括:
第一通知信息输出单元340,用于当确定出所述目标数据源发生延迟类型的异常时,输出第一通知信息;其中,所述第一通知信息用于指示所述目标数据源发生延迟类型的异常;
第二通知信息输出单元350,用于当确定出所述目标数据源发生中断类型的异常时,输出第二通知信息;其中,所述第二通知信息用于指示所述目标数据源发生中断类型的异常。
上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
相应于上述方法实施例,本申请还提供了一种电子设备,如图5所示,该电子设备可以包括:内部总线510、存储器(memory)520、处理器(processor)530和通信接口(Communications Interface)540;其中,所述处理器530、所述通信接口540、所述存储器520通过所述内部总线510完成相互间的通信;其中,所述存储器520,用于存储数据检测方法对应的机器可行指令;所述处理器530,用于读取所述存储器520上的所述机器可读指令,以执行本申请所提供的数据检测方法。
其中关于数据检测方法的具体步骤的相关描述可以参见本申请方法实施例中的描述内容,在此不做赘述。
其中,存储器520例如可以是非易失性存储器(non-volatile memory)。处理器530可以调用执行存储器520中的实现数据检测方法的逻辑指令,以执行上述数据检测方法。
实现数据检测方法的逻辑指令的功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求指出。
应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。
Claims (8)
1.一种数据检测方法,其特征在于,所述方法包括:
计算目标数据源在目标时段内的活跃度;其中,所述目标时段为:以当前时间点为时间截止点且具有预定时长的时段;所述活跃度为:表征数据变化频次的参数;
从预设的关于参考时段与所述目标数据源的参考活跃度的对应关系中,确定与所述目标时段所在参考时段相对应的第一参考活跃度;其中,每一参考活跃度为所述目标数据源在所对应参考时段内处于正常状态时的活跃度,所述目标数据源在不同参考时段内处于正常状态时的活跃度不同;
基于所述目标数据源在目标时段内的活跃度与所述第一参考活跃度,确定所述目标数据源是否发生预定类型的异常;其中,所述预定类型为中断或延迟;
所述计算目标数据源在目标时段内的活跃度的步骤,包括:
基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度;其中,所述目标本地市场数据为基于所述目标数据源所确定的本地市场数据。
2.根据权利要求1所述的方法,其特征在于,所述基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度的步骤,包括:
统计目标本地市场数据在各个子时段内的第一更新次数;其中,所述各个子时段均为所述目标时段内的部分时段;
对所述各个子时段的第一更新次数进行求平均,得到第一平均更新次数;
将所述第一平均更新次数作为所述目标数据源在目标时段内的活跃度。
3.根据权利要求1所述的方法,其特征在于,所述基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度的步骤,包括:
统计目标本地市场数据在目标时段内的第二更新次数;
基于所述第二更新次数,计算所述目标时段内每单位时长对应的第二平均更新次数;
将所述第二平均更新次数确定为所述目标数据源在目标时段内的活跃度。
4.根据权利要求1所述的方法,其特征在于,所述基于所述目标数据源在目标时段内的活跃度与所述第一参考活跃度,确定所述目标数据源是否发生预定类型的异常的步骤,包括:
计算所述目标数据源在目标时段内的活跃度与所述第一参考活跃度的比值;
当所述比值为0时,确定所述目标数据源发生中断类型的异常;
当所述比值不为0时,如果所述比值低于预设比值阈值,确定所述目标数据源发生延迟类型的异常。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
当确定出所述目标数据源发生延迟类型的异常时,输出第一通知信息;其中,所述第一通知信息用于指示所述目标数据源发生延迟类型的异常;
当确定出所述目标数据源发生中断类型的异常时,输出第二通知信息;其中,所述第二通知信息用于指示所述目标数据源发生中断类型的异常。
6.一种数据检测装置,其特征在于,包括:
活跃度计算单元,用于计算目标数据源在目标时段内的活跃度;其中,所述目标时段为:以当前时间点为时间截止点且具有预定时长的时段;所述活跃度为:表征数据变化频次的参数;
第一参考活跃度确定单元,用于从预设的关于参考时段与所述目标数据源的参考活跃度的对应关系中,确定与所述目标时段所在参考时段相对应的第一参考活跃度;其中,每一参考活跃度为所述目标数据源在所对应参考时段内处于正常状态时的活跃度,所述目标数据源在不同参考时段内处于正常状态时的活跃度不同;
异常判断单元,用于基于所述目标数据源在目标时段内的活跃度与所述第一参考活跃度,确定所述目标数据源是否发生预定类型的异常;其中,所述预定类型为中断或延迟;
所述活跃度计算单元包括:
活跃度计算子单元,用于基于目标本地市场数据在目标时段内的数据变化频次,计算目标数据源在目标时段内的活跃度;其中,所述目标本地市场数据为基于所述目标数据源所确定的本地市场数据。
7.根据权利要求6所述的装置,其特征在于,所述异常判断单元包括:
计算子单元,用于计算所述目标数据源在目标时段内的活跃度与所述第一参考活跃度的比值;
判断子单元,用于当所述比值为0时,确定所述目标数据源发生中断类型的异常;当所述比值不为0时,如果所述比值低于预设比值阈值,确定所述目标数据源发生延迟类型的异常。
8.一种电子设备,其特征在于,包括:内部总线、存储器、处理器和通信接口;其中,所述处理器、所述通信接口、所述存储器通过所述内部总线完成相互间的通信;其中,所述存储器,用于存储数据检测方法对应的机器可行指令;所述处理器,用于读取所述存储器上的所述机器可读指令,以执行权利要求1-5任一项所述的数据检测方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711247552.2A CN108154427B (zh) | 2017-12-01 | 2017-12-01 | 一种数据检测方法、装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711247552.2A CN108154427B (zh) | 2017-12-01 | 2017-12-01 | 一种数据检测方法、装置及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108154427A CN108154427A (zh) | 2018-06-12 |
CN108154427B true CN108154427B (zh) | 2022-01-28 |
Family
ID=62465940
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711247552.2A Active CN108154427B (zh) | 2017-12-01 | 2017-12-01 | 一种数据检测方法、装置及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108154427B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111198925A (zh) * | 2018-11-19 | 2020-05-26 | 千寻位置网络有限公司 | 电离层活跃度监测方法及系统 |
CN110535943B (zh) * | 2019-08-29 | 2022-04-26 | 广州方硅信息技术有限公司 | 数据处理方法、装置、电子设备及存储介质 |
JP7347380B2 (ja) * | 2020-09-09 | 2023-09-20 | トヨタ自動車株式会社 | 処理装置、通信システム、及び処理装置用プログラム |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1214132A (zh) * | 1996-01-23 | 1999-04-14 | 埃伊姆株式会社 | 信息显示系统 |
CN102088335A (zh) * | 2010-12-23 | 2011-06-08 | 中兴通讯股份有限公司 | 一种确定数据业务时延的方法及装置 |
CN103297435A (zh) * | 2013-06-06 | 2013-09-11 | 中国科学院信息工程研究所 | 一种基于web日志的异常访问行为检测方法与系统 |
CN104731703A (zh) * | 2013-12-23 | 2015-06-24 | 腾讯科技(深圳)有限公司 | 基于页面操作的刷新测试方法和装置 |
CN105095055A (zh) * | 2015-07-22 | 2015-11-25 | 北京奇虎科技有限公司 | 用户活跃度统计方法及系统 |
CN105868876A (zh) * | 2015-01-21 | 2016-08-17 | 国家电网公司 | 一种基于过程监视的集中运维故障闭环处理方法 |
CN106254148A (zh) * | 2016-09-13 | 2016-12-21 | 广州中软信息技术有限公司 | 运维数据处理的方法及装置 |
CN106535253A (zh) * | 2016-11-23 | 2017-03-22 | 北京必创科技股份有限公司 | 一种无线数据动态采集和传输方法 |
CN106712001A (zh) * | 2016-12-30 | 2017-05-24 | 国网浙江省电力公司绍兴供电公司 | 一种用于网络报文记录分析装置的数据建模方法 |
CN106713571A (zh) * | 2015-08-20 | 2017-05-24 | 广州爱九游信息技术有限公司 | 一种测试游戏引擎应用的性能的移动终端及方法 |
CN106844603A (zh) * | 2017-01-16 | 2017-06-13 | 竹间智能科技(上海)有限公司 | 实体热门度的计算方法及装置、应用方法及装置 |
CN107193515A (zh) * | 2017-04-10 | 2017-09-22 | 腾讯科技(深圳)有限公司 | 动画显示流畅度的监控方法、装置及其设备 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8290625B2 (en) * | 2007-04-04 | 2012-10-16 | Beckman Coulter, Inc. | Flow cytometer sorter |
CN103020147B (zh) * | 2012-11-22 | 2015-10-21 | 用友软件股份有限公司 | 数据集成系统和数据集成方法 |
US9143315B2 (en) * | 2013-10-25 | 2015-09-22 | Advanced Micro Devices, Inc. | Predictive periodic synchronization using phase-locked loop digital ratio updates |
CN106485465A (zh) * | 2016-09-22 | 2017-03-08 | 济南浪潮高新科技投资发展有限公司 | 一种可配置的定时数据同步方法 |
-
2017
- 2017-12-01 CN CN201711247552.2A patent/CN108154427B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1214132A (zh) * | 1996-01-23 | 1999-04-14 | 埃伊姆株式会社 | 信息显示系统 |
CN102088335A (zh) * | 2010-12-23 | 2011-06-08 | 中兴通讯股份有限公司 | 一种确定数据业务时延的方法及装置 |
CN103297435A (zh) * | 2013-06-06 | 2013-09-11 | 中国科学院信息工程研究所 | 一种基于web日志的异常访问行为检测方法与系统 |
CN104731703A (zh) * | 2013-12-23 | 2015-06-24 | 腾讯科技(深圳)有限公司 | 基于页面操作的刷新测试方法和装置 |
CN105868876A (zh) * | 2015-01-21 | 2016-08-17 | 国家电网公司 | 一种基于过程监视的集中运维故障闭环处理方法 |
CN105095055A (zh) * | 2015-07-22 | 2015-11-25 | 北京奇虎科技有限公司 | 用户活跃度统计方法及系统 |
CN106713571A (zh) * | 2015-08-20 | 2017-05-24 | 广州爱九游信息技术有限公司 | 一种测试游戏引擎应用的性能的移动终端及方法 |
CN106254148A (zh) * | 2016-09-13 | 2016-12-21 | 广州中软信息技术有限公司 | 运维数据处理的方法及装置 |
CN106535253A (zh) * | 2016-11-23 | 2017-03-22 | 北京必创科技股份有限公司 | 一种无线数据动态采集和传输方法 |
CN106712001A (zh) * | 2016-12-30 | 2017-05-24 | 国网浙江省电力公司绍兴供电公司 | 一种用于网络报文记录分析装置的数据建模方法 |
CN106844603A (zh) * | 2017-01-16 | 2017-06-13 | 竹间智能科技(上海)有限公司 | 实体热门度的计算方法及装置、应用方法及装置 |
CN107193515A (zh) * | 2017-04-10 | 2017-09-22 | 腾讯科技(深圳)有限公司 | 动画显示流畅度的监控方法、装置及其设备 |
Non-Patent Citations (1)
Title |
---|
"移动数据库中数据更新与广播的并发控制";邵雄凯 等;《微计算机信息》;20070430;第177-179页 * |
Also Published As
Publication number | Publication date |
---|---|
CN108154427A (zh) | 2018-06-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106548402B (zh) | 资源转移监控方法及装置 | |
CN108154427B (zh) | 一种数据检测方法、装置及电子设备 | |
CN107534584B (zh) | 通过网络化计算资源对数据进行协调处理 | |
CN109088775B (zh) | 异常监控方法、装置以及服务器 | |
US9799074B2 (en) | Controlling price cascade movements in an electronic trading system | |
CN106991095B (zh) | 机器异常的处理方法、学习速率的调整方法及装置 | |
US10445828B2 (en) | Method and system for generating stock price alerts based on real-time market data | |
CN109816137A (zh) | 一种交易量监测方法及装置 | |
US11900387B2 (en) | Monitoring account usage to provide transaction retry notifications | |
CN105631746A (zh) | 基于计算机系统的网络交易的风险识别方法及其系统 | |
CN109150626A (zh) | Ftp服务监测方法、装置、终端及计算机可读存储介质 | |
CN113342625A (zh) | 一种数据监控方法及系统 | |
CN111338903B (zh) | 一种交易异常的报警方法及装置 | |
CN112381295A (zh) | 一种基于用电行为偏好的居民用电提醒方法及系统 | |
CN110928748B (zh) | 业务系统运行监测方法及装置 | |
CN110673973B (zh) | 应用程序编程接口api的异常确定方法和装置 | |
CN112163154A (zh) | 数据处理方法、装置、设备及存储介质 | |
CN110659898B (zh) | 一种数据控制方法、装置及存储介质 | |
CN111523083A (zh) | 一种电力负荷申报数据的确定方法以及装置 | |
CN108122129B (zh) | 一种数据处理方法、装置及电子设备 | |
CN104486139A (zh) | 一种系统通信检测方法及装置 | |
CN108390770A (zh) | 一种信息生成方法、装置及服务器 | |
CN109508356B (zh) | 数据异常预警方法、装置、计算机设备及存储介质 | |
CN114092275A (zh) | 企业经营异常监测方法、装置、计算机设备和存储介质 | |
CN112837517A (zh) | 报警消息处理方法、装置、服务器、客户端及报警系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20180830 Address after: 200120 2, building 979, Yun Han Road, mud town, Pudong New Area, Shanghai Applicant after: Shanghai meridian Xinrong Technology Co., Ltd. Address before: 201201 E 902, Sheng Yin building, 666 Sheng Xia Road, Pudong New Area, Shanghai. Applicant before: Shanghai fullitong Information System Co., Ltd. |
|
GR01 | Patent grant | ||
GR01 | Patent grant |