CN113138967B - 一种数据信息采集方法、黑匣子、起爆器及存储介质 - Google Patents

一种数据信息采集方法、黑匣子、起爆器及存储介质 Download PDF

Info

Publication number
CN113138967B
CN113138967B CN202110501081.3A CN202110501081A CN113138967B CN 113138967 B CN113138967 B CN 113138967B CN 202110501081 A CN202110501081 A CN 202110501081A CN 113138967 B CN113138967 B CN 113138967B
Authority
CN
China
Prior art keywords
event
log
data
data information
acquired
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110501081.3A
Other languages
English (en)
Other versions
CN113138967A (zh
Inventor
李大云
陈俊飞
曾习文
欧孔德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guizhou Qaml Of Science And Technology Co ltd
Original Assignee
Guizhou Qaml Of Science And Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guizhou Qaml Of Science And Technology Co ltd filed Critical Guizhou Qaml Of Science And Technology Co ltd
Priority to CN202110501081.3A priority Critical patent/CN113138967B/zh
Publication of CN113138967A publication Critical patent/CN113138967A/zh
Application granted granted Critical
Publication of CN113138967B publication Critical patent/CN113138967B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/1734Details of monitoring file system events, e.g. by the use of hooks, filter drivers, logs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/174Redundancy elimination performed by the file system
    • G06F16/1744Redundancy elimination performed by the file system using compression, e.g. sparse files

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种数据信息采集方法,包括:根据数据采集对象确定待采集事件;设置数据采集事件组;通过数据采集事件组,对数据采集对象执行所述待采集事件时产生的数据信息进行采集处理,以生成用于描述待采集事件的日志数据信息。当,数据采集对象为起爆器时,待采集事件为起爆器起爆操作电子雷管时发生的起爆操作事件,由此,本发明能够通过设置的数据采集事件组来对起爆器的起爆操作事件进行采集处理,以生成用于描述起爆操作事件的日志数据信息,从而为相关人员在对起爆器的操作起爆过程中的场景进行复现时,提供数据支撑。

Description

一种数据信息采集方法、黑匣子、起爆器及存储介质
技术领域
本发明涉及民爆技术领域,尤其涉及到一种数据信息采集方法、黑匣子、起爆器及存储介质。
背景技术
随着电子雷管技术的不断发展与完善,大量电子雷管被投入生产和使用,电子雷管通过起爆器进行操作起爆,起爆器在操作起爆过程中难免会出现异常状况,通过起爆器操作起爆电子雷管后,在对起爆器在操作起爆过程中的场景进行复现之前,需要对起爆器操作起爆电子雷管的过程产生的起爆操作信息进行采集存储,以便终端设备获取相应的起爆操作信息对起爆器操作场景进行复现,但在现有技术中,起爆器操作起爆电子雷管后还未能提供相应的技术来获取起爆器的起爆操作信息。
发明内容
本发明实施例提供一种数据信息采集方法、黑匣子、起爆器及存储介质,用以解决现有技术中起爆器操作起爆电子雷管后不能获取起爆器的起爆操作信息的问题。
依据本发明的第一个方面,提供一种数据信息采集方法,包括:
根据数据采集对象确定待采集事件;
设置数据采集事件组;
通过所述数据采集事件组,对所述数据采集对象执行所述待采集事件时产生的数据信息进行采集处理,以生成用于描述所述待采集事件的日志数据信息。
可选的,所述数据采集事件组包括:
事件监听器及事件处理器;
则,所述通过所述数据采集事件组,对所述数据采集对象执行所述待采集事件时产生的数据信息进行采集处理,以生成用于描述所述待采集事件的日志数据信息,具体包括:
通过所述事件监听器,将监听到的所述待采集事件的状态变化封装成状态事件;
通过所述事件处理器对所述事件监听器报告的所述状态事件进行日志格式化处理,以生成用于描述所述待采集事件的日志数据信息。
可选的,所述数据采集事件组还包括事件过滤器,用于在所述事件处理器对所述事件监听器报告的所述状态事件进行日志格式化处理之前,将不需要的所述状态事件发送至指定的事件队列进行过滤处理。
可选的,所述数据采集事件组还包括日志存储器,则,通过所述事件处理器对所述事件监听器报告的所述状态事件进行日志格式化处理之后,调用所述日志存储器来存储所述日志数据信息。
可选的,所述日志存储器存储所述日志数据信息时,包括:
获取预设的数据压缩存储协议;
根据所述数据压缩存储协议对所述日志数据信息进行存储。
可选的,所述日志存储器存储所述日志数据信息时,对所述日志数据信息设置日志标识符ID,所述日志标识符ID的设置方式为:采用2字节短整型short存储,以高5位代表当天日期的日数,低11位代表事件序号从1开始递增的方式进行设置。
可选的,所述数据采集事件组还包括日志转发器,所述日志转发器用于根据数据请求端的请求,将所述日志存储器存储的所述日志数据信息转发至所述数据请求端。
可选的,所述通过所述事件处理器对所述事件监听器报告的所述状态事件进行日志格式化处理时,包括:
获取预建的日志模型,所述日志模型包括事件日志模型和基本日志模型;
将所述状态事件中,用于描述所述待采集事件的事件参数设置在所述事件日志模型中;
将所述状态事件中,对每个所述待采集事件以事件日志的形式记录的特征信息设置在所述基本日志模型中。
可选的,所述对每个所述待采集事件以事件日志的形式记录的特征信息包括如下信息中的一种或多种:
事件源、事件类型、触发事件、事件值和事件发生时间戳;
所述事件源用于采集所述待采集事件在所述数据采集对象相应部件发生的事件日志;所述触发事件用于记录所述待采集事件的触发信息,以形成事件发生路径;所述事件值用于记录所述待采集事件的具体操作值。
可选的,所述通过所述数据采集事件组,对所述数据采集对象执行所述待采集事件时产生的数据信息进行采集处理之前,还包括:
在所述待采集事件中埋入事件日志采集点,以使所述数据采集事件组根据所述事件日志采集点,对所述数据采集对象执行所述待采集事件时产生的数据信息进行采集处理。
依据本发明的第二个方面,提供一种黑匣子,所述黑匣子利用数据信息采集方法对所述数据采集对象执行所述待采集事件时产生的数据信息进行采集处理时,执行如下方法的步骤:
根据数据采集对象确定待采集事件;
设置数据采集事件组;
通过所述数据采集事件组,对所述数据采集对象执行所述待采集事件时产生的数据信息进行采集处理,以生成用于描述所述待采集事件的日志数据信息。
依据本发明的第三个方面,提供一种起爆器,所述起爆器通过所述的黑匣子,来对所述起爆器执行起爆操作事件时产生的数据信息进行采集处理,以生成用于描述所述起爆操作事件的日志数据信息,所述起爆操作事件为起爆器起爆操作电子雷管时发生的事件。此时所述数据采集对象为所述起爆器,所述待采集事件为所述起爆操作事件,则,所述黑匣子对所述起爆器执行所述起爆操作事件时产生的数据信息进行采集处理时,包括:
根据所述起爆器确定所述起爆操作事件;
根据所述起爆操作事件设置数据采集事件组;
通过所述数据采集事件组,对所述起爆器执行所述起爆操作事件时产生的数据信息进行采集处理,以生成用于描述所述起爆操作事件的日志数据信息。
依据本发明的第四个方面,提供一种计算机可读存储介质,所述存储介质上存储有计算机程序,所述程序被处理器执行时实现如下方法的步骤:
根据数据采集对象确定待采集事件;
设置数据采集事件组;
通过所述数据采集事件组,对所述数据采集对象执行所述待采集事件时产生的数据信息进行采集处理,以生成用于描述所述待采集事件的日志数据信息。
本发明的有益效果为:
本发明能够通过设置的数据采集事件组来对起爆器的起爆操作事件进行采集处理,以生成用于描述起爆操作事件的日志数据信息,从而为相关人员在对起爆器的操作起爆过程中的场景进行复现时,提供数据支撑。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1为本发明一具体实施例提供的一种数据信息采集方法的流程示意图;
图2为图1中步骤S13的具体实施流程图;
图3为日志存储器存储日志数据信息的流程示意图;
图4为图2中步骤S133的具体实施流程图;
图5为本发明第三实施例提供的一种数据信息采集方法的流程示意图;
图6为第三实施例提供的起爆器的日志数据信息收集流程示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
本发明的第一实施例,提供了一种数据信息采集方法,请参见图1,包括如下步骤:
步骤S11:根据数据采集对象确定待采集事件;
步骤S12:设置数据采集事件组;
步骤S13:通过数据采集事件组,对数据采集对象执行待采集事件时产生的数据信息进行采集处理,以生成用于描述待采集事件的日志数据信息。
执行步骤S13通过数据采集事件组,对数据采集对象执行待采集事件时产生的数据信息进行采集处理之前,还包括:在待采集事件中埋入事件日志采集点,以使数据采集事件组根据事件日志采集点,对数据采集对象执行待采集事件时产生的数据信息进行采集处理。
本发明实施例中,数据采集事件组包括:事件监听器及事件处理器。则,执行步骤S13通过数据采集事件组,对数据采集对象执行待采集事件时产生的数据信息进行采集处理,以生成用于描述待采集事件的日志数据信息,请参见图2,具体执行了如下步骤:
步骤S131:通过事件监听器,将监听到的待采集事件的状态变化封装成状态事件;
步骤S132:通过事件处理器对事件监听器报告的状态事件进行日志格式化处理,以生成用于描述待采集事件的日志数据信息。
同时,为了过滤掉无需保存的数据,数据采集事件组还包括事件过滤器,用于在所述事件处理器对所述事件监听器报告的所述状态事件进行日志格式化处理之前,将不需要的所述状态事件发送至指定的事件队列进行过滤处理,从而过滤掉无需保存事件的数据。
其次,数据采集事件组还包括:日志存储器,则,执行步骤S133通过事件处理器对事件监听器报告的状态事件进行日志格式化处理之后,调用日志存储器来存储日志数据信息。并且,日志存储器存储日志数据信息时,请参见图3,执行了如下方法的步骤:
步骤S21:获取预设的数据压缩存储协议;
步骤S22:根据数据压缩存储协议对日志数据信息进行存储。使得日志数据信息的存储更加安全可靠。
同时,为了节省存储空间,日志存储器存储日志数据信息时,对日志数据信息设置日志标识符ID,日志标识符ID的设置方式为:采用2字节短整型short存储,以高5位代表当天日期的日数,低11位代表事件序号从1开始递增的方式进行设置。
此外,数据采集事件组还包括:日志转发器,日志转发器用于根据数据请求端的请求,将日志存储器存储的日志数据信息转发至数据请求端,数据请求端如应用程序APP端、平台业务端等需要该日志数据信息的终端。
在本发明优选实施例中,请参见图4,步骤S133执行通过事件处理器对事件监听器报告的状态事件进行日志格式化处理时,包括如下步骤:
步骤S331:获取预建的日志模型,日志模型包括事件日志模型和基本日志模型;
步骤S332:将状态事件中,用于描述待采集事件的事件参数设置在事件日志模型中;
步骤S333:将状态事件中,对每个待采集事件以事件日志的形式记录的特征信息设置在基本日志模型中。
本发明实施例中的步骤S332和步骤S333并无先后之分,在此对其实施步骤的先后顺序不做唯一限定。其中,对每个待采集事件以事件日志的形式记录的特征信息包括如下信息中的一种或多种:事件源、事件类型、触发事件、事件值和事件发生时间戳。事件源用于采集待采集事件在数据采集对象相应部件发生的事件日志;触发事件用于记录待采集事件的触发信息,以形成事件发生路径;事件值用于记录待采集事件的具体操作值。
当,数据采集对象为起爆器时,待采集事件为起爆器起爆操作电子雷管时发生的起爆操作事件,由此,本发明实施例能够通过设置的数据采集事件组来对起爆器的起爆操作事件进行采集处理,以生成用于描述起爆操作事件的日志数据信息,从而为相关人员在对起爆器的操作起爆过程中的场景进行复现时,提供数据支撑。
本发明第二个实施例,提供了一种黑匣子,请参见图1,该黑匣子利用第一实施例提供的数据信息采集对数据采集对象执行待采集事件时产生的数据信息进行采集处理时,执行如下方法的步骤:
步骤S11:根据数据采集对象确定待采集事件;
步骤S12:设置数据采集事件组;
步骤S13:通过数据采集事件组,对数据采集对象执行待采集事件时产生的数据信息进行采集处理,以生成用于描述待采集事件的日志数据信息。
执行步骤S13通过数据采集事件组,对数据采集对象执行待采集事件时产生的数据信息进行采集处理之前,还包括:在待采集事件中埋入事件日志采集点,以使数据采集事件组根据事件日志采集点,对数据采集对象执行待采集事件时产生的数据信息进行采集处理。
由于黑匣子在利用第一实施例提供的数据信息采集方法进行数据采集时的其他方法流程与第一实施例的方法流程是一致的,在此不再赘述。
当,数据采集对象为起爆器时,待采集事件为起爆器起爆操作电子雷管时发生的起爆操作事件,由此,本发明实施例提供的黑匣子能够通过设置的数据采集事件组来对起爆器的起爆操作事件进行采集处理,以生成用于描述起爆操作事件的日志数据信息,从而为相关人员在对起爆器的操作起爆过程中的场景进行复现时,提供数据支撑。
本发明的第三个实施例,提供了一种起爆器,起爆器通过第二实施例的黑匣子,来对起爆器执行起爆操作事件时产生的数据信息进行采集处理,以生成用于描述起爆操作事件的操作日志数据信息。本发明实施例中的起爆操作事件为起爆器起爆操作电子雷管时发生的事件,包括屏幕变化、键盘动作、总线变化及蓝牙/WiFi数据传输等事件,此时,数据采集对象为起爆器,待采集事件为起爆操作事件,则,请参见图5,黑匣子对起爆器执行起爆操作事件时产生的数据信息进行采集处理时,包括如下方法的步骤:
步骤S31:根据起爆器确定起爆操作事件;
步骤S32:设置数据采集事件组;
步骤S33:通过数据采集事件组,对起爆器执行起爆操作事件时产生的数据信息进行采集处理,以生成用于描述起爆操作事件的日志数据信息。
执行步骤S33通过数据采集事件组,对起爆器执行起爆操作事件时产生的数据信息进行采集处理之前,还包括:在起爆操作事件中埋入事件日志采集点,以使数据采集事件组根据事件日志采集点,对起爆器执行起爆操作事件时产生的数据信息进行采集处理。
具体的,本发明实施例中,黑匣子的数据采集事件组包括:事件监听器、事件过滤器、事件处理器、日志存储器和日志转发器五类工作组件,来分别对屏幕变化、键盘动作、总线变化及蓝牙/WiFi数据传输模块等事件的状态变化进行处理,同时,每类工作组件均使用相同的数据接口,每个工作组件在工作使用时通过抽象工厂生成对应实例进行具体业务的处理。请参见图6,事件监听器负责监听自己所在组件产生的状态变化,将监听到的各个事件的状态变化信息封装成状态事件,并结合事件过滤器将状态事件往固定位置(事件队列)发送,使得黑匣子能够过滤掉无需保存的数据的同时提高数据处理效率。事件处理器(也可以称之为日志收集器)采用观察者模式,对各事件监听器报告的状态事件进行日志格式化组织。并调用日志存储器进行日志的持久化存储(专用SD卡、平面文件、数据库等),存储时,根据预设的数据压缩存储协议对日志数据信息进行存储,由此,即使在起爆器或应用程序出错的情况下,也可以通过该黑匣子设备获取前一段时间存储的数据。
黑匣子的日志转发器负责将起爆器内的日志转发到手机应用程序APP或业务平台,并负责已转发日志的清理和存储空间释放工作。APP/平台通过统一接口向日志转发器提供数据传输接口,来负责日志数据信息的保存和可视化展现。
本发明实施例将每条日志数据信息预先设置成由基本日志模型和事件日志模型构成的形式,基本日志模型由固定格式构成,其中最后4字节指明该日志的后续内容应该如何解析;对于定长数据,直接根据偏移量序列化或解析,对于变长数据,日志内参数间通过\r标记,整条日志结束采用\r\n标记,具体可参见表2的内容。事件日志模型用于记录描述待采集事件的事件参数,如当起爆操作事件为屏幕变化事件时,事件日志模型记录的事件参数信息有屏幕标识、参数模型、屏幕编码等信息,具体可参见表1的内容,由此,本领域技术人员容易想到,其他事件的事件日志模型根据该事件需记录的参数信息进行记录即可,在此不再一一描述。
本发明实施例将起爆器内需要记录的状态事件以事件日志的形式进行记录在基本日志模型中,请参见表2,记录的特征信息包括如下特征中的一种或多种:事件源、事件类型、触发事件、事件值和事件发生时间戳。事件源用于采集起爆操作事件在相应部件发生的事件日志,如采集键盘、屏幕、总线、蓝牙/WiFi部件发生的事件日志。触发事件用于记录起爆操作事件的触发信息,以形成事件发生路径。事件值用于记录该起爆操作事件的具体操作值,如键盘动作事件具体按的F1键、F2键等,对于检测、屏幕显示等事件则通过继承扩展的关联记录来保存具体值。
如需扩展更多部件日志,增加枚举值和对应扩展类即可,其次,操作人员、项目信息,在起爆器向数据接收端上传日志时由数据接收端补全即可。
本发明实施例的日志数据信息的日志标识符id生成处理规则:
起爆器内的黑匣子由2字节short存储,生成方式为高5位代表当天日期的日数(日数范围为1到31),低11位代表事件序号从1开始递增,每天最多可以存储2047条日志,日志最多可以保存1个月,否则id可能重复。由此,手机应用程序APP或后台日志网关收到日志数据信息后,可通过依次在前面填充4位月数、12位年份数、32位设备标志位最终形成64位日志id存储到数据后台。支持的设备数量约为42亿多台。
Figure BDA0003056528020000121
Figure BDA0003056528020000131
表1
Figure BDA0003056528020000141
Figure BDA0003056528020000151
Figure BDA0003056528020000161
Figure BDA0003056528020000171
表2
此外,本发明实施例在具体应用时,对起爆器的黑匣子设置相应的支撑部件,包括:
1、设置独立的看门狗芯片及程序,保障状态数据采集程序常驻运行,始终可以定时主动采集或响应外部事件从而记录起爆器执行起爆操作事件时产生的信息。
2、独立采集、存储电路,对屏幕、总线、按键等设置独立的采样电路设计,电路简单可靠,保障数据始终可以可靠存储到黑匣子。
3、可靠存储,采用高性能存储芯片,比较好的机械性能和读写性能。
4、程序埋点,在起爆器执行起爆操作事件的操作程序中埋入事件日志采集点,采集起爆器操作及状态数据。
5、事件处理器,电路、程序埋点收集的所有事件信息均流入到事件处理器,事件处理器采用预设算法,对流入事件处理器的事件信息进行处理,最终形成黑匣子数据。
因此,本发明能够通过设置的数据采集事件组来对起爆器的起爆操作事件进行采集处理,以生成用于描述起爆操作事件的操作日志数据信息,需要时,相关人员从黑匣子中解析出操作日志数据信息,即可根据操作日志数据信息对起爆器的操作起爆过程中的场景进行复现。而且,由于黑匣子能够压缩可靠存储各类型事件日志,含高可靠高可用存储介质,即使在起爆器或应用程序出错的情况下,也可以通过该黑匣子设备获取前一段时间的数据,进而通过终端解析设备读取解析程序重放前一段时间的操作场景指标数据。
本发明的第四个实施例,提供了一种计算机可读存储介质,存储介质上存储有计算机程序,请参见图1,程序被处理器执行时实现如下方法的步骤:
步骤S11:根据数据采集对象确定待采集事件;
步骤S12:设置数据采集事件组;
步骤S13:通过数据采集事件组,对数据采集对象执行待采集事件时产生的数据信息进行采集处理,以生成用于描述待采集事件的日志数据信息。
由于计算机可读存储介质在利用第一实施例提供的数据信息采集方法进行数据采集时的其他方法流程与第一实施例的方法流程是一致的,在此不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指控制用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,这些均属于本发明的保护之内。

Claims (7)

1.一种数据信息采集方法,其特征在于,包括:
根据数据采集对象确定待采集事件;
设置数据采集事件组;
通过所述数据采集事件组,对所述数据采集对象执行所述待采集事件时产生的数据信息进行采集处理,以生成用于描述所述待采集事件的日志数据信息;
所述数据采集事件组包括:
事件监听器及事件处理器;
则,所述通过所述数据采集事件组,对所述数据采集对象执行所述待采集事件时产生的数据信息进行采集处理,以生成用于描述所述待采集事件的日志数据信息,具体包括:
通过所述事件监听器,将监听到的所述待采集事件的状态变化封装成状态事件;
通过所述事件处理器对所述事件监听器报告的所述状态事件进行日志格式化处理,以生成用于描述所述待采集事件的日志数据信息;
所述数据采集事件组还包括事件过滤器,用于在所述事件处理器对所述事件监听器报告的所述状态事件进行日志格式化处理之前,将不需要的所述状态事件发送至指定的事件队列进行过滤处理;
所述数据采集事件组还包括日志存储器,则,通过所述事件处理器对所述事件监听器报告的所述状态事件进行日志格式化处理之后,调用所述日志存储器来存储所述日志数据信息;
所述日志存储器存储所述日志数据信息时,包括:
获取预设的数据压缩存储协议;
根据所述数据压缩存储协议对所述日志数据信息进行存储;
所述日志存储器存储所述日志数据信息时,对所述日志数据信息设置日志标识符ID,所述日志标识符ID的设置方式为:采用2字节短整型short存储,以高5位代表当天日期的日数,低11位代表事件序号从1开始递增的方式进行设置;
所述数据采集事件组还包括日志转发器,所述日志转发器用于根据数据请求端的请求,将所述日志存储器存储的所述日志数据信息转发至所述数据请求端。
2.如权利要求1所述的数据信息采集方法,其特征在于,所述通过所述事件处理器对所述事件监听器报告的所述状态事件进行日志格式化处理时,包括:
获取预建的日志模型,所述日志模型包括事件日志模型和基本日志模型;
将所述状态事件中,用于描述所述待采集事件的事件参数设置在所述事件日志模型中;
将所述状态事件中,对每个所述待采集事件以事件日志的形式记录的特征信息设置在所述基本日志模型中。
3.如权利要求2所述的数据信息采集方法,其特征在于,所述对每个所述待采集事件以事件日志的形式记录的特征信息包括如下信息中的一种或多种:
事件源、事件类型、触发事件、事件值和事件发生时间戳;
所述事件源用于采集所述待采集事件在所述数据采集对象相应部件发生的事件日志;所述触发事件用于记录所述待采集事件的触发信息,以形成事件发生路径;所述事件值用于记录所述待采集事件的具体操作值。
4.如权利要求1所述的数据信息采集方法,其特征在于,所述通过所述数据采集事件组,对所述数据采集对象执行所述待采集事件时产生的数据信息进行采集处理之前,还包括:
在所述待采集事件中埋入事件日志采集点,以使所述数据采集事件组根据所述事件日志采集点,对所述数据采集对象执行所述待采集事件时产生的数据信息进行采集处理。
5.一种黑匣子,其特征在于,所述黑匣子利用如权利要求1-4任一所述的数据信息采集方法对所述数据采集对象执行所述待采集事件时产生的数据信息进行采集处理。
6.一种起爆器,其特征在于,所述起爆器通过如权利要求5所述的黑匣子,来对所述起爆器执行起爆操作事件时产生的数据信息进行采集处理,以生成用于描述所述起爆操作事件的日志数据信息,所述起爆操作事件为起爆器起爆操作电子雷管时发生的事件。
7.一种计算机可读存储介质,其特征在于,所述存储介质上存储有计算机程序,所述程序被处理器执行时实现权利要求1至4中任意一项所述方法的步骤。
CN202110501081.3A 2021-05-08 2021-05-08 一种数据信息采集方法、黑匣子、起爆器及存储介质 Active CN113138967B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110501081.3A CN113138967B (zh) 2021-05-08 2021-05-08 一种数据信息采集方法、黑匣子、起爆器及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110501081.3A CN113138967B (zh) 2021-05-08 2021-05-08 一种数据信息采集方法、黑匣子、起爆器及存储介质

Publications (2)

Publication Number Publication Date
CN113138967A CN113138967A (zh) 2021-07-20
CN113138967B true CN113138967B (zh) 2023-03-21

Family

ID=76818018

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110501081.3A Active CN113138967B (zh) 2021-05-08 2021-05-08 一种数据信息采集方法、黑匣子、起爆器及存储介质

Country Status (1)

Country Link
CN (1) CN113138967B (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101482747A (zh) * 2007-09-27 2009-07-15 洛克威尔自动控制技术股份有限公司 工业系统中的预订与通知
CN101826993A (zh) * 2010-02-04 2010-09-08 蓝盾信息安全技术股份有限公司 一种安全事件监测方法、系统及装置
CN104296608A (zh) * 2014-10-15 2015-01-21 北京理工北阳爆破工程技术有限责任公司 一种电子雷管起爆系统及方法
CN105959131A (zh) * 2016-04-15 2016-09-21 贵州电网有限责任公司信息中心 一种基于安全日志数据挖掘的电力信息网络安全度量方法
CN107864056A (zh) * 2017-11-04 2018-03-30 公安部第三研究所 一种分布式事件采集探针、分布式事件高速采集系统及方法
CN108121645A (zh) * 2017-12-25 2018-06-05 深圳市分期乐网络科技有限公司 一种日志质量评估方法、装置、服务器以及存储介质
JP6525490B1 (ja) * 2018-10-15 2019-06-05 克秀 浅沼 イベント管理システム
CN111367760A (zh) * 2020-02-28 2020-07-03 平安医疗健康管理股份有限公司 日志采集方法及装置、计算机设备、存储介质
CN112199267A (zh) * 2020-11-12 2021-01-08 支付宝(杭州)信息技术有限公司 一种行为日志的采集方法及装置
CN112703457A (zh) * 2018-05-07 2021-04-23 强力物联网投资组合2016有限公司 用于使用工业物联网进行数据收集、学习和机器信号流传输实现分析和维护的方法和系统

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9460169B2 (en) * 2011-01-12 2016-10-04 International Business Machines Corporation Multi-tenant audit awareness in support of cloud environments
US9239887B2 (en) * 2012-12-18 2016-01-19 Cisco Technology, Inc. Automatic correlation of dynamic system events within computing devices
CN108733546A (zh) * 2018-04-02 2018-11-02 阿里巴巴集团控股有限公司 一种日志采集方法、装置及设备
CN110650038B (zh) * 2019-09-12 2022-09-09 国家电网有限公司 面向多类监管对象的安全事件日志采集处理方法和系统
CN111885012B (zh) * 2020-07-03 2022-03-25 安徽继远软件有限公司 基于多种网络设备信息采集的网络态势感知方法及系统

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101482747A (zh) * 2007-09-27 2009-07-15 洛克威尔自动控制技术股份有限公司 工业系统中的预订与通知
CN101826993A (zh) * 2010-02-04 2010-09-08 蓝盾信息安全技术股份有限公司 一种安全事件监测方法、系统及装置
CN104296608A (zh) * 2014-10-15 2015-01-21 北京理工北阳爆破工程技术有限责任公司 一种电子雷管起爆系统及方法
CN105959131A (zh) * 2016-04-15 2016-09-21 贵州电网有限责任公司信息中心 一种基于安全日志数据挖掘的电力信息网络安全度量方法
CN107864056A (zh) * 2017-11-04 2018-03-30 公安部第三研究所 一种分布式事件采集探针、分布式事件高速采集系统及方法
CN108121645A (zh) * 2017-12-25 2018-06-05 深圳市分期乐网络科技有限公司 一种日志质量评估方法、装置、服务器以及存储介质
CN112703457A (zh) * 2018-05-07 2021-04-23 强力物联网投资组合2016有限公司 用于使用工业物联网进行数据收集、学习和机器信号流传输实现分析和维护的方法和系统
JP6525490B1 (ja) * 2018-10-15 2019-06-05 克秀 浅沼 イベント管理システム
CN111367760A (zh) * 2020-02-28 2020-07-03 平安医疗健康管理股份有限公司 日志采集方法及装置、计算机设备、存储介质
CN112199267A (zh) * 2020-11-12 2021-01-08 支付宝(杭州)信息技术有限公司 一种行为日志的采集方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
陈宏涛等.基于Access数据库的爆破评估及监理系统运用.2019,第233-235页. *

Also Published As

Publication number Publication date
CN113138967A (zh) 2021-07-20

Similar Documents

Publication Publication Date Title
EP3386150B1 (en) Terminal failure processing method, device and system
CN111372209B (zh) 信令数据处理方法、装置、设备及介质
CN111222547B (zh) 一种面向移动应用的流量特征提取方法及系统
CN113687974B (zh) 客户端日志处理方法、装置及计算机设备
CN112256542A (zh) 基于eBPF的微服务系统性能检测方法、装置和系统
CN112291724A (zh) 一种5g信令可视化方法及装置
US10346281B2 (en) Obtaining and analyzing a reduced metric data set
CN109861843B (zh) 日志文件的完整采集确认方法、装置及设备
CN113138967B (zh) 一种数据信息采集方法、黑匣子、起爆器及存储介质
CN111224807B (zh) 分布式日志处理方法、装置、设备及计算机存储介质
JP3937341B2 (ja) 計算機システム性能測定分析用のトランザクションプロファイルの生成システム、その生成方法及びプログラム
CN111124859A (zh) 一种日志处理方法、装置、设备及存储介质
CN113495820A (zh) 异常信息收集、处理方法和装置以及异常监控系统
CN113472858B (zh) 埋点数据处理方法、装置及电子设备
CN112749059A (zh) 前端异常监控的方法、装置及系统
CN106844106B (zh) 一种解析黑莓手机备份文件的方法
CN114500348B (zh) 一种cdn网关测试方法及系统
CN114416420A (zh) 设备问题反馈方法和系统
CN113505076A (zh) 文件覆盖检测方法及装置
CN113407415A (zh) 智能终端的日志管理方法和装置
CN112612679A (zh) 系统运行状态监控方法、装置、计算机设备和存储介质
CN112395155A (zh) 服务的监控方法和装置、存储介质、电子装置
CN106998559B (zh) 小区检测方法及装置
CN115065612B (zh) 全链路压测改造的测试方法及装置
CN110069416B (zh) 一种测试数据处理方法、装置以及相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant