CN116938695A - 日志收集方法、装置、设备、介质及车辆 - Google Patents
日志收集方法、装置、设备、介质及车辆 Download PDFInfo
- Publication number
- CN116938695A CN116938695A CN202211598922.8A CN202211598922A CN116938695A CN 116938695 A CN116938695 A CN 116938695A CN 202211598922 A CN202211598922 A CN 202211598922A CN 116938695 A CN116938695 A CN 116938695A
- Authority
- CN
- China
- Prior art keywords
- log
- data
- target
- cloud server
- incremental data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 48
- 238000012545 processing Methods 0.000 claims abstract description 75
- 230000005540 biological transmission Effects 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 9
- 238000001914 filtration Methods 0.000 claims description 9
- 238000007906 compression Methods 0.000 claims description 8
- 230000006835 compression Effects 0.000 claims description 8
- 238000007619 statistical method Methods 0.000 claims description 8
- 238000003672 processing method Methods 0.000 abstract description 5
- 238000004891 communication Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000006837 decompression Effects 0.000 description 1
- 238000000802 evaporation-induced self-assembly Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/069—Management of faults, events, alarms or notifications using logs of notifications; Post-processing of notifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/04—Processing captured monitoring data, e.g. for logfile generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Data Mining & Analysis (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请实施例公开了一种日志收集方法、装置、设备、介质及车辆,该日志收集方法通过采集车辆的第一日志,根据第一日志的第一标签信息查找第一信息表,得到第一日志的增量数据,根据日志处理规则处理增量数据,得到目标增量数据,将目标增量数据发送给云端服务器,由云端服务器对目标增量数据执行预定操作。相较于传统的由云端服务器进行日志采集和处理的方案,本申请实施例的日志采集和增量数据的处理,可以由云端服务器之外的设备执行,无需再由云端服务器执行,如此减少了云端服务器的压力。
Description
技术领域
本申请涉及车辆技术领域,尤其涉及一种日志收集方法、装置、设备、介质及车辆。
背景技术
车辆日志可以详细记录车辆各个域之间的通信情况、业务响应情况等,通过车辆日志可以更好的监控或调试车辆。
目前主要是通过云端服务器收集各个车辆的日志,然后基于日志执行预定操作,例如进行统一的计算、压缩等操作。随着车辆数量以及车辆功能的增加,云端服务器需要采集的日志越来越多,处理压力也越来越大。
发明内容
本申请实施例提供一种日志收集方法、装置、设备、介质及车辆,可以降低云端服务器的压力。
第一方面,本申请实施例提供了一种日志收集方法,包括:
采集车辆的第一日志;
根据第一日志的第一标签信息查找第一信息表,得到第一日志的增量数据,第一信息表用于存储日志的标签信息;
根据日志处理规则处理增量数据,得到目标增量数据;
将目标增量数据发送给云端服务器,由云端服务器对目标增量数据执行预定操作。
第二方面,本申请实施例提供了一种日志收集装置,包括:
采集模块,用于采集车辆的第一日志;
查找模块,用于根据第一日志的第一标签信息查找第一信息表,得到第一日志的增量数据,第一信息表用于存储日志的标签信息;
处理模块,用于根据日志处理规则处理增量数据,得到目标增量数据;
发送模块,用于将目标增量数据发送给云端服务器,由云端服务器对目标增量数据执行预定操作。
第三方面,本申请实施例提供了一种电子设备,包括:处理器以及存储有计算机程序指令的存储器;处理器执行计算机程序指令时实现如第一方面所述的方法。
第四方面,本申请实施例提供了一种存储介质,存储介质上存储有程序或指令,程序或指令被处理器执行时实现如第一方面所述的方法。
第五方面,本申请实施例提供了一种车辆,车辆包括如第二方面所述的日志收集装置;或者,如第三方面所述的电子设备;或者,如第四方面所述的存储介质。
本申请实施例提供的日志收集方法、装置、设备、介质及车辆,通过采集车辆的第一日志,根据第一日志的第一标签信息查找第一信息表,得到第一日志文件的增量数据,根据日志处理规则处理增量数据,得到目标增量数据,将目标增量数据发送给云端服务器,由云端服务器对目标增量数据执行预定操作。相较于传统的由云端服务器进行日志采集和处理的方案,本申请实施例的日志采集和增量数据的处理,可以由云端服务器之外的设备执行,无需再由云端服务器执行,如此减少了云端服务器的压力。
附图说明
图1为本申请实施例提供的一种日志收集方法的场景示意图;
图2为本申请实施例提供的一种日志收集方法的流程图;
图3为本申请实施例提供的一种日志收集过程的示意图;
图4为本申请实施例提供的一种日志收集装置的结构图;
图5为本申请实施例提供的一种电子设备的结构图。
具体实施方式
为了能够更清楚地理解本申请的上述目的、特征和优点,下面将对本申请的方案进行进一步描述。需要说明的是,在不冲突的情况下,本申请的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本申请,但本申请还可以采用其他不同于在此描述的方式来实施;显然,说明书中的实施例只是本申请的一部分实施例,而不是全部的实施例。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
随着生活水平的提高,车辆的数量越来越多,为了更好地监控或调试车辆,可以收集各个车辆的日志,通过日志达到监控或调试车辆等目的。
目前主要是由云端服务器收集各个车辆的日志,随着车辆数量以及功能的增加,云端服务器需要采集的日志越来越多,承担的压力也越来越大。
为此,本申请实施例提供了一种日志收集方法、装置、设备、介质及车辆,可以降低云端服务器的压力。
图1为本申请实施例提供的一种日志收集方法的场景示意图,参考图1,该场景可以包括车辆100和云端服务器101。实际应用时,可以包含多个车辆100,车辆100和云端服务器101建立通信连接。示例性地,车辆100和云端服务器101可以通过网络建立通信连接,本申请实施例对网络方式不进行限定。
车辆100用于采集本车的日志,按照预定的处理规则对采集的日志进行处理,并将处理后的日志发送给云端服务器101。
云端服务器101用于接收车辆100发送的处理后的日志,并执行预定操作,示例性地,可以对处理后的日志进行存储、展示、统计分析等操作。
本申请实施例利用车辆采集自身产生的日志,并经过一定处理发送给云端服务器,减少了云端服务器的操作,尤其是在车辆数量较多的情况下,可以缓解云端服务器的压力,提高了云端服务器的稳定性。
下面结合上述场景和具体的实施例对本申请实施例提供的日志收集方法进行说明。本申请实施例提供的日志收集方法可以应用于图1所示的车辆。
图2为本申请实施例提供的一种日志收集方法的流程图,如图2所示,该日志收集方法可以包括如下步骤:
S210、采集车辆的第一日志。
S220、根据第一日志的第一标签信息查找第一信息表,得到第一日志的增量数据。
其中,第一信息表用于存储日志的标签信息。
S230、根据日志处理规则处理增量数据,得到目标增量数据。
S240、将目标增量数据发送给云端服务器,由云端服务器对目标增量数据执行预定操作。
本申请实施例通过采集车辆的第一日志,根据第一日志的第一标签信息查找第一信息表,得到第一日志的增量数据,根据日志处理规则处理增量数据,得到目标增量数据,将目标增量数据发送给云端服务器,由云端服务器对目标增量数据执行预定操作。相较于传统的由云端服务器进行日志采集和处理的方案,本申请实施例的日志采集和增量数据的处理,可以由云端服务器之外的设备执行,无需再由云端服务器执行,如此减少了云端服务器的压力。
下面对上述步骤进行详细说明,具体如下所示:
在S210中,示例性地,第一日志可以是车机系统产生的系统日志,各个域通信的日志,各个业务模块输出的日志等。
示例性地,可以由日志采集组件按照日志采集路径从对应位置采集云端服务器所需的日志,也即第一日志,得到第一日志文件。日志采集组件可以是设置在车辆上的组件。如此可以将日志采集任务由云端服务器分发给各个车辆,尤其是在车辆数量较多的情况下,可以大大降低云端服务器的日志采集压力。
日志采集路径可以存在配置文件中,示例性地,配置文件可以预先存储在车辆上,也可以由云端服务器发送给车辆,例如当云端服务器需要车辆采集日志时,可以将配置文件发送给车辆。
示例性地,配置文件可以包括但不限于日志采集路径和日志处理规则,日志处理规则的相关内容可以参见后面的实施例。
在S220中,第一标签信息可以包括但不限于第一日志文件的采集路径(path)、文件标识(incode)、文件名(filename)、位置偏移参数(offset)以及文件创建时间(createdtime)等。其中,位置偏移参数用于记录第一日志文件在上一次的采集位置,例如上一次采集到的第一日志文件的第500行,则位置偏移参数offset=500。各日志文件的标签信息可以存储在预先构建的文件列表FileListInfo中,也即第一信息表。
增量数据为相对于上一次采集,第一日志文件新增加的数据。示例性地,增量数据可以是第一日志文件中的全部数据,也可以是第一日志文件的部分数据,具体可以基于第一标签信息查找第一信息表得到。
以第一标签信息包括文件名和位置偏移参数为例,示例性地,上述S220可以包括以下步骤:
在第一信息表未包含第一日志的文件名的情况下,将第一日志中的数据确定为增量数据;
在第一信息表包含第一日志的文件名的情况下,将位置偏移参数对应的位置偏移量,确定为第一日志的增量数据。
具体地,可以根据第一标签信息,查找第一信息表,确定第一日志是否为新增加的日志文件,例如如果第一信息表中未包含第一日志的文件名,表示第一日志是新增加的日志文件,此时可以将第一日志中的全部数据确定为增量数据。
如果第一信息表中包含第一日志的文件名,可以进一步判断位置偏移参数,基于位置偏移参数对应的位置偏移量,得到增量数据,例如上一次采集完位置偏移参数为500,之后又增加了300行数据,即位置偏移参数对应的位置偏移量为这300行数据,此时可以将这300行数据确定为增量数据。
本申请实施例将第一日志的标签信息和第一信息表中存储的标签信息进行对比,以此来确定哪些数据是增量数据,为后续上传云端服务器提供了依据,无需将全部数据上传至云端服务器,如此可以减少云端服务器的内存,也可以避免云端服务器从海量数据中查找增量数据,节省了时间,提高了效率。
在S230中,日志处理规则可以是处理增量数据的规则,示例性地,日志处理规则可以包括但不限于过滤规则、统计分析规则、压缩规则等。示例性地,日志处理规则可以存储在配置文件中。
其中,过滤规则用于过滤增量数据,得到需要的增量数据,具体过滤掉哪些数据,可以根据实际需要设定。基于过滤规则过滤增量数据,就可以节省内存空间,又可以避免对其他数据造成干扰。
统计分析规则用于对增量数据进行统计分析,例如可以统计一段时间内车辆出现的故障,并分析各故障出现的原因等。
压缩规则用于压缩增量数据,通过压缩增量数据,可以减少存储空间,提高传输效率。具体的压缩方式本申请实施例不进行限定。
通过车辆基于日志处理规则处理增量数据,可以节省云端服务器的操作,尤其是在车辆数量、数据量都较大的情况下,可以很大程度的减少云端服务器的处理压力,提高处理效率。
示例性地,上述S230可以包括以下步骤:
在预设的数据处理通道中,选择与增量数据的优先级对应的目标数据处理通道;
在目标数据处理通道内,根据日志处理规则处理增量数据,得到目标增量数据,日志处理规则包括过滤规则、统计分析规则和压缩规则中的至少一个。
数据的优先级可以由云端服务器设置,示例性地,可以将数据的优先级存储在配置文件中,下发给车辆。
本申请实施例对优先级的具体设置规则不进行限定,例如可以将车辆的核心控制器对应的日志设置为高优先级,通信日志设置为中优先级,其他部件对应的日志设置为低优先级。例如可以将整车控制器对应的日志设置为高优先级,将各个域之间的通信日志设置为中优先级,将仪表盘对应的日志设置为低优先级。如此可以得到不同优先级的增量数据。
数据处理通道为基于日志处理规则处理增量数据的通道,不同的优先级可以对应不同的数据处理通道,以优先级包括高优先级、中优先级和低优先级为例,对应的数据处理通道可以包括高优先级数据处理通道、中优先级数据处理通道和低优先级数据处理通道。如此可以同时处理高优先级、中优先级和低优先级的增量数据,提高了处理效率。其中,不同的数据处理通道采用的日志处理规则可以相同,也可以不同。
在S240中,在基于日志处理规则处理完增量数据后,即可将处理完的增量数据(也即目标增量数据)发送给云端服务器,由云端服务器执行预定操作,示例性地,预定操作可以是解压、统计分析、展示和存储等操作,如此可以全面了解车辆服务的各个运行状态。
示例性地,上述S240可以包括以下步骤:
按照目标增量数据的优先级由高到低的顺序发送给云端服务器,由云端服务器对目标增量数据执行预定操作。
示例性地,得到目标增量数据后,可以按照目标增量数据的优先级由高到低的顺序发送给云端服务器,即按照高优先级优先发送的原则发送目标增量数据。如此可以及时的将优先级高的数据发送云端服务器,使云端服务器快速响应。
示例性地,上述S240可以包括以下步骤:
按照目标增量数据的优先级并发发送给云端服务器,由云端服务器对目标增量数据执行预定操作。
示例性地,并发可以是同时发送多个优先级的数据,例如本申请实施例的目标增量数据包括高优先级、中优先级和低优先级,则可以同时向云端服务器发送高优先级、中优先级和低优先级的目标增量数据。如此提高了数据的传输效率,尤其是在车辆出现问题时,通过并发发送,可以快速发现问题并解决问题,提高响应速率。
考虑到在传输数据的过程中,可能出现无网或弱网等情况,影响数据的传输,基于此在一些实施例中,在S240之后,该数据处理方法还可以包括以下步骤:
在目标增量数据发送成功的情况下,更新第一信息表;
在目标增量数据发送失败的情况下将发送失败的目标增量数据进行本地缓存,以等待再次发送。
具体地,如果目标增量数据发送成功,可以更新第一信息表,示例性地,可以更新第一信息表中的位置偏移参数。如果目标增量数据发送失败,可以将发送失败的目标增量数据进行本地缓存,等待再次发送。例如可以在网络恢复或者网络信号增强的情况下,再次发送。
下面通过一个示例对本申请实施例提供的日志收集过程进行说明,如图3所示,车辆可以基于日志采集路径采集第一日志,并将第一日志的标签信息和第一信息表中的标签信息进行对比,基于对比结果得到增量数据,并按照增量数据的优先级发送给对应的数据处理通道进行处理,图3示例性地以三个数据处理通道为例,分别对应高优先级、中优先级和低优先级,每个数据处理通道可以对增量数据执行过滤、统计分析和压缩的处理,并将处理后的增量数据发送给云端服务器,由云端服务器执行计算、展示和存储等操作。
本申请实施例由车辆进行日志采集和处理,在很大程度上降低了云端服务器的压力,如此,云端服务器可以对车辆进行全面的监控,充分了解各个服务的运行状况,并及时发现问题解决问题。
基于相同的发明构思,本申请实施例还提供了一种日志收集装置,下面结合图4对本申请实施例提供的日志收集装置进行详细说明。
图4为本申请实施例提供的一种日志收集装置的结构图,如图4所示,该日志收集装置可以包括:
采集模块410,用于采集车辆的第一日志;
查找模块420,用于根据第一日志的第一标签信息查找第一信息表,得到第一日志的增量数据,第一信息表用于存储日志的标签信息;
处理模块430,用于根据日志处理规则处理增量数据,得到目标增量数据;
发送模块440,用于将目标增量数据发送给云端服务器,由云端服务器对目标增量数据执行预定操作。
本申请实施例通过采集车辆的第一日志,根据第一日志的第一标签信息查找第一信息表,得到第一日志的增量数据,根据日志处理规则处理增量数据,得到目标增量数据,将目标增量数据发送给云端服务器,由云端服务器对目标增量数据执行预定操作。相较于传统的由云端服务器进行日志采集和处理的方案,本申请实施例的日志采集和增量数据的处理,可以由云端服务器之外的设备执行,无需再由云端服务器执行,如此减少了云端服务器的压力。
在一些实施例中,第一标签信息至少包括第一日志的文件名和位置偏移参数,位置偏移参数用于记录第一日志在上一次的采集位置;
查找模块420,具体用于:
在第一信息表未包含第一日志的文件名的情况下,将第一日志中的数据确定为增量数据;
在第一信息表包含第一日志的文件名的情况下,将位置偏移参数对应的位置偏移量,确定为第一日志的增量数据。
在一些实施例中,处理模块430,具体用于:
在预设的数据处理通道中,选择与增量数据的优先级对应的目标数据处理通道;
在目标数据处理通道内,根据日志处理规则处理增量数据,得到目标增量数据,日志处理规则包括过滤规则、统计分析规则和压缩规则中的至少一个。
在一些实施例中,发送模块440,具体用于:
按照目标增量数据的优先级由高到低的顺序发送给云端服务器,由云端服务器对目标增量数据执行预定操作。
在一些实施例中,发送模块440,具体用于:
按照目标增量数据的优先级并发发送给云端服务器,由云端服务器对目标增量数据执行预定操作。
在一些实施例中,该数据处理装置还可以包括:更新模块,用于在目标增量数据发送成功的情况下,更新第一信息表;
缓存模块,用于在目标增量数据发送失败的情况下将发送失败的目标增量数据进行本地缓存,以等待再次发送。
图4所示装置中的各个模块具有实现图1-图3中各个步骤的功能并能达到相应的技术效果,为简洁描述,此处不再赘述。
基于相同的发明构思,本申请实施例还提供了一种电子设备。下面结合图5对本申请实施例提供的电子设备进行详细说明。
如图5所示,该电子设备可以包括处理器510和用于存储计算机程序指令的存储器520。
处理器510可以包括中央处理器(Central Processing Unit,CPU),或者特定集成电路(Application Specific Integrated Circuit,ASIC),或者可以被配置成实施本申请实施例的一个或多个集成电路。
存储器520可以包括用于数据或指令的大容量存储器。举例来说而非限制,存储器520可以包括硬盘驱动器(Hard Disk Drive,HDD)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(Universal Serial Bus,USB)驱动器或者两个或更多个以上这些的组合。在一个实例中,存储器520可以包括可移除或不可移除(或固定)的介质,或者存储器520是非易失性固态存储器。在一个实例中,存储器520可以是只读存储器(Read Only Memory,ROM)。在一个实例中,该ROM可以是掩模编程的ROM、可编程ROM(PROM)、可擦除PROM(EPROM)、电可擦除PROM(EEPROM)、电可改写ROM(EAROM)或闪存或者两个或更多个以上这些的组合。
处理器510通过读取并执行存储器520中存储的计算机程序指令,以实现图1-图3所示实施例中的方法,并达到图1-图3所示实施例执行其方法达到的相应技术效果,为简洁描述,在此不再赘述。
在一个示例中,该电子设备还可包括通信接口530和总线540。其中,如图5所示,处理器510、存储器520、通信接口530通过总线540连接并完成相互间的通信。
通信接口530,主要用于实现本申请实施例中各模块、装置和/或设备之间的通信。
总线540包括硬件、软件或两者,将电子设备的各部件彼此耦接在一起。举例来说而非限制,总线540可包括加速图形端(Accelerated Graphics Port,AGP)或其他图形总线、增强工业标准架构(Extended Industry Standard Architecture,EISA)总线、前端总线(Front Side Bus,FSB)、超传输(Hyper Transport,HT)互连、工业标准架构(IndustryStandard Architecture,ISA)总线、无限带宽互连、低引脚数(LPC)总线、存储器总线、微信道架构(MCA)总线、外围组件互连(PCI)总线、PCI-Express(PCI-X)总线、串行高级技术附件(SATA)总线、视频电子标准协会局部(VLB)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线540可包括一个或多个总线。尽管本申请实施例描述和示出了特定的总线,但本申请考虑任何合适的总线或互连。
该电子设备在根据配置文件中的日志采集路径采集第一日志文件后可以执行本申请实施例中的日志收集方法,从而实现结合图1-图3描述的日志收集方法以及图4描述的日志收集装置。
基于相同的发明构思,本申请实施例还提供了一种存储介质,存储介质上存储有程序或指令,程序或指令被处理器执行时实现如上述实施例所述的日志收集方法。
基于相同的发明构思,本申请实施例还提供了一种车辆,车辆包括如上述实施例所述的日志收集装置;或者,如上述实施例所述的电子设备;或者,如上述实施例所述的存储介质。
应当理解的是,本申请的上述具体实施方式仅仅用于示例性说明或解释本申请的原理,而不构成对本申请的限制。因此,在不偏离本申请的精神和范围的情况下所做的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。此外,本申请所附权利要求旨在涵盖落入所附权利要求范围和边界、或者这种范围和边界的等同形式内的全部变化和修改例。
还需要说明的是,本申请中提及的示例性实施例,基于一系列的步骤或者装置描述一些方法或系统。但是,本申请不局限于上述步骤的顺序,也就是说,可以按照实施例中提及的顺序执行步骤,也可以不同于实施例中的顺序,或者若干步骤同时执行。
上面参考根据本申请的实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本申请的各方面。应当理解,流程图和/或框图中的每个方框以及流程图和/或框图中各方框的组合可以由计算机程序指令实现。这些计算机程序指令可被提供给通用计算机、专用计算机、或其它可编程数据处理装置的处理器,以产生一种机器,使得经由计算机或其它可编程数据处理装置的处理器执行的这些指令使能对流程图和/或框图的一个或多个方框中指定的功能/动作的实现。这种处理器可以是但不限于是通用处理器、专用处理器、特殊应用处理器或者现场可编程逻辑电路。还可理解,框图和/或流程图中的每个方框以及框图和/或流程图中的方框的组合,也可以由执行指定的功能或动作的专用硬件来实现,或可由专用硬件和计算机指令的组合来实现。
以上所述,仅为本申请的具体实施方式,所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的系统、模块和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。应理解,本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本申请的保护范围之内。
Claims (10)
1.一种日志收集方法,其特征在于,包括:
采集车辆的第一日志;
根据所述第一日志的第一标签信息查找第一信息表,得到所述第一日志的增量数据,所述第一信息表用于存储日志的标签信息;
根据日志处理规则处理所述增量数据,得到目标增量数据;
将所述目标增量数据发送给所述云端服务器,由所述云端服务器对所述目标增量数据执行预定操作。
2.根据权利要求1所述的方法,其特征在于,所述第一标签信息至少包括所述第一日志的文件名和位置偏移参数,所述位置偏移参数用于记录所述第一日志在上一次的采集位置;
所述根据所述第一日志的第一标签信息查找第一信息表,得到所述第一日志的增量数据,包括:
在所述第一信息表未包含所述第一日志的文件名的情况下,将所述第一日志中的数据确定为增量数据;
在所述第一信息表包含所述第一日志的文件名的情况下,将所述位置偏移参数对应的位置偏移量,确定为所述第一日志的增量数据。
3.根据权利要求1所述的方法,其特征在于,所述根据日志处理规则处理所述增量数据,得到目标增量数据,包括:
在预设的数据处理通道中,选择与所述增量数据的优先级对应的目标数据处理通道;
在所述目标数据处理通道内,根据所述日志处理规则处理所述增量数据,得到目标增量数据,所述日志处理规则包括过滤规则、统计分析规则和压缩规则中的至少一个。
4.根据权利要求3所述的方法,其特征在于,所述将所述目标增量数据发送给所述云端服务器,由所述云端服务器对所述目标增量数据执行预定操作,包括:
按照所述目标增量数据的优先级由高到低的顺序发送给所述云端服务器,由所述云端服务器对所述目标增量数据执行预定操作。
5.根据权利要求3所述的方法,其特征在于,所述将所述目标增量数据发送给所述云端服务器,由所述云端服务器对所述目标增量数据执行预定操作,包括:
按照所述目标增量数据的优先级并发发送给所述云端服务器,由所述云端服务器对所述目标增量数据执行预定操作。
6.根据权利要求1所述的方法,其特征在于,所述将所述目标增量数据发送给所述云端服务器,由所述云端服务器对所述目标增量数据执行预定操作之后,所述方法还包括:
在所述目标增量数据发送成功的情况下,更新所述第一信息表;
在所述目标增量数据发送失败的情况下将发送失败的目标增量数据进行本地缓存,以等待再次发送。
7.一种日志收集装置,其特征在于,包括:
采集模块,用于采集车辆的第一日志;
查找模块,用于根据所述第一日志的第一标签信息查找第一信息表,得到所述第一日志的增量数据,所述第一信息表用于存储日志的标签信息;
处理模块,用于根据日志处理规则处理所述增量数据,得到目标增量数据;
发送模块,用于将所述目标增量数据发送给所述云端服务器,由所述云端服务器对所述目标增量数据执行预定操作。
8.一种电子设备,其特征在于,包括:处理器以及存储有计算机程序指令的存储器;所述处理器执行所述计算机程序指令时实现如权利要求1至6中任意一项所述的方法。
9.一种存储介质,其特征在于,所述存储介质上存储有程序或指令,所述程序或指令被处理器执行时实现如权利要求1至6中任意一项所述的方法。
10.一种车辆,其特征在于,所述车辆包括如权利要求7所述的日志收集装置;或者,如权利要求8所述的电子设备;或者,如权利要求9所述的存储介质。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211598922.8A CN116938695A (zh) | 2022-12-14 | 2022-12-14 | 日志收集方法、装置、设备、介质及车辆 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211598922.8A CN116938695A (zh) | 2022-12-14 | 2022-12-14 | 日志收集方法、装置、设备、介质及车辆 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116938695A true CN116938695A (zh) | 2023-10-24 |
Family
ID=88377999
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211598922.8A Pending CN116938695A (zh) | 2022-12-14 | 2022-12-14 | 日志收集方法、装置、设备、介质及车辆 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116938695A (zh) |
-
2022
- 2022-12-14 CN CN202211598922.8A patent/CN116938695A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111078513B (zh) | 日志处理方法、装置、设备、存储介质及日志告警系统 | |
CN111224807B (zh) | 分布式日志处理方法、装置、设备及计算机存储介质 | |
CN112214577B (zh) | 目标用户的确定方法、装置、设备及计算机存储介质 | |
CN112988679B (zh) | 日志采集控制方法、装置、存储介质及服务器 | |
CN112084180A (zh) | 一种监控车载应用质量的方法、装置、设备及介质 | |
CN113408828A (zh) | 基于智能制造的生产线优化方法、装置及服务器 | |
US20090217108A1 (en) | Method, system and computer program product for processing error information in a system | |
CN109918221B (zh) | 一种硬盘报错解析方法、系统、终端及存储介质 | |
CN110750416A (zh) | 一种故障信息自动化处理的方法及装置 | |
CN112487265B (zh) | 数据处理方法、装置、计算机存储介质及电子设备 | |
CN116938695A (zh) | 日志收集方法、装置、设备、介质及车辆 | |
CN111553491A (zh) | 一种车辆维修记录的生成方法及相关装置 | |
CN111145380A (zh) | 适配车载设备的上报数据处理方法、装置、电子设备 | |
CN114968637B (zh) | 一种自动驾驶异常分析系统 | |
CN114937316B (zh) | 一种软件故障检测方法、装置、设备及介质 | |
CN113377610B (zh) | 性能监测方法、装置、计算机设备及存储介质 | |
CN113472881B (zh) | 在线终端设备的统计方法和装置 | |
CN114879630A (zh) | 车辆故障诊断方法、装置、设备及可读存储介质 | |
CN114863582A (zh) | 一种车载诊断方法、装置、电子设备及可读存介质 | |
CN113238911A (zh) | 告警处理方法及装置 | |
CN112416385A (zh) | 采集组件管理方法和系统 | |
CN113572628A (zh) | 数据关联方法、装置、计算设备及计算机存储介质 | |
CN116938916A (zh) | 数据传输方法、装置、设备、介质及车辆 | |
CN112597109B (zh) | 数据存储方法、装置、电子设备及存储介质 | |
CN118174882A (zh) | 车辆控制方法、装置、设备、介质及车辆 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |