CN114637786A - 一种车辆工时离线计算方法及存储介质 - Google Patents

一种车辆工时离线计算方法及存储介质 Download PDF

Info

Publication number
CN114637786A
CN114637786A CN202210244751.2A CN202210244751A CN114637786A CN 114637786 A CN114637786 A CN 114637786A CN 202210244751 A CN202210244751 A CN 202210244751A CN 114637786 A CN114637786 A CN 114637786A
Authority
CN
China
Prior art keywords
data
vehicle
working condition
working
original
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210244751.2A
Other languages
English (en)
Other versions
CN114637786B (zh
Inventor
郭佳宇
胡旭辉
王飞
邢斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
XCMG Hanyun Technologies Co Ltd
Original Assignee
XCMG Hanyun Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by XCMG Hanyun Technologies Co Ltd filed Critical XCMG Hanyun Technologies Co Ltd
Priority to CN202210244751.2A priority Critical patent/CN114637786B/zh
Publication of CN114637786A publication Critical patent/CN114637786A/zh
Application granted granted Critical
Publication of CN114637786B publication Critical patent/CN114637786B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2477Temporal data queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2462Approximate or statistical queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/40Business processes related to the transportation industry
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30Computing systems specially adapted for manufacturing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Business, Economics & Management (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Mathematical Physics (AREA)
  • Fuzzy Systems (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Vehicle Cleaning, Maintenance, Repair, Refitting, And Outriggers (AREA)

Abstract

本发明公开了一种车辆工时离线计算方法及存储介质,所述方法包括接收原始工况报文;利用实时计算程序解析所述原始工况报文,获得与原始工况报文中工况字段和数值对应的字符串,存储后形成字符串类型的存储数据;将所述字符串类型的存储数据转化为数据库类型的工况数据;利用离线计算程序,基于所述数据库类型的工况数据,以及业务需求,进行统计分析,获得当日车辆工时数据表;对所述当日车辆工时数据表进行数据质量检测及失败恢复,并将获得的统计数据转发至业务库。本发明能够有效避免因为出现缺失或偏差计算后工作时间数据直接导入业务库,导致客户使用错误数据,也能够提高针对缺失偏差计算处理的及时性。

Description

一种车辆工时离线计算方法及存储介质
技术领域
本发明属于大数据离线计算领域,具体涉及一种车辆工时离线计算方法及存储介质。
背景技术
目前,大数据离线计算由于其数据量大、保存时间长、方便查询等优点,已广泛应用于数据分析、数据挖掘等领域,已经有很多涉及离线计算数据获取、流程调度、结果推送、数据检测等过程的方案产品,其中数据检测包括数据存储到数据库之后的检测以及入库前实时分析筛选数据。
目前涉及离线计算质量检测的方案绝大多数为设置筛选过滤条件后自动选取所需数据后存入数据仓库方便后续计算,或者在离线数据为成功发送到目标数据库后重传,存在因为出现缺失或偏差计算后工作时间数据直接导入业务库,导致客户使用错误数据。
发明内容
针对上述问题,本发明提出一种车辆工时离线计算方法及存储介质,能够有效避免因为出现缺失或偏差计算后工作时间数据直接导入业务库,导致客户使用错误数据,也能够提高针对缺失偏差计算处理的及时性。
为了实现上述技术目的,达到上述技术效果,本发明通过以下技术方案实现:
第一方面,本发明提供了一种车辆工时离线计算方法,包括:
步骤一、接收车辆上传的原始工况报文;
步骤二、利用实时计算程序解析所述原始工况报文,获得与原始工况报文中工况字段和数值对应的字符串,存储后形成字符串类型的存储数据;
步骤三、将所述字符串类型的存储数据转化为数据库类型的工况数据;
步骤四、利用离线计算程序,基于所述数据库类型的工况数据,以及业务需求,进行统计分析,获得当日车辆工时数据表;
步骤五、对所述当日车辆工时数据表进行数据质量检测及失败恢复,并将获得的统计数据转发至业务库。
可选地,所述对所述当日车辆工时数据表进行数据质量检测及失败恢复,具体包括:
根据数据规则检测当日车辆工时数据表;
当判断出所述当日车辆工时数据表中的数据不符合要求,则判断工况表中数据量是否正常;所述工况表中的数据是通过对记录不同公司的车辆表按公司分类解析得来;
若数据量正常,说明步骤一至步骤三正常,步骤四异常,则需要重启离线计算程序;
若数据量不正常,说明步骤一至步骤三中某一步骤出现异常,则判断车辆上传的原始数据与记录的车辆表中哪一个出现问题,并对出现问题的数据进行恢复。
可选地,所述原始工况报文中包括车辆工况信息;所述数据规则检测包括:
当日车辆工时数据表的车辆数量应与记录所有车辆的车辆表一致,若车辆当日没有工作且未上传车辆工况信息,则该车辆当日工时应为累计使用昨日的总工作时间;
若今日发动机累计总工时减去昨日发动机累计总工时大于今日工时,则说明原始数据存在工况数据的跳变,需要按照车辆上传的GPS时间顺序将车辆工况信息排序,如果两条车辆工况信息的发动机累计总工时信息之差大于GPS时间,或者随着时间的增加发动机累计总工时降低,则说明该条数据为无效跳变数据,需要剔除该无效跳变数据。
可选地,所述对所述当日车辆工时数据表进行数据质量检测及失败恢复,还包括:
当判断出所述当日车辆工时数据表中的数据符合要求,则判定为当日数据正常,并发送到业务数据库。
可选地,所述判断车辆上传的原始数据与记录的车辆表中哪一个出现问题,并对出现问题的数据进行恢复,具体包括以下步骤:
若判断出车辆上传的原始数据的数据量远少于之前正常日期的数据量,则表示步骤二异常,需要重启离线计算程序;
若判断出车辆上传的原始数据的数据量正常,且车辆表中的车辆数远少于预设值,则说明车辆表有缺失,导致工况缺失,需要重新拉取车辆表后重启离线计算程序。
可选地,所述利用实时计算程序解析所述原始工况报文,获得与原始工况报文中工况字段和数值对应的字符串,存储后形成字符串类型的存储数据,具体为:
终端会根据设定每隔一段时间上传包含车辆工况信息的原始报文,原始报文会先被发送到网关,经网关确认终端为终端表中有记录的终端之后;
由实时计算程序根据车辆对应通信协议与功能集将原始报文转换为工况字段和数值对应的字符串,并存入HDFS中,形成字符串类型的存储数据。
可选地,所述将字符串类型的存储数据转化为数据库类型的工况数据具体为:
利用数据仓库抽取、转化、加载、计算所述字符串类型的存储数据,将其转化为数据库类型的工况数据。
第二方面,本发明提供了一种存储介质,其上存储有计算机程序,该程序被处理器执行时实现第一方面任一项所述方法的步骤。
与现有技术相比,本发明的有益效果:
本发明能够在每日工作时间离线计算后自动针对挖掘机工作时间离线计算数据进行检测,如果当日工作时间数据量正常且符合业务需求,则按时导入事业部数据库方便车主进行查询比对。当数据出现数据量缺失、因出现错误上传数据导致计算结果偏差错误等情况时,会自动识别诊断故障原因进行结果分析,并针对故障的原因进行数据恢复重算,在流程结束之后继续进行诊断,确认无误后导入业务库,能够有效避免因为出现缺失或偏差计算后工作时间数据直接导入业务库,导致客户使用错误数据,也能够提高针对缺失偏差计算处理的及时性。
附图说明
为了使本发明的内容更容易被清楚地理解,下面根据具体实施例并结合附图,对本发明作进一步详细的说明,其中:
图1为本发明一种实施例的车辆工时离线计算方法的流程示意图;
图2为本发明一种实施例的数据质量检测及失败恢复的流程示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明的保护范围。
下面结合附图对本发明的应用原理作详细的描述。
实施例1
本发明实施例中一种车辆工时离线计算方法,如图1所示,包括以下步骤:
步骤一、接收原始工况报文;所述原始工况报文包括终端(即车辆)根据通信协议定时上传的车辆工况信息,所述车辆工况信息包括如行驶轨迹、经纬度、时间、油耗、里程、总工作时间等信息,以便统计相应数据;
步骤二、利用实时计算程序解析所述原始工况报文,获得与原始工况报文中工况字段和数值对应的字符串,存储至HDFS后形成字符串类型的存储数据;
步骤三、将所述字符串类型的存储数据转化为数据库类型的工况数据;在具体实施过程中,所述步骤三具体为利用数据仓库抽取、转化、加载、计算所述字符串类型的存储数据,将其转化为数据库类型的工况数据;
步骤四、利用离线计算程序,基于所述数据库类型的工况数据,以及业务需求,进行统计分析,获得当日车辆工时数据表;
步骤五、对所述当日车辆工时数据表进行数据质量检测及失败恢复,并将获得的统计数据转发至业务库。
在本发明实施例的一种具体实施方式中,所述利用实时计算程序解析所述原始工况报文,获得与原始工况报文中工况字段和数值对应的字符串,存储后形成字符串类型的存储数据,具体为:
终端会根据设定每隔一段时间上传包含车辆工况信息的原始报文,原始报文会先被发送到网关,经网关确认终端为终端表中有记录的终端之后;
由实时计算程序根据车辆对应通信协议与功能集将原始报文转换为工况字段和数值对应的字符串,并存入HDFS中,形成字符串类型的存储数据。
在本发明实施例的一种具体实施方式中,如图2所示,所述对所述当日车辆工时数据表进行数据质量检测及失败恢复,具体包括:
根据数据规则检测当日车辆工时数据表;
当判断出所述当日车辆工时数据表中的数据符合要求,则判定为当日数据正常,并发送到业务数据库;
当判断出所述当日车辆工时数据表中的数据不符合要求,则判断工况表中数据量是否正常;所述工况表的数据是通过对记录不同公司的车辆表按公司分类解析得来;
若数据量正常,说明步骤一至步骤三正常,步骤四异常,则需要重启离线计算程序;
若数据量不正常,说明步骤一至步骤三中某一步骤出现异常,则判断车辆上传的原始数据与记录的车辆表中哪一个出现问题,并对出现问题的数据进行恢复。
在本发明实施例的一种具体实施方式中,所述数据规则具体包括以下:
当日车辆工时数据表的车辆数量应与记录所有车辆的车辆表一致,若车辆当日没有工作且未上传车辆工况信息,则该车辆当日工时应为累计使用昨日的总工作时间;
若今日发动机累计总工时减去昨日发动机累计总工时大于今日工时,则说明原始数据存在工况数据的跳变,需要按照车辆上传的GPS时间顺序将车辆工况信息排序,如果两条车辆工况信息的发动机累计总工时信息之差大于GPS时间,或者随着时间的增加发动机累计总工时降低,则说明该条数据为无效跳变数据,需要剔除该无效跳变数据。
在本发明实施例的一种具体实施方式中,所述判断车辆上传的原始数据与记录的车辆表中哪一个出现问题,并对出现问题的数据进行恢复,具体包括以下步骤:
若判断出车辆上传的原始数据的数据量远少于之前正常日期的数据量,则表示步骤二异常,需要重启离线计算程序;
若判断出车辆上传的原始数据的数据量正常,且车辆表中的车辆数远少于预设值,则说明车辆表有缺失,导致工况缺失,需要重新拉取车辆表后重启离线计算程序。
下面结合一具体实施方式对本发明实施例中的方法的具体流程进行详细说明。
S10 :终端上传原始工况报文;
车辆终端根据通信协议定时上传车辆工况信息,所述车辆工况信息包括如行驶轨迹、经纬度、时间、油耗、里程、总工作时间等信息,以便统计相应数据。
S20 :实时计算程序解析原始工况报文,并存入HDFS。
车辆终端根据设定每隔一段时间上传包含车辆工况信息的原始报文,上传的原始报文先发送到网关,经网关确认终端为终端表中有记录的终端之后,由实时计算程序根据车辆对应通信协议与功能集将原始报文转换为工况字段和数值对应的字符串并存入HDFS中,形成字符串类型的存储数据。
S30 :数据仓库抽取转化加载计算所需工况字段;
字符串类型的存储数据存储在HDFS之后,会经过抽取、转化、加载的过程,过滤掉重复信息和无效工况,并将字符串类型的存储数据转化为数据库类型的工况数据,以便后续计算。
S40 :每日离线计算统计数据;
车辆终端根据需要统计的维度,每天将当日车辆上传的车辆工况信息根据既定的逻辑业务需求进行统计分析,最终得出车辆当日的工时统计信息。
S50 :统计数据转发业务库数据质量检测及失败恢复。
每天计算完成之后需要对数据结果进行检测,符合正常计算的结果之后导入业务库,否则需对错误进行溯源,在失败的步骤处进行恢复并在计算完成后导入业务库;
S60:统计数据转发业务库。
计算完成之后,将每日数据转发到挖掘机业务数据库,方便页面统计展示及客户查询。
其中,步骤S50具体包括以下子步骤:
步骤S501:根据数据规则检测当日挖掘机车辆工时数据表;数据需要符合以下要求:
当日车辆工时数据表中的车辆数量应该和记录所有车辆的车辆表一致,为方便客户查询使用,即使车辆当日没有工作且未上传车辆工况信息,也应该将车辆当日工作时间置零并累计使用昨日的总工作时间。
车辆表当日工时与前一日发动机累计总工时之和等于当日发动机累计总工时,以确保数据的连续性,如果今日发动机累计总工时减去昨日发动机累计总工时大于今日工作时间,则说明原始数据存在工况数据的跳变,需要针对工况数据进行进一步的比对分析 ,按照车辆上传的GPS时间顺序将车辆工况信息排序,如果两条工况的发动机累计总总工时信息之差大于GPS时间,或者随着时间的增加发动机累计总工时降低,则说明该条数据为无效跳变数据,需要剔除 跳变数据对总工时的影响。
本步骤中的数据检测针对挖掘机车辆的具体工作情况和客户使用习惯,有针对性的使用了数据检验方法。
步骤S502:根据步骤S501判断当日车辆表数据是否符合要求,如果是,判断为当日数据正常,可以发送到业务数据库;如果否,转步骤步骤S503。
步骤S503:每日车辆工作时间数据由包含车辆当日上传所有工况数据的工况表计算而来,因此在当日离线计算的工作时间结果不符合要求时,需先判断数据来源是否有误,即判断工况表中数据量是否正常。查询当日工况与前几日工况的对比,若数据量正常,则说明步骤一至步骤三正常,而步骤四的离线计算任务步骤出现异常失败,需要重启离线计算程序。若工况表数据量明显少于前几日,则说明步骤一至步骤三中某一步骤出现错误,转步骤S504进行下一步判断。
步骤S504:若工况表中的数据量异常,则需要判断车辆上传的原始数据和记录公司分类的车辆表中哪一个出现问题;其中,工况表中的数据由记录不同公司的车辆表按公司分类解析得来。
首先对车辆上传的原始数据数据量进行判断,如果数据量远少于之前正常日期的数据量,则是HDFS数据搬运出错,需要重新搬运当日数据后重启离线计算流程。
如果原始数据量正常,且车辆表车辆远少于预设值,则说明车辆表缺失车辆导致工况缺失,需要从事业部平台重新拉取车辆表数据后重启离线计算流程。
实施例2
基于与实施例1相同的发明构思,本发明实施例中提供了一种存储介质,其上存储有计算机程序,该程序被处理器执行时实现实施例1中任一项所述方法的步骤。
以上显示和描述了本发明的基本原理和主要特征和本发明的优点。本行业的技术人员应该了解,本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下,本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等效物界定。

Claims (8)

1.一种车辆工时离线计算方法,其特征在于,包括:
步骤一、接收车辆上传的原始工况报文;
步骤二、利用实时计算程序解析所述原始工况报文,获得与原始工况报文中工况字段和数值对应的字符串,存储后形成字符串类型的存储数据;
步骤三、将所述字符串类型的存储数据转化为数据库类型的工况数据;
步骤四、利用离线计算程序,基于所述数据库类型的工况数据,以及业务需求,进行统计分析,获得当日车辆工时数据表;
步骤五、对所述当日车辆工时数据表进行数据质量检测及失败恢复,并将获得的统计数据转发至业务库。
2.根据权利要求1所述的一种车辆工时离线计算方法,其特征在于:所述对所述当日车辆工时数据表进行数据质量检测及失败恢复,具体包括:
根据数据规则检测当日车辆工时数据表;
当判断出所述当日车辆工时数据表中的数据不符合要求,则判断工况表中数据量是否正常;所述工况表中的数据是通过对记录不同公司的车辆表按公司分类解析得来;
若数据量正常,说明步骤一至步骤三正常,步骤四异常,则需要重启离线计算程序;
若数据量不正常,说明步骤一至步骤三中某一步骤出现异常,则判断车辆上传的原始数据与记录的车辆表中哪一个出现问题,并对出现问题的数据进行恢复。
3.根据权利要求2所述的一种车辆工时离线计算方法,其特征在于,所述原始工况报文中包括车辆工况信息;所述数据规则检测包括:
当日车辆工时数据表的车辆数量应与记录所有车辆的车辆表一致,若车辆当日没有工作且未上传车辆工况信息,则该车辆当日工时应为累计使用昨日的总工作时间;
若今日发动机累计总工时减去昨日发动机累计总工时大于今日工时,则说明原始数据存在工况数据的跳变,需要按照车辆上传的GPS时间顺序将车辆工况信息排序,如果两条车辆工况信息的发动机累计总工时信息之差大于GPS时间,或者随着时间的增加发动机累计总工时降低,则说明该条数据为无效跳变数据,需要剔除该无效跳变数据。
4.根据权利要求2所述的一种车辆工时离线计算方法,其特征在于:所述对所述当日车辆工时数据表进行数据质量检测及失败恢复,还包括:
当判断出所述当日车辆工时数据表中的数据符合要求,则判定为当日数据正常,并发送到业务数据库。
5.根据权利要求2所述的一种车辆工时离线计算方法,其特征在于:所述判断车辆上传的原始数据与记录的车辆表中哪一个出现问题,并对出现问题的数据进行恢复,具体包括以下步骤:
若判断出车辆上传的原始数据的数据量远少于之前正常日期的数据量,则表示步骤二异常,需要重启离线计算程序;
若判断出车辆上传的原始数据的数据量正常,且车辆表中的车辆数远少于预设值,则说明车辆表有缺失,导致工况缺失,需要重新拉取车辆表后重启离线计算程序。
6.根据权利要求1所述的一种车辆工时离线计算方法,其特征在于:所述利用实时计算程序解析所述原始工况报文,获得与原始工况报文中工况字段和数值对应的字符串,存储后形成字符串类型的存储数据,具体为:
终端会根据设定每隔一段时间上传包含车辆工况信息的原始报文,原始报文会先被发送到网关,经网关确认终端为终端表中有记录的终端之后;
由实时计算程序根据车辆对应通信协议与功能集将原始报文转换为工况字段和数值对应的字符串,并存入HDFS中,形成字符串类型的存储数据。
7.根据权利要求1所述的一种车辆工时离线计算方法,其特征在于:所述将字符串类型的存储数据转化为数据库类型的工况数据具体为:
利用数据仓库抽取、转化、加载、计算所述字符串类型的存储数据,将其转化为数据库类型的工况数据。
8.一种存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1-7任一项所述方法的步骤。
CN202210244751.2A 2022-03-14 2022-03-14 一种车辆工时离线计算方法及存储介质 Active CN114637786B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210244751.2A CN114637786B (zh) 2022-03-14 2022-03-14 一种车辆工时离线计算方法及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210244751.2A CN114637786B (zh) 2022-03-14 2022-03-14 一种车辆工时离线计算方法及存储介质

Publications (2)

Publication Number Publication Date
CN114637786A true CN114637786A (zh) 2022-06-17
CN114637786B CN114637786B (zh) 2023-06-06

Family

ID=81948312

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210244751.2A Active CN114637786B (zh) 2022-03-14 2022-03-14 一种车辆工时离线计算方法及存储介质

Country Status (1)

Country Link
CN (1) CN114637786B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140201213A1 (en) * 2010-11-03 2014-07-17 Scott A. Jackson System and method for ranking asset data probability of recovery
US20160188616A1 (en) * 2014-12-29 2016-06-30 M-Files Oy Method and an apparatus and a computer program product for storing electronic objects for offline use
CN106502772A (zh) * 2016-10-09 2017-03-15 国网浙江省电力公司信息通信分公司 基于分布式离线技术的电量数据批量高速处理方法及系统
CN108415408A (zh) * 2018-03-16 2018-08-17 宁波杉杉汽车有限公司 基于can通讯的汽车报文解析及故障诊断方法
CN110047014A (zh) * 2019-01-04 2019-07-23 国网浙江省电力有限公司电力科学研究院 一种基于负荷曲线和历史电量的用户电量数据修复方法
CN110517084A (zh) * 2019-08-27 2019-11-29 重庆长安汽车股份有限公司 车辆功能活跃度分析方法及系统
CN110987083A (zh) * 2019-12-23 2020-04-10 北京蜂云科创信息技术有限公司 一种基于车联网对车辆排放数据监测的方法和设备
CN112650889A (zh) * 2020-12-28 2021-04-13 中国兵器装备集团自动化研究所 一种企业安全环保及安防监控数据的数仓建设方法和系统
CN114116281A (zh) * 2021-11-11 2022-03-01 上汽通用五菱汽车股份有限公司 车辆can数据处理方法、系统、装置及可读存储介质

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140201213A1 (en) * 2010-11-03 2014-07-17 Scott A. Jackson System and method for ranking asset data probability of recovery
US20160188616A1 (en) * 2014-12-29 2016-06-30 M-Files Oy Method and an apparatus and a computer program product for storing electronic objects for offline use
CN106502772A (zh) * 2016-10-09 2017-03-15 国网浙江省电力公司信息通信分公司 基于分布式离线技术的电量数据批量高速处理方法及系统
CN108415408A (zh) * 2018-03-16 2018-08-17 宁波杉杉汽车有限公司 基于can通讯的汽车报文解析及故障诊断方法
CN110047014A (zh) * 2019-01-04 2019-07-23 国网浙江省电力有限公司电力科学研究院 一种基于负荷曲线和历史电量的用户电量数据修复方法
CN110517084A (zh) * 2019-08-27 2019-11-29 重庆长安汽车股份有限公司 车辆功能活跃度分析方法及系统
CN110987083A (zh) * 2019-12-23 2020-04-10 北京蜂云科创信息技术有限公司 一种基于车联网对车辆排放数据监测的方法和设备
CN112650889A (zh) * 2020-12-28 2021-04-13 中国兵器装备集团自动化研究所 一种企业安全环保及安防监控数据的数仓建设方法和系统
CN114116281A (zh) * 2021-11-11 2022-03-01 上汽通用五菱汽车股份有限公司 车辆can数据处理方法、系统、装置及可读存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
沈非凡;宋执环;葛志强;: "多变量轨迹分析的过程故障检测方法" *

Also Published As

Publication number Publication date
CN114637786B (zh) 2023-06-06

Similar Documents

Publication Publication Date Title
CN102902752B (zh) 一种日志监控方法及系统
CN101739292B (zh) 基于应用特征的异构集群作业自适应调度方法和系统
CN101902505A (zh) 一种分布式dns查询日志的实时统计装置及方法
CN113946294B (zh) 一种分布式储存系统及其数据处理方法
CN111400288A (zh) 数据质量检查方法及系统
CN113010505A (zh) 一种水环境大数据清洗方法
CN111881164B (zh) 基于边缘计算和路径分析的数据处理方法及大数据云平台
CN112181940A (zh) 全国工商大数据处理系统的构建方法
CN112100510A (zh) 基于车联网平台的海量数据查询方法和装置
CN114637786B (zh) 一种车辆工时离线计算方法及存储介质
CN116775632A (zh) 一种基于车载终端采集数据的近实时清洗数据执行方法
CN113806343A (zh) 一种车联网数据质量的评估方法和系统
US20210026821A1 (en) Data cleansing system and method
CN112561388A (zh) 一种基于物联网的信息处理方法、装置及设备
CN116600329A (zh) 一种消息错误识别码定界方法及装置
CN108170825B (zh) 基于云平台的分布式能源数据监控清洗方法
CN116186053A (zh) 一种数据处理方法、装置及存储介质
CN111813833B (zh) 一种实时二度通联关系数据挖掘的方法
CN108710573A (zh) 一种基于日志埋点的测试方法、装置、存储介质及终端
CN110532253B (zh) 一种业务分析方法、系统及集群
CN113886202A (zh) 车辆日志的分析方法、系统、装置、介质及车辆
CN103309929A (zh) 存储和检索数据的方法和系统
CN113761103A (zh) 批量数据的处理方法、装置及电子设备
CN112148562A (zh) 一种基于分布式系统的接口及其关系的分析方法
CN111158870A (zh) 一种管理数据库的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant