CN104809246B - 充电数据的处理方法及装置 - Google Patents

充电数据的处理方法及装置 Download PDF

Info

Publication number
CN104809246B
CN104809246B CN201510250815.XA CN201510250815A CN104809246B CN 104809246 B CN104809246 B CN 104809246B CN 201510250815 A CN201510250815 A CN 201510250815A CN 104809246 B CN104809246 B CN 104809246B
Authority
CN
China
Prior art keywords
data
vehicle
charge
charge data
abnormal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510250815.XA
Other languages
English (en)
Other versions
CN104809246A (zh
Inventor
张禄
潘鸣宇
孙舟
梁飞宇
陈艳霞
张宝群
李香龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
State Grid Corp of China SGCC
State Grid Beijing Electric Power Co Ltd
Original Assignee
State Grid Corp of China SGCC
State Grid Beijing Electric Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by State Grid Corp of China SGCC, State Grid Beijing Electric Power Co Ltd filed Critical State Grid Corp of China SGCC
Priority to CN201510250815.XA priority Critical patent/CN104809246B/zh
Publication of CN104809246A publication Critical patent/CN104809246A/zh
Application granted granted Critical
Publication of CN104809246B publication Critical patent/CN104809246B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/215Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Electric Propulsion And Braking For Vehicles (AREA)

Abstract

本发明公开了一种充电数据的处理方法及装置。其中,该方法包括:根据充电桩地址从充电桩获取车辆的充电数据,其中,所述充电数据包括以下至少之一:充电时间、充电电量以及充电电度变化;对所述车辆的充电数据进行整合;对整合之后的车辆的充电数据进行处理,生成异常数据。本发明解决了充电交易数据分散存储在各个交易记录表中,对充电数据进行处理时,操作繁琐导致效率低的技术问题。

Description

充电数据的处理方法及装置
技术领域
本发明涉及电力信息领域,具体而言,涉及一种充电数据的处理方法及装置。
背景技术
随着电动汽车产业的不断发展,电动汽车相关信息系统的不断建设,电动汽车的充电交易数据量的不断增加,如何有效的集中存储分析这些数据,形成数据集中管理,资源统一共享的应用模式,并从中挖掘数据的潜在价值,是目前时事所需。
目前,北京市从明年各个充电桩获取的电动汽车充电交易记录已经超过500万条,上述大量的电动汽车交易记录被分散的存储在各个交易记录表中,如果欲分析充电集中时间、充电电量增量情况、充电电度变化情况等信息时,便需要对多个交易记录表格中的数据按照要求进行分割与汇总。现有技术中,只能手动设置需要的计算公式并逐一输入待处理的数据进行计算,然后再以手工方式将计算结果数据填入电子表格中。由于需要计算的数据对象的数据量通常都很庞大,这就需要通过手工进行大量繁琐的重复性操作,不仅浪费了时间和精力,还降低了工作效率,而且会导致出错率很高。
针对上述充电交易数据分散存储在各个交易记录表中,对充电数据进行处理时,操作繁琐导致效率低的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种充电数据的处理方法及装置,以至少解决充电交易数据分散存储在各个交易记录表中,对充电数据进行处理时,操作繁琐导致效率低的技术问题。
根据本发明实施例的一个方面,提供了一种充电数据的处理方法,该方法包括:根据充电桩地址从充电桩获取车辆的充电数据,其中,所述充电数据包括以下至少之一:充电时间、充电电量以及充电电度变化;对所述车辆的充电数据进行整合;对整合之后的车辆的充电数据进行处理,生成异常数据。
根据本发明实施例的另一方面,还提供了一种充电数据的处理装置,该装置包括:获取模块,用于根据充电桩地址从充电桩获取车辆的充电数据,其中,所述充电数据包括以下至少之一:充电时间、充电电量以及充电电度变化;整合模块,用于对所述车辆的充电数据进行整合;处理模块,用于对整合之后的车辆的充电数据进行处理,生成异常数据。
在本发明实施例中,采用根据充电桩地址从充电桩获取车辆的充电数据,其中,所述充电数据包括以下至少之一:充电时间、充电电量以及充电电度变化;对所述车辆的充电数据进行整合;对整合之后的车辆的充电数据进行处理,生成异常数据,从而实现了提高充电数据处理的效率的技术效果,进而解决了充电交易数据分散存储在各个交易记录表中,对充电数据进行处理时,操作繁琐导致效率低的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例一的充电数据的处理方法的流程图;以及
图2是根据本发明实施例二的充电数据的处理装置的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本发明实施例,提供了一种充电数据的处理方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
实施例一
图1是根据本发明实施例一的充电数据的处理方法的流程图,如图1所示,该方法包括如下步骤:
步骤S102,根据充电桩地址从充电桩获取车辆的充电数据,其中,充电数据包括以下至少之一:充电时间、充电电量以及充电电度变化。需要说明的是,上述充电数据可以为充电交易数据。
具体地,在本方案中,可以先获取各个充电桩的地址,通过各个充电桩的地址来获取各个充电桩的充电数据,可选地,上述各个充电桩的信息可以包括如下任意一个:充电时间、充电电量以及充电电度变化。
在一种可选的实施例中,本方案可以根据多个充电桩的充电时间分析生成用户集中充电的时间,根据不同时间的充电桩的充电电量来分析生成充电电量增量情况,根据充电电度数据来分析生成充电电度的变化情况。
步骤S104,对车辆的充电数据进行整合。
具体地,在本方案中,在获取到上述的充电数据之后,可以对大量的充电数据进行整合,需要说明的是,由于大量的充电数据来源比较分散且数据类型不统一,这就需要对数据进行整合。
在一种可选的实施例中,可以将大量的充电数据预先存储在交易记录表中,再对交易记录表中的数据进行整合。
步骤S106,对整合之后的车辆的充电数据进行处理,生成异常数据。
具体地,在本方案中,可在对大量的车辆的充电数据进行整合之后,可以对整合之后的充电数据进行分析处理,生成异常数据,需要说明的是,由于上述对大量的充电交易数据进行整合,因此,对整合之后的充电数据处理的速度加快,效率增高。
需要说明的是,利用整合之后的车辆的充电数据生成异常数据只是本方案的一种可选的实施例,本方案也可以利用上述已经整合的充电数据来生成用户的用电习惯数据等。
本实施例通过对充电交易数据进行整合,然后对整合后的充电交易数据进行处理生成异常数据,解决了充电交易数据分散存储在各个交易记录表中,对充电数据进行处理时,操作繁琐导致效率低的问题。
可选地,上述异常数据可以包括如下至少一个:充电电量异常、电费计算异常、充电结算异常、充电桩电表地址异常。
可选地,在步骤S104,对车辆的充电数据进行整合之前,本实施例提供的方法还可以包括:
S103,采用如下至少之一的方式来存储车辆的充电数据:列数据库、键值数据库、内存数据库及分布式文件系统。
具体地,在本方案中,本方案用到数据存储技术中的列数据库、键值数据库、内存数据库及分布式文件系统来处理电动汽车交易数据。其中,列数据库可以采用了以数据列为单位进行存储的模型,该存储模型非常有利于对数据库进行高效的压缩从而减少数据规模利于电动汽车数据存储。键值数据库为一种NoSQL(非关系型数据库)模型,其数据按照键值对的形式进行组织、索引和存储,能有效减少读写磁盘的次数,比SQL数据库存储拥有更好读写性能。内存数据库可以将数据放在内存中直接操作的数据库。需要说明的是,上述内存数据库相对于磁盘,内存的数据读写速度要高出几个数量级。采用分布式文件系统来存储车辆的充电数据为通过网络使用每台机器上的磁盘空间,并将这些分散的存储资源即充电数据构成一个虚拟的存储设备以实现充电数据的的分散存储。
可选地,步骤S104,对车辆的充电数据进行整合的步骤可以包括:
步骤S1041,对车辆的充电数据进行整合,使得车辆的充电数据的数据类型统一,其中,整合的方式包括如下至少之一:流数据总线、数据连接器、PIG、HIVE。
具体地,由于电动汽车交易数据来源比较分散且数据类型不统一,这就需要对数据经行整合。本实施例中提到的电动汽车交易数据整合技术用到流数据总线、数据连接器、PIG、HIVE等。其中,流数据总线是一个分布式、可靠、和高可用的海量流数据获取汇集技术,用于收集流数据,同时对充电数据进行简单处理,并发送到各种数据接受方便于对电动汽车数据进行数据获取。数据连接器用在在关系数据库和hadoop非关系型数据库间相互传输充电数据,从而实现不同的数据结构之间的相互转化。PIG基于Hadoop提供SQL-like语言叫Pig Latin,该语言的编译器会把类SQL的数据分析请求转换为一系列经过优化处理的MapReduce运算。HIVE基于Hadoop提供一个数据仓库工具,可以将非结构化的数据文件映射为一张数据库表,并提供完整的sql查询功能。
可选地,步骤S106,对整合之后的车辆的充电数据进行处理,生成异常数据的步骤可以包括:
步骤S1061,采用并行数据处理的方式对整合之后的车辆的充电数据进行处理,生成异常数据;或
步骤S1062,采用流计算的方式对整合之后的车辆的充电数据进行处理,生成异常数据。
需要说明的是,在上述步骤S1061和S1062中,由于充电桩时钟跳变、异常充电、窃电等情况,造成电动汽车交易数据存在异常情况,在对电动汽车交易数据进行数据挖掘分析前,需进行以下几种方式的数据处理,确保数据准确性。
并行数据处理(M/R):是一种分布式计算框架,将复杂分布式处理过程分解为Map和Reduce过程,提高并发处理能力。
流计算:对具有时效性的流式数据进行的计算,计算的结果在数据出现之后立即得出,主要用于处理具有时效性的海量流式数据。
综上,通过本方案,在对充电数据进行处理的过程中,准确发现充电电量异常、电费计算异常、充电结算异常、充电桩电表地址异常等若干异常情况。
实施例二
本发明还可以提供一种充电数据的处理装置,如图2所示,该装置可以包括:
获取模块20,用于根据充电桩地址从充电桩获取车辆的充电数据,其中,充电数据包括以下至少之一:充电时间、充电电量以及充电电度变化。整合模块22,用于对车辆的充电数据进行整合。处理模块24,用于对整合之后的车辆的充电数据进行处理,生成异常数据。
本实施例通过对充电交易数据进行整合,然后对整合后的充电交易数据进行处理生成异常数据,解决了充电交易数据分散存储在各个交易记录表中,对充电数据进行处理时,操作繁琐导致效率低的问题。
可选地,上述异常数据可以包括以下至少一个:、
充电电量异常、电费计算异常、充电结算异常、充电桩电表地址异常。
可选地,本实施例提供的装置还可以包括:存储模块,用于采用如下至少之一的方式来存储车辆的充电数据:列数据库、键值数据库、内存数据库及分布式文件系统。
可选地,上述存储模块可以包括:子存储模块,用于将车辆的充电数据分散存储于多个不同磁盘。
可选地,上述整合模块可以包括:子整合模块,用于对车辆的充电数据进行整合,使得车辆的充电数据的数据类型统一,其中,整合的方式包括如下至少之一:流数据总线、数据连接器、PIG、HIVE。
可选地,上述处理模块可以包括:第一子处理模块,用于采用并行数据处理的方式对整合之后的车辆的充电数据进行处理,生成异常数据。或第二子处理模块,用于采用流计算的方式对整合之后的车辆的充电数据进行处理,生成异常数据。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种充电数据的处理方法,其特征在于,包括:
根据充电桩地址从充电桩获取车辆的充电数据,其中,所述充电数据包括以下至少之一:充电时间、充电电量以及充电电度变化;
对所述车辆的充电数据进行整合;
对整合之后的车辆的充电数据进行处理,生成异常数据,
其中,所述异常数据包括以下至少一个:
充电电量异常、电费计算异常、充电结算异常、所述充电桩电表地址异常。
2.根据权利要求1所述的方法,其特征在于,在对所述车辆的充电数据进行整合之前,所述方法还包括:
采用如下至少之一的方式来存储所述车辆的充电数据:列数据库、键值数据库、内存数据库及分布式文件系统。
3.根据权利要求2所述的方法,其特征在于,采用分布式文件系统存储所述车辆的充电数据的步骤包括:
将所述车辆的充电数据分散存储于多个不同磁盘。
4.根据权利要求3所述的方法,其特征在于,对所述车辆的充电数据进行整合的步骤包括:
对所述车辆的充电数据进行整合,使得所述车辆的充电数据的数据类型统一,其中,整合的方式包括如下至少之一:流数据总线、数据连接器、PIG、HIVE。
5.根据权利要求4所述的方法,其特征在于,对整合之后的车辆的充电数据进行处理,生成异常数据的步骤包括:
采用并行数据处理的方式对所述整合之后的车辆的充电数据进行处理,生成异常数据;或
采用流计算的方式对所述整合之后的车辆的充电数据进行处理,生成异常数据。
6.一种充电数据的处理装置,其特征在于,包括:
获取模块,用于根据充电桩地址从充电桩获取车辆的充电数据,其中,所述充电数据包括以下至少之一:充电时间、充电电量以及充电电度变化;
整合模块,用于对所述车辆的充电数据进行整合;
处理模块,用于对整合之后的车辆的充电数据进行处理,生成异常数据,
其中,所述异常数据包括以下至少一个:
充电电量异常、电费计算异常、充电结算异常、所述充电桩电表地址异常。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
存储模块,用于采用如下至少之一的方式来存储所述车辆的充电数据:列数据库、键值数据库、内存数据库及分布式文件系统。
8.根据权利要求7所述的装置,其特征在于,所述存储模块包括:
子存储模块,用于将所述车辆的充电数据分散存储于多个不同磁盘。
9.根据权利要求8所述的装置,其特征在于,所述整合模块包括:
子整合模块,用于对所述车辆的充电数据进行整合,使得所述车辆的充电数据的数据类型统一,其中,整合的方式包括如下至少之一:流数据总线、数据连接器、PIG、HIVE。
10.根据权利要求9所述的装置,其特征在于,所述处理模块包括:
第一子处理模块,用于采用并行数据处理的方式对所述整合之后的车辆的充电数据进行处理,生成异常数据;或
第二子处理模块,用于采用流计算的方式对所述整合之后的车辆的充电数据进行处理,生成异常数据。
CN201510250815.XA 2015-05-15 2015-05-15 充电数据的处理方法及装置 Active CN104809246B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510250815.XA CN104809246B (zh) 2015-05-15 2015-05-15 充电数据的处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510250815.XA CN104809246B (zh) 2015-05-15 2015-05-15 充电数据的处理方法及装置

Publications (2)

Publication Number Publication Date
CN104809246A CN104809246A (zh) 2015-07-29
CN104809246B true CN104809246B (zh) 2019-03-26

Family

ID=53694068

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510250815.XA Active CN104809246B (zh) 2015-05-15 2015-05-15 充电数据的处理方法及装置

Country Status (1)

Country Link
CN (1) CN104809246B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106130772B (zh) * 2016-06-29 2019-01-08 浙江万马新能源有限公司 基于对等网络的充电桩数据存储方法及其存储装置
CN107390056B (zh) * 2017-07-20 2019-11-05 万帮充电设备有限公司 检测充电桩的方法及系统
CN108769088B (zh) * 2018-03-14 2021-01-08 维沃移动通信有限公司 一种通信方法及通信装置
CN109146689A (zh) * 2018-08-30 2019-01-04 国网北京市电力公司 一种电动汽车数据评估方法及装置
CN109624772B (zh) * 2018-11-21 2021-11-05 国电科技新能源(深圳)有限公司 一种充电桩运营管理方法及充电桩
CN111047388A (zh) * 2019-10-31 2020-04-21 深圳猛犸电动科技有限公司 一种充电数据的拼接方法、装置及服务器

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010069078A1 (en) * 2008-12-19 2010-06-24 Intelligent Mechatronic Systems Inc. Monitoring of power charging in vehicle
KR101319312B1 (ko) * 2010-12-31 2013-10-16 한국과학기술원 비접촉식 전기구동 이동체를 위한 전기 요금의 과금 방법 및 장치
CN102520695B (zh) * 2011-12-20 2014-06-25 Tcl集团股份有限公司 电动车远程控制系统和电动车状态上报及其控制查询方法
CN103391208A (zh) * 2012-05-10 2013-11-13 北京基业达电气有限公司 电动汽车充电站城域网络管理系统
CN103716173B (zh) * 2012-09-29 2017-12-01 中国石油化工股份有限公司 一种存储监控系统及监控告警发布的方法
CN103559647A (zh) * 2013-10-28 2014-02-05 国家电网公司 电动汽车充电站空余充电位自动发布装置及方法
CN104392379A (zh) * 2014-10-24 2015-03-04 浪潮软件集团有限公司 一种基于网络发票的大数据应用

Also Published As

Publication number Publication date
CN104809246A (zh) 2015-07-29

Similar Documents

Publication Publication Date Title
CN104809246B (zh) 充电数据的处理方法及装置
CN110199273B (zh) 用于在多维数据库环境中的一次扫描中进行加载、聚合和批量计算的系统和方法
CN104767813B (zh) 基于openstack的公众行大数据服务平台
CN107145586B (zh) 一种基于电力营销数据的标签产出方法和装置
CN105574730A (zh) 基于物联网大数据平台的智能用户画像方法及装置
CN103778148B (zh) Hadoop分布式文件系统数据文件的生命周期管理方法和设备
CN105023196A (zh) 充电站充电交易数据的分析方法及装置
CN108446210A (zh) 系统性能的度量方法、存储介质和服务器
CN106155791A (zh) 一种分布式环境下的工作流任务调度方法
CN107590181A (zh) 一种大数据的智能分析系统
CN104156811A (zh) 一种基于云海os的账单生成方法
CN103605607B (zh) 一种软件复杂度分析系统及方法
CN104036139A (zh) 一种移动对象轨迹监测方法
CN106445645B (zh) 用于执行分布式计算任务的方法和装置
CN102346901A (zh) 一种互联网药品交易主体信用评估系统及其方法
CN111753034A (zh) 一种一站式地理大数据平台
CN106406985B (zh) 分布式计算框架和分布式计算方法
Vrbić Data mining and cloud computing
CN109360106A (zh) 画像构建方法、系统、介质和计算机系统
CN104573074A (zh) 基于医院数据的高速计算分析方法
CN103853844A (zh) 基于Hadoop的关系表非冗余键集合识别方法
CN202486780U (zh) 基于云计算的信息检索系统
CN113254517A (zh) 一种基于互联网大数据的服务提供方法
CN102902739B (zh) 云计算环境下面向不确定数据源的工作流视图构造方法
CN103455556B (zh) 存储单元数据裁剪方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant