CN110019434A - 物联网数据处理方法、装置、平台及存储介质 - Google Patents
物联网数据处理方法、装置、平台及存储介质 Download PDFInfo
- Publication number
- CN110019434A CN110019434A CN201810969886.9A CN201810969886A CN110019434A CN 110019434 A CN110019434 A CN 110019434A CN 201810969886 A CN201810969886 A CN 201810969886A CN 110019434 A CN110019434 A CN 110019434A
- Authority
- CN
- China
- Prior art keywords
- data
- plug
- internet
- unit
- things
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2462—Approximate or statistical queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/248—Presentation of query results
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Probability & Statistics with Applications (AREA)
- General Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Fuzzy Systems (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明公开了一种物联网数据处理方法,包括以下步骤:创建数据处理任务,并配置所述数据处理任务的第一配置选项,所述第一配置选项包括数据处理插件与数据字段;执行所述数据处理任务,基于所述数据字段,从物联网数据库中读取对应原始数据,调用所述数据处理插件对所述原始数据进行加工处理,得到任务加工数据并存入所述物联网数据库。本发明还公开了一种物联网数据处理装置、物联网管理平台以及计算机可读存储介质。本发明实现了数据处理方式与物联网终端类型的解耦,进而避免了物联网数据处理方式与物联网管理平台之间的耦合,保证了物联网管理平台运行的独立性与稳定性。
Description
技术领域
本发明涉及物联网技术领域,尤其涉及一种物联网数据处理方法、装置以及物联网管理平台、计算机可读存储介质。
背景技术
随着物联网技术的不断发展,物联网解决方案开始被一些企业部署到实际生产环境中,为企业提供完善的数据采集、检测、统计分析、集中管理等功能。物联网设备数据的统计分析和展示是物联网管理平台的一项重要功能,它能够将物联网终端的上报数据进行一定的计算处理后生成报表数据,而通过这些报表数据可对终端设备的状态进行把控以及对资源的利用进行管理。
目前,由于不同类型的物联网终端的数据意义不一样,进而导致数据的统计方式存在差别,比如统计温度数据的总和是没有意义的,而统计总电量数据一般都是必须的。因此,物联网管理平台对于物联网数据的统计分析基本采用如下解决方案:针对具体类型终端设备开发对应的数据统计分析方法,然而,这种方案具有很大的局限性。
第一,物联网终端设备千差万别,针对具体设备类型来开发数据统计分析方法会增大平台服务商的工作量。管理平台如果要对新接入的某种类型的设备进行统计分析,需要重新为其开发统计方法。
第二,物联网平台内置固有数据统计分析方法的方式导致平台可扩展性差,无法支持不同客户的个性化要求并且后续维护困难。
发明内容
本发明的主要目的在于提供一种物联网数据处理方法、装置以及物联网管理平台、计算机可读存储介质,旨在解决如何降低或解除物联网数据处理方式与物联网管理平台之间的耦合的技术问题。
为实现上述目的,本发明提供一种物联网数据处理方法,所述物联网数据处理方法包括以下步骤:
创建数据处理任务,并配置所述数据处理任务的第一配置选项,所述第一配置选项包括数据处理插件与数据字段;
执行所述数据处理任务,基于所述数据字段,从物联网数据库中读取对应原始数据,调用所述数据处理插件对所述原始数据进行加工处理,得到任务加工数据并存入所述物联网数据库。
可选地,所述数据处理插件的封装内容包括:数据统计方式、第一数据展现方式以及第一插件脚本;
所述数据处理插件对所述原始数据进行加工处理,得到任务加工数据的实现方式包括:
所述第一插件脚本基于所述数据统计方式对所述原始数据进行统计,得到统计结果数据,基于所述第一数据展现方式对所述统计结果数据进行包装,得到任务加工数据。
可选地,所述物联网数据处理方法还包括:
创建数据报表,并配置所述数据报表的第二配置选项,所述第二配置选项包括数据源、第二数据展现方式、图表展示插件、统计时间范围与统计对象;
以所述统计时间范围与统计对象为数据筛选条件,从所述物联网数据库中读取与所述数据源对应且符合所述数据筛选条件的任务加工数据;
基于所述第二数据展现方式,对读取的所述任务加工数据进行包装,得到报表数据并输出至所述图表展示插件;
调用所述图表展示插件对所述报表数据进行渲染展示。
可选地,所述图表展示插件的封装内容包括:图表展示样式、插件支持的数据格式以及第二插件脚本;
所述图表展示插件对所述报表数据进行渲染展示的实现方式包括:所述第二插件脚本基于所述图表展示样式,对所述报表数据进行渲染展示;
所述物联网数据处理方法还包括:在配置所述数据报表时,判断所述第二数据展现方式对应的输出数据格式是否与所述图表展示插件支持的数据格式相同或兼容,若否,则提示配置有误。
进一步地,为实现上述目的,本发明还提供一种物联网数据处理装置,所述物联网数据处理装置包括:
任务创建程序模块,用于创建数据处理任务,并配置所述数据处理任务的第一配置选项,所述第一配置选项包括数据处理插件与数据字段;
数据加工程序模块,用于执行所述数据处理任务,基于所述数据字段,从物联网数据库中读取对应的原始数据,调用所述数据处理插件对所述原始数据进行加工处理,得到任务加工数据并存入所述物联网数据库。
可选地,所述物联网数据处理装置还包括:
报表创建程序模块,用于创建数据报表,并配置所述数据报表的第二配置选项,所述第二配置选项包括数据源、第二数据展现方式、图表展示插件、统计时间范围与统计对象;
数据读取程序模块,用于以所述统计时间范围与统计对象为数据筛选条件,从所述物联网数据库中读取与所述数据源对应且符合所述数据筛选条件的任务加工数据;
数据包装程序模块,用于基于所述第二数据展现方式,对读取的所述任务加工数据进行包装,得到报表数据并输出至所述图表展示插件;
图表展示程序模块,用于调用所述图表展示插件对所述报表数据进行渲染展示。
可选地,所述数据处理插件的封装内容包括:数据统计方式、第一数据展现方式以及第一插件脚本;其中,所述数据处理插件对所述原始数据进行加工处理,得到任务加工数据的实现方式包括:
所述第一插件脚本基于所述数据统计方式对所述原始数据进行统计,得到统计结果数据,基于所述第一数据展现方式对所述统计结果数据进行包装,得到任务加工数据;和/或
所述图表展示插件的封装内容包括:图表展示样式、插件支持的数据格式以及第二插件脚本;其中,所述图表展示插件对所述报表数据进行渲染展示的实现方式包括:所述第二插件脚本基于所述图表展示样式,对所述报表数据进行渲染展示;
所述报表创建程序模块还用于:在配置所述数据报表时,判断所述第二数据展现方式对应的输出数据格式是否与所述图表展示插件支持的数据格式相同或兼容,若否,则提示配置有误。
可选地,所述物联网数据处理装置还包括:
插件管理程序模块,用于存储所述数据处理插件与所述图表展示插件并进行插件管理操作,所述插件管理操作包括:查看插件、删除插件、新增插件、升级更新插件中的一种或多种;
其中,所述数据处理插件与所述图表展示插件独立于所述物联网数据处理装置并基于同一套自定义协议编码生成。
进一步地,为实现上述目的,本发明还提供一种物联网管理平台,所述物联网管理平台包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的物联网数据处理程序,所述物联网数据处理程序被所述处理器执行时实现如上述任一项所述的物联网数据处理方法的步骤。
进一步地,为实现上述目的,本发明还提供一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有物联网数据处理程序,所述物联网数据处理程序被处理器执行时实现如上述任一项所述的物联网数据处理方法的步骤。
本发明将物联网数据的统计分析方法封装成数据处理插件,并且数据处理插件只负责根据设计的统计分析方式对数据进行处理而不识别数据的具体意义,因而与具体的物联网终端设备的类型无关。物联网管理平台只需通过配置数据处理任务的方式而将数据处理插件与具体的终端设备类型的数据字段进行绑定,并且数据处理任务只处理该类型终端设备的此数据字段的数据,进而实现了数据处理方式与物联网终端类型的解耦,避免了物联网数据处理方式与物联网管理平台之间的耦合,保证了物联网管理平台运行的独立性与稳定性。
附图说明
图1为本发明物联网管理平台实施例方案涉及的设备硬件运行环境的结构示意图;
图2为本发明物联网数据处理方法第一实施例的流程示意图;
图3为本发明物联网数据处理方法第二实施例的流程示意图;
图4为本发明物联网数据处理装置第一实施例的功能模块示意图;
图5为本发明物联网数据处理装置第二实施例的功能模块示意图;
图6为本发明物联网数据处理装置第三实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
本发明提供一种物联网管理平台。
参照图1,图1为本发明物联网管理平台实施例方案涉及的设备硬件运行环境的结构示意图。
本发明实施例的物联网管理平台可以是计算机、服务器等设备。
如图1所示,该物联网管理平台可以包括:处理器1001,例如CPU,通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储设备。
本领域技术人员可以理解,图1中示出的物联网管理平台的硬件结构并不构成对物联网管理平台的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机可读存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及物联网数据处理程序。其中,操作系统是管理和控制物联网管理平台与软件资源的程序,支持网络通信模块、用户接口模块、物联网数据处理程序以及其他程序或软件的运行;网络通信模块用于管理和控制网络接口1004;用户接口模块用于管理和控制用户接口1003。
在图1所示的物联网管理平台硬件结构中,网络接口1004主要用于连接系统后台,与系统后台进行数据通信;用户接口1003主要用于连接物联网终端,与物联网终端进行数据通信;物联网管理平台通过处理器1001调用存储器1005中存储的物联网数据处理程序,并执行以下操作:
创建数据处理任务,并配置所述数据处理任务的第一配置选项,所述第一配置选项包括数据处理插件与数据字段;
执行所述数据处理任务,基于所述数据字段,从物联网数据库中读取对应原始数据,调用所述数据处理插件对所述原始数据进行加工处理,得到任务加工数据并存入所述物联网数据库。
进一步地,物联网管理平台通过处理器1001调用存储器1005中存储的物联网数据处理程序还执行以下操作:
创建数据报表,并配置所述数据报表的第二配置选项,所述第二配置选项包括数据源、第二数据展现方式、图表展示插件、统计时间范围与统计对象;
以所述统计时间范围与统计对象为数据筛选条件,从所述物联网数据库中读取与所述数据源对应且符合所述数据筛选条件的任务加工数据;
基于所述第二数据展现方式,对读取的所述任务加工数据进行包装,得到报表数据并输出至所述图表展示插件;
调用所述图表展示插件对所述报表数据进行渲染展示。
基于上述物联网管理平台的硬件结构,提出本发明物联网数据处理方法的以下各实施例。
参照图2,图2为本发明物联网数据处理方法第一实施例的流程示意图。本实施例中,所述物联网数据处理方法包括以下步骤:
步骤S10,创建数据处理任务,并配置所述数据处理任务的第一配置选项,所述第一配置选项包括数据处理插件与数据字段;
本实施例中,物联网管理平台通过创建并配置数据处理任务的方式,将数据处理插件和具体的物联网终端设备类型的数据字段进行绑定,且通过数据处理插件实现数据处理任务,数据处理插件只对绑定的数据字段对应原始数据进行统计处理。
本实施例中,数据处理插件为可执行脚本程序,可在兼容的物联网管理平台上运行,用于对物联网数据进行相关统计处理。
数据字段具体指物联网数据库中存储的物联网终端数据表中的表字段。物联网终端是物联网中实现数据采集及发送的设备,物联网终端采集的原始数据以数据表形式存储在物联网数据库中。例如,监视器数据表、门禁数据表、电箱用电表等,每一张数据表包含多个数据字段,同一张数据表对应存储一个或多个具有相同设备类型的终端设备的采集数据。
步骤S20执行所述数据处理任务,基于所述数据字段,从物联网数据库中读取对应原始数据,调用所述数据处理插件对所述原始数据进行加工处理,得到任务加工数据并存入所述物联网数据库。
本实施例中,物联网管理平台在执行数据处理任务时,先基于配置项中配置的数据字段,从物联网数据库中读取对应原始数据;然后再调用配置项对应的数据处理插件,对读取的原始数据进行加工处理,并得到对应的任务加工数据,该加工数据实质为中间数据而并非用户看到的最终数据,因而需要将任务加工数据存入物联网数据库中,以待导出另做它用或者形成图表形式的数据报表进行直观展示。
本实施例对于数据处理插件加工处理原始数据的方式不限,具体根据实际统计需要进行设置。
本实施例将物联网数据的统计分析方法封装成数据处理插件,并且数据处理插件只负责根据设计的统计分析方式对数据进行处理而不识别数据的具体意义,因而与具体的物联网终端设备的类型无关。物联网管理平台只需通过配置数据处理任务的方式而将数据处理插件与具体的终端设备类型的数据字段进行绑定,并且数据处理任务只处理该类型终端设备的此数据字段的数据,进而实现了数据处理方式与物联网终端类型的解耦,避免了物联网数据处理方式与物联网管理平台之间的耦合,保证了物联网管理平台运行的独立性与稳定性。
参照图3,图3为本发明物联网数据处理方法第二实施例的流程示意图。基于上述实施例,本实施例中,所述物联网数据处理方法还包括:
步骤S30,创建数据报表,并配置所述数据报表的第二配置选项,所述第二配置选项包括数据源、第二数据展现方式、图表展示插件、统计时间范围与统计对象;
为便于了解各物联网终端的运行情况,物联网管理平台还提供数据报表功能,以供通过图表形式展示各物联网终端的运行情况。
本实施例中,物联网管理平台通过创建并配置数据报表的方式来对数据进行直观的图表展示。
本实施例中,数据源是指数据报表的数据来源,具体为执行数据处理任务后所生成的任务加工数据;第二数据展现方式用于规定数据的包装方式和输出数据格式;图表展示插件为可执行脚本程序,可在兼容的物联网管理平台上运行,用于将物联网数据通过图表形式进行直观展示;时间范围指数据报表需要展示的数据所对应的生成时间段;统计对象是指数据报表中数据所对应的终端设备,可以是单个设备,也可以是同一类型的多个设备组。
步骤S40,以所述统计时间范围与统计对象为数据筛选条件,从所述物联网数据库中读取与所述数据源对应且符合所述数据筛选条件的任务加工数据;
步骤S50,基于所述第二数据展现方式,对读取的所述任务加工数据进行包装,得到报表数据并输出至所述图表展示插件;
步骤S60,调用所述图表展示插件对所述报表数据进行渲染展示。
本实施例中,物联网管理平台通过以配置数据报表的方式对统计结果进行展示,数据报表以数据处理任务的结果为数据源,通过时间范围和具体的统计对象来筛选数据,通过数据展现方式对筛选数据进行包装输出,最后通过图表展示插件对最终形成的报表数据进行渲染展示,从而便于管理人员直观了解统计对象的运行情况。
本实施例中,物联网管理平台还支持将生成的报表数据以指定格式(比如pdf、excel等)进行导出而便于其他运用。本实施例对于图表展示插件对报表数据进行渲染展示的方式不限,具体根据实际统计需要进行设置。
进一步地,为解决现有技术中物联网数据处理方式与物联网管理平台之间的耦合问题,本发明提供一套标准统计分析和展示协议,用来规范数据处理插件以及图表展示插件的实现,使插件只与协议相关而与管理平台无关,只要插件支持管理平台当前的协议,那么插件便可以在管理平台上正常工作。通过协议来让插件和管理平台互相独立,使得向管理平台扩充插件或升级平台的当前插件都能够在不升级平台的情况下进行,从而降低了升级管理平台所带来的风险。
本发明中,插件可根据标准统计分析和展示协议的规定独立开发,只要插件遵循的协议与关联平台的协议相同或兼容,那么插件便能在管理平台进行上传、更新以及正常工作,并且,此标准统计分析和展示协议还能够不断升级并保持向下兼容,进而使得管理平台能够不断满足新的管理需求。
本解决方案从统计分析和展现协议出发,通过协议规范插件,以数据处理插件配置数据处理任务,以数据处理任务和图表展示插件配置数据报表,进而保证了物联网管理平台运行的独立性与稳定性。
可选的,在一实施例中,所述数据处理插件的封装内容包括:
(1)数据统计方式
数据统计方式是指数据处理插件以何种方式来统计原始的设备数据,比如统计总和、统计均值等。
(2)第一数据展现方式
第一数据展现方式是表示数据以什么方式或维度来展现,比如按照趋势展现、按照设备排名展现等,是一种计算方法,用于实现数据包装并转换为特定格式输出,一般来说,一种数据处理插件可以有多种展现方式。
(3)第一插件脚本
第一插件脚本用于基于数据统计方式、第一数据展现方式,对读取的数据进行统计运算处理。
可选的,数据处理插件对原始数据进行加工处理,得到任务加工数据的实现方式包括:第一插件脚本首先基于数据统计方式对原始数据进行统计,得到统计结果数据;然后再基于第一数据展现方式对统计结果数据进行包装,得到任务加工数据。
可选的,在另一实施例中,图表展示插件的封装内容包括:
(1)图表展示样式
图表展示样式具体是指图表的展示格式,比如柱状图、条形图、饼图、环形图、线形图、面积图、雷达图等的展示格式,比如面积图的XY轴坐标的数值意义、数值单位等,饼图的颜色等。
(2)插件支持的数据格式
插件支持的数据格式具体指插件对应图表所支持的数据格式,比如数字、字符串等,用于规定图表展示插件的输入数据格式。在配置数据报表时,物联网管理平台判断第二数据展现方式对应的输出数据格式是否与图表展示插件支持的数据格式相同或兼容,若是,则数据报表可以配置成功,若否,则数据报表不能配置成功。
(3)第二插件脚本
第二插件脚本用于基于图表展示样式、对所述报表数据进行渲染展示。
进一步地,为便于对插件进行管理,本发明物联网管理平台还提供插件管理功能。
在物联网管理平台的插件库中安装有多个数据处理插件与多个图表展示插件,用户可以查看本管理平台支持的所有插件(包括数据插件和图表插件),以及插件对应的名称、版本、功能描述等信息。此外,插件库还可以通过联网自动更新或者手动导入升级包的方式来进行升级或进行插件安装,以不断丰富和更新插件库。
参照图4,图4为本发明物联网数据处理装置第一实施例的功能模块示意图。本实施例中,所述物联网数据处理装置包括:
任务创建程序模块10,用于创建数据处理任务,并配置所述数据处理任务的第一配置选项,所述第一配置选项包括数据处理插件与数据字段;
本实施例中,物联网数据处理装置通过创建并配置数据处理任务的方式,将数据处理插件和具体的物联网终端设备类型的数据字段进行绑定,且通过数据处理插件实现数据处理任务,数据处理插件只对绑定的数据字段对应原始数据进行统计处理。
本实施例中,数据处理插件为可执行脚本程序,可在兼容的物联网管理平台上运行,用于对物联网数据进行相关统计处理。
数据字段具体指物联网数据库中存储的物联网终端数据表中的表字段。物联网终端是物联网中实现数据采集及发送的设备,物联网终端采集的原始数据以数据表形式存储在物联网数据库中。例如,监视器数据表、门禁数据表、电箱用电表等,每一张数据表包含多个数据字段,同一张数据表对应存储一个或多个具有相同设备类型的终端设备的采集数据。
数据加工程序模块20,用于执行所述数据处理任务,基于所述数据字段,从物联网数据库中读取对应的原始数据,调用所述数据处理插件对所述原始数据进行加工处理,得到任务加工数据并存入所述物联网数据库。
本实施例中,物联网数据处理装置在执行数据处理任务时,先基于配置项中配置的数据字段,从物联网数据库中读取对应原始数据;然后再调用配置项对应的数据处理插件,对读取的原始数据进行加工处理,并得到对应的任务加工数据,该加工数据实质为中间数据而并非用户看到的最终数据,因而需要将任务加工数据存入物联网数据库中,以待导出另做它用或者形成图表形式的数据报表进行直观展示。
本实施例对于数据处理插件加工处理原始数据的方式不限,具体根据实际统计需要进行设置。
本实施例将物联网数据的统计分析方法封装成数据处理插件,并且数据处理插件只负责根据设计的统计分析方式对数据进行处理而不识别数据的具体意义,因而与具体的物联网终端设备的类型无关。物联网数据处理装置只需通过配置数据处理任务的方式而将数据处理插件与具体的终端设备类型的数据字段进行绑定,并且数据处理任务只处理该类型终端设备的此数据字段的数据,进而实现了数据处理方式与物联网终端类型的解耦,避免了物联网数据处理方式与物联网数据处理装置之间的耦合,保证了物联网数据处理装置运行的独立性与稳定性。
参照图5,图5为本发明物联网数据处理装置第二实施例的功能模块示意图。基于上述实施例,本实施例中,所述物联网数据处理装置还包括:
报表创建程序模块30,用于创建数据报表,并配置所述数据报表的第二配置选项,所述第二配置选项包括数据源、第二数据展现方式、图表展示插件、统计时间范围与统计对象;
为便于了解各物联网终端的运行情况,物联网数据处理装置还提供数据报表功能,以供通过图表形式展示各物联网终端的运行情况。
本实施例中,物联网数据处理装置通过创建并配置数据报表的方式来对数据进行直观的图表展示。
本实施例中,数据源是指数据报表的数据来源,具体为执行数据处理任务后所生成的任务加工数据;第二数据展现方式用于规定数据的包装方式和输出数据格式;图表展示插件为可执行脚本程序,可在兼容的物联网管理平台上运行,用于将物联网数据通过图表形式进行直观展示;时间范围指数据报表需要展示的数据所对应的生成时间段;统计对象是指数据报表中数据所对应的终端设备,可以是单个设备,也可以是同一类型的多个设备组。
数据读取程序模块40,用于以所述统计时间范围与统计对象为数据筛选条件,从所述物联网数据库中读取与所述数据源对应且符合所述数据筛选条件的任务加工数据;
数据包装程序模块50,用于基于所述第二数据展现方式,对读取的所述任务加工数据进行包装,得到报表数据并输出至所述图表展示插件;
图表展示程序模块60,用于调用所述图表展示插件对所述报表数据进行渲染展示。
本实施例中,物联网数据处理装置通过以配置数据报表的方式对统计结果进行展示,数据报表以数据处理任务的结果为数据源,通过时间范围和具体的统计对象来筛选数据,通过数据展现方式对筛选数据进行包装输出,最后通过图表展示插件对最终形成的报表数据进行渲染展示,从而便于管理人员直观了解统计对象的运行情况。
本实施例中,物联网数据处理装置还支持将生成的报表数据以指定格式(比如pdf、excel等)进行导出而便于其他运用。本实施例对于图表展示插件对报表数据进行渲染展示的方式不限,具体根据实际统计需要进行设置。
进一步地,为解决现有技术中物联网数据处理方式与物联网数据处理装置之间的耦合问题,本发明提供一套标准统计分析和展示协议,用来规范数据处理插件以及图表展示插件的实现,使插件只与协议相关而与物联网数据处理装置无关,只要插件支持物联网数据处理装置当前的协议,那么插件便可以在物联网数据处理装置上正常工作。通过协议来让插件和物联网数据处理装置互相独立,使得向物联网数据处理装置扩充插件或升级物联网数据处理装置的当前插件都能够在不升级物联网数据处理装置的情况下进行,从而降低了升级物联网数据处理装置所带来的风险。
本发明中,插件可根据标准统计分析和展示协议的规定独立开发,只要插件遵循的协议与关联物联网数据处理装置的协议相同或兼容,那么插件便能在物联网数据处理装置进行上传、更新以及正常工作,并且,此标准统计分析和展示协议还能够不断升级并保持向下兼容,进而使得物联网数据处理装置能够不断满足新的管理需求。
本解决方案从统计分析和展现协议出发,通过协议规范插件,以数据处理插件配置数据处理任务,以数据处理任务和图表展示插件配置数据报表,进而保证了物联网数据处理装置运行的独立性与稳定性。
进一步地,参照图6,图6为本发明物联网数据处理装置第三实施例的功能模块示意图。基于上述实施例,本实施例中,为便于对插件进行管理,本发明物联网数据处理装置还包括:
插件管理程序模块70,用于存储所述数据处理插件与所述图表展示插件并进行插件管理操作,所述插件管理操作包括:查看插件、删除插件、新增插件、升级更新插件中的一种或多种。
本实施例中,在物联网数据处理装置的插件库中安装有多个数据处理插件与多个图表展示插件,用户可以查看本物联网数据处理装置支持的所有插件(包括数据插件和图表插件),以及插件对应的名称、版本、功能描述等信息。此外,插件库还可以通过联网自动更新或者手动导入升级包的方式来进行升级或进行插件安装,以不断丰富和更新插件库。
进一步地,在本发明物联网数据处理装置一实施例中,数据处理插件的封装内容包括:数据统计方式、第一数据展现方式以及第一插件脚本;其中,数据处理插件对原始数据进行加工处理,得到任务加工数据的实现方式包括:
第一插件脚本基于数据统计方式对原始数据进行统计,得到统计结果数据,基于第一数据展现方式对统计结果数据进行包装,得到任务加工数据。
进一步地,在本发明物联网数据处理装置另一实施例中,图表展示插件的封装内容包括:图表展示样式、插件支持的数据格式以及第二插件脚本;其中,图表展示插件对报表数据进行渲染展示的实现方式包括:第二插件脚本基于图表展示样式,对报表数据进行渲染展示;
报表创建程序模块还用于:在配置数据报表时,判断第二数据展现方式对应的输出数据格式是否与图表展示插件支持的数据格式相同或兼容,若否,则提示配置有误。
本发明还提供一种计算机可读存储介质。
本发明的计算机可读存储介质上存储有物联网数据处理程序,所述物联网数据处理程序被处理器执行时实现如上述任一项实施例中所述的物联网数据处理方法的步骤。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,这些均属于本发明的保护之内。
Claims (10)
1.一种物联网数据处理方法,其特征在于,所述物联网数据处理方法包括以下步骤:
创建数据处理任务,并配置所述数据处理任务的第一配置选项,所述第一配置选项包括数据处理插件与数据字段;
执行所述数据处理任务,基于所述数据字段,从物联网数据库中读取对应原始数据,调用所述数据处理插件对所述原始数据进行加工处理,得到任务加工数据并存入所述物联网数据库。
2.如权利要求1所述的物联网数据处理方法,其特征在于,所述数据处理插件的封装内容包括:数据统计方式、第一数据展现方式以及第一插件脚本;
所述数据处理插件对所述原始数据进行加工处理,得到任务加工数据的实现方式包括:
所述第一插件脚本基于所述数据统计方式对所述原始数据进行统计,得到统计结果数据,基于所述第一数据展现方式对所述统计结果数据进行包装,得到任务加工数据。
3.如权利要求1或2所述的物联网数据处理方法,其特征在于,所述物联网数据处理方法还包括:
创建数据报表,并配置所述数据报表的第二配置选项,所述第二配置选项包括数据源、第二数据展现方式、图表展示插件、统计时间范围与统计对象;
以所述统计时间范围与统计对象为数据筛选条件,从所述物联网数据库中读取与所述数据源对应且符合所述数据筛选条件的任务加工数据;
基于所述第二数据展现方式,对读取的所述任务加工数据进行包装,得到报表数据并输出至所述图表展示插件;
调用所述图表展示插件对所述报表数据进行渲染展示。
4.如权利要求3所述的物联网数据处理方法,其特征在于,所述图表展示插件的封装内容包括:图表展示样式、插件支持的数据格式以及第二插件脚本;
所述图表展示插件对所述报表数据进行渲染展示的实现方式包括:所述第二插件脚本基于所述图表展示样式,对所述报表数据进行渲染展示;
所述物联网数据处理方法还包括:在配置所述数据报表时,判断所述第二数据展现方式对应的输出数据格式是否与所述图表展示插件支持的数据格式相同或兼容,若否,则提示配置有误。
5.一种物联网数据处理装置,其特征在于,所述物联网数据处理装置包括:
任务创建程序模块,用于创建数据处理任务,并配置所述数据处理任务的第一配置选项,所述第一配置选项包括数据处理插件与数据字段;
数据加工程序模块,用于执行所述数据处理任务,基于所述数据字段,从物联网数据库中读取对应的原始数据,调用所述数据处理插件对所述原始数据进行加工处理,得到任务加工数据并存入所述物联网数据库。
6.如权利要求5所述的物联网数据处理装置,其特征在于,所述物联网数据处理装置还包括:
报表创建程序模块,用于创建数据报表,并配置所述数据报表的第二配置选项,所述第二配置选项包括数据源、第二数据展现方式、图表展示插件、统计时间范围与统计对象;
数据读取程序模块,用于以所述统计时间范围与统计对象为数据筛选条件,从所述物联网数据库中读取与所述数据源对应且符合所述数据筛选条件的任务加工数据;
数据包装程序模块,用于基于所述第二数据展现方式,对读取的所述任务加工数据进行包装,得到报表数据并输出至所述图表展示插件;
图表展示程序模块,用于调用所述图表展示插件对所述报表数据进行渲染展示。
7.如权利要求6所述的物联网数据处理装置,其特征在于,所述数据处理插件的封装内容包括:数据统计方式、第一数据展现方式以及第一插件脚本;其中,所述数据处理插件对所述原始数据进行加工处理,得到任务加工数据的实现方式包括:
所述第一插件脚本基于所述数据统计方式对所述原始数据进行统计,得到统计结果数据,基于所述第一数据展现方式对所述统计结果数据进行包装,得到任务加工数据;和/或
所述图表展示插件的封装内容包括:图表展示样式、插件支持的数据格式以及第二插件脚本;其中,所述图表展示插件对所述报表数据进行渲染展示的实现方式包括:所述第二插件脚本基于所述图表展示样式,对所述报表数据进行渲染展示;
所述报表创建程序模块还用于:在配置所述数据报表时,判断所述第二数据展现方式对应的输出数据格式是否与所述图表展示插件支持的数据格式相同或兼容,若否,则提示配置有误。
8.如权利要求5至7中任一项所述的物联网数据处理装置,其特征在于,所述物联网数据处理装置还包括:
插件管理程序模块,用于存储所述数据处理插件与所述图表展示插件并进行插件管理操作,所述插件管理操作包括:查看插件、删除插件、新增插件、升级更新插件中的一种或多种;
其中,所述数据处理插件与所述图表展示插件独立于所述物联网数据处理装置并基于同一套自定义协议编码生成。
9.一种物联网管理平台,其特征在于,所述物联网管理平台包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的物联网数据处理程序,所述物联网数据处理程序被所述处理器执行时实现如权利要求1-4中任一项所述的物联网数据处理方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有物联网数据处理程序,所述物联网数据处理程序被处理器执行时实现如权利要求1-4中任一项所述的物联网数据处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810969886.9A CN110019434A (zh) | 2018-08-23 | 2018-08-23 | 物联网数据处理方法、装置、平台及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810969886.9A CN110019434A (zh) | 2018-08-23 | 2018-08-23 | 物联网数据处理方法、装置、平台及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110019434A true CN110019434A (zh) | 2019-07-16 |
Family
ID=67188445
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810969886.9A Pending CN110019434A (zh) | 2018-08-23 | 2018-08-23 | 物联网数据处理方法、装置、平台及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110019434A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114531437A (zh) * | 2022-02-14 | 2022-05-24 | 镁佳(北京)科技有限公司 | 一种基于mqtt的非同源上行数据处理方法及装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102142007A (zh) * | 2010-11-23 | 2011-08-03 | 北京中创信测科技股份有限公司 | 一种通用统计方法和装置 |
CN104317624A (zh) * | 2014-11-04 | 2015-01-28 | 南京联创科技集团股份有限公司 | 基于插件处理的数据装配方法 |
CN106557470A (zh) * | 2015-09-24 | 2017-04-05 | 腾讯科技(北京)有限公司 | 数据提取方法和装置 |
CN106775689A (zh) * | 2016-12-05 | 2017-05-31 | 广发证券股份有限公司 | 一种大数据应用开发的系统及方法 |
CN107665233A (zh) * | 2017-07-24 | 2018-02-06 | 上海壹账通金融科技有限公司 | 数据库数据处理方法、装置、计算机设备和存储介质 |
-
2018
- 2018-08-23 CN CN201810969886.9A patent/CN110019434A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102142007A (zh) * | 2010-11-23 | 2011-08-03 | 北京中创信测科技股份有限公司 | 一种通用统计方法和装置 |
CN104317624A (zh) * | 2014-11-04 | 2015-01-28 | 南京联创科技集团股份有限公司 | 基于插件处理的数据装配方法 |
CN106557470A (zh) * | 2015-09-24 | 2017-04-05 | 腾讯科技(北京)有限公司 | 数据提取方法和装置 |
CN106775689A (zh) * | 2016-12-05 | 2017-05-31 | 广发证券股份有限公司 | 一种大数据应用开发的系统及方法 |
CN107665233A (zh) * | 2017-07-24 | 2018-02-06 | 上海壹账通金融科技有限公司 | 数据库数据处理方法、装置、计算机设备和存储介质 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114531437A (zh) * | 2022-02-14 | 2022-05-24 | 镁佳(北京)科技有限公司 | 一种基于mqtt的非同源上行数据处理方法及装置 |
CN114531437B (zh) * | 2022-02-14 | 2023-02-17 | 镁佳(北京)科技有限公司 | 一种基于mqtt的非同源上行数据处理方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106528129B (zh) | 一种Web应用界面生成系统及方法 | |
JP5282324B2 (ja) | ユーザーインターフェースデータのためのデータコンテナ | |
CN107766132A (zh) | 多任务调度方法、应用服务器及计算机可读存储介质 | |
CN106569801A (zh) | 一种基于复杂参数的组态化显控系统 | |
CN106022007B (zh) | 面向生物组学大数据计算的云平台系统及方法 | |
CN109240688A (zh) | 界面开发方法、电子装置及可读存储介质 | |
CN112751692A (zh) | 业务开通方法及装置 | |
CN108519952A (zh) | 一种分布式的web自动化测试系统及方法 | |
CN107689982A (zh) | 多数据源数据同步方法、应用服务器及计算机可读存储介质 | |
CN110347383A (zh) | 跨平台桌面应用的前端开发方法及装置 | |
CN1980144A (zh) | 一种大数据量网管数据快速配置的方法 | |
CN109981322A (zh) | 基于标签的云资源管理的方法和装置 | |
CN109508319A (zh) | 一种3d跨平台资源管理系统和方法 | |
CN115993966B (zh) | 应用开发系统及方法 | |
CN110400067A (zh) | 一种通用资产管理的方法及系统 | |
CN109840074B (zh) | 一种业务生成方法、装置及网络设备 | |
CN102915403B (zh) | 一种计算机平台设备参数可视化图形编辑配置方法 | |
CN110989891A (zh) | 一种图表编辑器中组件部署方法、图表编辑器及相关设备 | |
JP6909877B2 (ja) | ホワイトボックスotnハードウェアデバイスを実現する方法および装置、記憶媒体 | |
CN110019434A (zh) | 物联网数据处理方法、装置、平台及存储介质 | |
CN101192975B (zh) | 网络管理系统中的接入管理子系统 | |
CN112181409A (zh) | 一种应用构建方法、应用渲染方法及装置 | |
CN113347609B (zh) | 一种无线智能控制平台 | |
CN109360259A (zh) | 一种建筑模型的协同办公的云渲染方法 | |
CN113591448A (zh) | 报表生成方法、装置及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |