CN109951538A - 数据处理方法、装置、系统、电子设备及存储介质 - Google Patents
数据处理方法、装置、系统、电子设备及存储介质 Download PDFInfo
- Publication number
- CN109951538A CN109951538A CN201910169461.4A CN201910169461A CN109951538A CN 109951538 A CN109951538 A CN 109951538A CN 201910169461 A CN201910169461 A CN 201910169461A CN 109951538 A CN109951538 A CN 109951538A
- Authority
- CN
- China
- Prior art keywords
- data
- equipment
- user terminal
- gateway
- access request
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Computer And Data Communications (AREA)
Abstract
本申请公开了一种数据处理方法、装置、系统、电子设备及存储介质,该方法包括:获取用户终端发送的设备访问请求;根据设备访问请求,向网关请求并获取设备原始数据,设备原始数据为网关和/或子设备的原始数据;对设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据,通用数据交换格式为用户终端能够解析的数据格式;将设备通用数据进行备份保存,并向用户终端发送设备通用数据。本申请可以降低接入用户的技术要求,使用户方访问无需复杂计算,即可快速获得便于解析的设备数据,实现对设备数据的实时收集与监控。
Description
技术领域
本申请涉及智能家居技术领域,更具体地,涉及一种数据处理方法、装置、系统、电子设备及存储介质。
背景技术
随着网络技术的快速发展,智能终端设备数量和品类的爆炸性增长,使得设备间的连接和协同成为用户真实且迫切的需求。智慧生活的架构正在向连接和协同的方向前进,随之出现了智能家居。
智能家居是在互联网的影响之下物联化体现。智能家居通过物联网技术将家中的各种设备(如音视频设备、照明系统、窗帘控制、空调控制、安防系统、数字影院系统、影音服务器、影柜系统、网络家电等)连接到一起,提供家电控制、照明控制、电话远程控制、室内外遥控、防盗报警、环境监测、暖通控制、红外转发以及可编程定时控制等多种功能和手段。与普通家居相比,智能家居不仅具有传统的居住功能,兼备建筑、网络通信、信息家电、设备自动化,提供全方位的信息交互功能,甚至为各种能源费用节约资金。
目前,用户想要对智能家居中的各种设备进行对接,需要对不同设备的通讯协议进行了解,并对数据流进行解析,需要提供的技术支持较多,用户需要花费的人力、时间成本也相对较高,技术上的门槛对智能家居的普及产生了阻碍。
发明内容
鉴于上述问题,本申请提出了一种数据处理方法、装置、系统、电子设备及存储介质,可以降低接入用户的技术要求,使用户方访问无需复杂计算,即可快速获得便于解析的设备数据,实现对设备数据的实时收集与监控。
第一方面,本申请实施例提供了一种数据处理方法,适用于设备云平台,设备云平台分别与用户终端以及关联有子设备的网关通信连接,该方法包括:获取用户终端发送的设备访问请求;根据设备访问请求,向网关请求并获取设备原始数据,设备原始数据为网关和/或子设备的原始数据;对设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据,通用数据交换格式为用户终端能够解析的数据格式;将设备通用数据进行备份保存,并向用户终端发送设备通用数据。
第二方面,本申请实施例提供了一种数据处理装置,适用于设备云平台,设备云平台分别与用户终端以及关联有子设备的网关通信连接,该装置包括:请求获取模块,用于获取用户终端发送的设备访问请求;数据获取模块,用于根据设备访问请求,向网关请求并获取设备原始数据,设备原始数据为网关和/或子设备的原始数据;数据处理模块,用于对设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据,通用数据交换格式为用户终端能够解析的数据格式;数据返回模块,用于将设备通用数据进行备份保存,并向用户终端发送设备通用数据。
第三方面,本申请实施例提供了一种数据处理系统,其包括用户终端、设备云平台、网关以及子设备,设备云平台分别与用户终端和网关通信连接,网关与子设备通信连接,其中:设备云平台包括业务接口模块、数据缓存模块以及数据处理模块,业务接口模块用于获取用户终端基于https的post请求接口发送的设备访问请求,以及根据设备访问请求,向数据缓存模块请求缓存数据,数据缓存模块用于根据业务接口模块的请求查找是否存在与设备访问请求对应的缓存数据,并在存在时向业务接口模块返回命中的缓存数据,以及在不存在时向业务接口模块返回未命中结果,业务接口模块还用于根据未命中结果,向网关提交设备访问请求,数据处理模块用于将网关响应设备访问请求返回的设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据,设备原始数据为网关和/或子设备的原始数据,通用数据交换格式为json,数据缓存模块还用于将经过格式转换获得的设备通用数据进行备份保存,业务接口模块还用于将数据缓存模块返回的已命中的缓存数据和/或经过格式转换获得的设备通用数据发送至用户终端。
第四方面,本申请实施例提供了一种电子设备,其包括一个或多个处理器、存储器以及一个或多个应用程序,其中一个或多个应用程序被存储在存储器中并被配置为由一个或多个处理器执行,一个或多个程序配置用于执行如上述第一方面所述的方法。
第五方面,本申请实施例提供了一种计算机可读取存储介质,该计算机可读取存储介质中存储有程序代码,该程序代码可被处理器调用执行如上述第一方面所述的方法。
本申请实施例提供的数据处理方法、装置、系统、电子设备及存储介质,可先获取用户终端发送的设备访问请求,然后根据设备访问请求,向网关请求并获取设备原始数据,设备原始数据为网关和/或子设备的原始数据,再对设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据,通用数据交换格式为用户终端能够解析的数据格式,最后将设备通用数据进行备份保存,并向用户终端发送设备通用数据。本申请实施例通过设备云平台向用户提供了直接的控制与数据获取的请求接口,将网关及子设备的一系列上报以当前流行的通用数据交换格式实时推送至用户终端,可降低接入用户对技术支持的要求,并同时提升业务接口的响应速度,使用户方访问无需复杂计算,即可快速获得便于解析的设备数据,实现对设备数据的实时收集与监控。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了一种用户终端通过socket长连接的方式与网关进行数据交互的示意图;
图2示出了本申请一个实施例提供的数据处理方法的流程示意图;
图3示出了本申请又一个实施例提供的数据处理方法的流程示意图;
图4示出了本申请又一个实施例提供的数据处理方法中步骤S208相关的流程示意图;
图5示出了本申请实施例提供的数据处理装置的模块框图;
图6示出了本申请实施例提供的数据处理系统的模块框图;
图7示出了本申请实施例提供的数据处理系统的一种可能的交互示意图;
图8是本申请实施例的用于执行根据本申请实施例的数据处理方法的电子设备的框图;
图9是本申请实施例的用于保存或者携带实现根据本申请实施例的数据处理方法的程序代码的存储单元。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
随着网络技术的快速发展,智能终端设备数量和品类的爆炸性增长,使得设备间的连接和协同成为用户真实且迫切的需求。智慧生活的架构正在向连接和协同的方向前进,随之出现了智能家居。
智能家居是在互联网的影响之下物联化体现。智能家居通过物联网技术将家中的各种设备(如音视频设备、照明系统、窗帘控制、空调控制、安防系统、数字影院系统、影音服务器、影柜系统、网络家电等)连接到一起,提供家电控制、照明控制、电话远程控制、室内外遥控、防盗报警、环境监测、暖通控制、红外转发以及可编程定时控制等多种功能和手段。与普通家居相比,智能家居不仅具有传统的居住功能,兼备建筑、网络通信、信息家电、设备自动化,提供全方位的信息交互功能,甚至为各种能源费用节约资金。
发明人在研究中发现,目前,用户想要对智能家居中的各种设备进行控制或是获取设备数据,通常通过socket长连接(即整个通讯过程中,客户端和服务端只用一个socket对象,长期保持socket连接)的方式保持与网关的实时连接。图1示出了一种用户终端通过socket长连接的方式与网关进行数据交互的示意图。
如图1所示,用户终端想要对子设备进行控制,可先向透传服务器发送访问请求,透传服务器对用户请求进行转发至网关,网关再根据用户请求对子设备发布相应的控制指令,子设备响应网关指令后会向网关返回相关数据,网关再通过透传服务器将结果发送给用户终端。
然而,如图1所示的交互方式中,用户获取的是由网关及子设备返回的原始数据,如果想要对该信息进行分析,则需要对网关的通讯协议以及子设备与网关之间的通讯协议进行了解,并对原始数据流进行解析。
发明人经过进一步研究发现,目前的网关与各个子设备之间的通讯协议一般采用ZigBee协议(一种基于IEEE802.15.4标准的低功耗局域网协议),而网关通常通过API(Application Programming Interface,应用程序编程接口)协议向用户终端返回结果数据,其为十六进制的数据流,而用户终端与网关的socket连接通常以二进制数字流格式进行通信,这导致用户终端收到的由网关返回的数据并不是通用的数据格式,解析起来较为复杂,需要提供的硬件技术支持较多,而用户需要花费的人力、时间成本也相对较高。
为了解决上述的问题,发明人经过研究,提出了本申请实施例中的数据处理方法、装置、系统、电子设备及存储介质,可以降低接入用户的技术要求,使用户方访问无需复杂计算,即可快速获得便于解析的设备数据,实现对设备数据的实时收集与监控。
下面将通过具体实施例对本申请实施例提供的数据处理方法、装置、电子设备以及存储介质进行详细说明。
请参阅图2,图2示出了本申请一个实施例提供的数据处理方法的流程示意图。数据处理方法适用于设备云平台,设备云平台分别与用户终端以及关联有子设备的网关通信连接。数据处理方法可先获取用户终端发送的设备访问请求,然后根据设备访问请求,向网关请求并获取设备原始数据,设备原始数据为网关和/或子设备的原始数据,再对设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据,通用数据交换格式为用户终端能够解析的数据格式,最后将设备通用数据进行备份保存,并向用户终端发送设备通用数据,可降低接入用户对技术支持的要求,并同时提升业务接口的响应速度,使用户方访问无需复杂计算,即可快速获得便于解析的设备数据,实现对设备数据的实时收集与监控。在具体的实施例中,数据处理方法可应用于如图5所示的数据处理装置300以及配置有数据处理装置300的电子设备100(图8)。下面将针对图2所示的流程进行详细的阐述。上述的数据处理方法具体地可以包括以下步骤:
步骤S101:获取用户终端发送的设备访问请求。
本实施例中,用户终端可以是个人电脑、智能手机、平板电脑、智能手表等能够运行应用程序的电子设备,也可以是由多台计算机组成的服务器机组。用户可通过用户终端上安装的应用程序客户端,向设备云平台发送用于控制设备和/或获取设备数据的设备访问请求。
本实施例中,设备云平台可以是具有数据计算、存储、业务接口等功能的计算机组,其可用于对用户终端与网关和/或子设备之间的通信数据进行处理与传输。
步骤S102:根据设备访问请求,向网关请求并获取设备原始数据。
本实施例中,设备原始数据为网关和/或子设备的原始数据。
在传统的家庭环境中,家电设备之间通常是相互独立的,其不受其他设备的影响,具有独立的开关、工作状态调节等功能。为了解决传统家庭环境中家电设备操作繁琐、使用效率低的问题,智能家居系统通常由各种智能设备组成,为了统一管理所有的智能设备,需要一个设备对所有的智能设备进行集中管理,以实现操作的简化和智能设备的相互操作。
本实施例中,网关即是可以用于对多个子设备进行集中控制、管理的设备,其可与多个子设备通过ZigBee等通信协议建立通信连接,以便于向子设备发送控制命令和/或接收由子设备上报的设备数据。
本实施例中,子设备可以是智能家居中的各种智能设备,例如智能灯、智能门窗、智能电视机等,其通过与网关建立通信连接以接受网关的控制,并最终实现用户终端对子设备的控制。
本实施例中,设备原始数据,可以是用于反映设备(网关和/或子设备)当前的运行状态、通信状态、命令执行结果等信息的数据流。作为一种方式,向网关请求获取的设备原始数据可以是基于网关API协议的十六进制的数据流。
步骤S103:对设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据。
本实施例中,通用数据交换格式为用户终端能够解析的数据格式。可以理解的是,通用数据交换格式可以是当前流行的便于用户终端进行解析的数据格式,且通用数据交换格式可以满足较低的计算量、较快的解析速度,以使用户终端无需复杂计算,即可快速获得能够用于收集监控的设备信息。
作为一种方式,格式转换可以由设备云平台中用于计算的CPU(CentralProcessing Unit,中央处理器)、GPU(Graphics Processing Unit,图形处理器)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)等硬件进行,以将从网关获取的设备原始数据快速转换为便于用户终端进行解析的设备通用数据。
步骤S104:将设备通用数据进行备份保存,并向用户终端发送设备通用数据。
本实施例中,在将从网关获取的设备原始数据转换为便于用户终端进行解析的设备通用数据后,可将该设备通用数据进行备份,并进行保存,再将该设备通用数据发送给用户终端,以使用户终端能够对该设备通用数据进行解析,获得能够用于收集监控的设备信息。
作为一种方式,备份的设备通用数据可以保存在设备云平台的存储器中,也可以保存在预先建立的数据库中。在一些实施方式中,设备云平台还可以将格式转换前后的设备原始数据和/或设备通用数据发送给其他设备进行备份保存。
本申请一个实施例提供的数据处理方法,可降低接入用户对技术支持的要求,并同时提升业务接口的响应速度,使用户方访问无需复杂计算,即可快速获得便于解析的设备数据,实现对设备数据的实时收集与监控。
请参阅图3,图3示出了本申请又一个实施例提供的数据处理方法的流程示意图。下面将针对图3所示的流程进行详细的阐述。上述的数据处理方法具体地可以包括以下步骤:
步骤S201:获取用户终端基于https的post请求接口发送的设备访问请求。
本实施例中,设备云平台可以为用户终端提供基于https(hypertext transferprotocol over secure socket layer,基于安全套接字层的超文本传输协议)的post请求方式的接入功能,用户只需具备提供目前流行的https的post请求接口(无需通过服务器)的能力即可接入,即使用简单的JavaScript语言也可以实现请求接口的编写,大大降低了接入用户对技术支持的要求,使得用户方的开发人员只需具备简单的IT知识即可实现设备的接入。
步骤S202:在数据库中查找是否存在与设备访问请求对应的缓存数据。
本实施例中,缓存数据为已经经过备份保存在数据库中的设备通用数据。作为一种方式,数据库可以是预先在设备云平台中建立的用于进行数据存储的数据库,除设备通用数据外,数据库还可以存储历史访问请求、设备原始数据等相关信息。
本实施例中,当数据库中存在与设备访问请求对应的缓存数据时,可进行步骤S203;当数据库中不存在与设备访问请求对应的缓存数据时,可进行步骤S204。
步骤S203:判断缓存数据是否过期。
本实施例中,可预先设定设备云平台中缓存数据的有效期,当从网关获取设备原始数据开始,即可记录该数据的获取时间,若在执行步骤S203时的当前时间与该数据的获取时间的时间差超过预设的有效期,则认为该缓存数据已经过期;若当前时间与该数据的获取时间的时间差没有超过预设的有效期,则认为该缓存数据没有过期,依然有效。在一些实施方式中,缓存数据的有效期可以设置为20s至30s。可以理解的是,根据缓存数据类型的不同,有效期也可以是不同的。
作为一种方式,缓存数据的计时以及是否过期的判断,可以通过设备云平台中的RTC(Real-Time Clock,实时时钟)模块进行。
本实施例中,当缓存数据已过期时,可进行步骤S204;当缓存数据未过期时,可进行步骤S205。
步骤S204:向网关请求并获取设备原始数据。
本实施例中,若缓存数据已经过期,则说明当前设备云平台存储的缓存数据已经是较长时间之前获取的,不能够有效反映当前设备的最新状态,此时即可向网关请求获取最新的设备原始数据。
步骤S205:从数据库获取缓存数据,并将缓存数据发送至用户终端。
本实施例中,若缓存数据还未过期,则说明当前设备运平台存储的缓存数据是在有效期之内获取的,能够有效反映当前设备的最新状态,此时即可直接将该缓存数据返回用户终端,实现快速实时响应。
在一些实施方式中,还可以将已经过期的缓存数据从数据库中删除,以保持数据库中的缓存数据的实时有效性。此时,在进行步骤S202判定数据库中存在与设备访问请求对应的缓存数据时,可直接进行步骤S205将缓存数据返回用户终端,以提升响应速度。
本实施例中,通过设置数据有效期的缓存策略,可以限制同一维度组合的重复计算,隔阻数据处理的压力。
本实施例中,在步骤S204之后,可以继续进行步骤S206。
步骤S206:对设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据。
本实施例中,通用数据交换格式为用户终端能够解析的数据格式。作为一种方式,设备通用数据交换格式为json(JavaScript object notation,JS对象简谱)。json是一种轻量级的数据交换格式,采用完全独立于编程语言的文本格式来存储和表示数据,具有简洁和清晰的层次结构,易于人阅读和编写,同时也易于机器解析和生成,并有效地提升网络传输效率。
步骤S207:将设备通用数据进行备份保存,并向用户终端发送设备通用数据。
本实施例中,在将从网关获取的设备原始数据转换为json格式的设备通用数据后,可将该设备通用数据进行备份,作为缓存数据保存在数据库中,并将该设备通用数据发送给用户终端,以使用户终端能够对该设备通用数据进行解析,获得能够用于收集监控的设备信息。
本实施例中,进一步的,如图4所示,在经过步骤S201获取用户终端发送的设备访问请求之后,还可以进行步骤S208。
步骤S208:判断是否存在正在处理中的其他设备原始数据。
本实施例中,其他设备原始数据与其他设备访问请求对应,其他设备访问请求包括由其他用户终端发送的设备访问请求、用于访问其他设备的设备访问请求中的至少一种。
作为一种方式,在设备云平台中不存在正在处理中的其他设备原始数据时,可以进行步骤S204,以直接向网关请求并获取设备原始数据。可以理解的是,当设备云平台中不存在正在处理中的其他设备原始数据时,设备云平台的实时计算压力较小,此时无论数据库中是否存在未过期的缓存数据,均可向网关请求最新的设备原始数据,并进行格式转换获得最新的设备通用数据。
作为另一种方式,在设备云平台中不存在正在处理中的其他设备原始数据时,还可以进行步骤S202,查找数据库中是否存在与设备访问请求对应的缓存数据,并在存在与设备访问请求对应的缓存数据时,将缓存数据返回给用户终端,以实现实时响应。
在一些实施方式中,在设备云平台中不存在正在处理中的其他设备原始数据,且数据库中存在与设备访问请求对应的未过期缓存数据时,可在向用户终端返回缓存数据的同时,向网关请求最新的设备原始数据,并进行格式转换获得最新的设备通用数据,将旧的缓存数据替换为最新的设备通用数据以刷新缓存,可在满足实时响应的基础上,保证设备云平台内的缓存数据的有效性。
本实施例中,如图4所示,在设备云平台中存在正在处理中的其他设备原始数据,且经过步骤S202查找到数据库中存在与设备访问请求对应的缓存数据时,可以进行步骤S205。
作为一种方式,在设备云平台中存在正在处理中的其他设备原始数据,且数据库中存在与设备访问请求对应的缓存数据时,设备云平台的实时计算压力较大,此时无论数据库中存在的缓存数据是否过期,均可先将缓存数据返回给用户终端,以实现实时响应。
在一些实施方式中,为了缓解设备云平台的计算压力,在暂时将缓存数据(可以仅是过期的,也可以无论是否过期)返回给用户终端后,还可将该缓存数据对应的设备访问请求排入队列中,按照获取请求的时间进行排序,并依次向网关请求获取最新的设备原始数据,并进行格式转换获得最新的设备通用数据,将旧的缓存数据替换为最新的设备通用数据以刷新缓存,可在满足实时响应的基础上,保证设备云平台内的缓存数据尽可能的有效。
本申请又一个实施例提供的数据处理方法,相对于图2所示的数据处理方法,本实施例还进一步通过设备云平台向用户提供了https的post请求接口,使用户终端无需通过服务器即可实现直接对设备的控制与数据获取,用户方的开发人员只需具备简单的IT知识即可接入,另外,将网关及子设备的一系列上报以当前流行的JSON数据交换格式实时推送至用户终端,易于人阅读和编写,同时也易于机器解析和生成,进一步降低接入用户对技术支持的要求,并同时通过灵活的数据缓存策略进一步提升业务接口的响应速度,有效提升了网络传输效率,实现对设备数据的实时收集与监控。
请参阅图5,图5示出了本申请一个实施例提供的数据处理装置300的模块框图。下面将针对图5所示的模块框图进行阐述,数据处理装置300包括:请求获取模块310、数据获取模块320、数据处理模块330以及数据返回模块340,其中:
请求获取模块310,用于获取用户终端发送的设备访问请求。进一步的,请求获取模块310包括:
请求获取单元,用于获取用户终端基于https的post请求接口发送的设备访问请求。
数据获取模块320,用于根据设备访问请求,向网关请求并获取设备原始数据,设备原始数据为网关和/或子设备的原始数据。进一步的,数据获取模块320包括:
查找单元,用于在数据库中查找是否存在与设备访问请求对应的缓存数据,缓存数据为已经经过备份保存在数据库中的设备通用数据。
时效单元,用于当存在与设备访问请求对应的缓存数据时,判断缓存数据是否过期。
请求单元,用于当缓存数据已过期时,向网关请求并获取设备原始数据。
实时响应单元,用于当缓存数据未过期时,从数据库获取缓存数据,并将缓存数据发送至用户终端。
数据处理模块330,用于对设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据,通用数据交换格式为用户终端能够解析的数据格式。作为一种方式,设备通用数据交换格式为json。
数据返回模块340,用于将设备通用数据进行备份保存,并向用户终端发送设备通用数据。
进一步的,数据处理装置300还包括:
计算模块,用于判断是否存在正在处理中的其他设备原始数据,其他设备原始数据与其他设备访问请求对应,其他设备访问请求包括由其他用户终端发送的设备访问请求、用于访问其他设备的设备访问请求中的至少一种。
请求模块,用于当不存在正在处理中的其他设备原始数据时,向网关请求并获取设备原始数据。
本申请一个实施例提供的数据处理装置,可降低接入用户对技术支持的要求,并同时提升业务接口的响应速度,使用户方访问无需复杂计算,即可快速获得便于解析的设备数据,实现对设备数据的实时收集与监控。
请参阅图6,图6示出了本申请一个实施例提供的数据处理系统400的模块框图。数据处理系统包括用户终端410、设备云平台420、透传服务器430、网关440以及子设备450,用户终端410和设备云平台420通信连接,设备云平台420和网关440经过透传服务器430通信连接,网关440与子设备450通信连接。在一些实施方式中,设备云平台420与网关440之间还可以不经过透传服务器430而直接进行通信数据的传输。
请参阅图7,图7示出了本申请一个实时提供的数据处理系统400的一种可能的交互示意图。
本实施例中,如图7所示,设备云平台420包括业务接口模块421、数据缓存模块422以及数据处理模块423。
作为一种方式,业务接口模块421用于获取用户终端410基于https的post请求接口发送的设备访问请求,以及根据设备访问请求,向数据缓存模块422请求缓存数据;数据缓存模块422用于根据业务接口模块421的请求查找是否存在与设备访问请求对应的缓存数据,并在存在时向业务接口模块421返回命中的缓存数据,以及在不存在时向业务接口模块421返回未命中结果;业务接口模块421还用于根据未命中结果,向网关440提交设备访问请求;数据处理模块423用于将网关440响应设备访问请求返回的设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据,设备原始数据为网关440和/或子设备450的原始数据,通用数据交换格式为json;数据缓存模块422还用于将经过格式转换获得的设备通用数据进行备份保存;业务接口模块421还用于将数据缓存模块422返回的已命中的缓存数据和/或经过格式转换获得的设备通用数据发送至用户终端410。
本申请一个实施例提供的数据处理系统400,可降低接入用户对技术支持的要求,并同时提升业务接口的响应速度,使用户方访问无需复杂计算,即可快速获得便于解析的设备数据,实现对设备数据的实时收集与监控。
请参阅图8,其示出了本申请实施例提供的一种电子设备100的结构框图。该电子设备100可以是个人电脑、智能手机、平板电脑、服务器机组等能够运行应用程序的电子设备。本申请中的电子设备100可以包括一个或多个如下部件:处理器110、存储器120以及一个或多个应用程序,其中一个或多个应用程序可以被存储在存储器120中并被配置为由一个或多个处理器110执行,一个或多个程序配置用于执行如前述方法实施例所描述的方法。
处理器110可以包括一个或者多个处理核。处理器110利用各种接口和线路连接整个电子设备100内的各个部分,通过运行或执行存储在存储器120内的指令、程序、代码集或指令集,以及调用存储在存储器120内的数据,执行电子设备100的各种功能和处理数据。可选地,处理器110可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field -Programmable Gate Array,FPGA)、可编程逻辑阵列(ProgrammableLogic Array,PLA)中的至少一种硬件形式来实现。处理器110可集成中央处理器(CentralProcessing Unit,CPU)、图像处理器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器110中,单独通过一块通信芯片进行实现。
存储器120可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。存储器120可用于存储指令、程序、代码、代码集或指令集。存储器120可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储终端100在使用中所创建的数据(比如电话本、音视频数据、聊天记录数据)等。
请参阅图9,其示出了本申请实施例提供的一种计算机可读存储介质的结构框图。该计算机可读介质200中存储有程序代码,所述程序代码可被处理器调用执行上述方法实施例中所描述的方法。
计算机可读存储介质200可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地,计算机可读存储介质200包括非易失性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读存储介质200具有执行上述方法中的任何方法步骤的程序代码210的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码210可以例如以适当形式进行压缩。
综上所述,本申请实施例提供的数据处理方法、装置、系统、电子设备及存储介质,可先获取用户终端发送的设备访问请求,然后根据设备访问请求,向网关请求并获取设备原始数据,设备原始数据为网关和/或子设备的原始数据,再对设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据,通用数据交换格式为用户终端能够解析的数据格式,最后将设备通用数据进行备份保存,并向用户终端发送设备通用数据。本申请实施例通过设备云平台向用户提供了直接的控制与数据获取的请求接口,将网关及子设备的一系列上报以当前流行的通用数据交换格式实时推送至用户终端,可降低接入用户对技术支持的要求,并同时提升业务接口的响应速度,使用户方访问无需复杂计算,即可快速获得便于解析的设备数据,实现对设备数据的实时收集与监控。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (10)
1.一种数据处理方法,其特征在于,适用于设备云平台,所述设备云平台分别与用户终端以及关联有子设备的网关通信连接,所述方法包括:
获取用户终端发送的设备访问请求;
根据所述设备访问请求,向所述网关请求并获取设备原始数据,所述设备原始数据为所述网关和/或所述子设备的原始数据;
对所述设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据,所述通用数据交换格式为所述用户终端能够解析的数据格式;
将所述设备通用数据进行备份保存,并向所述用户终端发送所述设备通用数据。
2.根据权利要求1所述的方法,其特征在于,所述获取用户终端发送的设备访问请求,包括:
获取用户终端基于https的post请求接口发送的设备访问请求。
3.根据权利要求1所述的方法,其特征在于,所述根据所述设备访问请求,向所述网关请求并获取设备原始数据,包括:
在数据库中查找是否存在与所述设备访问请求对应的缓存数据,所述缓存数据为已经经过备份保存在所述数据库中的设备通用数据;
当存在与所述设备访问请求对应的缓存数据时,判断所述缓存数据是否过期;
当所述缓存数据已过期时,向所述网关请求并获取设备原始数据。
4.根据权利要求3所述的方法,其特征在于,在所述判断所述缓存数据是否过期之后,所述方法还包括:
当所述缓存数据未过期时,从所述数据库获取所述缓存数据,并将所述缓存数据发送至所述用户终端。
5.根据权利要求1所述的方法,其特征在于,在所述获取用户终端发送的设备访问请求之后,所述方法还包括:
判断是否存在正在处理中的其他设备原始数据,所述其他设备原始数据与其他设备访问请求对应,所述其他设备访问请求包括由其他用户终端发送的设备访问请求、用于访问其他设备的设备访问请求中的至少一种;
当不存在正在处理中的其他设备原始数据时,向所述网关请求并获取设备原始数据。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述设备通用数据交换格式为json。
7.一种数据处理装置,其特征在于,适用于设备云平台,所述设备云平台分别与用户终端以及关联有子设备的网关通信连接,所述装置包括:
请求获取模块,用于获取用户终端发送的设备访问请求;
数据获取模块,用于根据所述设备访问请求,向所述网关请求并获取设备原始数据,所述设备原始数据为所述网关和/或所述子设备的原始数据;
数据处理模块,用于对所述设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据,所述通用数据交换格式为所述用户终端能够解析的数据格式;
数据返回模块,用于将所述设备通用数据进行备份保存,并向所述用户终端发送所述设备通用数据。
8.一种数据处理系统,其特征在于,所述数据处理系统包括用户终端、设备云平台、网关以及子设备,所述设备云平台分别与所述用户终端和所述网关通信连接,所述网关与所述子设备通信连接,其中:
所述设备云平台包括业务接口模块、数据缓存模块以及数据处理模块,
所述业务接口模块用于获取所述用户终端基于https的post请求接口发送的设备访问请求,以及根据所述设备访问请求,向所述数据缓存模块请求缓存数据,
所述数据缓存模块用于根据所述业务接口模块的请求查找是否存在与所述设备访问请求对应的缓存数据,并在存在时向所述业务接口模块返回命中的缓存数据,以及在不存在时向所述业务接口模块返回未命中结果,
所述业务接口模块还用于根据所述未命中结果,向所述网关提交所述设备访问请求,
所述数据处理模块用于将所述网关响应所述设备访问请求返回的设备原始数据进行格式转换,获得具有通用数据交换格式的设备通用数据,所述设备原始数据为所述网关和/或所述子设备的原始数据,所述通用数据交换格式为json,
所述数据缓存模块还用于将经过格式转换获得的设备通用数据进行备份保存,
所述业务接口模块还用于将数据缓存模块返回的已命中的缓存数据和/或经过格式转换获得的设备通用数据发送至所述用户终端。
9.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行如权利要求1-6任一项所述的方法。
10.一种计算机可读取存储介质,其特征在于,所述计算机可读取存储介质中存储有程序代码,所述程序代码可被处理器调用执行如权利要求1-6任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910169461.4A CN109951538B (zh) | 2019-03-06 | 2019-03-06 | 数据处理方法、装置、系统、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910169461.4A CN109951538B (zh) | 2019-03-06 | 2019-03-06 | 数据处理方法、装置、系统、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109951538A true CN109951538A (zh) | 2019-06-28 |
CN109951538B CN109951538B (zh) | 2022-05-24 |
Family
ID=67009210
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910169461.4A Active CN109951538B (zh) | 2019-03-06 | 2019-03-06 | 数据处理方法、装置、系统、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109951538B (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110532208A (zh) * | 2019-07-12 | 2019-12-03 | 优刻得科技股份有限公司 | 一种数据处理方法、接口转换结构及设备 |
CN111198917A (zh) * | 2020-01-06 | 2020-05-26 | 中国建设银行股份有限公司 | 数据处理方法、装置、设备及存储介质 |
CN111414409A (zh) * | 2020-03-17 | 2020-07-14 | 网易(杭州)网络有限公司 | 游戏引擎之间数据交换方法及装置、存储介质及电子设备 |
CN111526075A (zh) * | 2020-04-15 | 2020-08-11 | 珠海格力电器股份有限公司 | 智能设备控制方法、存储介质以及电子设备 |
CN112306987A (zh) * | 2020-01-19 | 2021-02-02 | 深圳新阳蓝光能源科技股份有限公司 | 一种数据管理的方法、装置以及电子设备 |
CN112699146A (zh) * | 2020-12-31 | 2021-04-23 | 新奥数能科技有限公司 | 基于通用信息模型的数据推送方法、装置、服务器和存储介质 |
CN113434311A (zh) * | 2021-06-28 | 2021-09-24 | 平安科技(深圳)有限公司 | 业务数据交互方法、装置、设备及存储介质 |
CN113779128A (zh) * | 2021-09-09 | 2021-12-10 | 平安科技(深圳)有限公司 | 医疗数据系统对接方法、装置、设备及存储介质 |
CN113904939A (zh) * | 2021-10-27 | 2022-01-07 | 中国联合网络通信集团有限公司 | 一种管理目标终端的方法、装置及存储介质 |
CN114143043A (zh) * | 2021-11-10 | 2022-03-04 | 杭州数梦工场科技有限公司 | 数据的安全传输方法及装置、电子设备 |
CN114201478A (zh) * | 2021-12-08 | 2022-03-18 | 易保网络技术(上海)有限公司 | 数据处理方法、程序产品、可读介质和电子设备 |
CN114385067A (zh) * | 2020-10-19 | 2022-04-22 | 澜起科技股份有限公司 | 用于存储器系统的数据更新方法和存储器控制器 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103152368A (zh) * | 2011-12-06 | 2013-06-12 | 中国电信股份有限公司 | 一种可扩展的物联网感知数据显示转换方法及系统 |
CN104468830A (zh) * | 2014-12-29 | 2015-03-25 | 广州中国科学院软件应用技术研究所 | 一种基于物联网的web服务方法及物联网系统 |
CN105717848A (zh) * | 2016-04-25 | 2016-06-29 | 湖南云协网络信息科技有限公司 | 云协通用智能远程监控系统 |
US20170149937A1 (en) * | 2015-11-24 | 2017-05-25 | Verizon Patent And Licensing Inc. | Internet of things communication unification and verification |
CN109210383A (zh) * | 2018-09-05 | 2019-01-15 | 广州市城市规划勘测设计研究院 | 基于nb-iot的城市燃气管线监测方法与系统 |
CN109409732A (zh) * | 2018-10-23 | 2019-03-01 | 广州汉光电气股份有限公司 | 一种能耗管理系统及管理方法 |
-
2019
- 2019-03-06 CN CN201910169461.4A patent/CN109951538B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103152368A (zh) * | 2011-12-06 | 2013-06-12 | 中国电信股份有限公司 | 一种可扩展的物联网感知数据显示转换方法及系统 |
CN104468830A (zh) * | 2014-12-29 | 2015-03-25 | 广州中国科学院软件应用技术研究所 | 一种基于物联网的web服务方法及物联网系统 |
US20170149937A1 (en) * | 2015-11-24 | 2017-05-25 | Verizon Patent And Licensing Inc. | Internet of things communication unification and verification |
CN105717848A (zh) * | 2016-04-25 | 2016-06-29 | 湖南云协网络信息科技有限公司 | 云协通用智能远程监控系统 |
CN109210383A (zh) * | 2018-09-05 | 2019-01-15 | 广州市城市规划勘测设计研究院 | 基于nb-iot的城市燃气管线监测方法与系统 |
CN109409732A (zh) * | 2018-10-23 | 2019-03-01 | 广州汉光电气股份有限公司 | 一种能耗管理系统及管理方法 |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110532208A (zh) * | 2019-07-12 | 2019-12-03 | 优刻得科技股份有限公司 | 一种数据处理方法、接口转换结构及设备 |
CN110532208B (zh) * | 2019-07-12 | 2021-05-28 | 优刻得科技股份有限公司 | 一种数据处理方法、接口转换结构及数据处理设备 |
CN111198917A (zh) * | 2020-01-06 | 2020-05-26 | 中国建设银行股份有限公司 | 数据处理方法、装置、设备及存储介质 |
CN112306987A (zh) * | 2020-01-19 | 2021-02-02 | 深圳新阳蓝光能源科技股份有限公司 | 一种数据管理的方法、装置以及电子设备 |
CN111414409A (zh) * | 2020-03-17 | 2020-07-14 | 网易(杭州)网络有限公司 | 游戏引擎之间数据交换方法及装置、存储介质及电子设备 |
CN111414409B (zh) * | 2020-03-17 | 2024-03-15 | 网易(杭州)网络有限公司 | 游戏引擎之间数据交换方法及装置、存储介质及电子设备 |
CN111526075A (zh) * | 2020-04-15 | 2020-08-11 | 珠海格力电器股份有限公司 | 智能设备控制方法、存储介质以及电子设备 |
CN114385067A (zh) * | 2020-10-19 | 2022-04-22 | 澜起科技股份有限公司 | 用于存储器系统的数据更新方法和存储器控制器 |
CN114385067B (zh) * | 2020-10-19 | 2023-07-18 | 澜起科技股份有限公司 | 用于存储器系统的数据更新方法和存储器控制器 |
CN112699146A (zh) * | 2020-12-31 | 2021-04-23 | 新奥数能科技有限公司 | 基于通用信息模型的数据推送方法、装置、服务器和存储介质 |
CN113434311A (zh) * | 2021-06-28 | 2021-09-24 | 平安科技(深圳)有限公司 | 业务数据交互方法、装置、设备及存储介质 |
CN113779128A (zh) * | 2021-09-09 | 2021-12-10 | 平安科技(深圳)有限公司 | 医疗数据系统对接方法、装置、设备及存储介质 |
CN113779128B (zh) * | 2021-09-09 | 2024-04-05 | 平安科技(深圳)有限公司 | 医疗数据系统对接方法、装置、设备及存储介质 |
CN113904939A (zh) * | 2021-10-27 | 2022-01-07 | 中国联合网络通信集团有限公司 | 一种管理目标终端的方法、装置及存储介质 |
CN114143043A (zh) * | 2021-11-10 | 2022-03-04 | 杭州数梦工场科技有限公司 | 数据的安全传输方法及装置、电子设备 |
CN114201478A (zh) * | 2021-12-08 | 2022-03-18 | 易保网络技术(上海)有限公司 | 数据处理方法、程序产品、可读介质和电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN109951538B (zh) | 2022-05-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109951538A (zh) | 数据处理方法、装置、系统、电子设备及存储介质 | |
US9613147B2 (en) | Collection of telemetry data by a telemetry library within a client device | |
US8788760B2 (en) | Adaptive caching of data | |
CN106502902B (zh) | web页面运行效率监测方法及装置 | |
CN100585598C (zh) | 用于更新portlet信息的方法和系统 | |
CN104113787A (zh) | 基于节目的评论方法、终端、服务器和系统 | |
WO2022116323A1 (zh) | 一种联邦学习调度方法、装置及系统 | |
CN112637318A (zh) | 一种面向存储完整性的智能网关系统、装置及其控制方法 | |
CN108848108A (zh) | 基于移动互联网+的创新项目pdca过程管理平台 | |
CN104899274B (zh) | 一种内存数据库高效远程访问方法 | |
CN104301436A (zh) | 待显示内容推送、订阅、更新方法及其相应的装置 | |
CN103744575B (zh) | 一种用于提供输入应用的输入辅助区域的方法与设备 | |
JP7200277B2 (ja) | ワードスロットを識別するための方法及び装置、電子機器、記憶媒体並びにコンピュータプログラム | |
CN111259022B (zh) | 一种信息同步方法、同步系统、计算机设备和介质 | |
CN104092555A (zh) | 一种更新参数值的方法、装置和系统 | |
CN103530425A (zh) | 基于对象关联映射的Android终端访问远程数据库代码生成系统和方法 | |
CN103595566A (zh) | 一种检测空闲ip地址的方法及装置 | |
CN103677519A (zh) | 一种收藏多媒体资源的方法、终端及服务器 | |
CN110502299A (zh) | 一种用于提供小说信息的方法与设备 | |
CN110247963A (zh) | 一种数据推送方法及系统 | |
CN109189356A (zh) | 一种多终端转屏系统和方法 | |
WO2021087990A1 (zh) | 标签更新方法、装置、电子设备及存储介质 | |
CN111314495A (zh) | 基于物联网LoRaWAN的通信方法、装置、设备、存储介质和系统 | |
CN102902593A (zh) | 基于缓存机制的协议分发处理系统 | |
US20230342369A1 (en) | Data processing method and apparatus, and electronic device and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
PE01 | Entry into force of the registration of the contract for pledge of patent right | ||
PE01 | Entry into force of the registration of the contract for pledge of patent right |
Denomination of invention: Data processing methods, devices, systems, electronic devices, and storage media Effective date of registration: 20230317 Granted publication date: 20220524 Pledgee: Zhuhai Aisheng Technology Co.,Ltd. Pledgor: SHENZHEN FEIBIT ELECTRONIC TECHNOLOGY CO.,LTD. Registration number: Y2023980035300 |