CN115589433B - 数据处理方法、装置及计算机可读存储介质 - Google Patents

数据处理方法、装置及计算机可读存储介质 Download PDF

Info

Publication number
CN115589433B
CN115589433B CN202211471859.1A CN202211471859A CN115589433B CN 115589433 B CN115589433 B CN 115589433B CN 202211471859 A CN202211471859 A CN 202211471859A CN 115589433 B CN115589433 B CN 115589433B
Authority
CN
China
Prior art keywords
internet
things
data
heterogeneous
request
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211471859.1A
Other languages
English (en)
Other versions
CN115589433A (zh
Inventor
刘云淮
黄永贵
陈俊臣
黄飞云
郑琨
梁恒语
陈浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Big Data Research Institute Of Peking University
Peking University
Original Assignee
Chongqing Big Data Research Institute Of Peking University
Peking University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing Big Data Research Institute Of Peking University, Peking University filed Critical Chongqing Big Data Research Institute Of Peking University
Priority to CN202211471859.1A priority Critical patent/CN115589433B/zh
Publication of CN115589433A publication Critical patent/CN115589433A/zh
Application granted granted Critical
Publication of CN115589433B publication Critical patent/CN115589433B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

本发明公开了一种数据处理方法、装置及计算机可读存储介质。其中,该方法包括:接收第一物联网的第一数据请求,第一数据请求用于请求第二物联网的目标数据;响应于第一数据请求,向第二物联网发送第二数据请求,第二数据请求用于请求第二物联网的目标数据;接收第二物联网基于第二数据请求反馈的原始数据;基于预定的异构数据处理方式,对原始数据进行处理,得到统一格式数据,异构数据处理方式用于将待处理数据处理为预定统一格式的数据,预定统一格式适用于多种类型的物联网;将统一格式数据发送给第一物联网,第一物联网用于基于统一格式数据得到目标数据。本发明解决了在相关技术中,异质物联网利用率低的技术问题。

Description

数据处理方法、装置及计算机可读存储介质
技术领域
本发明涉及数据处理领域,具体而言,涉及一种数据处理方法、装置及计算机可读存储介质。
背景技术
随着信息化发展,物联网发展迅速,各种功能的物联网越来越多,例如,有用于交通互联的交通物联网,有用于消防服务的消防物联网,有用于工业生产的工业物联网,等等。
但在相关技术中,各个物联网所提供的服务或者功能是针对自身物联网的,例如,当用户需要交通物联网的服务(可以是数据服务,也可以资源服务等)时,需要向用户向交通物联网发起服务请求,之后接收交通物联网反馈的服务。当用户需要消防物联网的服务时,需要用户向消防物联网发起服务请求,之后接收消防物联网反馈的对应服务。因此,在相关技术中,物联网的资源仅能应用于本物联网,导致物联网的资源利用率不高。
因此,在相关技术中,物联网存在资源利用率不高的技术问题。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种数据处理方法、装置及计算机可读存储介质,以至少解决在相关技术中,物联网存在资源利用率不高的技术问题。
根据本发明实施例的第一个方面,提供了一种数据处理方法,包括:接收第一物联网的第一数据请求,其中,所述第一数据请求用于请求第二物联网的目标数据;响应于所述第一数据请求,向所述第二物联网发送第二数据请求,其中,所述第二数据请求用于请求所述第二物联网的所述目标数据;接收所述第二物联网基于所述第二数据请求反馈的原始数据;基于预定的异构数据处理方式,对所述原始数据进行处理,得到统一格式数据,其中,所述异构数据处理方式用于将待处理数据处理为预定统一格式的数据,所述预定统一格式适用于多种类型的物联网;将所述统一格式数据发送给所述第一物联网,其中,所述第一物联网用于基于所述统一格式数据得到所述目标数据。
可选地,基于多个物联网的资源,构建虚拟资源池,其中,所述多个物联网为异构物联网,所述多个物联网包括所述第一物联网和所述第二物联网;接收任务请求,其中,所述任务请求中携带有目标任务;基于所述虚拟资源池为所述目标任务调度目标资源。
可选地,所述基于所述虚拟资源池为所述目标任务调度目标资源还包括:基于所述虚拟资源池,确定所述目标任务的一个或多个需求资源;确定所述一个或多个需求资源所在的第一目标物联网;通过对所述一个或多个需求资源所在的第一目标物联网中对应需求资源进行远程调用的方式,为所述目标任务调度所述目标资源。
可选地,所述多个物联网的资源包括所述多个物联网的以下资源至少之一:计算资源,存储资源,网络资源。
可选地,基于多个物联网的应用服务,构建虚拟融合应用服务,其中,所述多个物联网为异构物联网,所述多个物联网包括所述第一物联网和所述第二物联网;接收服务请求;基于所述虚拟融合应用服务为所述服务请求反馈对应的目标服务。
可选地,所述基于所述虚拟融合应用服务为所述服务请求反馈对应的目标服务,包括:确定所述服务请求对应的一个或多个需求服务;确定所述一个或多个需求服务所在的第二目标物联网;通过对所述一个或多个需求服务所在的第二目标物联网中对应需求服务进行远程调用的方式,为所述服务请求反馈对应的所述目标服务。
可选地,所述接收所述第二物联网基于所述第二数据请求反馈的原始数据,包括:通过物联网系统下属的数据处理子系统接收所述第二物联网基于所述第二数据请求反馈的所述原始数据,并对所述原始数据进行存储,所述物联网系统用于互联多个物联网,所述多个物联网包括所述第一物联网和所述第二物联网;所述将所述统一格式数据发送给所述第一物联网,包括:通过所述数据处理子系统将所述统一格式数据发送给所述第一物联网。
根据本发明实施例的第二个方面,提供了一种数据处理装置,包括:第一接收模块,用于接收第一物联网的第一数据请求,其中,所述第一数据请求用于请求第二物联网的目标数据;第一发送模块,用于响应于所述第一数据请求,向所述第二物联网发送第二数据请求,其中,所述第二数据请求用于请求所述第二物联网的所述目标数据;第二接收模块,用于接收所述第二物联网基于所述第二数据请求反馈的原始数据;处理模块,用于基于预定的异构数据处理方式,对所述原始数据进行处理,得到统一格式数据,其中,所述异构数据处理方式用于将待处理数据处理为预定统一格式的数据,所述预定统一格式适用于多种类型的物联网;第二发送模块,用于将所述统一格式数据发送给所述第一物联网,其中,所述第一物联网用于基于所述统一格式数据得到所述目标数据。
根据本发明实施例的第三个方面,提供了一种计算机可读存储介质,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行上述任意一项所述的方法。
根据本发明实施例的第四个方面,提供了一种计算机设备,包括:存储器和处理器,所述存储器存储有计算机程序;所述处理器,用于执行所述存储器中存储的计算机程序,所述计算机程序运行时使得所述处理器执行上述任意一项所述的方法。
通过上述处理,采用接收第一物联网的请求,从所述第二物联网获取请求对应的目标数据,并对该目标数据进行异构数据处理,得到统一格式的数据,并将该得到的数据反馈给第一物联网,使得该第一物联网得到第二物联网的目标数据,有效地实现第一物联网与第二物联网之间的互通,实现了不同物联网(异质物联网)之间的数据资源的共享,解决了相关技术中,物联网存在资源利用率不高的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种可选的数据处理方法的流程图;
图2是根据本发明可选实施方式所提供的异质互联平台的架构示意图;
图3是根据本发明可选实施例所提供的消防物联网和交通物联网互通实例图;
图4是根据本发明实施例提供的异质互联平台与其它系统平台连接的示意图;
图5是根据本发明实施例提供的数据处理装置示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例1
根据本发明实施例,提供了一种数据处理的方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种可选的数据处理方法的流程图,参照图1所示,方法可包括如下步骤:
步骤S102,接收第一物联网的第一数据请求,其中,所述第一数据请求用于请求第二物联网的目标数据;
在一些可选的实施例中,上述数据处理方法应用于异质互联平台中,其中,该异质互联平台用于互连多个物联网,多个物联网是用于实现不同功能的物联网。例如,多个物联网可以是交通物联网,工业物联网,消防物联网,水文与环境物联网,物流物联网,等等。上述异质互联平台可以是用于互联上述交通物联网,工业物联网,消防物联网,水文与环境物联网,物流物联网,等等的平台。
在一些可选的实施例中,接收第一物联网的第一数据请求,即可以是由上述异质互联平台接收来自第一物联网的第一数据请求。上述第一数据请求用于请求第二物联网的目标数据,即该第一数据请求是用于请求其他物联网的数据的。该第一数据请求可以是多种形式,例如,可以是一个简单的数据请求指令,该指令对应于所请求的目标数据;又例如,可以是一个携带有数据信息的数据请求包,该数据信息用于标识所请求的目标数据,即使得在异质互联平台接收到该第一数据请求,或者第二物联网接收到异质互联平台对所述第一数据请求转换后得到的请求时,异质互联平台可以识别出第一物联网请求的目标数据,以及第二物联网也能够快速准确地识别出第一物联网所请求的目标数据。
需要说明的是,上述第一物联网可以是上述多种物联网中的一种或多种,上述第二物联网也可以是上述多种物联网中的一种或多种,只要第一物联网与第二物联网为无法直接连接的不同类型的物联网即可。另外,上述第一物联网向第二物联网所请求的目标数据也可以是多种类型的,例如,可以是第二物联网中的感知设备直接感知的原始数据,也可以是第二物联网中对感知设备感知的数据进行处理后得到的结果数据,在此不进行一一限定。
步骤S104,响应于所述第一数据请求,向所述第二物联网发送第二数据请求,其中,所述第二数据请求用于请求所述第二物联网的所述目标数据;
在一些可选的实施例中,异质互联平台接收到上述第一数据请求后,由于不同的物联网的数据结构形式不同,异质互联平台向第二物联网传递第一物联网的请求时,可以对来自第一物联网的第一数据请求进行处理,得到第二物联网能够识别的请求(即第二数据请求),使得第二物联网获知第一物联网所请求的目标数据,避免异质物联网之间语言不通的情况。
步骤S106,接收所述第二物联网基于所述第二数据请求反馈的原始数据;
在一些可选的实施例中,第二物联网获知第一物联网所请求的目标数据后,向异质互联平台传递第一物联网所请求的目标数据。在第二物联网向异质互联平台传递第一物联网所请求的目标数据时,第二物联网反馈的数据一般是基于第二物联网的格式形成的数据,是第二物联网的互通协议下的格式数据。即,可以是第二物联网中该第二数据请求对应的原始数据。
步骤S108,基于预定的异构数据处理方式,对所述原始数据进行处理,得到统一格式数据,其中,所述异构数据处理方式用于将待处理数据处理为预定统一格式的数据,所述预定统一格式适用于多种类型的物联网;
在一些可选的实施例中,异质互联平台对与其连接的各个异构物联网提供了一个统一的格式,该统一格式可以应用于各个异构物联网中。因此,对于来自于各个异构物联网的数据,当需要将该数据传递给其它物联网时,由于不同物联网所对应的数据格式可能是不同的,通过建立统一的数据格式,能够有效实现各个异构物联网之间的互通。因此,通过提供一种按行业物联网划分的统一制定标准,将收集到的异构元数据按照这个标准进行划分处理,打破数据间的壁垒,进行数据的互通,按照预先设定好的行业互联网基础数据标准对上述接收到的原始数据进行处理,之后得到统一格式数据。
步骤S110,将所述统一格式数据发送给所述第一物联网,其中,所述第一物联网用于基于所述统一格式数据得到所述目标数据。
在一些可选的实施例中,异质互联平台在将收集到的来自第二物联网的异构元数据按照行业物联网划分的统一制定标准处理过所得到的统一格式数据发送给第一物联网,第一物联网得到统一标准格式的上述的目标数据。
需要说明的是,按照行业物联网划分的统一制定标准处理过的统一格式数据是能够被第一物联网所能接收到的形式的数据,不会存在异质物联网之间语言不通的问题。
通过上述处理,采用接收第一物联网的请求,从所述第二物联网获取请求对应的目标数据,并对该目标数据进行异构数据处理,得到统一格式的数据,并将该得到的数据反馈给第一物联网,使得该第一物联网得到第二物联网的目标数据,有效地实现第一物联网与第二物联网之间的互通,实现了不同物联网(异质物联网)之间的数据资源的共享,解决了相关技术中,物联网存在资源利用率不高的技术问题。
在一些可选的实施例中,基于多个物联网的资源,构建虚拟资源池,其中,所述多个物联网为异构物联网,所述多个物联网包括所述第一物联网和所述第二物联网;接收任务请求,其中,所述任务请求中携带有目标任务;基于所述虚拟资源池为所述目标任务调度目标资源。
异质互联平台基于获得的所连接的多个物联网的各种资源构建虚拟的资源池,对资源池中的各类资源进行调度,管理。其中,对资源的调度和管理包括多种,例如,可以包括以下至少之一:行业应用基础数据管理、应用案例管理、行业标准管理、安全验证管理、应用数据交易管理,并将处理后的数据储存整合在一起。
作为一种可选的实施例,在基于多个物联网的资源,构建虚拟资源池时,此处的虚拟资源池可以理解为一种集成与异质互联平台连接的多个物联网所能提供的资源的集合,即将多个物联网的资源进行融合,当有任务请求时,基于任务请求中的任务,对融合的资源进行调度,使得任务能够得到各种资源的应用。
在一些可选的实施例中,所述基于所述虚拟资源池为所述目标任务调度目标资源,包括:基于所述虚拟资源池,确定所述目标任务的一个或多个需求资源;确定所述一个或多个需求资源所在的第一目标物联网;通过对所述一个或多个需求资源所在的第一目标物联网中对应需求资源进行远程调用的方式,为所述目标任务调度所述目标资源。
当第一物联网有一个或多个数据资源需求时,向异质互联平台发送数据请求,平台在收到第一物联网的数据请求后根据现有的资源池做出规划,确定第一物联网所需要的数据资源为第一目标物联网的数据资源,然后异质互联平台向第一目标物联网发送数据请求,通过远程数据调用请求,来向第一目标物联网获取第一物联网的上述的一个或多个需求的数据资源需求。需要说明的是,目标任务需要的一个或多个需求资源所在的第一目标物联网可以是一个物联网,也可以是多个不同的物联网。另外,异质互联平台向第一目标物联网的需求资源采用远程应用的方式进行调度时,该处理方式仅为一种方式,并不限定其它调度方式。
在一些可选的实施例中,所述多个物联网的资源包括所述多个物联网的以下资源至少之一:计算资源,存储资源,网络资源。
异质互联平台通过数据接入接口和应用服务系统适配器从所连接的多个物联网中接入多元异构数据,其中,多元异构数据可以包括以下数据:存储资源数据,计算资源数据,网络资源数据,等。
需要说明的是,其中,计算资源包括:CPU资源、计算机集群,云计算等。存储资源包括:内存资源、硬盘资源,等。网络资源包括:通信线路,通信设备,等。
在一些可选的实施例中,基于多个物联网的应用服务,构建虚拟融合应用服务,其中,所述多个物联网为异构物联网,所述多个物联网包括所述第一物联网和所述第二物联网;接收服务请求;基于所述虚拟融合应用服务为所述服务请求反馈对应的目标服务。
异质互联平台根据收集到的应用服务数据,按照物联网的分类分析出各个异构物联网所需要的服务信息,根据所述感知到的异构物联网的需要的服务信息,提供异质互联平台物联网应用服务查询,应用调度和代理执行能力。
其中,上述所提到的应用服务可以是一个应用APP,或者一个功能(比如,预警功能,提醒功能)等。例如,对应于一个用户请求而言,可以提供由工业物联网提供的电力分配服务,环境物联网提供的预警服务,以及交通物联网提供的车辆调度服务,等。
在一些可选的实施例中,所述基于所述虚拟融合应用服务为所述服务请求反馈对应的目标服务,包括:确定所述服务请求对应的一个或多个需求服务;确定所述一个或多个需求服务所在的第二目标物联网;通过对所述一个或多个需求服务所在的第二目标物联网中对应需求服务进行远程调用的方式,为所述服务请求反馈对应的所述目标服务。
当所述服务请求对应异质互联平台的虚拟融合应用服务中的一个或多个,确定所述服务请求对应的需求服务所在的目标物联网,之后远程调用目标物联网的对应需求服务,请求目标物联网反馈对应需求的服务。类似上资源的调度,服务请求需要的一个或多个需求服务所在的第一目标物联网可以是一个物联网,也可以是多个不同的物联网。另外,异质互联平台向第一目标物联网的需求服务采用远程应用的方式进行反馈时,该处理方式仅为一种方式,并不限定其它反馈方式。
在一些可选的实施例中,所述接收所述第二物联网基于所述第二数据请求反馈的原始数据,包括:通过物联网系统下属的数据处理子系统接收所述第二物联网基于所述第二数据请求反馈的所述原始数据,并对所述原始数据进行存储,所述物联网系统用于互联多个物联网,所述多个物联网包括所述第一物联网和所述第二物联网;所述将所述统一格式数据发送给所述第一物联网,包括:通过所述数据处理子系统将所述统一格式数据发送给所述第一物联网。
通过物联网系统下属的数据处理子系统来对从其它多种物联网来的数据时,通过将数据存储与数据控制独立开,可以有效减轻异质互联平台的负担,有效地实现对各个物联网的协调,调度和管理。
基于上述实施例及可选实施例,提供了一种可选实施方式,下面具体说明。
而随着技术产业的不断升级,信息化的不断发展,异质物联网之间的联系需求越来越大,但由于异质物联网之间存在壁垒,异质数据并不统一,导致不同的物联网之间并没有建立通信通道,实现不了有价值数据和服务交换。而物联网的通信方式,从早期的有线方式连接两个设备,例如RS232,RS485,USB等方式,后面使用了无线的方式,形成了简单的组网,电视遥控器和电视就是一个典型的例子,随着越来越多的设备和传感器接入互联网,物联网的通信逐渐发展到以下类型:传统互联网采用的是WIFI或者以太网络;有线传输的方式有RS232串口,RS485总线,有线开关量,USB等;近距离离线传输的方式有Zigbee,LoRa,蓝牙等;市场形式呈现的趋势是移动互联网红利消退,5G将驱动物联网成为新一轮科技与产业变革的核心动力,但再多的通信协议出现都只能解决单一物联网,没有解决异质物联网的通信问题。
需要明白的是,物联网在发展过程中为了满足不同行业特定的应用需求,产生了彼此隔离、垂直建设、烟囱式的物联网系统出现系统割裂严重、网络架构复杂、各类资源自主异构、应用难以融合等现象。物联网的上述特性会导致异质物联网互通互联时存在如下问题:跨域资源的多态离散性:海量资源异质化导致抗干扰复用难,计算模式固化导致动态调整难,交互应用多变导致实时匹配难;异质网元的分型多样性:网元接入冲突导致普适接入难,跨域兼容性差导致全局交互难,设备协同低效统筹管理难;应用服务的耦合复杂性:计算量级差异大导致互联互通难,资源服务高耦合导致规模拓展难,任务依赖高复杂导致协同调度难。
基于此,本可选实施方式提供了一种数据处理方法,用于实现异质物联网之间的联网通信。方法包括如下步骤:
步骤S1,数据互通。
数据互通包括:多元异构数据接入和数据共享。
多元异构数据接入:基于共享的物联网平台,将多个异质物联网的多元异构数据接入共享的物联网平台:平台需要多元异构数据的接入,可以包括以下三种数据--设备元数据,计算资源数据、应用服务数据。以消防物联网为例,其中设备元数据包括:消防设备唯一id号、消防设备统一标识编码,消防设备数量等;而计算资源数据包括:物联网设备的内存、传感器数量、网络带宽、设备存储介质等;最后应用服务数据包括:物联应用的监控数据、单应用决策信息等。
数据共享:按照平台制定的行业物联网制定标准,以单体应用系统为基本单位,用http协议接入,以json和excel的方式对数据进行储存。
步骤S2,资源互换。
资源互换包括:资源感知和资源服务
资源感知:根据收集到的计算资源数据,对物联网的资源包括算力,存储,网络等进行管理--进行非对称加密算法和自定义的一些加密方法、对收集到的敏感计算资源数据进行脱敏操作。
资源服务:根据已经感知的资源功能,对已知互联平台资源状况和任务描述,提供最优化任务调度策略--例如火灾发生现场,消防物联网会先感知事故现场灾情,然后上传灾情,异质互联平台会收集灾情情况以及车流量、天气等,针对这些情况,为消防车排出一条最优路线,需要配备的消防人力、物力资源,以及后续人员疏散等处理方案。
步骤S3,应用融合。
应用融合包括:异构应用接入和融合应用服务。
异构应用接入:根据收集到的应用服务数据,按照物联网的分类分析出各个异构物联网所需要的服务信息。比如消防物联网属于智慧城市分类,需要道路交通系统的道路信息,医疗系统的医疗资源服务信息。
融合应用服务:根据感知的异构物联网的需求,提供异质互联平台物联网应用服务查询,应用调度和代理执行能力。
根据上述可选实施方式,可以解决如下问题:在边缘端进行数据的采集,其中包括设备元数据,计算资源数据和应用服务数据,这些数据随着物理网的不同而得到的类型不同;提供一种按行业物联网划分的统一制定标准,将收集到的异构元数据按照这个标准进行划分处理(单个物联网做资源抽象、描述方式一样,同一个物联网收集同一类数据,比如电力采集电压电阻,第一层),打破数据间的壁垒,进行数据的互通;根据收集到的各种数据分析目前具有的资源,建立一个资源池,将不互通的异构物联网的资源整合在一起;分析异构物理网需要的各种应用服务需求,再根据最优化任务调度策略从资源池里面划分资源,提供应用服务。
通过统一的数据收集处理,可以使异构物联网实现数据互通,资源融合,服务共享,突破传统物联网架构,支持网络、计算和存储资源的统一抽象管理,以应用为核心,突破“跨行业设备联接管理、物联网虚拟化控制复用、异质应用服务协同”等关键技术,构建“应用驱动的异质物联网系统互联平台”,面向智慧城市中城市基础设施监控、视频监控、车联网应用等典型场景进行应用示范,推动物联网与智慧城市规模化发展。
因此,该可选实施方式所提供的异质互联平台,实现了实现异质物联网的数据互通,资源互换,应用融合的异构物联网平台。
图2是根据本发明可选实施方式所提供的异质互联平台的架构示意图,如图2所示,该异质互联平台总体架构包括:数据提供、数据接入、数据管理、数据服务、数据展示。各层级中的具体内容包括:
数据提供:作为平台的数据持久层,围绕行业物联网应用系统为平台提供基础数据、源数据。
数据接入:为平台基础功能和核心功能做支撑,主要包括数据接入接口和应用服务系统适配器。将各种连接至平台的物联网的数据接入至异质互联平台上。
数据管理:是平台的主要应用功能模块,对接入至异质互联平台的数据进行管理和分类。主要包括行业应用基础数据管理、应用案例管理、行业标准管理、安全验证管理、应用数据交易管理。
数据服务:通过数据服务接口,为有不同的需求的用户提供数据服务,其中,所述用户可以为个人用户,也可以为物联网。
数据展示:通过可视化平台展示各行业数据,为有需求的用户提供行业分析,以供参考。
图3是根据本发明可选实施例所提供的消防物联网和交通物联网互通实例图,如图3所示,消防物联网和交通物联网在获取各自的基础数据标准后按照异质互联平台发布的行业互联网基础数据标准,分别制定消防行业基础数据和交通基础数据,并将上述基础数据反馈给异质互联平台,由异质互联平台对上述基础数据进行数据存储。而后,消防物联网和交通物联网分别根据上述基础数据制定消防应用案例信息和交通应用案例信息,异质互联平台根据获取的基础数据标准对上述应用案例信息进行信息处理并统一展示。异质互联平台所展示的上述信息和交通物联网与消防物联网提供的数据进行融合,分别呈现出交通物联网基础数据和消防物联网基础数据。
当上述交通物联网基础数据和消防物联网基础数据需要扩充数据或有数据需求时,则可向异质互联平台发出基础数据申请,异质互联平台对该基础数据申请进行验证后,交通物联网和消防物联网分别可以获取token(令牌)用于继续申请交通数据和申请消防数据,上述申请发送至异质互联平台,平台根据提出申请的物联网(交通物联网或消防物联网)的在线或离线状态分别处理,对于在线的物联网,申请结果会直接实时发送到在线的接收方,消息发送完成后,服务器端并不会对消息进行落地存储,而对于离校的用户,服务器端会将消息存入到离线库,当用户登录后,从离线库中将离线消息拉走,然后服务器端将离线消息删除。
图4是根据本发明实施例提供的异质互联平台与其它系统平台连接的示意图,如图4所示,异质互联平台除了能够与物联网连接外,还可以与其他系统平台进行连接,从图4可以看出,异质互联平台通过服务注册接口与智慧消防平台的服务协同系统相连,可以实现两个平台间的数据互通,将多种通讯手段、异质网元、离散化资源的物联网系统进行泛在互联与深度融合,充分挖掘来自异构物联网的数据价值,异质互联平台通过服务注册接口为智慧消防平台提供异构物联网汇集地基础数据,最大限度提升数据的延伸价值,为构建物联网与新型智慧城市一体化系统服务提供网络支撑,全面提升新型智慧城市设备互联能力和应用服务水平。
异质互联平台基于获得的所连接的多个物联网的各种资源构建虚拟的资源池,将不互通的异质物联网的资源按照平台制定的行业物联网制定标准对数据进行处理,将处理后的数据储存整合在一起,其中的获得的资源包括:计算资源,存储资源,网络资源等虚拟资源。在实际应用中,参与互联互通的物联网可以有多种,以第一物联网和第二物联网为例,第一物联网和第二物联网可以为各种类型物联网,如:智慧城市物联网、水文与环境物联网、智慧测量物联网、安全与紧急状况物联网、物流物联网、工业物联网、农业物联网、智能家居物联网、医疗健康物联网等种类的物联网。当第一物联网有一个或多个数据需求时,向异质互联平台发送数据请求,平台在收到第一物联网的数据请求后根据现有的资源池做出规划,确定第一物联网所需要的数据资源为第二物联网的数据资源,然后异质互联平台向第二物联网发送数据请求,请求向第二物联网调用第一物联网所需要的数据,第二物联网将原始数据发送给异质互联平台。异质互联平台提供了一种按行业物联网划分的统一制定标准,将收集到的异构元数据按照这个标准进行划分处理,打破数据间的壁垒,进行数据的互通,按照预先设定好的行业互联网基础数据标准对上述接收到的原始数据进行处理,之后得到统一格式数据,在得到统一格式数据后将所述统一格式的数据发送给第一物联网。
当第一物联网的数据请求需要调度多个物联网的数据资源对其进行服务时,异质互联平台可以根据最优化任务调度策略从资源池里面划分资源,为第一物联网提供应用服务。以下进行举例说明:工业物联网的工业基础设备信息和工业流程信息上传至异质互联平台时,异质互联平台判断出该工业物联网的某一基础设备发生火灾,需要调度消防物联网和交通物联网的资源,其中消防物联网的资源能够为扑灭火灾提供服务,在根据火灾情况提供适当消防资源后,需要调用交通物联网的资源进行综合分析,为消防力量抵达火灾现场规划一个最优路线,避免交通情况影响火灾的扑灭,造成不可挽回的损失,最后异质互联平台将规划好的最优消防资源调配和最快速抵达现场的路线发送给消防物联网,在消防物联网收到该数据后可以更好更快地为工业物联网提供灭火服务。
实施例2
图5是根据本发明实施例提供的数据处理装置示意图,如图5所示,该装置包括:第一接收模块50,第一发送模块52,第二接收模块54,处理模块56和第二发送模块58,下面对该装置进行说明。
第一接收模块50,用于接收第一物联网的第一数据请求,其中,所述第一数据请求用于请求第二物联网的目标数据;第一发送模块52,连接至上述第一接收模块50,用于响应于所述第一数据请求,向所述第二物联网发送第二数据请求,其中,所述第二数据请求用于请求所述第二物联网的所述目标数据;第二接收模块54,连接至上述第一发送模块52,用于接收所述第二物联网基于所述第二数据请求反馈的原始数据;处理模块56,连接至上述第二接收模块54,用于基于预定的异构数据处理方式,对所述原始数据进行处理,得到统一格式数据,其中,所述异构数据处理方式用于将待处理数据处理为预定统一格式的数据,所述预定统一格式适用于多种类型的物联网;第二发送模块58,连接至上述处理模块56,用于将所述统一格式数据发送给所述第一物联网,其中,所述第一物联网用于基于所述统一格式数据得到所述目标数。
此处需要说明的是,上述第一接收模块50,第一发送模块52,第二接收模块54,处理模块56和第二发送模块58,对应于实施例中的步骤S102至步骤S110,多个模块与对应的步骤所实现的实例和应用场景相同,但不限于上述实施例所公开的内容。
实施例3
本发明的实施例提供了一种计算机可读存储介质。可选地,在本实施例中,上述计算机可读存储介质可以用于保存上述实施例1所提供的数据处理方法所执行的程序代码。
可选地,在本实施例中,上述计算机可读存储介质可以位于计算机网络中计算机终端群中的任意一个计算机终端中,或者位于移动终端群中的任意一个移动终端中。
本发明的实施例中还提供了一种计算机设备,包括:存储器和处理器,所述存储器存储有计算机程序;所述处理器,用于执行所述存储器中存储的计算机程序,所述计算机程序运行时使得所述处理器执行上述任意一项所述的方法。
其中,存储器可用于存储软件程序以及模块,如本发明实施例中的数据处理方法和装置对应的程序指令/模块,处理器通过运行存储在存储器内的软件程序以及模块,从而执行各种功能应用以及数据处理,即实现上述的数据处理方法。存储器可包括高速随机存储器,还可以包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器可进一步包括相对于处理器远程设置的存储器,这些远程存储器可以通过网络连接至计算机终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种数据处理方法,其特征在于,包括:
接收第一物联网的第一数据请求,其中,所述第一数据请求用于请求第二物联网的目标数据;
响应于所述第一数据请求,向所述第二物联网发送第二数据请求,其中,所述第二数据请求用于请求所述第二物联网的所述目标数据;
接收所述第二物联网基于所述第二数据请求反馈的原始数据;
基于预定的异构数据处理方式,对所述原始数据进行处理,得到统一格式数据,其中,所述异构数据处理方式用于将待处理数据处理为预定统一格式的数据,所述预定统一格式适用于多种类型的物联网;
将所述统一格式数据发送给所述第一物联网,其中,所述第一物联网用于基于所述统一格式数据得到所述目标数据;
其中,所述方法应用于异质互联平台系统中,所述异质互联平台系统用于对多个异质物联网进行统一抽象管理,包括:除在多个异质物联网之间进行数据互通外,还包括:资源互换以及应用融合,其中,所述资源互换包括资源感知和资源服务,其中,所述资源感知用于根据收到的计算资源数据,对所述多个异质物联网的资源进行管理,所述资源服务用于根据感知到的资源,对所述异质互联平台系统的资源和任务进行描述,提供最优化任务调度策略;所述应用融合包括:异构应用接入和虚拟融合应用服务,其中,所述异构应用接入用于根据收集到的应用服务数据,按照所述多个异质物联网的分类分析出各个异构物联网所需要的服务信息,所述虚拟融合应用服务用于根据感知的所述多个异构物联网的需求,提供所述异质互联平台系统的应用服务查询,应用调度和代理执行能力。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
基于多个物联网的资源,构建虚拟资源池,其中,所述多个物联网为异构物联网,所述多个物联网包括所述第一物联网和所述第二物联网;
接收任务请求,其中,所述任务请求中携带有目标任务;
基于所述虚拟资源池为所述目标任务调度目标资源。
3.根据权利要求2所述的方法,其特征在于,所述基于所述虚拟资源池为所述目标任务调度目标资源,包括:
基于所述虚拟资源池,确定所述目标任务的一个或多个需求资源;
确定所述一个或多个需求资源所在的第一目标物联网;
通过对所述一个或多个需求资源所在的第一目标物联网中对应需求资源进行远程调用的方式,为所述目标任务调度所述目标资源。
4.根据权利要求2所述的方法,其特征在于,所述多个物联网的资源包括所述多个物联网的以下资源至少之一:计算资源,存储资源,网络资源。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
基于多个物联网的应用服务,构建虚拟融合应用服务,其中,所述多个物联网为异构物联网,所述多个物联网包括所述第一物联网和所述第二物联网;
接收服务请求;
基于所述虚拟融合应用服务为所述服务请求反馈对应的目标服务。
6.根据权利要求5所述的方法,其特征在于,所述基于所述虚拟融合应用服务为所述服务请求反馈对应的目标服务,包括:
确定所述服务请求对应的一个或多个需求服务;
确定所述一个或多个需求服务所在的第二目标物联网;
通过对所述一个或多个需求服务所在的第二目标物联网中对应需求服务进行远程调用的方式,为所述服务请求反馈对应的所述目标服务。
7.根据权利要求1至6中任一项所述的方法,其特征在于,
所述接收所述第二物联网基于所述第二数据请求反馈的原始数据,包括:通过物联网系统下属的数据处理子系统接收所述第二物联网基于所述第二数据请求反馈的所述原始数据,并对所述原始数据进行存储,所述物联网系统用于互联多个物联网,所述多个物联网包括所述第一物联网和所述第二物联网;
所述将所述统一格式数据发送给所述第一物联网,包括:通过所述数据处理子系统将所述统一格式数据发送给所述第一物联网。
8.一种数据处理装置,其特征在于,包括:
第一接收模块,用于接收第一物联网的第一数据请求,其中,所述第一数据请求用于请求第二物联网的目标数据;
第一发送模块,用于响应于所述第一数据请求,向所述第二物联网发送第二数据请求,其中,所述第二数据请求用于请求所述第二物联网的所述目标数据;
第二接收模块,用于接收所述第二物联网基于所述第二数据请求反馈的原始数据;
处理模块,用于基于预定的异构数据处理方式,对所述原始数据进行处理,得到统一格式数据,其中,所述异构数据处理方式用于将待处理数据处理为预定统一格式的数据,所述预定统一格式适用于多种类型的物联网;
第二发送模块,用于将所述统一格式数据发送给所述第一物联网,其中,所述第一物联网用于基于所述统一格式数据得到所述目标数据;
其中,所述装置应用于异质互联平台系统中,所述异质互联平台系统用于对多个异质物联网进行统一抽象管理,包括:除在多个异质物联网之间进行数据互通外,还包括:资源互换以及应用融合,其中,所述资源互换包括资源感知和资源服务,其中,所述资源感知用于根据收到的计算资源数据,对所述多个异质物联网的资源进行管理,所述资源服务用于根据感知到的资源,对所述异质互联平台系统的资源和任务进行描述,提供最优化任务调度策略;所述应用融合包括:异构应用接入和虚拟融合应用服务,其中,所述异构应用接入用于根据收集到的应用服务数据,按照所述多个异质物联网的分类分析出各个异构物联网所需要的服务信息,所述虚拟融合应用服务用于根据感知的所述多个异构物联网的需求,提供所述异质互联平台系统的应用服务查询,应用调度和代理执行能力。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括存储的程序,其中,在所述程序运行时控制所述计算机可读存储介质所在设备执行权利要求1至7中任意一项所述的方法。
10.一种计算机设备,其特征在于,包括:存储器和处理器,
所述存储器存储有计算机程序;
所述处理器,用于执行所述存储器中存储的计算机程序,所述计算机程序运行时使得所述处理器执行权利要求1至7中任意一项所述的方法。
CN202211471859.1A 2022-11-23 2022-11-23 数据处理方法、装置及计算机可读存储介质 Active CN115589433B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211471859.1A CN115589433B (zh) 2022-11-23 2022-11-23 数据处理方法、装置及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211471859.1A CN115589433B (zh) 2022-11-23 2022-11-23 数据处理方法、装置及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN115589433A CN115589433A (zh) 2023-01-10
CN115589433B true CN115589433B (zh) 2023-05-30

Family

ID=84783199

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211471859.1A Active CN115589433B (zh) 2022-11-23 2022-11-23 数据处理方法、装置及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN115589433B (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105144636A (zh) * 2013-02-25 2015-12-09 高通股份有限公司 用于异构物联网(IoT)设备的适应性且可扩展的通用纲要
CN110971614A (zh) * 2019-12-17 2020-04-07 软通动力信息技术(集团)有限公司 物联网适配方法、系统、计算机设备及存储介质
CN111010390A (zh) * 2019-12-12 2020-04-14 重庆工商大学 一种基于多协议异构物联网的自适应呼叫方法与系统
CN111432000A (zh) * 2020-03-24 2020-07-17 中国建设银行股份有限公司 一种物联网设备的控制方法、装置、设备及存储介质
CN111679886A (zh) * 2020-06-03 2020-09-18 科东(广州)软件科技有限公司 异构计算资源调度方法、系统、电子设备及存储介质
CN112565443A (zh) * 2020-12-08 2021-03-26 中煤航测遥感集团有限公司 物联网数据解析方法、装置、设备及存储介质
WO2021107256A1 (ko) * 2019-11-26 2021-06-03 부산대학교 산학협력단 이종 사물인터넷 플랫폼 장치 간 상호 연동을 위한 인터페이스 제공 방법 및 이종 사물인터넷 플랫폼 장치 간 상호 연동을 위한 인터페이스 제공 시스템
WO2021164385A1 (zh) * 2020-02-21 2021-08-26 苏州浪潮智能科技有限公司 物联网设备系统的虚拟化方法、装置、设备及存储介质
CN114090230A (zh) * 2021-10-11 2022-02-25 西安电子科技大学 一种面向海量异构资源的物联网北向中间件服务治理方法
CN115328663A (zh) * 2022-10-10 2022-11-11 亚信科技(中国)有限公司 基于PaaS平台进行资源调度的方法、装置、设备和存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111641583B (zh) * 2020-04-07 2021-09-03 北京邮电大学 一种物联网资源接入系统及资源接入方法
CN113595961A (zh) * 2020-04-30 2021-11-02 阿里巴巴集团控股有限公司 协议转换方法和系统、网关设备

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105144636A (zh) * 2013-02-25 2015-12-09 高通股份有限公司 用于异构物联网(IoT)设备的适应性且可扩展的通用纲要
WO2021107256A1 (ko) * 2019-11-26 2021-06-03 부산대학교 산학협력단 이종 사물인터넷 플랫폼 장치 간 상호 연동을 위한 인터페이스 제공 방법 및 이종 사물인터넷 플랫폼 장치 간 상호 연동을 위한 인터페이스 제공 시스템
CN111010390A (zh) * 2019-12-12 2020-04-14 重庆工商大学 一种基于多协议异构物联网的自适应呼叫方法与系统
CN110971614A (zh) * 2019-12-17 2020-04-07 软通动力信息技术(集团)有限公司 物联网适配方法、系统、计算机设备及存储介质
WO2021164385A1 (zh) * 2020-02-21 2021-08-26 苏州浪潮智能科技有限公司 物联网设备系统的虚拟化方法、装置、设备及存储介质
CN111432000A (zh) * 2020-03-24 2020-07-17 中国建设银行股份有限公司 一种物联网设备的控制方法、装置、设备及存储介质
CN111679886A (zh) * 2020-06-03 2020-09-18 科东(广州)软件科技有限公司 异构计算资源调度方法、系统、电子设备及存储介质
CN112565443A (zh) * 2020-12-08 2021-03-26 中煤航测遥感集团有限公司 物联网数据解析方法、装置、设备及存储介质
CN114090230A (zh) * 2021-10-11 2022-02-25 西安电子科技大学 一种面向海量异构资源的物联网北向中间件服务治理方法
CN115328663A (zh) * 2022-10-10 2022-11-11 亚信科技(中国)有限公司 基于PaaS平台进行资源调度的方法、装置、设备和存储介质

Also Published As

Publication number Publication date
CN115589433A (zh) 2023-01-10

Similar Documents

Publication Publication Date Title
WO2021022987A1 (zh) 车路协同装置和方法、电子设备和存储介质
CN109672996B (zh) 一种基于v2x路侧设备系统及其信息分发方法
CN110855783B (zh) 基于大数据的智慧城市数据系统
CN113498011B (zh) 车联网方法、装置、设备、存储介质及系统
CN103152378B (zh) 一种网络数据的传输方法、系统和客户端
CN110225143B (zh) 一种智慧安防数据系统
KR101337619B1 (ko) 통합 관제 시스템 및 통합 관제 방법
CN111314339B (zh) 数据传输方法及装置
CN103916625A (zh) 一种基于云计算的视频监控系统及方法
CN111741073B (zh) 基于5g通信网络的电力数据传输系统
CN107347030A (zh) 一种基于v2x通信的消息管理装置及方法
CN202616878U (zh) 基于物联网的智能变电站视频联动监控系统
US11968696B2 (en) Resource handling for NR V2X based on split of CU-DU
CN110995859A (zh) 一种基于泛在物联网的变电站智能支撑平台系统
US10123325B2 (en) Method for managing transmissions of data from a plurality of machine-to-machine devices
CN104394366A (zh) 分布式视频流媒体转码访问控制的方法和系统
CN103201689A (zh) 具有嵌入式网络服务器的现场面板及其访问方法
CN113992713B (zh) 车云通信方法、装置、电子设备及存储介质
CN111835873A (zh) 一种智慧城市大数据分析及监控系统
CN112671934B (zh) 一种电力物联网系统
CN115589433B (zh) 数据处理方法、装置及计算机可读存储介质
CN109343488A (zh) 基于微信和fdt技术的现场总线监控预警系统和方法
CN113905104B (zh) 一种电梯智联网的通讯方法和协议转换系统
CN103152786A (zh) 一种物联网业务网关上行和下行消息路由的方法
CN107295087B (zh) 一种实现网系间数据聚合的系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant