CN117278490B - 一种物联网网关数据快速传输方法及系统 - Google Patents
一种物联网网关数据快速传输方法及系统 Download PDFInfo
- Publication number
- CN117278490B CN117278490B CN202311350693.2A CN202311350693A CN117278490B CN 117278490 B CN117278490 B CN 117278490B CN 202311350693 A CN202311350693 A CN 202311350693A CN 117278490 B CN117278490 B CN 117278490B
- Authority
- CN
- China
- Prior art keywords
- gateway data
- data
- target gateway
- category
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 55
- 238000000034 method Methods 0.000 title claims abstract description 43
- 230000008859 change Effects 0.000 claims abstract description 108
- 230000000875 corresponding effect Effects 0.000 claims description 87
- 238000004590 computer program Methods 0.000 claims description 18
- 238000001514 detection method Methods 0.000 claims description 17
- 230000015654 memory Effects 0.000 claims description 14
- 238000013507 mapping Methods 0.000 claims description 7
- 230000002596 correlated effect Effects 0.000 claims description 4
- 238000013075 data extraction Methods 0.000 claims description 3
- 238000012163 sequencing technique Methods 0.000 claims description 3
- 230000006855 networking Effects 0.000 claims 1
- 238000012545 processing Methods 0.000 description 10
- 238000012544 monitoring process Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012913 prioritisation Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/50—Queue scheduling
- H04L47/62—Queue scheduling characterised by scheduling criteria
- H04L47/625—Queue scheduling characterised by scheduling criteria for service slots or service orders
- H04L47/6275—Queue scheduling characterised by scheduling criteria for service slots or service orders based on priority
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/50—Queue scheduling
- H04L47/62—Queue scheduling characterised by scheduling criteria
- H04L47/622—Queue service order
- H04L47/6235—Variable service order
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本公开提供了一种物联网网关数据快速传输方法及系统，本公开属于数据传输技术领域，前述方法包括：将接收到的物联网数据作为网关数据添加至本网关设备对应的数据传输队列的队尾；抽取数据传输队列的前k个网关数据作为目标网关数据，对目标网关数据进行分类，并基于每类目标网关数据的数据属性确定每类目标网关数据对应的第一优先级指数；基于每类目标网关数据的数量变化和参数值变化确定每类目标网关数据对应的优先级调整率；根据优先级调整率对第一优先级指数进行调整，得到第二优先级指数；基于第二优先级指数对各类目标网关数据进行优先级排序，基于优先级排序结果对各类目标网关数据进行传输。本公开可实现海量网关数据的快速传输。
Description
技术领域
本公开属于数据传输技术领域，更具体地说，是涉及一种物联网网关数据快速传输方法及系统。
背景技术
物联网网关可以实现感知网络与通信网络，以及不同类型感知网络之间的协议转换以及数据传输。在此基础上，随着物联网网关所连接的设备的增加，如何基于物联网网关实现海量数据的快速传输成为了本领域技术人员亟需解决的问题。
发明内容
本公开的目的在于提供一种物联网网关数据快速传输方法及系统，以实现海量数据在物联网中的快速传输。
本公开实施例的第一方面，提供了一种物联网网关数据快速传输方法，包括：
在接收到外部设备发送的物联网数据时，将所述物联网数据作为网关数据添加至本网关设备对应的数据传输队列的队尾；
抽取所述数据传输队列的前k个网关数据作为目标网关数据，基于数据属性对所述目标网关数据进行分类，并基于每类目标网关数据的数据属性确定每类目标网关数据对应的第一优先级指数；
基于每类目标网关数据的数量变化和每类目标网关数据的参数值变化确定每类目标网关数据对应的优先级调整率；
根据所述优先级调整率对所述第一优先级指数进行调整，得到每类目标网关数据对应的第二优先级指数；
基于所述第二优先级指数对各类目标网关数据进行优先级排序，基于优先级排序结果对各类目标网关数据进行传输。
本公开实施例的第二方面，提供了一种物联网网关数据快速传输系统，包括：
数据接收模块，用于在接收到外部设备发送的物联网数据时，将所述物联网数据作为网关数据添加至本网关设备对应的数据传输队列的队尾；
数据抽取模块，用于抽取所述数据传输队列的前k个网关数据作为目标网关数据，基于数据属性对所述目标网关数据进行分类，并基于每类目标网关数据的数据属性确定每类目标网关数据对应的第一优先级指数；
变化检测模块，用于基于每类目标网关数据的数量变化和每类目标网关数据的参数值变化确定每类目标网关数据对应的优先级调整率；
优先级调整模块，用于根据所述优先级调整率对所述第一优先级指数进行调整，得到每类目标网关数据对应的第二优先级指数；
数据传输模块，用于基于所述第二优先级指数对各类目标网关数据进行优先级排序，基于优先级排序结果对各类目标网关数据进行传输。
本公开实施例的第三方面，提供了一种电子设备，包括：存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述的物联网网关数据快速传输方法的步骤。
本公开实施例的第四方面，提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述的物联网网关数据快速传输方法的步骤。
本公开实施例提供的物联网网关数据快速传输方法及系统的有益效果在于：
第一，本公开实施例每次从数据传输队列中抽取k个网关数据进行传输，可以在一定程度上保证数据传输按照一定的时序进行（也即先接收到的数据尽可能先传输，后接收到的数据尽可能后传输），也可以保证所有的数据得到传输，不会出现优先级较低的数据一直无法传输的情形。
第二，本公开实施例提供了一种确定每类目标网关数据的优先级指数的方式，也即首先根据每类目标网关数据的数据属性确定其第一优先级指数，也即基础的优先级指数。在此基础上，检测每类目标网关数据的数量变化以及参数值变化，根据每类目标网关数据的变化情况对前述基础的优先级指数进行调整，得到每类目标网关数据对应的第二优先级指数，也即，本公开实施例不仅考虑了每类目标网关数据本身的优先级需求，在此基础上，还会根据每类目标网关数据的变化调整其优先级需求，从而使得优先级指数的确定更为合理，使得更重要更具备实时性需求的数据得到优先传输。相对于相关技术中需对网关数据进行异常检测以确定传输优先级的方法，本公开实施例更为简便快速，可通过数据变化迅速调整优先级，更适应海量数据的传输，能够保证后端用户需要的数据得到更快速的传输，提升数据响应效率。
也就是说，本公开实施例能够保证海量网关数据的快速有效传输。
附图说明
为了更清楚地说明本公开实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本公开一实施例提供的物联网网关数据快速传输方法的流程示意图；
图2为本公开一实施例提供的物联网网关数据快速传输系统的结构框图；
图3为本公开一实施例提供的电子设备的示意框图。
具体实施方式
以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本公开实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本公开。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本公开的描述。
为使本公开的目的、技术方案和优点更加清楚，下面将结合附图通过具体实施例来进行说明。
请参考图1，图1为本公开一实施例提供的物联网网关数据快速传输方法的流程示意图，该物联网网关数据快速传输方法包括：
S101：在接收到外部设备发送的物联网数据时，将物联网数据作为网关数据添加至本网关设备对应的数据传输队列的队尾。
其中，物联网系统通常包含感知节点、通信模块以及监控/处理终端，感知节点用于采集数据，通信模块用于传输感知节点采集的数据，监控/处理终端用于基于感知节点采集的数据进行状态监控和异常检测。本公开实施例中的物联网网关即为通信模块的一部分。在此基础上，本实施例中，外部设备可以为物联网系统中的各个感知节点（其具体可以为各类传感器），也可以为其他的物联网网关，本实施例对此不作限定。
在本实施例中，物联网数据可以为感知节点所采集的数据，也可以为经过其他的物联网网关转发的感知节点所采集的数据。
在本实施例中，每个网关设备中都预设有数据传输队列，当本网关设备接收到外部设备发送的物联网数据时，可将接收到的物联网数据作为本网关设备的网关数据插入至本网关设备对应的数据传输队列的队尾。
S102：抽取数据传输队列的前k个网关数据作为目标网关数据，基于数据属性对目标网关数据进行分类，并基于每类目标网关数据的数据属性确定每类目标网关数据对应的第一优先级指数。
在本实施例中，k为预设值，比如，k可以为1000。可抽取本网关设备对应的数据传输队列的前k个网关数据作为目标网关数据，在此基础上，根据数据属性对目标网关数据进行分类，得到多类目标网关数据。其中，一组数据属性对应一类目标网关数据，一组数据属性对应一个第一优先级指数，在此基础上，可根据每类目标网关数据的数据属性确定每类目标网关数据对应的第一优先级指数。
其中，每组数据属性都包括数据类型和数据来源。“一组数据属性对应一类目标网关数据”指的是“数据类型不同或者数据来源不同的目标网关数据属于不同类的目标网关数据”。比如，数据类型为A和数据来源为B的目标网关数据属于一类数据（记为第1类数据），数据类型为A和数据来源为C的目标网关数据属于另一类数据（记为第2类数据），数据类型为D和数据来源为B的目标网关数据也属于另一类数据（记为第3类数据），数据类型为D和数据来源为C的目标网关数据也属于另一类数据（记为第4类数据），也就是说，第1类数据、第2类数据、第3类数据、第4类数据均属于不同的数据。
以下以具体场景scene1为例来说明基于数据属性对目标网关数据进行分类的具体含义：
假设前述物联网系统用于对变电站设备进行监测，其感知节点采集的是变电站设备的各项参数。在此基础上，变电站中通常会设置有逆变器，感知节点采集到的物联网数据中可能包含逆变器的电流参数，也可以包含逆变器的拍摄图像，也可以包含逆变器对应的控制器的配置参数，假设目标网关数据中包含前述数据（电流参数、拍摄图像、配置参数），则目标网关数据会被分为三类，电流参数为第Ⅰ类数据，拍摄图像为第Ⅱ类数据，配置参数为第Ⅲ类数据，因为电流参数与拍摄图像的数据类型不同，电流参数与配置参数的数据来源不同，拍摄图像与配置参数的数据类型和数据来源均不同，因此按照数据属性划分，相应的目标网关数据会被分为三类。
在本实施例中，一组数据属性对应一个第一优先级指数，当目标网关数据的分类确定，其第一优先级指数也随之确定，其中，第一优先级指数越大，表明目标网关数据的优先级越高。
S103：基于每类目标网关数据的数量变化和每类目标网关数据的参数值变化确定每类目标网关数据对应的优先级调整率。
在本实施例中，为了实现确定数据传输的优先级，相关技术中通常会在网关节点对网关数据进行异常检测，将出现异常的数据尽早传输至监控/处理终端，以便于监控/处理终端及时发现异常，及时进行异常处理。但是如果在网关节点进行海量数据的异常检测，会极大地造成网关节点的运算压力，降低网关节点的数据传输效率，因此本公开实施例通过检测“变化”的方式来调整每类目标网关数据传输的优先级，从而在保证准确、快速地确定目标网关数据的优先级，实现数据的快速传输。
S104：根据优先级调整率对第一优先级指数进行调整，得到每类目标网关数据对应的第二优先级指数。
在本实施例中，第一优先级指数本质为预先为各类目标网关数据分配的优先级指数，在此基础上，本实施例会根据目标网关数据的变化情况对其对应的第一优先级指数进行适应性调整，从而保证需要及时传输的网关数据得到快速传输。其中，第二优先级指数越大，目标网关数据的优先级越高。
S105：基于第二优先级指数对各类目标网关数据进行优先级排序，基于优先级排序结果对各类目标网关数据进行传输。
在本实施例中，可基于第二优先级指数由高到低的顺序对各类目标网关数据进行排序，第二优先级指数较高的目标网关数据优先传输。其中，每类目标网关数据中各个网关数据的第二优先级指数一致，每类目标网关数据中的各个网关数据可根据本网关设备接收到各个网关数据的时序进行传输，也即，在每类目标网关数据内部，先接收到的网关数据先传输，后接收到的网关数据后传输。
在本实施例中，基于优先级排序结果对各类目标网关数据进行传输后，可在本网关设备对应的数据传输队列中删除已传输的目标网关数据，并返回执行步骤S102。
从以上描述可知，本公开实施例的有益效果为：
第一，本公开实施例每次从数据传输队列中抽取k个网关数据进行传输，可以在一定程度上保证数据传输按照一定的时序进行（也即先接收到的数据尽可能先传输，后接收到的数据尽可能后传输），也可以保证所有的数据得到传输，不会出现优先级较低的数据一直无法传输的情形。
第二，本公开实施例提供了一种确定每类目标网关数据的优先级指数的方式，也即首先根据每类目标网关数据的数据属性确定其第一优先级指数，也即基础的优先级指数。在此基础上，检测每类目标网关数据的数量变化以及参数值变化，根据每类目标网关数据的变化情况对前述基础的优先级指数进行调整，得到每类目标网关数据对应的第二优先级指数，也即，本公开实施例不仅考虑了每类目标网关数据本身的优先级需求，在此基础上，还会根据每类目标网关数据的变化调整其优先级需求，从而使得优先级指数的确定更为合理，使得更重要更具备实时性需求的数据得到优先传输。相对于相关技术中需对网关数据进行异常检测以确定传输优先级的方法，本公开实施例更为简便快速，可通过数据变化迅速调整优先级，更适应海量数据的传输，能够保证后端用户需要的数据得到更快速的传输，提升数据响应效率。
也就是说，本公开实施例能够保证海量网关数据的快速有效传输。
在本公开的一种实施例中，基于每类目标网关数据的数据属性确定每类目标网关数据对应的第一优先级指数，包括：
基于每类目标网关数据的数据属性查找预设的映射关系表，得到每类目标网关数据对应的第一优先级指数。
映射关系表中预先记录有不同数据属性的网关数据对应的第一优先级指数。
在本实施例中，预设的映射关系表也即预先建立的为不同数据属性的网关数据分配的第一优先级指数的表格，其包含有不同数据属性的网关数据对应的第一优先级指数。其中，如上述实施例所描述的，不同数据属性指的是数据类型不同或者数据来源不同，数据属性的多种组合分别对应多类目标网关数据。
在本实施例中，第一优先级指数为预先为各类目标网关数据分配的优先级指数，其可以根据各类目标网关数据的实时性需求预先确定，其中，实时性需求根据各类目标网关数据的数据属性确定。参考上述场景scene1，电流参数的实时性需求较高（因为监控/处理终端需要及时了解逆变器的工作状态的变化），其第一优先级指数也较高。配置参数的实时性需求较低（因为其不常变化，相应的感知节点也不一定会实时上传此配置参数），其第一优先级指数也较低。
在本公开的一种实施例中，基于每类目标网关数据的数量变化和每类目标网关数据的参数值变化确定每类目标网关数据对应的优先级调整率，包括：
通过计算每类目标网关数据的数量变化，得到每类目标网关数据的第一变化值；其中，/>为所述第一变化值，/>为当前抽取的k个网关数据中每类目标网关数据的数量，/>为最近一次抽取的k个网关数据中每类目标网关数据的数量，与/>对应。其中，对于某类目标网关数据，“最近一次抽取的k个网关数据指的是最近一次抽取的包含该类目标网关数据的k个网关数据”。
根据每类目标网关数据的数据类型计算每类目标网关数据的参数值变化，得到每类目标网关数据的第二变化值。
通过计算每类目标网关数据对应的优先级调整率。其中，/>为每类目标网关数据对应的优先级调整率，/>为每类目标网关数据的第二变化值，/>为预先确定的比例值。
在本实施例中，不同数据类型的目标网关数据对应的参数值变化的计算方式不同，可根据预先设定的计算方式结合每类目标网关数据的数据类型来计算每类目标网关数据对应的第二变化值。
在本实施例中，可对第一变化值和第二变化值进行加权求和，得到每类目标网关数据对应的优先级调整率。
在本公开的一种实施例中，根据每类目标网关数据的数据类型计算每类目标网关数据的参数值变化，得到每类目标网关数据的第二变化值，包括：
若某类目标网关数据为数值型数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值；其中，/>为当前抽取的k个网关数据中该类目标网关数据的平均值，/>为最近一次抽取的k个网关数据中该类目标网关数据的平均值。其中，对于某类目标网关数据，“最近一次抽取的k个网关数据指的是最近一次抽取的包含该类目标网关数据的k个网关数据”。
在本实施例中，如果某类目标网关数据为数值型数据，可通过平均值的变化来确定该类目标网关数据的第二变化值。
若某类目标网关数据为文本型数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值。其中，/>为对当前抽取的k个网关数据中该类目标网关数据的每个文本进行意图识别，得到的不同意图的集合；/>为对最近一次抽取的k个网关数据中该类目标网关数据的每个文本进行意图识别，得到的不同意图的集合；为/>和/>并集中的元素个数，/>为/>和交集中的元素个数。其中，对于某类目标网关数据，“最近一次抽取的k个网关数据指的是最近一次抽取的包含该类目标网关数据的k个网关数据”。
在本实施例中，如果某类目标网关数据为文本型数据，可通过识别每个文本的意图，根据意图种类的变化来确定该类目标网关数据的第二变化值。
在本实施例中，文本型数据可能为系统预设的文本选项，比如，上述场景scene1中，逆变器对应的控制器的控制类型可能是文本型描述，比如，其控制类型可以为：“电压源控制”、“电流源控制”、“双闭环控制”等，当接收到此类文本型数据时，可直接将该文本本身作为意图识别结果。
在本实施例中，文本型数据也可能为用户填写的文本，其不具有固定性，比如，对于逆变器的某一故障，用户A可能描述为“逆变器存在电流冲击故障”，用户B可能描述为“存在电流击穿，逆变器故障”，此时，当接收到此类文本型数据时，可通过现有手段中的意图识别模型来识别文本中的意图，将前述不同的描述转化为固定的描述方式（也即得到意图识别结果）。
若某类目标网关数据为图像数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值。/>为该类目标网关数据中每个图像与标准图像之间的特征匹配度的平均值，/>为预设的第一阈值。
在本实施例中，特征匹配度指的是对每个图像与标准图像进行特征点的提取，“每个图像与标准图像匹配的特征点的数量”与“每个图像总的特征点数量”的比值。
若某类目标网关数据为音频数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值。/>为该类目标网关数据中每个音频与标准音频之间的相似度的平均值，/>为预设的第二阈值。
在本实施例中，考虑到某些机械类的设备可能需要通过运行过程中的音频数据进行状态检测，因此，目标网关数据还可能为音频数据，此时可考虑通过DTW算法（也即动态时间规整算法）来比对每个音频与标准音频之间的序列相似度，进而得到该类目标网关数据的第二变化值。
在本实施例中，目标网关数据也可能为视频数据，其中视频数据通常为监控视频，其传输速度较慢，通常不会用于故障检测，因此优先级也较低，因此，本实施例不考虑对视频类数据的第一优先级指数进行调整，也即视频类网关数据的优先级调整率默认为0。
在本公开的一种实施例中，每类目标网关数据对应的不同，物联网网关数据快速传输方法还包括：
根据每类目标网关数据的第一优先级指数确定每类目标网关数据对应的。
其中，每类目标网关数据对应的与每类目标网关数据的第一优先级指数正相关。
在本实施例中，在对第一变化值和第二变化值进行加权求和时，需考虑到每类目标网关数据本身的优先级，也即根据每类目标网关数据的第一优先级指数确定每类目标网关数据对应的。
在本实施例中，每类目标网关数据对应的与每类目标网关数据的第一优先级指数正相关，也就是说，某类目标网关数据的第一优先级指数越低，其对应的/>越小，1-/>越大，该类目标网关数据的优先级调整率对参数值的变化要更为敏感（参数值的变化要更容易引起优先级调整率的增高）。以上述场景scene1为例，配置参数虽然优先级较低，但当其发生变化时，反而会影响到整个逆变器的运行，因此配置参数的变化要更为及时地传输至监控/处理终端，因此，其对应的1-/>需要越大。电流参数虽然优先级较高，但其变化是常态（通常都会有一定的变化），因此，电流参数对应的“1-/>”要小于配置参数对应的“1-/>”，也就是说，虽然参数值的变化都会引起优先级调整率的增高，但是“电流参数变化引起的优先级调整率的增高程度”要低于“配置参数变化引起的优先级调整率的增高程度”。
在本实施例中，也考虑到了数量变化对优先级的影响。考虑到某些感知节点在检测到异常或者感知节点自身异常时物联网数据的采集频率也会随之变化，因此，当本网关设备接收到的某类目标网关数据增多/减少时，也应将此变化考虑在内，进行优先级的调整，以保证及时发现物联网系统中的异常情况。
在本公开的一种实施例中，根据每类目标网关数据的第一优先级指数确定每类目标网关数据对应的，包括：
根据第一优先级指数的大小对每类目标网关数据进行递增排序，得到每类目标网关数据对应的排序序号。
通过确定每类目标网关数据对应的/>。
其中，为每类目标网关数据对应的排序序号，/>为每类目标网关数据对应的排序序号中的最大值。
在本实施例中，给出了一种确定每类目标网关数据对应的的方式，其中，0.5</><1。
在本公开的一种实施例中，根据优先级调整率对第一优先级指数进行调整，得到每类目标网关数据对应的第二优先级指数，包括：
通过计算每类目标网关数据对应的第二优先级指数。
其中，为每类目标网关数据对应的第二优先级指数，/>为每类目标网关数据对应的第一优先级指数，/>为每类目标网关数据对应的优先级调整率。
在本实施例中，第一优先级指数和第二优先级指数越大，表明对应的目标网关数据的优先级越高，其传输时间越靠前。
对应于上文实施例的物联网网关数据快速传输方法，图2为本公开一实施例提供的物联网网关数据快速传输系统的结构框图。为了便于说明，仅示出了与本公开实施例相关的部分。参考图2，该物联网网关数据快速传输系统20包括：数据接收模块21、数据抽取模块22、变化检测模块23、优先级调整模块24和数据传输模块25。
其中，数据接收模块21，用于在接收到外部设备发送的物联网数据时，将物联网数据作为网关数据添加至本网关设备对应的数据传输队列的队尾。
数据抽取模块22，用于抽取数据传输队列的前k个网关数据作为目标网关数据，基于数据属性对目标网关数据进行分类，并基于每类目标网关数据的数据属性确定每类目标网关数据对应的第一优先级指数。
变化检测模块23，用于基于每类目标网关数据的数量变化和每类目标网关数据的参数值变化确定每类目标网关数据对应的优先级调整率。
优先级调整模块24，用于根据优先级调整率对第一优先级指数进行调整，得到每类目标网关数据对应的第二优先级指数。
数据传输模块25，用于基于第二优先级指数对各类目标网关数据进行优先级排序，基于优先级排序结果对各类目标网关数据进行传输。
在本公开的一种实施例中，数据抽取模块22具体用于：
基于每类目标网关数据的数据属性查找预设的映射关系表，得到每类目标网关数据对应的第一优先级指数。
映射关系表中预先记录有不同数据属性的数据对应的第一优先级指数。
在本公开的一种实施例中，变化检测模块23具体用于：
通过计算每类目标网关数据的数量变化，得到每类目标网关数据的第一变化值；其中，/>为所述第一变化值，/>为当前抽取的k个网关数据中每类目标网关数据的数量，/>为最近一次抽取的k个网关数据中每类目标网关数据的数量，与/>对应。
根据每类目标网关数据的数据类型计算每类目标网关数据的参数值变化，得到每类目标网关数据的第二变化值。
通过计算每类目标网关数据对应的优先级调整率。其中，/>为每类目标网关数据对应的优先级调整率，/>为每类目标网关数据的第二变化值，/>为预先确定的比例值。
在本公开的一种实施例中，变化检测模块23具体用于：
若某类目标网关数据为数值型数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值；其中，/>为当前抽取的k个网关数据中该类目标网关数据的平均值，/>为最近一次抽取的k个网关数据中该类目标网关数据的平均值。
若某类目标网关数据为文本型数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值。
其中，为对当前抽取的k个网关数据中该类目标网关数据的每个文本进行意图识别，得到的不同意图的集合；/>为对最近一次抽取的k个网关数据中该类目标网关数据的每个文本进行意图识别，得到的不同意图的集合；/>为/>和并集中的元素个数，/>为/>和/>交集中的元素个数。
若某类目标网关数据为图像数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值。/>为该类目标网关数据中每个图像与标准图像之间的特征匹配度的平均值，/>为预设的第一阈值。
若某类目标网关数据为音频数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值。/>为该类目标网关数据中每个音频与标准音频之间的相似度的平均值，/>为预设的第二阈值。
在本公开的一种实施例中，每类目标网关数据对应的不同，变化检测模块23还用于：
根据每类目标网关数据的第一优先级指数确定每类目标网关数据对应的。
其中，每类目标网关数据对应的与每类目标网关数据的第一优先级指数正相关。
在本公开的一种实施例中，变化检测模块23具体用于：
根据第一优先级指数的大小对每类目标网关数据进行递增排序，得到每类目标网关数据对应的排序序号。
通过确定每类目标网关数据对应的/>。
其中，为每类目标网关数据对应的排序序号，/>为每类目标网关数据对应的排序序号中的最大值。
在本公开的一种实施例中，优先级调整模块24具体用于：
通过计算每类目标网关数据对应的第二优先级指数。
其中，为每类目标网关数据对应的第二优先级指数，/>为每类目标网关数据对应的第一优先级指数，/>为每类目标网关数据对应的优先级调整率。
本公开实施例还提供一种电子设备，参见图3，图3为本公开一实施例提供的电子设备的示意框图。如图3所示的本实施例中的电子设备300可以包括：一个或多个处理器301、一个或多个输入设备302、一个或多个输出设备303及一个或多个存储器304。上述处理器301、输入设备302、输出设备303及存储器304通过通信总线305完成相互间的通信。存储器304用于存储计算机程序，计算机程序包括程序指令。处理器301用于执行存储器304存储的程序指令。其中，处理器301被配置用于调用程序指令执行以下操作上述各系统实施例中各模块/单元的功能，例如图2所示模块21至25的功能。
应当理解，在本公开实施例中，所称处理器301可以是中央处理单元 (CentralProcessing Unit，CPU)，该处理器还可以是其他通用处理器、数字信号处理器 (DigitalSignal Processor，DSP)、专用集成电路 (Application Specific Integrated Circuit，ASIC)、现成可编程门阵列 (Field-Programmable Gate Array，FPGA) 或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
输入设备302可以包括触控板、指纹采传感器（用于采集用户的指纹信息和指纹的方向信息）、麦克风等，输出设备303可以包括显示器（LCD等）、扬声器等。
该存储器304可以包括只读存储器和随机存取存储器，并向处理器301 提供指令和数据。存储器304的一部分还可以包括非易失性随机存取存储器。例如，存储器304还可以存储设备类型的信息。
具体实现中，本公开实施例中所描述的处理器301、输入设备302、输出设备303可执行本公开实施例提供的物联网网关数据快速传输方法的第一实施例和第二实施例中所描述的实现方式，也可执行本公开实施例所描述的终端的实现方式，在此不再赘述。
在本公开的另一实施例中提供一种计算机可读存储介质，计算机可读存储介质存储有计算机程序，计算机程序包括程序指令，程序指令被处理器执行时实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，计算机程序包括计算机程序代码，计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读介质可以包括：能够携带计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器（ROM，Read-Only Memory）、随机存取存储器（RAM，Random Access Memory）、电载波信号、电信信号以及软件分发介质等。需要说明的是，计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括是电载波信号和电信信号。
计算机可读存储介质可以是前述任一实施例的电子设备的内部存储单元，例如电子设备的硬盘或内存。计算机可读存储介质也可以是电子设备的外部存储设备，例如电子设备上配备的插接式硬盘，智能存储卡（Smart Media Card, SMC），安全数字（SecureDigital, SD）卡，闪存卡（Flash Card）等。进一步地，计算机可读存储介质还可以既包括电子设备的内部存储单元也包括外部存储设备。计算机可读存储介质用于存储计算机程序及电子设备所需的其他程序和数据。计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本公开的范围。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的电子设备和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的电子设备和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。
作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本公开实施例方案的目的。
另外，在本公开各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
以上，仅为本公开的具体实施方式，但本公开的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本公开揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本公开的保护范围之内。因此，本公开的保护范围应以权利要求的保护范围为准。
Claims (8)
1.一种物联网网关数据快速传输方法，其特征在于，包括：
在接收到外部设备发送的物联网数据时，将所述物联网数据作为网关数据添加至本网关设备对应的数据传输队列的队尾；
抽取所述数据传输队列的前k个网关数据作为目标网关数据，基于数据属性对所述目标网关数据进行分类，并基于每类目标网关数据的数据属性确定每类目标网关数据对应的第一优先级指数；
基于每类目标网关数据的数量变化和每类目标网关数据的参数值变化确定每类目标网关数据对应的优先级调整率；
根据所述优先级调整率对所述第一优先级指数进行调整，得到每类目标网关数据对应的第二优先级指数；
基于所述第二优先级指数对各类目标网关数据进行优先级排序，基于优先级排序结果对各类目标网关数据进行传输；
所述基于每类目标网关数据的数量变化和每类目标网关数据的参数值变化确定每类目标网关数据对应的优先级调整率，包括：
通过计算每类目标网关数据的数量变化，得到每类目标网关数据的第一变化值；其中，/>为所述第一变化值，/>为当前抽取的k个网关数据中每类目标网关数据的数量，/>为最近一次抽取的k个网关数据中每类目标网关数据的数量，/>与/>对应；
根据每类目标网关数据的数据类型计算每类目标网关数据的参数值变化，得到每类目标网关数据的第二变化值；
通过计算每类目标网关数据对应的优先级调整率；其中，/>为每类目标网关数据对应的优先级调整率，/>为每类目标网关数据的第二变化值，/>为预先确定的比例值；
所述根据每类目标网关数据的数据类型计算每类目标网关数据的参数值变化，得到每类目标网关数据的第二变化值，包括：
若某类目标网关数据为数值型数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值；其中，/>为当前抽取的k个网关数据中该类目标网关数据的平均值，/>为最近一次抽取的k个网关数据中该类目标网关数据的平均值；
若某类目标网关数据为文本型数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值；
其中，为对当前抽取的k个网关数据中该类目标网关数据的每个文本进行意图识别，得到的不同意图的集合；/>为对最近一次抽取的k个网关数据中该类目标网关数据的每个文本进行意图识别，得到的不同意图的集合；/>为/>和并集中的元素个数，/>为/>和/>交集中的元素个数；
若某类目标网关数据为图像数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值；/>为该类目标网关数据中每个图像与标准图像之间的特征匹配度的平均值，/>为预设的第一阈值；
若某类目标网关数据为音频数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值；/>为该类目标网关数据中每个音频与标准音频之间的相似度的平均值，/>为预设的第二阈值。
2.如权利要求1所述的物联网网关数据快速传输方法，其特征在于，所述基于每类目标网关数据的数据属性确定每类目标网关数据对应的第一优先级指数，包括：
基于每类目标网关数据的数据属性查找预设的映射关系表，得到每类目标网关数据对应的第一优先级指数；
所述映射关系表中预先记录有不同数据属性的数据对应的第一优先级指数。
3.如权利要求1所述的物联网网关数据快速传输方法，其特征在于，每类目标网关数据对应的不同，所述物联网网关数据快速传输方法还包括：
根据每类目标网关数据的第一优先级指数确定每类目标网关数据对应的；
其中，每类目标网关数据对应的与每类目标网关数据的第一优先级指数正相关。
4.如权利要求3所述的物联网网关数据快速传输方法，其特征在于，所述根据每类目标网关数据的第一优先级指数确定每类目标网关数据对应的，包括：
根据第一优先级指数的大小对每类目标网关数据进行递增排序，得到每类目标网关数据对应的排序序号；
通过确定每类目标网关数据对应的/>；
其中，为每类目标网关数据对应的排序序号，/>为每类目标网关数据对应的排序序号中的最大值。
5.如权利要求1至4任一项所述的物联网网关数据快速传输方法，其特征在于，所述根据所述优先级调整率对所述第一优先级指数进行调整，得到每类目标网关数据对应的第二优先级指数，包括：
通过计算每类目标网关数据对应的第二优先级指数；
其中，为每类目标网关数据对应的第二优先级指数，/>为每类目标网关数据对应的第一优先级指数，/>为每类目标网关数据对应的优先级调整率。
6.一种物联网网关数据快速传输系统，其特征在于，包括：
数据接收模块，用于在接收到外部设备发送的物联网数据时，将所述物联网数据作为网关数据添加至本网关设备对应的数据传输队列的队尾；
数据抽取模块，用于抽取所述数据传输队列的前k个网关数据作为目标网关数据，基于数据属性对所述目标网关数据进行分类，并基于每类目标网关数据的数据属性确定每类目标网关数据对应的第一优先级指数；
变化检测模块，用于基于每类目标网关数据的数量变化和每类目标网关数据的参数值变化确定每类目标网关数据对应的优先级调整率；
优先级调整模块，用于根据所述优先级调整率对所述第一优先级指数进行调整，得到每类目标网关数据对应的第二优先级指数；
数据传输模块，用于基于所述第二优先级指数对各类目标网关数据进行优先级排序，基于优先级排序结果对各类目标网关数据进行传输；
其中，变化检测模块具体用于：
通过计算每类目标网关数据的数量变化，得到每类目标网关数据的第一变化值；其中，/>为所述第一变化值，/>为当前抽取的k个网关数据中每类目标网关数据的数量，/>为最近一次抽取的k个网关数据中每类目标网关数据的数量，/>与/>对应；
根据每类目标网关数据的数据类型计算每类目标网关数据的参数值变化，得到每类目标网关数据的第二变化值；
通过计算每类目标网关数据对应的优先级调整率；其中，/>为每类目标网关数据对应的优先级调整率，/>为每类目标网关数据的第二变化值，/>为预先确定的比例值；
若某类目标网关数据为数值型数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值；其中，/>为当前抽取的k个网关数据中该类目标网关数据的平均值，/>为最近一次抽取的k个网关数据中该类目标网关数据的平均值；
若某类目标网关数据为文本型数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值；
其中，为对当前抽取的k个网关数据中该类目标网关数据的每个文本进行意图识别，得到的不同意图的集合；/>为对最近一次抽取的k个网关数据中该类目标网关数据的每个文本进行意图识别，得到的不同意图的集合；/>为/>和并集中的元素个数，/>为/>和/>交集中的元素个数；
若某类目标网关数据为图像数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值；/>为该类目标网关数据中每个图像与标准图像之间的特征匹配度的平均值，/>为预设的第一阈值；
若某类目标网关数据为音频数据，则通过计算该类目标网关数据的参数值变化，得到该类目标网关数据的第二变化值；/>为该类目标网关数据中每个音频与标准音频之间的相似度的平均值，/>为预设的第二阈值。
7.一种电子设备，其特征在于，包括：
存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至5任一项所述方法的步骤。
8.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至5任一项所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311350693.2A CN117278490B (zh) | 2023-10-18 | 2023-10-18 | 一种物联网网关数据快速传输方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311350693.2A CN117278490B (zh) | 2023-10-18 | 2023-10-18 | 一种物联网网关数据快速传输方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN117278490A CN117278490A (zh) | 2023-12-22 |
| CN117278490B true CN117278490B (zh) | 2024-04-02 |
Family
ID=89206157
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202311350693.2A Active CN117278490B (zh) | 2023-10-18 | 2023-10-18 | 一种物联网网关数据快速传输方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117278490B (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2014058113A1 (ko) * | 2012-10-12 | 2014-04-17 | 주식회사 케이티 | M2m 네트워크 자원 할당 방법 및 장치 |
| CN107634864A (zh) * | 2017-10-27 | 2018-01-26 | 合肥城市云数据中心股份有限公司 | 一种用于公路网级桥梁的高频数据实时采集传输方法 |
| CN109547357A (zh) * | 2018-12-03 | 2019-03-29 | 郑州云海信息技术有限公司 | 一种存储系统中数据信息的传输方法、装置、设备及介质 |
| CN111459690A (zh) * | 2020-04-10 | 2020-07-28 | Oppo广东移动通信有限公司 | 数据收发控制方法、装置、移动终端及存储介质 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11983125B2 (en) * | 2021-07-29 | 2024-05-14 | International Business Machines Corporation | Data traffic prioritization based on content |
-
2023
- 2023-10-18 CN CN202311350693.2A patent/CN117278490B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2014058113A1 (ko) * | 2012-10-12 | 2014-04-17 | 주식회사 케이티 | M2m 네트워크 자원 할당 방법 및 장치 |
| CN107634864A (zh) * | 2017-10-27 | 2018-01-26 | 合肥城市云数据中心股份有限公司 | 一种用于公路网级桥梁的高频数据实时采集传输方法 |
| CN109547357A (zh) * | 2018-12-03 | 2019-03-29 | 郑州云海信息技术有限公司 | 一种存储系统中数据信息的传输方法、装置、设备及介质 |
| CN111459690A (zh) * | 2020-04-10 | 2020-07-28 | Oppo广东移动通信有限公司 | 数据收发控制方法、装置、移动终端及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN117278490A (zh) | 2023-12-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11238310B2 (en) | Training data acquisition method and device, server and storage medium | |
| CN106982230B (zh) | 一种流量检测方法及系统 | |
| US9201753B2 (en) | Integrated circuit and method for monitoring bus status in integrated circuit | |
| CN109271363B (zh) | 一种文件存储的方法及设备 | |
| CN110956123B (zh) | 一种富媒体内容的审核方法、装置、服务器及存储介质 | |
| CN111046879A (zh) | 证件图像分类方法、装置、计算机设备及可读存储介质 | |
| CN110411554B (zh) | 一种电机设备检测方法、装置及系统 | |
| CN111275599B (zh) | 一种基于大数据集成算法的群租房预警方法、装置、存储介质及终端 | |
| CN112702339A (zh) | 基于深度迁移学习的异常流量监测与分析方法和装置 | |
| CN117278490B (zh) | 一种物联网网关数据快速传输方法及系统 | |
| CN104933077A (zh) | 基于规则的多文件信息分析方法 | |
| CN113727348B (zh) | 用户设备ue用户数据的检测方法、设备、系统及存储介质 | |
| US10810187B1 (en) | Predictive model for generating paired identifiers | |
| US11462322B1 (en) | Methods of determining a state of a dependent user | |
| CN115865486B (zh) | 基于多层感知卷积神经网络的网络入侵检测方法及系统 | |
| CN115661527A (zh) | 基于人工智能的图像分类模型训练方法、分类方法及装置 | |
| CN116189706A (zh) | 数据传输方法、装置、电子设备和计算机可读存储介质 | |
| CN113434869A (zh) | 基于威胁感知大数据和人工智能的数据处理方法及ai系统 | |
| CN106557527A (zh) | 一种色情图像检测和系统 | |
| CN112312590A (zh) | 一种设备通信协议识别方法和装置 | |
| CN114362982A (zh) | 流量细分识别方法、系统、电子设备和存储介质 | |
| CN115514621B (zh) | 故障监测方法、电子设备及存储介质 | |
| CN117333926B (zh) | 一种图片聚合方法、装置、电子设备及可读存储介质 | |
| CN115083003B (zh) | 聚类网络训练和目标聚类方法、装置、终端及存储介质 | |
| CN113420148B (zh) | 用于敏感内容质检模型的训练文本采集方法、系统及设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |