CN113992521A - 一种数据处理方法及装置 - Google Patents
一种数据处理方法及装置 Download PDFInfo
- Publication number
- CN113992521A CN113992521A CN202111090939.8A CN202111090939A CN113992521A CN 113992521 A CN113992521 A CN 113992521A CN 202111090939 A CN202111090939 A CN 202111090939A CN 113992521 A CN113992521 A CN 113992521A
- Authority
- CN
- China
- Prior art keywords
- data
- acquisition request
- controller
- value
- requested
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 27
- 239000012634 fragment Substances 0.000 claims abstract description 47
- 238000013467 fragmentation Methods 0.000 claims abstract description 39
- 238000006062 fragmentation reaction Methods 0.000 claims abstract description 39
- 238000012545 processing Methods 0.000 claims abstract description 36
- 238000000034 method Methods 0.000 claims description 29
- 230000004044 response Effects 0.000 claims description 21
- 238000004891 communication Methods 0.000 description 9
- 238000004590 computer program Methods 0.000 description 8
- 230000001360 synchronised effect Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0803—Configuration setting
- H04L41/084—Configuration by using pre-existing information, e.g. using templates or copying from other elements
- H04L41/0846—Configuration by using pre-existing information, e.g. using templates or copying from other elements based on copy from other elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F13/38—Information transfer, e.g. on bus
- G06F13/42—Bus transfer protocol, e.g. handshake; Synchronisation
- G06F13/4204—Bus transfer protocol, e.g. handshake; Synchronisation on a parallel bus
- G06F13/4221—Bus transfer protocol, e.g. handshake; Synchronisation on a parallel bus being an input/output bus, e.g. ISA bus, EISA bus, PCI bus, SCSI bus
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本申请提供了一种数据处理方法及装置。网络设备会接收控制器发送的数据获取请求,所述数据获取请求包括获取模式;若所述获取模式的取值为设定值,则对所请求的数据进行分片处理,得到若干个分片数据;采用分片方式上报各个分片数据。这样一来,网络设备就可以采用分片的形式向控制器反馈其所请求的数据,避免了控制器获取其所请求的数据时反复下发请求所带来的数据获取耗时较长等情况的发生,以及避免了控制器长时间等待网络设备返回数据的情况发生。
Description
技术领域
本申请涉及通信技术领域,尤其涉及一种数据处理方法及装置。
背景技术
随着SDN(Software Defined Network,软件定义网络)的发展,NETCONF(NETWORKCONFIGURATION,网络配置)管理设备逐渐成为网络管理的主流。SDN网络一般包括控制器和网络设备,控制器侧运行NETCONF客户端,网络设备侧运行NETCONF服务端。控制器向网络设备下发各种请求以获取配置、状态等数据,同时还可以设置设备运行参数,而网络设备除了被动响应控制器的请求外,还可以主动向控制器上报设备相关信息。
目前,控制器中的NETCONF客户端在向网络设备中的NETCONF服务端获取数据时,采用的是NETCONF RPC同步操作,而同步操作一方面会导致获取数据耗时较长,另一方面还会导致获取数据时可能会消耗大量的系统内存。
因此,如何解决现有技术的NETCONF RPC同步操作所带来的获取数据耗时长及耗费内存的问题是值得考虑的技术问题之一。
发明内容
有鉴于此,本申请提供一种数据处理方法及装置,用以解决现有技术的NETCONFRPC同步操作所带来的获取数据耗时长及耗费内存的问题。
具体地,本申请是通过如下技术方案实现的:
根据本申请的第一方面,提供一种数据处理方法,应用于网络设备中,所述方法,包括:
接收控制器发送的数据获取请求,所述数据获取请求包括获取模式;
若所述获取模式的取值为设定值,则对所请求的数据进行分片处理,得到若干个分片数据;
采用分片方式上报各个分片数据。
可选地,上述数据获取请求还包括数量属性;则对所请求的数据进行分片处理,得到若干个分片数据,包括:
根据从所述数据获取请求中解析出所述数量属性的取值,对所请求的数据进行分片处理,以使单个分片数据的数据量不高于所述数量属性的取值所表征的数据量。
可选地,本实施例提供的数据处理方法,还包括:
当确认本次所请求的数据上报完成,则向所述控制器反馈空数据。
可选地,本实施例提供的分片数据携带在数据响应报文中,所述数据响应报文中还包括消息标识,所述消息标识用于指示所述数据响应报文对应的数据获取请求。
根据本申请的第二方面,提供另一种数据处理方法,应用于控制器中,所述方法,包括:
向网络设备发送数据获取请求,所述数据获取请求包括获取模式,所述获取模式的取值为设定值;
接收所述网络设备发送的分片数据,所述分片数据为所述网络设备在确认所述获取模式的取值为设定值时对所述数据获取请求所请求的数据进行分片得到的。
可选地,结合本申请的第二方面,本实施例提供的数据获取请求还包括数量属性,所述数量属性用于确定单个分片数据的数据量的大小,以使单个分片数据的数据量不高于所述数量属性的取值所表征的数据量。
根据本申请的第三方面,提供一种数据处理装置,设置于网络设备中,所述装置,包括:
接收模块,用于接收控制器发送的数据获取请求,所述数据获取请求包括获取模式;
分片模块,用于若所述获取模式的取值为设定值,则对所请求的数据进行分片处理,得到若干个分片数据;
上报模块,用于采用分片方式上报各个分片数据。
可选地,本实施例中的数据获取请求还包括数量属性;则
所述分片模块,具体用于根据从所述数据获取请求中解析出所述数量属性的取值,对所请求的数据进行分片处理,以使单个分片数据的数据量不高于所述数量属性的取值所表征的数据量。
可选地,上述上报模块,还用于当确认本次所请求的数据上报完成,则向所述控制器反馈空数据。
可选地,上述分片数据携带在数据响应报文中,所述数据响应报文中还包括消息标识,所述消息标识用于指示所述数据响应报文对应的数据获取请求。
根据本申请的第四方面,提供另一种数据处理装置,设置于控制器中,所述装置,包括:
发送模块,用于向网络设备发送数据获取请求,所述数据获取请求包括获取模式,所述获取模式的取值为设定值;
接收模块,用于接收所述网络设备发送的分片数据,所述分片数据为所述网络设备在确认所述获取模式的取值为设定值时对所述数据获取请求所请求的数据进行分片得到的。
可选地,上述数据获取请求还包括数量属性,所述数量属性用于确定单个分片数据的数据量的大小,以使单个分片数据的数据量不高于所述数量属性的取值所表征的数据量。
根据本申请的第五方面,提供一种电子设备,包括处理器和机器可读存储介质,机器可读存储介质存储有能够被处理器执行的计算机程序,处理器被计算机程序促使执行本申请实施例第一方面所提供的方法。
根据本申请的第六方面,提供一种机器可读存储介质,机器可读存储介质存储有计算机程序,在被处理器调用和执行时,计算机程序促使处理器执行本申请实施例第一方面所提供的方法。
本申请实施例的有益效果:
控制器在需要获取网络设备上的数据时,会向网络设备发送数据获取请求,为了避免数据获取执行较慢的问题,控制器会向数据获取请求中携带取值为设定值的获取模式;这样一来,网络设备接收到该数据获取请求后,发现该请求中携带的获取模式的取值为设定值,则可以对该数据获取请求所请求的数据进行分片处理,得到若干个分片数据;然后采用分片方式上报上述各个分片数据。这样一来,也就不需要控制器采用目前的NETCONFRPC同步操作,而且也不需要控制器多次与网络设备交互才能获取到所要的数据,进而也就解决了获取数据耗时长及耗费内存的问题。
附图说明
图1是本申请实施例提供的一种数据处理方法的流程示意图;
图2是本申请实施例提供的另一种数据处理方法的流程示意图;
图3是本申请实施例提供的一种数据处理装置的结构示意图;
图4是本申请实施例提供的另一种数据处理装置的结构示意图;
图5是本申请实施例提供的一种电子设备的硬件结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相对应的列出项目的任何或所有可能组合。
应当理解,尽管在本申请可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
发明人发现,在SDN组网中,在控制器从网络设备获取接口数据时,如果未指定接口,则网络设备会向控制器上报所有接口的数据,这样一来,就会存在下述问题:数据获取执行太慢,控制器可能会认为网络设备失联;网络设备反馈的数据量比较大,控制器分析反馈的数据时需要消耗大量的内存;此外,当网络设备未向控制器反馈数据时,控制器当前就属于空闲状态,导致控制器忙闲分布不均。
有鉴于此,本申请提供了一种数据处理方法,控制器在需要获取网络设备上的数据时,会向网络设备发送数据获取请求,为了避免数据获取执行较慢的问题,控制器会向数据获取请求中携带取值为设定值的获取模式;这样一来,网络设备接收到该数据获取请求后,发现该请求中携带的获取模式的取值为设定值,则可以对该数据获取请求所请求的数据进行分片处理,得到若干个分片数据;然后采用分片方式上报上述各个分片数据。这样一来,也就不需要控制器采用目前的NETCONF RPC同步操作,而且也不需要控制器多次与网络设备交互才能获取到所要的数据,进而也就解决了获取数据耗时长及耗费内存的问题。
下面对本申请提供的数据处理方法进行详细地说明。
参见图1,图1是本申请提供的一种数据处理方法的流程图,应用于网络设备中,该方法可包括如下所示步骤:
S101、接收控制器发送的数据获取请求,所述数据获取请求包括获取模式。
本步骤中,当控制器需要获取网络设备上的数据时,会向网络设备发送数据获取请求;此外,为了避免控制器采用现有的同步操作获取数据时,数据获取耗时较高的问题,本申请提出,控制器对数据获取请求中添加获取模式,然后将获取模式的取值设定为与网络设备协商后的设定值。这样一来,网络设备接收到该数据获取请求后,可以从数据获取请求中解析出上述获取模式。
S102、若获取模式的取值为设定值,则对所请求的数据进行分片处理,得到若干个分片数据。
本步骤中,当网络设备从数据获取请求中解析出获取模式后,可以确定获取模式的取值是否为设定值,如果为设定值,则表明网络设备可以按照与控制器协商的方式上报数据获取请求所请求的数据,即,网络设备先从本地获取到控制器所请求的数据,然后对所请求的数据进行分片处理,从而可以得到若干个分片数据。
需要说明的是,数据获取请求所请求的数据为网络设备需要上报给控制器的数据,实际应用中,该所请求的数据可以但不限于包括网络设备的配置、状态等、设备运行参数、设备数据等等。
S103、采用分片方式上报各个分片数据。
本步骤中,网络设备将所请求的数据划分成若干个分片数据后,就可以以分片报文的形式分片上报各个分片数据。
通过实施本申请提供的数据处理方法,控制器在向网络设备发送的数据获取请求中携带设定值的获取模式,使得网络设备接收到数据获取请求后,对所请求的数据进行分片处理,得到若干个分片数据,并按照分片方式上报各个分片数据。这样一来,网络设备就可以采用分片的形式向控制器反馈其所请求的数据,避免了控制器获取其所请求的数据时反复下发请求所带来的数据获取耗时较长等情况的发生,以及避免了控制器长时间等待网络设备返回数据的情况发生,尤其在所请求的数据量比较大的场景下,进一步避免了控制器的长时间等待情况,大大节省了控制器的数据处理时间。
可选地,上述数据获取请求中的获取模式可以用ReplyMode表示,且上述设定值可以为Chunk,即,当ReplyMode的取值为Chunk时,表示数据以分片形式应答给控制器。当数据获取请求中不包括该获取模式时,则网络设备可以按照现有的方式向控制器反馈所请求的数据。
相应地,控制器在发送数据获取请求时,可以用以下至少一个操作实现:
<get>操作、<get-config>操作、<get-bulk>操作和<get-bulk-config>操作等等。
以<get>操作为例进行说明,控制器在向网络设备发送数据获取请求时,<get>操作为:
<get>
<ReplyMode>Chunk<ReplyMode>
……
当网络设备接收到该数据获取请求后,就可以判断是否能够从数据获取请求中解析出获取模式<ReplyMode>,当解析出<ReplyMode>后,可以判断<ReplyMode>的取值是否为设定值Chunk,当<ReplyMode>的取值为Chunk时,则对所请求的数据进行分片处理,以分片方式向控制器应答所请求的数据。
可选地,基于上述任一实施例,本实施例中的数据获取请求还包括数量属性;则在此基础上,可以按照下述过程执行步骤S102:根据从数据获取请求中解析出数量属性的取值,对所请求的数据进行分片处理,以使单个分片数据的数据量不高于数量属性的取值所表征的数据量。
具体地,本实施例可以指定网络设备单次上报分片数据的数据量的大小。具体可以通过数量属性(count属性)来实现,即在数据获取请求中携带数量属性,也就是说,Chunk的数量支持通过count属性指定,具体实现为:
其中,上述xc:count=”n”中的“count”为数量属性,n为数量属性的取值。当count=5时,则表明网络设备会按照count属性的取值对所请求的数据进行分片处理,使得每个分片数据的数据流不超过count属性的取值,也就是说,在向控制器反馈所请求的数据时,单个分片数据的数据量为5,即单次返回不超过5条的数据。这样一来,控制器可以按需接收网络设备发送的分片数据,且不会增加自己的等待时间也不会占用过多的系统内存。
需要说明的是,当数据获取请求中缺省count属性,即不指定count时,则表示网络设备单次返回一条数据,即,单个分片数据的数据量为1,此时的缺省值默认为:count=1。
进一步地,基于上述实施例,本实施例中提供的数据处理方法,还包括:当确认本次所请求的数据上报完成,则向控制器反馈空数据。
具体地,网络设备当按照count属性的取值对所请求的数据进行分片时,划分到最后一个分片数据后,且无多余的数据时,会配置一条空数据,随着所请求数据的分片数据上报给控制器,这样一来,控制器当接收到空数据后,可以确认本次所请求的数据已上报完成。具体来说,由于所请求的数据是有大小的,划分分片数据时,最后一个分片数据的数据量一般会小于或刚好等于count属性的取值,当划分到最后一个分片数据时,会配置一条空数据,作为本次所请求的数据的结尾,以指示控制器本次所请求的数据已上报文完成,这样一来,可以避免控制器等待网络设备反馈数据所造成的时间消耗。
可选地,基于上述任一实施例,上述分片数据携带在数据响应报文中,该数据响应报文中还包括消息标识,该消息标识用于指示数据响应报文对应的数据获取请求。
具体地,在向控制器发送其所请求的数据时,会将每个分片数据封装成数据响应报文中并发送给控制器。此外,为了保持同一个所请求的数据的分片数据的连续性,即分片数据上报时能够让控制器准确地获知分片数据对应哪个数据获取请求,本申请提出在数据响应报文中携带消息标识message-id来区分,该message-id可以指示数据响应报文对应的数据获取请求。具体实现时,控制器在获取不同的数据时,可以出发不同的数据获取请求,然后在每个数据获取请求中携带不同的message-id,相应地,网络设备接收到数据获取请求后,会从数据获取请求中解析出message-id,然后将该数据获取请求所请求的数据进行分片处理后,上报给控制器时,会在数据响应报文中携带前述解析出的message-id,从而保证上报给控制器的分片数据为数据获取请求相对应。
通过实施上述任一实施例,有效解决了控制器长时间等待网络设备返回的数据所带来的时间消耗的问题,控制器可以边接收数据边分析获取到的数据,不需要长时间等待网络设备上报数据,从而充分实现了控制器和网络设备流水线分工的效果。
基于同一发明构思,本申请还提供了一种数据处理方法,应用于控制器中,参考图2所示的流程,控制器在实施该数据处理方法时,可以包括如下所示步骤:
S201、向网络设备发送数据获取请求,所述数据获取请求包括获取模式。
其中,上述获取模式的取值为设定值。
具体地,当控制器需要获取网络设备上的数据时,会向网络设备发送数据获取请求;此外,为了避免控制器采用现有的同步操作获取数据时,数据获取耗时较高的问题,本申请提出,控制器对数据获取请求中添加获取模式,然后将获取模式的取值设定为与网络设备协商后的设定值。
S202、接收网络设备发送的分片数据,所述分片数据为网络设备在确认所述获取模式的取值为设定值时对数据获取请求所请求的数据进行分片得到的。
本步骤中,网络设备接收到该数据获取请求后,会从数据获取请求中解析出获取模式,当确认解析出的获取模式的取值为设定值时,会先获取该数据获取请求所请求的数据,然后对所请求的数据进行分片处理,然后按照分片上报的方式上报各个分片数据。
可选地,上述设定值可以但不限于为Chunk等等,具体描述请参考控制器在图1所指示的实施例中的相关描述,此处不再一一详细描述。
可选地,基于上述任一实施例,上述数据获取请求还包括数量属性,该数量属性用于确定单个分片数据的数据量的大小,以使单个分片数据的数据量不高于所述数量属性的取值所表征的数据量。具体地,网络设备从数据获取请求中解析出数量属性后,网络设备会按照该数量属性对所请求的数据进行分片,具体请参考参考控制器在图1所指示的实施例中的相关描述,此处不再一一详细描述。
可选地,上述数据获取请求还可以包括消息标识message-id,且不同的数据获取请求对应的消息标识不同,以使网络设备在上报每个数据获取请求所请求的数据时,在对应数据响应报文中携带该数据获取请求中的消息标识,具体请参考上述实施例中控制器的相关描述,此处不再一一详细说明。
通过实施本申请提供的数据处理方法,控制器在向网络设备发送的数据获取请求中携带设定值的获取模式,使得网络设备接收到数据获取请求后,对所请求的数据进行分片处理,得到若干个分片数据,并按照分片方式上报各个分片数据。这样一来,网络设备就可以采用分片的形式向控制器反馈其所请求的数据,避免了控制器获取其所请求的数据时反复下发请求所带来的数据获取耗时较长等情况的发生,以及避免了控制器长时间等待网络设备返回数据的情况发生,尤其在所请求的数据量比较大的场景下,进一步避免了控制器的长时间等待情况,大大节省了控制器的数据处理时间。
基于同一发明构思,本申请还提供了与上述网络设备侧实施的数据处理方法对应的数据处理装置。该报文处理装置的实施具体可以参考上述网络设备对数据处理方法的描述,此处不再一一论述。
参见图3,图3是本申请一示例性实施例提供的一种数据处理装置,设置于网络设备中,该装置,包括:
接收模块301,用于接收控制器发送的数据获取请求,所述数据获取请求包括获取模式;
分片模块302,用于若所述获取模式的取值为设定值,则对所请求的数据进行分片处理,得到若干个分片数据;
上报模块303,用于采用分片方式上报各个分片数据。
可选地,本实施例中的数据获取请求还包括数量属性;则
上述分片模块302,具体用于根据从所述数据获取请求中解析出所述数量属性的取值,对所请求的数据进行分片处理,以使单个分片数据的数据量不高于所述数量属性的取值所表征的数据量。
可选地,上述上报模块303,还用于当确认本次所请求的数据上报完成,则向所述控制器反馈空数据。
可选地,本实施例中的分片数据携带在数据响应报文中,所述数据响应报文中还包括消息标识,所述消息标识用于指示所述数据响应报文对应的数据获取请求。
基于同一发明构思,本申请还提供了与上述控制器侧实施的数据处理方法对应的数据处理装置。该报文处理装置的实施具体可以参考上述控制器对数据处理方法的描述,此处不再一一论述。
参见图4,图4是本申请一示例性实施例提供的一种数据处理装置,设置于控制器中,该装置,包括:
发送模块401,用于向网络设备发送数据获取请求,所述数据获取请求包括获取模式,所述获取模式的取值为设定值;
接收模块402,用于接收所述网络设备发送的分片数据,所述分片数据为所述网络设备在确认所述获取模式的取值为设定值时对所述数据获取请求所请求的数据进行分片得到的。
可选地,本实施例中的数据获取请求还包括数量属性,所述数量属性用于确定单个分片数据的数据量的大小,以使单个分片数据的数据量不高于所述数量属性的取值所表征的数据量。
基于同一发明构思,本申请实施例提供了一种电子设备,该电子设备可以为上述网络设备或控制器等等。如图5所示,包括处理器501和机器可读存储介质502,机器可读存储介质502存储有能够被处理器501执行的计算机程序,处理器501被计算机程序促使执行本申请任一实施例所提供的数据处理方法。此外,该电子设备还包括通信接口503和通信总线504,其中,处理器501,通信接口503,机器可读存储介质502通过通信总线504完成相互间的通信。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM)、DDR SRAM(Double Data Rate Synchronous Dynamic Random Access Memory,双倍速率同步动态随机存储器),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
另外,本申请实施例提供了一种机器可读存储介质,机器可读存储介质存储有计算机程序,在被处理器调用和执行时,计算机程序促使处理器执行本申请实施例所提供的数据处理方法。
对于电子设备以及机器可读存储介质实施例而言,由于其涉及的方法内容基本相似于前述的方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
上述装置中各个单元/模块的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元/模块可以是或者也可以不是物理上分开的,作为单元/模块显示的部件可以是或者也可以不是物理单元/模块,即可以位于一个地方,或者也可以分布到多个网络单元/模块上。可以根据实际的需要选择其中的部分或者全部单元/模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。
Claims (10)
1.一种数据处理方法,其特征在于,应用于网络设备中,所述方法,包括:
接收控制器发送的数据获取请求,所述数据获取请求包括获取模式;
若所述获取模式的取值为设定值,则对所请求的数据进行分片处理,得到若干个分片数据;
采用分片方式上报各个分片数据。
2.根据权利要求1所述的方法,其特征在于,所述数据获取请求还包括数量属性;则对所请求的数据进行分片处理,得到若干个分片数据,包括:
根据从所述数据获取请求中解析出所述数量属性的取值,对所请求的数据进行分片处理,以使单个分片数据的数据量不高于所述数量属性的取值所表征的数据量。
3.根据权利要求1所述的方法,其特征在于,还包括:
当确认本次所请求的数据上报完成,则向所述控制器反馈空数据。
4.根据权利要求1所述的方法,其特征在于,所述分片数据携带在数据响应报文中,所述数据响应报文中还包括消息标识,所述消息标识用于指示所述数据响应报文对应的数据获取请求。
5.一种数据处理方法,其特征在于,应用于控制器中,所述方法,包括:
向网络设备发送数据获取请求,所述数据获取请求包括获取模式,所述获取模式的取值为设定值;
接收所述网络设备发送的分片数据,所述分片数据为所述网络设备在确认所述获取模式的取值为设定值时对所述数据获取请求所请求的数据进行分片得到的。
6.根据权利要求5所述的方法,其特征在于,所述数据获取请求还包括数量属性,所述数量属性用于确定单个分片数据的数据量的大小,以使单个分片数据的数据量不高于所述数量属性的取值所表征的数据量。
7.一种数据处理装置,其特征在于,设置于网络设备中,所述装置,包括:
接收模块,用于接收控制器发送的数据获取请求,所述数据获取请求包括获取模式;
分片模块,用于若所述获取模式的取值为设定值,则对所请求的数据进行分片处理,得到若干个分片数据;
上报模块,用于采用分片方式上报各个分片数据。
8.根据权利要求7所述的装置,其特征在于,所述数据获取请求还包括数量属性;则
所述分片模块,具体用于根据从所述数据获取请求中解析出所述数量属性的取值,对所请求的数据进行分片处理,以使单个分片数据的数据量不高于所述数量属性的取值所表征的数据量。
9.根据权利要求7所述的装置,其特征在于,
所述上报模块,还用于当确认本次所请求的数据上报完成,则向所述控制器反馈空数据。
10.一种数据处理装置,其特征在于,设置于控制器中,所述装置,包括:
发送模块,用于向网络设备发送数据获取请求,所述数据获取请求包括获取模式,所述获取模式的取值为设定值;
接收模块,用于接收所述网络设备发送的分片数据,所述分片数据为所述网络设备在确认所述获取模式的取值为设定值时对所述数据获取请求所请求的数据进行分片得到的。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111090939.8A CN113992521B (zh) | 2021-09-17 | 2021-09-17 | 一种数据处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111090939.8A CN113992521B (zh) | 2021-09-17 | 2021-09-17 | 一种数据处理方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113992521A true CN113992521A (zh) | 2022-01-28 |
CN113992521B CN113992521B (zh) | 2023-11-03 |
Family
ID=79735995
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111090939.8A Active CN113992521B (zh) | 2021-09-17 | 2021-09-17 | 一种数据处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113992521B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102355374A (zh) * | 2011-10-28 | 2012-02-15 | 杭州华三通信技术有限公司 | 一种数据获取方法和设备 |
CN104253767A (zh) * | 2013-06-27 | 2014-12-31 | 华为技术有限公司 | 一种虚拟分片网络的实现方法及一种交换机 |
CN105991387A (zh) * | 2015-01-29 | 2016-10-05 | 杭州华三通信技术有限公司 | 虚拟扩展局域网的报文传输方法和装置 |
US11115920B1 (en) * | 2020-03-31 | 2021-09-07 | Wipro Limited | Method and system of template-based dynamic network slicing |
-
2021
- 2021-09-17 CN CN202111090939.8A patent/CN113992521B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102355374A (zh) * | 2011-10-28 | 2012-02-15 | 杭州华三通信技术有限公司 | 一种数据获取方法和设备 |
CN104253767A (zh) * | 2013-06-27 | 2014-12-31 | 华为技术有限公司 | 一种虚拟分片网络的实现方法及一种交换机 |
CN105991387A (zh) * | 2015-01-29 | 2016-10-05 | 杭州华三通信技术有限公司 | 虚拟扩展局域网的报文传输方法和装置 |
US11115920B1 (en) * | 2020-03-31 | 2021-09-07 | Wipro Limited | Method and system of template-based dynamic network slicing |
Also Published As
Publication number | Publication date |
---|---|
CN113992521B (zh) | 2023-11-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109660607B (zh) | 一种业务请求分发方法、接收方法、装置及服务器集群 | |
CN107590001B (zh) | 负载均衡方法及装置、存储介质、电子设备 | |
CN108874558B (zh) | 分布式事务的消息订阅方法、电子装置及可读存储介质 | |
EP3182284A1 (en) | Data pipeline architecture for cloud processing of structured and unstructured data | |
EP2948875B1 (en) | Method and system for using a recursive event listener on a node in hierarchical data structure | |
CN111459954A (zh) | 分布式数据同步方法、装置、设备及介质 | |
CN111970195B (zh) | 数据传输方法和流式数据传输系统 | |
CN113452774B (zh) | 消息推送方法、装置、设备及存储介质 | |
CN112434243B (zh) | 一种同步数据的方法、装置和计算机可读存储介质 | |
CN112559154A (zh) | 消息发送量增长的优化方法、系统、设备及可读存储介质 | |
CN111400041A (zh) | 服务器配置文件的管理方法、装置及计算机可读存储介质 | |
CN114827049A (zh) | 一种基于kafka的堆积数据消费方法、终端设备及存储介质 | |
CN106899605B (zh) | 基于stomp协议的通信方法和装置 | |
CN113992521B (zh) | 一种数据处理方法及装置 | |
CN115964418A (zh) | 一种面向物联网的多源异构数据接入系统及方法 | |
CN115883639A (zh) | 一种web实时消息推送方法及装置、设备、存储介质 | |
CN112256454B (zh) | 消息延时处理方法和系统 | |
CN112688982B (zh) | 一种用户请求处理方法和装置 | |
CN114881236A (zh) | 一种模型推理系统、方法及设备 | |
CN112052104A (zh) | 基于多机房实现的消息队列的管理方法及电子设备 | |
CN113055468B (zh) | 一种芯片管控方法、装置及系统 | |
CN110569673A (zh) | 一种数据文件处理方法、装置、设备及储存介质 | |
US11403366B2 (en) | On-demand retrieval of information from databases | |
CN112395337A (zh) | 一种数据导出方法和装置 | |
CN112256446B (zh) | 一种Kafka消息总线管控方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |