CN113645299B - 一种矿用海量数据快速缓冲方法 - Google Patents
一种矿用海量数据快速缓冲方法 Download PDFInfo
- Publication number
- CN113645299B CN113645299B CN202110914941.6A CN202110914941A CN113645299B CN 113645299 B CN113645299 B CN 113645299B CN 202110914941 A CN202110914941 A CN 202110914941A CN 113645299 B CN113645299 B CN 113645299B
- Authority
- CN
- China
- Prior art keywords
- data
- type
- confirming
- buffer
- buffer space
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 23
- 238000005065 mining Methods 0.000 title claims abstract description 9
- 230000003139 buffering effect Effects 0.000 title claims abstract description 8
- 238000012790 confirmation Methods 0.000 claims abstract description 4
- 238000004590 computer program Methods 0.000 claims description 12
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000006243 chemical reaction Methods 0.000 abstract description 7
- 238000012545 processing Methods 0.000 abstract description 2
- 238000007726 management method Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 235000021395 porridge Nutrition 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/565—Conversion or adaptation of application format or content
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及一种矿用海量数据快速缓冲方法,属于数据处理领域。该方法以下步骤:S1:交换机设备启动正常后第一时间获取MAC地址;S2:根据MAC确认网络设备类型;S3:根据MAC地址确认数据交换的类型数量确认相应的缓冲区间个数;S4:根据MAC地址类型特点确认每种类型数据的缓冲空间;S5:计算每种类型数据缓冲空间:S6:对缓冲空间进行板块编号,每一个板块都有唯一的标号;S7:把相应类型数据打上时间戳标记放入对应板块缓冲区;S8:根据时间戳先后顺序,进行整体板块数据交换机。本发明通过对交换设备缓冲区进行统筹管理,对交换数据进行判断,实现了海量数据整体板块化缓存、转换。
Description
技术领域
本发明属于数据处理领域,涉及一种矿用海量数据快速缓冲方法。
背景技术
目前的交换设备对自身内部缓冲空间没有做统筹规划管理,数据到了以后才寻找内部缓冲空间存放数据,使整个缓冲空间呈现无序化状态。由于事先没有对缓冲空间做清理,可能导致海量完整数据包会被存放在不通的缓冲区间,影响了数据转发时间;另外,同类型数据没有放入相同缓冲板块,可能导致转发数据时缓冲地址错误,从而发生数据转换错误故障问题。
另外,数据交换没有进行判断,所有数据无序化存在,数据到了就存,各类型数据存现一锅粥状态,大容量数据和小数据流扎混缓冲区中,数据转发时,需要在缓冲区里面寻找目标数据,影响数据转发的快速性。
发明内容
有鉴于此,本发明的目的在于提供一种矿用海量数据快速缓冲方法。通过对交换设备缓冲区进行统筹管理,对交换数据进行判断,实现了海量数据整体板块化缓存、转换,从而达到使井下海量数据有序、快速及安全转换,减少了交换机设备数据缓存时间和数据转换的安全性。
为达到上述目的,本发明提供如下技术方案:
一种矿用海量数据快速缓冲方法,该方法以下步骤:
S1:交换机设备启动正常后第一时间获取MAC地址;
S2:根据MAC确认网络设备类型;
S3:根据MAC地址确认数据交换的类型数量确认相应的缓冲区间个数;
S4:根据MAC地址类型特点确认每种类型数据的缓冲空间;
S5:计算每种类型数据缓冲空间:
S6:对缓冲空间进行板块编号,每一个板块都有唯一的标号;
S7:把相应类型数据打上时间戳标记放入对应板块缓冲区;
S8:根据时间戳先后顺序,对整体缓冲板块进行数据交换。
可选的,所述S5具体为:由MAC地址确认数据的类型,确认该类型单个设备容量的最大值Vmax;设备缓冲空间容量为Vall,设有n种设备类型,则每种类型数据缓冲空间V的计算公式为:
V=3Vmax (2)
K趋于无穷大,受限于数据交换机设备缓冲空间总容量大小。
一种计算机装置,包括存储器、处理器及储存在存储器上并能够在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如所述的方法。
一种计算机可读存储介质,其上储存有计算机程序,所述计算机程序被处理器执行时实现如所述的方法。
本发明的有益效果在于:本发明通过对交换设备缓冲区进行统筹管理,对交换数据进行判断,实现了海量数据整体板块化缓存、转换,从而达到使井下海量数据有序、快速及安全转换,减少了交换机设备数据缓存时间和数据转换的安全性。
本发明的其他优点、目标和特征在某种程度上将在随后的说明书中进行阐述,并且在某种程度上,基于对下文的考察研究对本领域技术人员而言将是显而易见的,或者可以从本发明的实践中得到教导。本发明的目标和其他优点可以通过下面的说明书来实现和获得。
附图说明
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作优选的详细描述,其中:
图1为本发明流程图。
具体实施方式
以下通过特定的具体实例说明本发明的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本发明的精神下进行各种修饰或改变。需要说明的是,以下实施例中所提供的图示仅以示意方式说明本发明的基本构想,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。
其中,附图仅用于示例性说明,表示的仅是示意图,而非实物图,不能理解为对本发明的限制;为了更好地说明本发明的实施例,附图某些部件会有省略、放大或缩小,并不代表实际产品的尺寸;对本领域技术人员来说,附图中某些公知结构及其说明可能省略是可以理解的。
本发明实施例的附图中相同或相似的标号对应相同或相似的部件;在本发明的描述中,需要理解的是,若有术语“上”、“下”、“左”、“右”、“前”、“后”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此附图中描述位置关系的用语仅用于示例性说明,不能理解为对本发明的限制,对于本领域的普通技术人员而言,可以根据具体情况理解上述术语的具体含义。
请参阅图1,为一种矿用海量数据快速缓冲方法,包括以下步骤:
S1:交换机设备启动正常后第一时间获取MAC地址;
S2:根据MAC确认网络设备类型(全球MAC都是唯一的,每一种设备类型被固定到相应的地址区间);
S3:根据MAC地址确认数据交换的类型数量确认相应的缓冲区间个数;
S4:根据MAC地址类型特点确认每种类型数据的缓冲空间;
S5:每种类型数据缓冲空间计算方法:
由MAC地址确认数据类型,确认该类型单个设备容量的最大值Vmax。设备缓冲空间容量为Vall,设有n种设备类型,则每种类型数据缓冲空间V的计算公式为:
V=3Vmax (2)
备注:K理论趋于无穷大,K实际值受限于数据交换机设备缓冲空间总容量大小。
S6:对缓冲空间进行板块编号,每一个板块都有唯一的标号;
S7:把相应类型数据打上时间戳标记放入对应板块缓冲区;
S8:根据时间戳先后顺序,对整体缓冲板块进行数据交换。
数据交换设备自动识别数据类型,根据数据类型以及该类型数据发起者数量,确认相同类型数据的总体容量,根据每种类型数据的大小统筹划分数据缓冲区,使数据交换设备具有大小不同的多个不同缓冲区,并建立相应的标示作为路径指引;
对数据建立时间数据戳,根据时间数据戳,按照时间顺序,转发整体缓冲板块,实现数据快速交换。
应当认识到,本发明的实施例可以由计算机硬件、硬件和软件的组合、或者通过存储在非暂时性计算机可读存储器中的计算机指令来实现或实施。所述方法可以使用标准编程技术-包括配置有计算机程序的非暂时性计算机可读存储介质在计算机程序中实现,其中如此配置的存储介质使得计算机以特定和预定义的方式操作——根据在具体实施例中描述的方法和附图。每个程序可以以高级过程或面向对象的编程语言来实现以与计算机系统通信。然而,若需要,该程序可以以汇编或机器语言实现。在任何情况下,该语言可以是编译或解释的语言。此外,为此目的该程序能够在编程的专用集成电路上运行。
此外,可按任何合适的顺序来执行本文描述的过程的操作,除非本文另外指示或以其他方式明显地与上下文矛盾。本文描述的过程(或变型和/或其组合)可在配置有可执行指令的一个或多个计算机系统的控制下执行,并且可作为共同地在一个或多个处理器上执行的代码(例如,可执行指令、一个或多个计算机程序或一个或多个应用)、由硬件或其组合来实现。所述计算机程序包括可由一个或多个处理器执行的多个指令。
进一步,所述方法可以在可操作地连接至合适的任何类型的计算平台中实现,包括但不限于个人电脑、迷你计算机、主框架、工作站、网络或分布式计算环境、单独的或集成的计算机平台、或者与带电粒子工具或其它成像装置通信等等。本发明的各方面可以以存储在非暂时性存储介质或设备上的机器可读代码来实现,无论是可移动的还是集成至计算平台,如硬盘、光学读取和/或写入存储介质、RAM、ROM等,使得其可由可编程计算机读取,当存储介质或设备由计算机读取时可用于配置和操作计算机以执行在此所描述的过程。此外,机器可读代码,或其部分可以通过有线或无线网络传输。当此类媒体包括结合微处理器或其他数据处理器实现上文所述步骤的指令或程序时,本文所述的发明包括这些和其他不同类型的非暂时性计算机可读存储介质。当根据本发明所述的矿用海量数据快速缓冲方法和技术编程时,本发明还包括计算机本身。
计算机程序能够应用于输入数据以执行本文所述的功能,从而转换输入数据以生成存储至非易失性存储器的输出数据。输出信息还可以应用于一个或多个输出设备如显示器。在本发明优选的实施例中,转换的数据表示物理和有形的对象,包括显示器上产生的物理和有形对象的特定视觉描绘。
最后说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本技术方案的宗旨和范围,其均应涵盖在本发明的权利要求范围当中。
Claims (3)
1.一种矿用海量数据快速缓冲方法,其特征在于:该方法以下步骤:
S1:交换机设备启动正常后第一时间获取MAC地址;
S2:根据MAC确认网络设备类型;
S3:根据MAC地址确认数据交换的类型数量确认相应的缓冲区间个数;
S4:根据MAC地址类型特点确认每种类型数据的缓冲空间;
S5:计算每种类型数据缓冲空间;
所述S5具体为:
由MAC地址确认数据的类型,确认该类型单个设备容量的最大值Vmax;设备缓冲空间容量为Vall,设有n种设备类型,则每种类型数据缓冲空间V的计算公式为:
V=3Vmax (2)
K趋于无穷大,受限于数据交换机设备缓冲空间总容量大小;
S6:对缓冲空间进行板块编号,每一个板块都有唯一的标号;
S7:把相应类型数据打上时间戳标记放入对应板块缓冲区;
S8:根据时间戳先后顺序,对整体缓冲板块进行数据交换。
2.一种计算机装置,包括存储器、处理器及储存在存储器上并能够在处理器上运行的计算机程序,其特征在于:所述处理器执行所述计算机程序时实现如权利要求1所述的方法。
3.一种计算机可读存储介质,其上储存有计算机程序,其特征在于:所述计算机程序被处理器执行时实现如权利要求1所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110914941.6A CN113645299B (zh) | 2021-08-10 | 2021-08-10 | 一种矿用海量数据快速缓冲方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110914941.6A CN113645299B (zh) | 2021-08-10 | 2021-08-10 | 一种矿用海量数据快速缓冲方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113645299A CN113645299A (zh) | 2021-11-12 |
CN113645299B true CN113645299B (zh) | 2024-05-03 |
Family
ID=78420558
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110914941.6A Active CN113645299B (zh) | 2021-08-10 | 2021-08-10 | 一种矿用海量数据快速缓冲方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113645299B (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108306835A (zh) * | 2018-01-23 | 2018-07-20 | 中国航空工业集团公司洛阳电光设备研究所 | 一种以太网交换机的输入缓存结构及数据转发方法 |
CN111147175A (zh) * | 2019-11-28 | 2020-05-12 | 中国航空工业集团公司西安航空计算技术研究所 | 时间触发以太网数据帧捕获、存储装置及方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9483209B2 (en) * | 2014-09-22 | 2016-11-01 | Freescale Semiconductor, Inc. | Interface system and method |
-
2021
- 2021-08-10 CN CN202110914941.6A patent/CN113645299B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108306835A (zh) * | 2018-01-23 | 2018-07-20 | 中国航空工业集团公司洛阳电光设备研究所 | 一种以太网交换机的输入缓存结构及数据转发方法 |
CN111147175A (zh) * | 2019-11-28 | 2020-05-12 | 中国航空工业集团公司西安航空计算技术研究所 | 时间触发以太网数据帧捕获、存储装置及方法 |
Non-Patent Citations (1)
Title |
---|
一种基于多令牌桶的数据风暴抑制单元;马徐瀚;吴龙胜;赵坤鹏;陈庆宇;;微电子学与计算机;20160905(第09期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN113645299A (zh) | 2021-11-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3373543B1 (en) | Service processing method and apparatus | |
CN104321666B (zh) | 用于可信位置应用与位置提供器通信的技术 | |
JP2018534685A5 (zh) | ||
US20210200653A1 (en) | Method and control system for controlling and/or monitoring devices | |
CN106464698A (zh) | 经由信任链保护无线网状网络 | |
WO2018053511A1 (en) | Threat scoring system and method | |
CN111953805B (zh) | 传输数据的方法和装置 | |
JP2017004485A (ja) | 位置検証方法、プログラム、及びシステム | |
CN109271391A (zh) | 数据存储方法、服务器、存储介质及装置 | |
JP7042923B2 (ja) | 仕分けセンターの貨物仕分け方法及び貨物仕分け装置、並びに貨物仕分けシステム | |
CN109656706A (zh) | 分布式任务调度方法、系统、设备以及介质 | |
CN107911680A (zh) | 投影设备校正方法、装置及投影设备 | |
CN105009080B (zh) | 与具有转发功能的电子设备的网络转发平面有关的实现规范 | |
CN108632165A (zh) | 一种报文处理方法、装置及设备 | |
EP3468095A1 (en) | Transaction selection device for selecting blockchain transactions | |
JP2015087907A (ja) | ユーザの操作を制限する機能を有する情報処理装置、方法、及び、プログラム | |
CN112732567B (zh) | 基于ip的mock数据测试方法、装置、电子设备及存储介质 | |
CN108076012A (zh) | 异常登录判断方法及装置 | |
CN113645299B (zh) | 一种矿用海量数据快速缓冲方法 | |
KR101672627B1 (ko) | 본인 확인 서비스를 이용한 사용자 개인 정보 제공 방법 및 시스템 | |
CN105009006B (zh) | 可编程控制器、可编程控制器系统及执行错误信息生成方法 | |
CN114169283B (zh) | 可编程逻辑器件的延时估算方法、装置、设备及存储介质 | |
US11231958B2 (en) | Method and control system for controlling and/or monitoring devices | |
CN110082713A (zh) | 定位方法、终端设备及存储介质 | |
CN107133085B (zh) | 优化oat中冗余指令的方法及移动终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |