CN113645299A - 一种矿用海量数据快速缓冲方法 - Google Patents
一种矿用海量数据快速缓冲方法 Download PDFInfo
- Publication number
- CN113645299A CN113645299A CN202110914941.6A CN202110914941A CN113645299A CN 113645299 A CN113645299 A CN 113645299A CN 202110914941 A CN202110914941 A CN 202110914941A CN 113645299 A CN113645299 A CN 113645299A
- Authority
- CN
- China
- Prior art keywords
- data
- type
- buffer space
- buffer
- mac address
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 28
- 230000003139 buffering effect Effects 0.000 title claims abstract description 11
- 238000005065 mining Methods 0.000 title claims description 8
- 238000012790 confirmation Methods 0.000 claims abstract description 4
- 238000004590 computer program Methods 0.000 claims description 12
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000006243 chemical reaction Methods 0.000 abstract description 7
- 238000012545 processing Methods 0.000 abstract description 2
- 238000007726 management method Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000003999 initiator Substances 0.000 description 1
- 238000005580 one pot reaction Methods 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 235000021395 porridge Nutrition 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/565—Conversion or adaptation of application format or content
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及一种矿用海量数据快速缓冲方法,属于数据处理领域。该方法以下步骤:S1:交换机设备启动正常后第一时间获取MAC地址;S2:根据MAC确认网络设备类型;S3:根据MAC地址确认数据交换的类型数量确认相应的缓冲区间个数;S4:根据MAC地址类型特点确认每种类型数据的缓冲空间;S5:计算每种类型数据缓冲空间:S6:对缓冲空间进行板块编号,每一个板块都有唯一的标号;S7:把相应类型数据打上时间戳标记放入对应板块缓冲区;S8:根据时间戳先后顺序,进行整体板块数据交换机。本发明通过对交换设备缓冲区进行统筹管理,对交换数据进行判断,实现了海量数据整体板块化缓存、转换。
Description
技术领域
本发明属于数据处理领域,涉及一种矿用海量数据快速缓冲方法。
背景技术
目前的交换设备对自身内部缓冲空间没有做统筹规划管理,数据到了以后才寻找内部缓冲空间存放数据,使整个缓冲空间呈现无序化状态。由于事先没有对缓冲空间做清理,可能导致海量完整数据包会被存放在不通的缓冲区间,影响了数据转发时间;另外,同类型数据没有放入相同缓冲板块,可能导致转发数据时缓冲地址错误,从而发生数据转换错误故障问题。
另外,数据交换没有进行判断,所有数据无序化存在,数据到了就存,各类型数据存现一锅粥状态,大容量数据和小数据流扎混缓冲区中,数据转发时,需要在缓冲区里面寻找目标数据,影响数据转发的快速性。
发明内容
有鉴于此,本发明的目的在于提供一种矿用海量数据快速缓冲方法。通过对交换设备缓冲区进行统筹管理,对交换数据进行判断,实现了海量数据整体板块化缓存、转换,从而达到使井下海量数据有序、快速及安全转换,减少了交换机设备数据缓存时间和数据转换的安全性。
为达到上述目的,本发明提供如下技术方案:
一种矿用海量数据快速缓冲方法,该方法以下步骤:
S1:交换机设备启动正常后第一时间获取MAC地址;
S2:根据MAC确认网络设备类型;
S3:根据MAC地址确认数据交换的类型数量确认相应的缓冲区间个数;
S4:根据MAC地址类型特点确认每种类型数据的缓冲空间;
S5:计算每种类型数据缓冲空间:
S6:对缓冲空间进行板块编号,每一个板块都有唯一的标号;
S7:把相应类型数据打上时间戳标记放入对应板块缓冲区;
S8:根据时间戳先后顺序,进行整体板块数据交换机。
可选的,所述S5具体为:由MAC地址确认数据的类型,确认该类型单个设备容量的最大值Vmax;设备缓冲空间容量为Vall,设有n种设备类型,则每种类型数据缓冲空间V的计算公式为:
V=3V max (2)
K趋于无穷大,受限于数据交换机设备缓冲空间总容量大小。
一种计算机装置,包括存储器、处理器及储存在存储器上并能够在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如所述的方法。
一种计算机可读存储介质,其上储存有计算机程序,所述计算机程序被处理器执行时实现如所述的方法。
本发明的有益效果在于:本发明通过对交换设备缓冲区进行统筹管理,对交换数据进行判断,实现了海量数据整体板块化缓存、转换,从而达到使井下海量数据有序、快速及安全转换,减少了交换机设备数据缓存时间和数据转换的安全性。
本发明的其他优点、目标和特征在某种程度上将在随后的说明书中进行阐述,并且在某种程度上,基于对下文的考察研究对本领域技术人员而言将是显而易见的,或者可以从本发明的实践中得到教导。本发明的目标和其他优点可以通过下面的说明书来实现和获得。
附图说明
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作优选的详细描述,其中:
图1为本发明流程图。
具体实施方式
以下通过特定的具体实例说明本发明的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本发明的精神下进行各种修饰或改变。需要说明的是,以下实施例中所提供的图示仅以示意方式说明本发明的基本构想,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。
其中,附图仅用于示例性说明,表示的仅是示意图,而非实物图,不能理解为对本发明的限制;为了更好地说明本发明的实施例,附图某些部件会有省略、放大或缩小,并不代表实际产品的尺寸;对本领域技术人员来说,附图中某些公知结构及其说明可能省略是可以理解的。
本发明实施例的附图中相同或相似的标号对应相同或相似的部件;在本发明的描述中,需要理解的是,若有术语“上”、“下”、“左”、“右”、“前”、“后”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此附图中描述位置关系的用语仅用于示例性说明,不能理解为对本发明的限制,对于本领域的普通技术人员而言,可以根据具体情况理解上述术语的具体含义。
请参阅图1,为一种矿用海量数据快速缓冲方法,包括以下步骤:
S1:交换机设备启动正常后第一时间获取MAC地址;
S2:根据MAC确认网络设备类型(全球MAC都是唯一的,每一种设备类型被固定到相应的地址区间);
S3:根据MAC地址确认数据交换的类型数量确认相应的缓冲区间个数;
S4:根据MAC地址类型特点确认每种类型数据的缓冲空间;
S5:每种类型数据缓冲空间计算方法:
由MAC地址确认数据类型,确认该类型单个设备容量的最大值Vmax。设备缓冲空间容量为Vall,设有n种设备类型,则每种类型数据缓冲空间V的计算公式为:
V=3V max (2)
备注:K理论趋于无穷大,K实际值受限于数据交换机设备缓冲空间总容量大小。
S6:对缓冲空间进行板块编号,每一个板块都有唯一的标号;
S7:把相应类型数据打上时间戳标记放入对应板块缓冲区;
S8:根据时间戳先后顺序,进行整体板块数据交换机。
数据交换设备自动识别数据类型,根据数据类型以及该类型数据发起者数量,确认相同类型数据的总体容量,根据每种类型数据的大小统筹划分数据缓冲区,使数据交换设备具有大小不同的多个不同缓冲区,并建立相应的标示作为路径指引;
对数据建立时间数据戳,根据时间数据戳,按照时间顺序,转发整体缓冲板块,实现数据快速交换。
应当认识到,本发明的实施例可以由计算机硬件、硬件和软件的组合、或者通过存储在非暂时性计算机可读存储器中的计算机指令来实现或实施。所述方法可以使用标准编程技术-包括配置有计算机程序的非暂时性计算机可读存储介质在计算机程序中实现,其中如此配置的存储介质使得计算机以特定和预定义的方式操作——根据在具体实施例中描述的方法和附图。每个程序可以以高级过程或面向对象的编程语言来实现以与计算机系统通信。然而,若需要,该程序可以以汇编或机器语言实现。在任何情况下,该语言可以是编译或解释的语言。此外,为此目的该程序能够在编程的专用集成电路上运行。
此外,可按任何合适的顺序来执行本文描述的过程的操作,除非本文另外指示或以其他方式明显地与上下文矛盾。本文描述的过程(或变型和/或其组合)可在配置有可执行指令的一个或多个计算机系统的控制下执行,并且可作为共同地在一个或多个处理器上执行的代码(例如,可执行指令、一个或多个计算机程序或一个或多个应用)、由硬件或其组合来实现。所述计算机程序包括可由一个或多个处理器执行的多个指令。
进一步,所述方法可以在可操作地连接至合适的任何类型的计算平台中实现,包括但不限于个人电脑、迷你计算机、主框架、工作站、网络或分布式计算环境、单独的或集成的计算机平台、或者与带电粒子工具或其它成像装置通信等等。本发明的各方面可以以存储在非暂时性存储介质或设备上的机器可读代码来实现,无论是可移动的还是集成至计算平台,如硬盘、光学读取和/或写入存储介质、RAM、ROM等,使得其可由可编程计算机读取,当存储介质或设备由计算机读取时可用于配置和操作计算机以执行在此所描述的过程。此外,机器可读代码,或其部分可以通过有线或无线网络传输。当此类媒体包括结合微处理器或其他数据处理器实现上文所述步骤的指令或程序时,本文所述的发明包括这些和其他不同类型的非暂时性计算机可读存储介质。当根据本发明所述的矿用海量数据快速缓冲方法和技术编程时,本发明还包括计算机本身。
计算机程序能够应用于输入数据以执行本文所述的功能,从而转换输入数据以生成存储至非易失性存储器的输出数据。输出信息还可以应用于一个或多个输出设备如显示器。在本发明优选的实施例中,转换的数据表示物理和有形的对象,包括显示器上产生的物理和有形对象的特定视觉描绘。
最后说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本技术方案的宗旨和范围,其均应涵盖在本发明的权利要求范围当中。
Claims (4)
1.一种矿用海量数据快速缓冲方法,其特征在于:该方法以下步骤:
S1:交换机设备启动正常后第一时间获取MAC地址;
S2:根据MAC确认网络设备类型;
S3:根据MAC地址确认数据交换的类型数量确认相应的缓冲区间个数;
S4:根据MAC地址类型特点确认每种类型数据的缓冲空间;
S5:计算每种类型数据缓冲空间:
S6:对缓冲空间进行板块编号,每一个板块都有唯一的标号;
S7:把相应类型数据打上时间戳标记放入对应板块缓冲区;
S8:根据时间戳先后顺序,进行整体板块数据交换机。
3.一种计算机装置,包括存储器、处理器及储存在存储器上并能够在处理器上运行的计算机程序,其特征在于:所述处理器执行所述计算机程序时实现如权利要求1~2任一项所述的方法。
4.一种计算机可读存储介质,其上储存有计算机程序,其特征在于:所述计算机程序被处理器执行时实现如权利要求1~2任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110914941.6A CN113645299B (zh) | 2021-08-10 | 2021-08-10 | 一种矿用海量数据快速缓冲方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110914941.6A CN113645299B (zh) | 2021-08-10 | 2021-08-10 | 一种矿用海量数据快速缓冲方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113645299A true CN113645299A (zh) | 2021-11-12 |
CN113645299B CN113645299B (zh) | 2024-05-03 |
Family
ID=78420558
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110914941.6A Active CN113645299B (zh) | 2021-08-10 | 2021-08-10 | 一种矿用海量数据快速缓冲方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113645299B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160085479A1 (en) * | 2014-09-22 | 2016-03-24 | Freescale Semiconductor, Inc. | Interface system and method |
CN108306835A (zh) * | 2018-01-23 | 2018-07-20 | 中国航空工业集团公司洛阳电光设备研究所 | 一种以太网交换机的输入缓存结构及数据转发方法 |
CN111147175A (zh) * | 2019-11-28 | 2020-05-12 | 中国航空工业集团公司西安航空计算技术研究所 | 时间触发以太网数据帧捕获、存储装置及方法 |
-
2021
- 2021-08-10 CN CN202110914941.6A patent/CN113645299B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160085479A1 (en) * | 2014-09-22 | 2016-03-24 | Freescale Semiconductor, Inc. | Interface system and method |
CN108306835A (zh) * | 2018-01-23 | 2018-07-20 | 中国航空工业集团公司洛阳电光设备研究所 | 一种以太网交换机的输入缓存结构及数据转发方法 |
CN111147175A (zh) * | 2019-11-28 | 2020-05-12 | 中国航空工业集团公司西安航空计算技术研究所 | 时间触发以太网数据帧捕获、存储装置及方法 |
Non-Patent Citations (1)
Title |
---|
马徐瀚;吴龙胜;赵坤鹏;陈庆宇;: "一种基于多令牌桶的数据风暴抑制单元", 微电子学与计算机, no. 09, 5 September 2016 (2016-09-05) * |
Also Published As
Publication number | Publication date |
---|---|
CN113645299B (zh) | 2024-05-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2019507448A (ja) | 大量のロボットに対する緊急停止制御方法及び装置 | |
CN109658021A (zh) | 确定商品货位的方法及装置 | |
RU2011141468A (ru) | Способ и устройство для согласованной работы машин, которые поддерживают контакт в пределах прямой видимости | |
CN106104164B (zh) | 空气调节机、空气调节机系统以及重写控制方法 | |
CN104601526A (zh) | 一种冲突检测及解决的方法、装置 | |
CN107770298B (zh) | 传输数据的方法和装置 | |
CN110597261A (zh) | 一种预防碰撞冲突的方法及装置 | |
CN103795622A (zh) | 一种报文转发方法及其装置 | |
CN107065848A (zh) | 一种基于高精度定位导航终端的井下矿机车无人驾驶系统及方法 | |
CN108597289A (zh) | 一种作战后勤仿真实验平台系统 | |
CN105009006B (zh) | 可编程控制器、可编程控制器系统及执行错误信息生成方法 | |
CN108418752A (zh) | 一种聚合组的创建方法和装置 | |
US11231958B2 (en) | Method and control system for controlling and/or monitoring devices | |
CN113645299A (zh) | 一种矿用海量数据快速缓冲方法 | |
KR101952187B1 (ko) | 서비스 노드 능력 처리 방법, 장치, 서비스 분류기 및 서비스 제어기 | |
US11138085B2 (en) | Execution sequence integrity monitoring system | |
CN105282099A (zh) | 防火墙命令的生成方法和装置 | |
CN106293996B (zh) | 数据同步方法、主设备、备份设备和系统 | |
KR102036725B1 (ko) | 게이트웨이 장치 및 그 정보 처리 방법 | |
US11144375B2 (en) | Execution sequence integrity parameter monitoring system | |
KR20220109661A (ko) | 드론의 임무비행계획서 생성시스템 | |
CN107046503A (zh) | 一种报文传输方法、系统及其装置 | |
CN106982246A (zh) | 智能设备 | |
CN105704189A (zh) | 一种上下层链路之间的关联方法、装置和系统 | |
EP3550773B1 (en) | Message processing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |