CN113645299A - 一种矿用海量数据快速缓冲方法 - Google Patents

一种矿用海量数据快速缓冲方法 Download PDF

Info

Publication number
CN113645299A
CN113645299A CN202110914941.6A CN202110914941A CN113645299A CN 113645299 A CN113645299 A CN 113645299A CN 202110914941 A CN202110914941 A CN 202110914941A CN 113645299 A CN113645299 A CN 113645299A
Authority
CN
China
Prior art keywords
data
type
buffer space
buffer
mac address
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110914941.6A
Other languages
English (en)
Other versions
CN113645299B (zh
Inventor
张金豪
刘亚辉
郭江涛
邵严
胡英杰
林引
何青松
贺奎
周代勇
胡宇
胡亮
赵光绪
刘芬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CCTEG Chongqing Research Institute Co Ltd
Original Assignee
CCTEG Chongqing Research Institute Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CCTEG Chongqing Research Institute Co Ltd filed Critical CCTEG Chongqing Research Institute Co Ltd
Priority to CN202110914941.6A priority Critical patent/CN113645299B/zh
Publication of CN113645299A publication Critical patent/CN113645299A/zh
Application granted granted Critical
Publication of CN113645299B publication Critical patent/CN113645299B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/568Storing data temporarily at an intermediate stage, e.g. caching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/565Conversion or adaptation of application format or content

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种矿用海量数据快速缓冲方法,属于数据处理领域。该方法以下步骤:S1:交换机设备启动正常后第一时间获取MAC地址;S2:根据MAC确认网络设备类型;S3:根据MAC地址确认数据交换的类型数量确认相应的缓冲区间个数;S4:根据MAC地址类型特点确认每种类型数据的缓冲空间;S5:计算每种类型数据缓冲空间:S6:对缓冲空间进行板块编号,每一个板块都有唯一的标号;S7:把相应类型数据打上时间戳标记放入对应板块缓冲区;S8:根据时间戳先后顺序,进行整体板块数据交换机。本发明通过对交换设备缓冲区进行统筹管理,对交换数据进行判断,实现了海量数据整体板块化缓存、转换。

Description

一种矿用海量数据快速缓冲方法
技术领域
本发明属于数据处理领域,涉及一种矿用海量数据快速缓冲方法。
背景技术
目前的交换设备对自身内部缓冲空间没有做统筹规划管理,数据到了以后才寻找内部缓冲空间存放数据,使整个缓冲空间呈现无序化状态。由于事先没有对缓冲空间做清理,可能导致海量完整数据包会被存放在不通的缓冲区间,影响了数据转发时间;另外,同类型数据没有放入相同缓冲板块,可能导致转发数据时缓冲地址错误,从而发生数据转换错误故障问题。
另外,数据交换没有进行判断,所有数据无序化存在,数据到了就存,各类型数据存现一锅粥状态,大容量数据和小数据流扎混缓冲区中,数据转发时,需要在缓冲区里面寻找目标数据,影响数据转发的快速性。
发明内容
有鉴于此,本发明的目的在于提供一种矿用海量数据快速缓冲方法。通过对交换设备缓冲区进行统筹管理,对交换数据进行判断,实现了海量数据整体板块化缓存、转换,从而达到使井下海量数据有序、快速及安全转换,减少了交换机设备数据缓存时间和数据转换的安全性。
为达到上述目的,本发明提供如下技术方案:
一种矿用海量数据快速缓冲方法,该方法以下步骤:
S1:交换机设备启动正常后第一时间获取MAC地址;
S2:根据MAC确认网络设备类型;
S3:根据MAC地址确认数据交换的类型数量确认相应的缓冲区间个数;
S4:根据MAC地址类型特点确认每种类型数据的缓冲空间;
S5:计算每种类型数据缓冲空间:
S6:对缓冲空间进行板块编号,每一个板块都有唯一的标号;
S7:把相应类型数据打上时间戳标记放入对应板块缓冲区;
S8:根据时间戳先后顺序,进行整体板块数据交换机。
可选的,所述S5具体为:由MAC地址确认数据的类型,确认该类型单个设备容量的最大值Vmax;设备缓冲空间容量为Vall,设有n种设备类型,则每种类型数据缓冲空间V的计算公式为:
Figure BDA0003205285740000021
V=3V max (2)
K趋于无穷大,受限于数据交换机设备缓冲空间总容量大小。
一种计算机装置,包括存储器、处理器及储存在存储器上并能够在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如所述的方法。
一种计算机可读存储介质,其上储存有计算机程序,所述计算机程序被处理器执行时实现如所述的方法。
本发明的有益效果在于:本发明通过对交换设备缓冲区进行统筹管理,对交换数据进行判断,实现了海量数据整体板块化缓存、转换,从而达到使井下海量数据有序、快速及安全转换,减少了交换机设备数据缓存时间和数据转换的安全性。
本发明的其他优点、目标和特征在某种程度上将在随后的说明书中进行阐述,并且在某种程度上,基于对下文的考察研究对本领域技术人员而言将是显而易见的,或者可以从本发明的实践中得到教导。本发明的目标和其他优点可以通过下面的说明书来实现和获得。
附图说明
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作优选的详细描述,其中:
图1为本发明流程图。
具体实施方式
以下通过特定的具体实例说明本发明的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本发明的精神下进行各种修饰或改变。需要说明的是,以下实施例中所提供的图示仅以示意方式说明本发明的基本构想,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。
其中,附图仅用于示例性说明,表示的仅是示意图,而非实物图,不能理解为对本发明的限制;为了更好地说明本发明的实施例,附图某些部件会有省略、放大或缩小,并不代表实际产品的尺寸;对本领域技术人员来说,附图中某些公知结构及其说明可能省略是可以理解的。
本发明实施例的附图中相同或相似的标号对应相同或相似的部件;在本发明的描述中,需要理解的是,若有术语“上”、“下”、“左”、“右”、“前”、“后”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此附图中描述位置关系的用语仅用于示例性说明,不能理解为对本发明的限制,对于本领域的普通技术人员而言,可以根据具体情况理解上述术语的具体含义。
请参阅图1,为一种矿用海量数据快速缓冲方法,包括以下步骤:
S1:交换机设备启动正常后第一时间获取MAC地址;
S2:根据MAC确认网络设备类型(全球MAC都是唯一的,每一种设备类型被固定到相应的地址区间);
S3:根据MAC地址确认数据交换的类型数量确认相应的缓冲区间个数;
S4:根据MAC地址类型特点确认每种类型数据的缓冲空间;
S5:每种类型数据缓冲空间计算方法:
由MAC地址确认数据类型,确认该类型单个设备容量的最大值Vmax。设备缓冲空间容量为Vall,设有n种设备类型,则每种类型数据缓冲空间V的计算公式为:
Figure BDA0003205285740000031
V=3V max (2)
备注:K理论趋于无穷大,K实际值受限于数据交换机设备缓冲空间总容量大小。
S6:对缓冲空间进行板块编号,每一个板块都有唯一的标号;
S7:把相应类型数据打上时间戳标记放入对应板块缓冲区;
S8:根据时间戳先后顺序,进行整体板块数据交换机。
数据交换设备自动识别数据类型,根据数据类型以及该类型数据发起者数量,确认相同类型数据的总体容量,根据每种类型数据的大小统筹划分数据缓冲区,使数据交换设备具有大小不同的多个不同缓冲区,并建立相应的标示作为路径指引;
对数据建立时间数据戳,根据时间数据戳,按照时间顺序,转发整体缓冲板块,实现数据快速交换。
应当认识到,本发明的实施例可以由计算机硬件、硬件和软件的组合、或者通过存储在非暂时性计算机可读存储器中的计算机指令来实现或实施。所述方法可以使用标准编程技术-包括配置有计算机程序的非暂时性计算机可读存储介质在计算机程序中实现,其中如此配置的存储介质使得计算机以特定和预定义的方式操作——根据在具体实施例中描述的方法和附图。每个程序可以以高级过程或面向对象的编程语言来实现以与计算机系统通信。然而,若需要,该程序可以以汇编或机器语言实现。在任何情况下,该语言可以是编译或解释的语言。此外,为此目的该程序能够在编程的专用集成电路上运行。
此外,可按任何合适的顺序来执行本文描述的过程的操作,除非本文另外指示或以其他方式明显地与上下文矛盾。本文描述的过程(或变型和/或其组合)可在配置有可执行指令的一个或多个计算机系统的控制下执行,并且可作为共同地在一个或多个处理器上执行的代码(例如,可执行指令、一个或多个计算机程序或一个或多个应用)、由硬件或其组合来实现。所述计算机程序包括可由一个或多个处理器执行的多个指令。
进一步,所述方法可以在可操作地连接至合适的任何类型的计算平台中实现,包括但不限于个人电脑、迷你计算机、主框架、工作站、网络或分布式计算环境、单独的或集成的计算机平台、或者与带电粒子工具或其它成像装置通信等等。本发明的各方面可以以存储在非暂时性存储介质或设备上的机器可读代码来实现,无论是可移动的还是集成至计算平台,如硬盘、光学读取和/或写入存储介质、RAM、ROM等,使得其可由可编程计算机读取,当存储介质或设备由计算机读取时可用于配置和操作计算机以执行在此所描述的过程。此外,机器可读代码,或其部分可以通过有线或无线网络传输。当此类媒体包括结合微处理器或其他数据处理器实现上文所述步骤的指令或程序时,本文所述的发明包括这些和其他不同类型的非暂时性计算机可读存储介质。当根据本发明所述的矿用海量数据快速缓冲方法和技术编程时,本发明还包括计算机本身。
计算机程序能够应用于输入数据以执行本文所述的功能,从而转换输入数据以生成存储至非易失性存储器的输出数据。输出信息还可以应用于一个或多个输出设备如显示器。在本发明优选的实施例中,转换的数据表示物理和有形的对象,包括显示器上产生的物理和有形对象的特定视觉描绘。
最后说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本技术方案的宗旨和范围,其均应涵盖在本发明的权利要求范围当中。

Claims (4)

1.一种矿用海量数据快速缓冲方法,其特征在于:该方法以下步骤:
S1:交换机设备启动正常后第一时间获取MAC地址;
S2:根据MAC确认网络设备类型;
S3:根据MAC地址确认数据交换的类型数量确认相应的缓冲区间个数;
S4:根据MAC地址类型特点确认每种类型数据的缓冲空间;
S5:计算每种类型数据缓冲空间:
S6:对缓冲空间进行板块编号,每一个板块都有唯一的标号;
S7:把相应类型数据打上时间戳标记放入对应板块缓冲区;
S8:根据时间戳先后顺序,进行整体板块数据交换机。
2.根据权利要求1所述的一种矿用海量数据快速缓冲方法,其特征在于:所述S5具体为:由MAC地址确认数据的类型,确认该类型单个设备容量的最大值Vmax;设备缓冲空间容量为Vall,设有n种设备类型,则每种类型数据缓冲空间V的计算公式为:
Figure FDA0003205285730000011
V=3V max (2)
K趋于无穷大,受限于数据交换机设备缓冲空间总容量大小。
3.一种计算机装置,包括存储器、处理器及储存在存储器上并能够在处理器上运行的计算机程序,其特征在于:所述处理器执行所述计算机程序时实现如权利要求1~2任一项所述的方法。
4.一种计算机可读存储介质,其上储存有计算机程序,其特征在于:所述计算机程序被处理器执行时实现如权利要求1~2任一项所述的方法。
CN202110914941.6A 2021-08-10 2021-08-10 一种矿用海量数据快速缓冲方法 Active CN113645299B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110914941.6A CN113645299B (zh) 2021-08-10 2021-08-10 一种矿用海量数据快速缓冲方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110914941.6A CN113645299B (zh) 2021-08-10 2021-08-10 一种矿用海量数据快速缓冲方法

Publications (2)

Publication Number Publication Date
CN113645299A true CN113645299A (zh) 2021-11-12
CN113645299B CN113645299B (zh) 2024-05-03

Family

ID=78420558

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110914941.6A Active CN113645299B (zh) 2021-08-10 2021-08-10 一种矿用海量数据快速缓冲方法

Country Status (1)

Country Link
CN (1) CN113645299B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160085479A1 (en) * 2014-09-22 2016-03-24 Freescale Semiconductor, Inc. Interface system and method
CN108306835A (zh) * 2018-01-23 2018-07-20 中国航空工业集团公司洛阳电光设备研究所 一种以太网交换机的输入缓存结构及数据转发方法
CN111147175A (zh) * 2019-11-28 2020-05-12 中国航空工业集团公司西安航空计算技术研究所 时间触发以太网数据帧捕获、存储装置及方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160085479A1 (en) * 2014-09-22 2016-03-24 Freescale Semiconductor, Inc. Interface system and method
CN108306835A (zh) * 2018-01-23 2018-07-20 中国航空工业集团公司洛阳电光设备研究所 一种以太网交换机的输入缓存结构及数据转发方法
CN111147175A (zh) * 2019-11-28 2020-05-12 中国航空工业集团公司西安航空计算技术研究所 时间触发以太网数据帧捕获、存储装置及方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
马徐瀚;吴龙胜;赵坤鹏;陈庆宇;: "一种基于多令牌桶的数据风暴抑制单元", 微电子学与计算机, no. 09, 5 September 2016 (2016-09-05) *

Also Published As

Publication number Publication date
CN113645299B (zh) 2024-05-03

Similar Documents

Publication Publication Date Title
JP2019507448A (ja) 大量のロボットに対する緊急停止制御方法及び装置
CN109658021A (zh) 确定商品货位的方法及装置
RU2011141468A (ru) Способ и устройство для согласованной работы машин, которые поддерживают контакт в пределах прямой видимости
CN106104164B (zh) 空气调节机、空气调节机系统以及重写控制方法
CN104601526A (zh) 一种冲突检测及解决的方法、装置
CN107770298B (zh) 传输数据的方法和装置
CN110597261A (zh) 一种预防碰撞冲突的方法及装置
CN103795622A (zh) 一种报文转发方法及其装置
CN107065848A (zh) 一种基于高精度定位导航终端的井下矿机车无人驾驶系统及方法
CN108597289A (zh) 一种作战后勤仿真实验平台系统
CN105009006B (zh) 可编程控制器、可编程控制器系统及执行错误信息生成方法
CN108418752A (zh) 一种聚合组的创建方法和装置
US11231958B2 (en) Method and control system for controlling and/or monitoring devices
CN113645299A (zh) 一种矿用海量数据快速缓冲方法
KR101952187B1 (ko) 서비스 노드 능력 처리 방법, 장치, 서비스 분류기 및 서비스 제어기
US11138085B2 (en) Execution sequence integrity monitoring system
CN105282099A (zh) 防火墙命令的生成方法和装置
CN106293996B (zh) 数据同步方法、主设备、备份设备和系统
KR102036725B1 (ko) 게이트웨이 장치 및 그 정보 처리 방법
US11144375B2 (en) Execution sequence integrity parameter monitoring system
KR20220109661A (ko) 드론의 임무비행계획서 생성시스템
CN107046503A (zh) 一种报文传输方法、系统及其装置
CN106982246A (zh) 智能设备
CN105704189A (zh) 一种上下层链路之间的关联方法、装置和系统
EP3550773B1 (en) Message processing

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant