CN115242717B - 一种基于端侧计算的中心化存储系统及控制方法 - Google Patents
一种基于端侧计算的中心化存储系统及控制方法 Download PDFInfo
- Publication number
- CN115242717B CN115242717B CN202211122658.0A CN202211122658A CN115242717B CN 115242717 B CN115242717 B CN 115242717B CN 202211122658 A CN202211122658 A CN 202211122658A CN 115242717 B CN115242717 B CN 115242717B
- Authority
- CN
- China
- Prior art keywords
- data
- module
- client
- state information
- flow
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0653—Monitoring storage devices or systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0631—Management of faults, events, alarms or notifications using root cause analysis; using analysis of correlation between notifications, alarms or events based on decision criteria, e.g. hierarchy, tree or time analysis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/14—Network analysis or design
- H04L41/147—Network analysis or design for predicting network behaviour
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer And Data Communications (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种基于端侧计算的中心化存储系统及控制方法,包括客户端将原始数据上传到数据存储模块,并生成基础数据状态信息,并将基础数据状态信息与对应的原始数据同时存储到数据存储模块;若用户在客户端对原始数据进行数据操作,则生成序号加一的基础数据状态信息,与基础数据状态信息构成基础数据状态信息序列;客户端访问数据时,先根据序号匹配到原始数据,再根据序号加一的个数,根据对应的基础数据状态信息中的数据操作的内容,对原始数据进行对应的数据操作,生成访问数据,发送到对应的客户端,直到完成访问数据传输。通过本发明可以实现本地数据状态信息的计算分担给所有客户端设备,极大简化服务器端的承载上限。
Description
技术领域
本发明涉及数据处理领域,具体是一种基于端侧计算的中心化存储系统及控制方法。
背景技术
当前,中心化存储主要以其高可用、高容量来保证了能够提供诸如数据中心、数据仓库、数据湖、大数据分析等场景,在人工智能领域为模型建模提供计算数据资源、在图形处理领域提供了大量的图片数据,在消费领域提供订单历史记录,可以说在数据中心(IDC)高度发达的今天,中心化的存储结构为移动互联网提供了大量的场景支持也是大数据AI时代的基础设施,但是随着计算服务的定制化,诸如定制化推荐定制化生成、低延时搜索、数据关系服务运算的产生,逐渐需要扩展计算资源的集群,不断增加服务器端的设备和计算算方复杂性才能够保证服务海量用户,如今智能终端的普及以及高性能终端(甚至出现某些高端手机芯片的计算能力已经逼近基础计算服务器)、区块链技术的诞生,使得我们可以重新思考如何利用好广泛的服务群体客户的终端设备,来为自己的信息做计算,因此产生了基于端侧计算的中心化存储结构的想法,把海量数据存储于中心,在客户端放置海量数据的生成数据(索引、摘要),通过客户端的计算极大的扩展中心化存储的使用能力,让服务器端轻量化减重。
发明内容
本发明的目的在于克服现有技术的不足,提供一种基于端侧计算的中心化存储系统控制方法,包括如下步骤:
步骤一,客户端将首次上传的原始数据上传到数据存储模块,同时客户端根据原始数据的信息生成基础数据状态信息,序号为N,所述的基础数据状态信息存储在客户端,并将基础数据状态信息与对应的原始数据同时存储到数据存储模块;
步骤二,若用户在客户端对原始数据进行数据操作,则根据用户数据操作的内容,在存储在客户端的基础数据状态信息的基础上进行状态信息修改,生成序号加一的基础数据状态信息,同时序号加一的基础数据状态信息更新到数据存储模块中,与基础数据状态信息构成基础数据状态信息序列;
步骤三,客户端访问数据时,先根据客户端存储的基础数据状态信息的序号,匹配到原始数据,再根据序号加一的个数,匹配到对应的基础数据状态信息,根据对应的基础数据状态信息中的数据操作的内容,对原始数据进行对应的数据操作,生成访问数据,发送到对应的客户端;
步骤四,在访问数据传输的过程中,检测传输过程的流量状况,对传输过程中进行异常流量检测与排除,直到完成访问数据传输。
进一步的,其特征在于,所述的数据操作包括增加数据、删除数据和修改数据。
进一步的,所述的根据用户数据操作的内容,在存储在客户端的基础数据状态信息的基础上进行状态信息修改,生成序号加一的基础数据状态信息,包括:
客户端在对原始数据进行数据操作前,先获取对应原始数据的基础数据状态信息的序号加一的个数,当客户端进行数据操作后,在获取的序号加一的个数基础上再加一,生成序号加一的基础数据状态信息。
进一步的,所述的在访问数据传输的过程中,检测传输过程的流量状况,对传输过程中进行异常流量检测与排除,包括:
S1,根据网络监控与调节模块中的数据采集模块的历史流量数据,通过流量预测模块得到各条线路的预测流量,并设定各条线路的预警流量阈值;
S2,根据各条线路的预测流量,调度模块生成设备调度策略,根据调度策略调度模块调度各条线路的设备;
S3,检测传输线路的实时的流量,当线路的流量到达预警流量阈值,先判断流量是否为异常流量,若为异常流量,则进入步骤四;若为正常流量,则通过调度模块向该条线路添加备用分流设备进行流量分流;
S4,若为异常流量,先判断该条线路设备是否满足切换要求,若满足切换要求,则增加分流设备;若不满足切换要求,则暂停该条线路,进行故障排除。
应用所述的一种基于端侧计算的中心化存储系统控制方法的一种基于端侧计算的中心化存储系统,包括数据处理模块、通信装置、数据存储模块、存储状态监控装置、报警装置、网络监控与调节模块、客户端管理模块、电源模块;
所述的通信装置、数据存储模块、存储状态监控装置、报警装置、网络监控与调节模块、客户端管理模块、电源模块分别与所述的数据处理模块连接;
其中的存储状态监控装置用于检测数据处理模块的工作状态;
所述的网络监控与调节模块用于监控客户端与数据存储模块之间的网络状况,以及进行故障处理;
所述的客户端管理模块用于对客户端进行存储和网络资源调度;
所述的报警装置用于发出报警信息;
所述的电源模块用于为存储系统进行供电。
优选的,所述的数据存储模块包括容量检测模块、传输速率监测装置;所述的容量检测模块、传输速率监测装置分别与所述的数据处理模块连接。
优选的,所述的存储状态监控装置包括温度变化检测模块、散热装置;所述的温度变化检测模块、散热装置分别与所述的数据处理模块连接。
优选的,所述的网络监控与调节模块包括流量预测模块、调度模块、干预模块、数据采集模块、智能分流模块;所述的流量预测模块、调度模块、干预模块、数据采集模块、智能分流模块分别与所述的数据处理模块连接。
优选的,所述的客户端管理模块包括客户端数据收发监控装置、客户端调度模块;所述的客户端数据收发监控装置、客户端调度模块分别与所述的数据处理模块连接。
本发明的有益效果是:本发明旨在通过维护本地的全相关用户状态集合信息从而创新铺设通用端侧计算,使服务器仅仅需要关注IDC核心的通信带宽和文件存储,而不必担心多客户端计算产生的重大算力难度,因为本地I/O带宽会限制住计算的容量,但是把本地I/O分担给所有便携设备并且将计算任务分担给他们,会极大简化服务器端的承载上限。
附图说明
图1为种基于端侧计算的中心化存储系统控制方法;
图2为一种基于端侧计算的中心化存储系统。
具体实施方式
下面结合附图进一步详细描述本发明的技术方案,但本发明的保护范围不局限于以下所述。
为了使本发明的目的,技术方案及优点更加清楚明白,结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明,即所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。需要说明的是,术语“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。
而且,术语“包括”,“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程,方法,物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程,方法,物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程,方法,物品或者设备中还存在另外的相同要素。
以下结合实施例对本发明的特征和性能作进一步的详细描述。
如图1所示,一种基于端侧计算的中心化存储系统控制方法,包括如下步骤:
步骤一,客户端将首次上传的原始数据上传到数据存储模块,同时客户端根据原始数据的信息生成基础数据状态信息,序号为N,所述的基础数据状态信息存储在客户端,并将基础数据状态信息与对应的原始数据同时存储到数据存储模块;其中的基础数据状态信息包括原始数据的数据大小、数据组成以及存储位置;
步骤二,若用户在客户端对原始数据进行数据操作,则根据用户数据操作的内容,在存储在客户端的基础数据状态信息的基础上进行状态信息修改,生成序号加一的基础数据状态信息,同时序号加一的基础数据状态信息更新到数据存储模块中,与基础数据状态信息构成基础数据状态信息序列;
步骤三,客户端访问数据时,先根据客户端存储的基础数据状态信息的序号,匹配到原始数据,再根据序号加一的个数,匹配到对应的基础数据状态信息,根据对应的基础数据状态信息中的数据操作的内容,对原始数据进行对应的数据操作,生成访问数据,发送到对应的客户端;
步骤四,在访问数据传输的过程中,检测传输过程的流量状况,对传输过程中进行异常流量检测与排除,直到完成访问数据传输。
所述的数据操作包括增加数据、删除数据和修改数据。
所述的根据用户数据操作的内容,在存储在客户端的基础数据状态信息的基础上进行状态信息修改,生成序号加一的基础数据状态信息,包括:
客户端在对原始数据进行数据操作前,先获取对应原始数据的基础数据状态信息的序号加一的个数,当客户端进行数据操作后,在获取的序号加一的个数基础上再加一,生成序号加一的基础数据状态信息。
所述的在访问数据传输的过程中,检测传输过程的流量状况,对传输过程中进行异常流量检测与排除,包括:
S1,根据网络监控与调节模块中的数据采集模块的历史流量数据,通过流量预测模块得到各条线路的预测流量,并设定各条线路的预警流量阈值;
S2,根据各条线路的预测流量,调度模块生成设备调度策略,根据调度策略调度模块调度各条线路的设备;
S3,检测传输线路的实时的流量,当线路的流量到达预警流量阈值,先判断流量是否为异常流量,若为异常流量,则进入步骤四;若为正常流量,则通过调度模块向该条线路添加备用分流设备进行流量分流;
S4,若为异常流量,先判断该条线路设备是否满足切换要求,若满足切换要求,则增加分流设备;若不满足切换要求,则暂停该条线路,进行故障排除。
所述的历史流量数据为流量计算周期内流量数据的峰值、流量变化率、数据总量、流量峰值持续时间。
所述的根据数据采集模块的历史流量数据,通过流量预测模块得到各条线路的预测流量,包括如下过程,先根据历史流量数据得到预测流量数据峰值,采用如下公式计算:
其中的n为流量计算周期的个数,Ai为流量计算周期i内的流量数据的峰值,根据预测流量数据峰值调度模块调用对应的设备;
再根据流量峰值持续时间得到预测流量峰值持续时间,采用如下公式:
若预测流量峰值持续时间大于设备稳定峰值运行时间,则增加设备进行分流;
其中的n为流量计算周期的个数,Bi为流量计算周期i内的流量峰值持续时间。
所述的判断流量是否为异常流量包括如下过程:
根据历史流量数据的流量变化率得到参考流量变化率,采用如下公式:
所述的判断该条线路设备是否满足切换要求包括如下过程:若设备流量增加到设备正常运行的最大值所需的时间大于切换到新设备的时间,则满足切换要求,否则,则不满足。
如图2所示,应用所述的一种基于端侧计算的中心化存储系统控制方法的一种基于端侧计算的中心化存储系统,包括数据处理模块、通信装置、数据存储模块、存储状态监控装置、报警装置、网络监控与调节模块、客户端管理模块、电源模块;
所述的通信装置、数据存储模块、存储状态监控装置、报警装置、网络监控与调节模块、客户端管理模块、电源模块分别与所述的数据处理模块连接;
其中的存储状态监控装置用于检测数据处理模块的工作状态;
所述的网络监控与调节模块用于监控客户端与数据存储模块之间的网络状况,以及进行故障处理;
所述的客户端管理模块用于对客户端进行存储和网络资源调度;
所述的报警装置用于发出报警信息;
所述的电源模块用于为存储系统进行供电。
所述的数据存储模块包括容量检测模块、传输速率监测装置;所述的容量检测模块、传输速率监测装置分别与所述的数据处理模块连接。
所述的存储状态监控装置包括温度变化检测模块、散热装置;所述的温度变化检测模块、散热装置分别与所述的数据处理模块连接。
所述的网络监控与调节模块包括流量预测模块、调度模块、干预模块、数据采集模块、智能分流模块;所述的流量预测模块、调度模块、干预模块、数据采集模块、智能分流模块分别与所述的数据处理模块连接。
其中的调度模块用于根据流量预测模块的流量预测结果,进行调度;
所述的干预模块用于对调度进行主动干预;
所述的预警模块用于发出预警信息;
所述的智能分流模块用于在预警模块发出预警信息后,根据调度结果和流量信息,进行智能分流;
所述的数据采集模块包括实时数据采集模块和历史数据模块;所述的实时数据采集模块用于实时的采集流量数据;所述的历史数据模块用于存储并分析历史流量数据;
所述的客户端管理模块包括客户端数据收发监控装置、客户端调度模块;所述的客户端数据收发监控装置、客户端调度模块分别与所述的数据处理模块连接。
以上所述仅是本发明的优选实施方式,应当理解本发明并非局限于本文所披露的形式,不应看作是对其他实施例的排除,而可用于各种其他组合、修改和环境,并能够在本文所述构想范围内,通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围,则都应在本发明所附权利要求的保护范围内。
Claims (7)
1.一种基于端侧计算的中心化存储系统控制方法,应用于一种基于端侧计算的中心化存储系统,其特征在于,所述的一种基于端侧计算的中心化存储系统包括数据处理模块、通信装置、数据存储模块、存储状态监控装置、报警装置、网络监控与调节模块、客户端管理模块、电源模块;
所述的通信装置、数据存储、存储状态监控装置、报警装置、网络监控与调节模块、客户端管理模块、电源模块分别与所述的数据处理模块连接;
其中的存储状态监控装置用于检测数据处理模块的工作状态;
所述的网络监控与调节模块用于监控客户端与数据存储模块之间的网络状况,以及进行故障处理;
所述的客户端管理模块用于对客户端进行存储和网络资源调度;
所述的报警装置用于发出报警信息;
所述的电源模块用于为存储系统进行供电;
包括如下步骤:
步骤一,客户端将原始数据上传到数据存储模块,同时客户端根据原始数据的信息生成基础数据状态信息,序号为N,所述的基础数据状态信息存储在客户端,并将基础数据状态信息与对应的原始数据同时存储到数据存储模块;
步骤二,若用户在客户端对原始数据进行数据操作,则根据用户数据操作的内容,在存储在客户端的基础数据状态信息的基础上进行状态信息修改,生成序号加一的基础数据状态信息,同时序号加一的基础数据状态信息更新到数据存储模块中,与基础数据状态信息构成基础数据状态信息序列;
步骤三,客户端访问数据时,数据存储模块先根据客户端存储的基础数据状态信息的序号,匹配到原始数据,再根据序号加一的个数,匹配到对应的基础数据状态信息,根据对应的基础数据状态信息中的数据操作的内容,对原始数据进行对应的数据操作,生成访问数据,发送到对应的客户端;
步骤四,在访问数据传输的过程中,网络监控与调节模块检测传输过程的流量状况,对传输过程中进行异常流量检测与排除,直到完成访问数据传输;
所述的在访问数据传输的过程中,网络监控与调节模块检测传输过程的流量状况,对传输过程中进行异常流量检测与排除,包括:
S1,根据网络监控与调节模块中的数据采集模块的历史流量数据,通过流量预测模块得到各条线路的预测流量,并设定各条线路的预警流量阈值;
S2,根据各条线路的预测流量,调度模块生成设备调度策略,根据调度策略调度模块调度各条线路的设备;
S3,检测传输线路的实时的流量,当线路的流量到达预警流量阈值,先判断流量是否为异常流量,若为异常流量,则进入步骤四;若为正常流量,则通过调度模块向该条线路添加备用分流设备进行流量分流;
S4,若为异常流量,先判断该条线路设备是否满足切换要求,若满足切换要求,则增加分流设备;若不满足切换要求,则暂停该条线路,进行故障排除。
2.根据权利要求1所述的一种基于端侧计算的中心化存储系统控制方法,其特征在于,所述的数据操作包括增加数据、删除数据和修改数据。
3.根据权利要求1所述的一种基于端侧计算的中心化存储系统控制方法,其特征在于,所述的根据用户数据操作的内容,在存储在客户端的基础数据状态信息的基础上进行状态信息修改,生成序号加一的基础数据状态信息,包括:
客户端在对原始数据进行数据操作前,先获取对应原始数据的基础数据状态信息的序号加一的个数,当客户端进行数据操作后,在获取的序号加一的个数基础上再加一,生成序号加一的基础数据状态信息。
4.根据权利要求1所述的一种基于端侧计算的中心化存储系统控制方法,其特征在于,所述的数据存储模块包括容量检测模块、传输速率监测装置;所述的容量检测模块、传输速率监测装置分别与所述的数据处理模块连接。
5.根据权利要求4所述的一种基于端侧计算的中心化存储系统控制方法,其特征在于,所述的存储状态监控装置包括温度变化检测模块、散热装置;所述的温度变化检测模块、散热装置分别与所述的数据处理模块连接。
6.根据权利要求5所述的一种基于端侧计算的中心化存储系统控制方法,其特征在于,所述的网络监控与调节模块包括流量预测模块、调度模块、干预模块、数据采集模块、智能分流模块;所述的流量预测模块、调度模块、干预模块、数据采集模块、智能分流模块分别与所述的数据处理模块连接。
7.根据权利要求6所述的一种基于端侧计算的中心化存储系统控制方法,其特征在于,所述的客户端管理模块包括客户端数据收发监控装置、客户端调度模块;所述的客户端数据收发监控装置、客户端调度模块分别与所述的数据处理模块连接。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211122658.0A CN115242717B (zh) | 2022-09-15 | 2022-09-15 | 一种基于端侧计算的中心化存储系统及控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211122658.0A CN115242717B (zh) | 2022-09-15 | 2022-09-15 | 一种基于端侧计算的中心化存储系统及控制方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115242717A CN115242717A (zh) | 2022-10-25 |
CN115242717B true CN115242717B (zh) | 2022-12-09 |
Family
ID=83680761
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211122658.0A Active CN115242717B (zh) | 2022-09-15 | 2022-09-15 | 一种基于端侧计算的中心化存储系统及控制方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115242717B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115550145B (zh) * | 2022-12-01 | 2023-03-03 | 问策师信息科技南京有限公司 | 一种工业互联网安全动态防护方法及防护系统 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101317375A (zh) * | 2006-10-31 | 2008-12-03 | 华为技术有限公司 | 网管拓扑数据同步刷新的方法及客户端、服务器端 |
CN101431741A (zh) * | 2008-12-19 | 2009-05-13 | 北京邮电大学 | 一种维护个人信息管理数据一致性的方法 |
CN101883419A (zh) * | 2009-05-06 | 2010-11-10 | 中兴通讯股份有限公司 | 客户端信息的同步方法和系统 |
CN102315930A (zh) * | 2010-06-30 | 2012-01-11 | 国际商业机器公司 | 用于在数据同步中减少数据传输量的方法和系统 |
CN102685221A (zh) * | 2012-04-29 | 2012-09-19 | 华北电力大学(保定) | 一种状态监测数据的分布式存储与并行挖掘方法 |
CN102904887A (zh) * | 2012-09-26 | 2013-01-30 | 东软集团股份有限公司 | 一种Web客户端与服务器的数据同步方法和系统 |
CN103984715A (zh) * | 2014-05-08 | 2014-08-13 | 武汉库百网络技术有限公司 | 一种异构数据库的数据同步、校验方法、装置及系统 |
CN104320401A (zh) * | 2014-10-31 | 2015-01-28 | 北京思特奇信息技术股份有限公司 | 一种基于分布式文件系统的大数据存储访问系统及方法 |
CN105260447A (zh) * | 2015-10-09 | 2016-01-20 | 上海瀚之友信息技术服务有限公司 | 一种网页数据分析方法及系统 |
CN112231152A (zh) * | 2020-12-11 | 2021-01-15 | 北京国导科技有限公司 | 数据同步方法、远程服务器、客户端以及系统 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7013316B1 (en) * | 2000-07-13 | 2006-03-14 | Microsoft Corporation | System and method for synchronizing multiple database files |
-
2022
- 2022-09-15 CN CN202211122658.0A patent/CN115242717B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101317375A (zh) * | 2006-10-31 | 2008-12-03 | 华为技术有限公司 | 网管拓扑数据同步刷新的方法及客户端、服务器端 |
CN101431741A (zh) * | 2008-12-19 | 2009-05-13 | 北京邮电大学 | 一种维护个人信息管理数据一致性的方法 |
CN101883419A (zh) * | 2009-05-06 | 2010-11-10 | 中兴通讯股份有限公司 | 客户端信息的同步方法和系统 |
CN102315930A (zh) * | 2010-06-30 | 2012-01-11 | 国际商业机器公司 | 用于在数据同步中减少数据传输量的方法和系统 |
CN102685221A (zh) * | 2012-04-29 | 2012-09-19 | 华北电力大学(保定) | 一种状态监测数据的分布式存储与并行挖掘方法 |
CN102904887A (zh) * | 2012-09-26 | 2013-01-30 | 东软集团股份有限公司 | 一种Web客户端与服务器的数据同步方法和系统 |
CN103984715A (zh) * | 2014-05-08 | 2014-08-13 | 武汉库百网络技术有限公司 | 一种异构数据库的数据同步、校验方法、装置及系统 |
CN104320401A (zh) * | 2014-10-31 | 2015-01-28 | 北京思特奇信息技术股份有限公司 | 一种基于分布式文件系统的大数据存储访问系统及方法 |
CN105260447A (zh) * | 2015-10-09 | 2016-01-20 | 上海瀚之友信息技术服务有限公司 | 一种网页数据分析方法及系统 |
CN112231152A (zh) * | 2020-12-11 | 2021-01-15 | 北京国导科技有限公司 | 数据同步方法、远程服务器、客户端以及系统 |
Non-Patent Citations (2)
Title |
---|
"HCMonitor: An Accurate Measurement System for High Concurrent Network Services";Hui Song;《IEEE》;20191215;全文 * |
"面向边缘智能的资源分配和任务调度的研究";姜婧妍;《中国优秀博士学位论文》;20200815;全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN115242717A (zh) | 2022-10-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Sadeghi et al. | Deep reinforcement learning for adaptive caching in hierarchical content delivery networks | |
CN111027736B (zh) | 多目标优化下的微服务组合部署与调度方法 | |
CN102891877B (zh) | 实现终端应用的在线处理系统及方法 | |
CN110784779B (zh) | 一种用电信息采集系统的数据采集方法 | |
CN103854065A (zh) | 一种用于客户流失预测的方法和装置 | |
CN112804280A (zh) | 电力物联网系统及其数据处理方法 | |
CN109462652A (zh) | 智能家居系统中基于哈希算法的终端网关负载分配方法 | |
Chen et al. | A computing and content delivery network in the smart city: Scenario, framework, and analysis | |
CN112671840B (zh) | 一种基于区块链技术的跨部门数据共享系统及方法 | |
CN115242717B (zh) | 一种基于端侧计算的中心化存储系统及控制方法 | |
CN111741073A (zh) | 基于5g通信网络的电力数据传输系统 | |
CN110602180B (zh) | 一种基于边缘计算的大数据用户行为分析方法及电子设备 | |
CN114465945B (zh) | 一种基于sdn的标识解析网络构建方法 | |
CN108924228B (zh) | 基于边缘计算的工业互联网优化系统 | |
EP3979563A1 (en) | Inter-domain data interaction method and apparatus | |
CN106791639A (zh) | 大规模数据并发环境下的视频监控方法及系统 | |
CN116385857A (zh) | 一种基于ai智能调度的算力分配方法 | |
CN115883392A (zh) | 算力网络的数据感知方法、装置、电子设备及存储介质 | |
CN115955578A (zh) | 直播流调度方法及装置 | |
CN114760318A (zh) | 一种边缘计算管理方法及系统 | |
CN110750608B (zh) | 一种基于规则库的空间数据分析自动调度方法 | |
CN116781717A (zh) | 一种混合云数据同步的方法及系统 | |
CN113407491A (zh) | 数据处理方法及装置 | |
CN114035940A (zh) | 资源分配方法以及装置 | |
CN106230657A (zh) | 一种数据推送方法及其推送系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |