CN104994141B - 缓解云服务器存储和计算压力的协同存储系统 - Google Patents
缓解云服务器存储和计算压力的协同存储系统 Download PDFInfo
- Publication number
- CN104994141B CN104994141B CN201510333425.9A CN201510333425A CN104994141B CN 104994141 B CN104994141 B CN 104994141B CN 201510333425 A CN201510333425 A CN 201510333425A CN 104994141 B CN104994141 B CN 104994141B
- Authority
- CN
- China
- Prior art keywords
- data
- storage
- cloud server
- data storage
- data acquisition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
Abstract
本发明涉及智能家电及互联网领域,提供一种缓解云服务器存储和计算压力的协同存储系统,以解决数据采集端不能存储大量数据的问题并且减小云服务器端在忙碌时的存储和计算压力。包括数据采集端、数据存储端和云服务器端;三者通过网络相互连接;数据采集端能够根据云服务器端的状态,选择将采集到的数据发送给云服务器端;或者选择将采集到的数据先暂存在数据储存端,待状态转变之后,再通过数据存储端发送给云服务器端。本发明适用于数据处理能力不足和数据存储空间较小的智能家电。
Description
技术领域
本发明涉及智能家电及互联网领域,特别涉及缓解云服务器存储和计算压力的协同存储系统。
背景技术
随着芯片技术和互联网技术的快速发展,越来越多的终端更加智能化和网络化。如平板电脑、智能手机、智能家电(如电视、洗衣机、空调、冰箱、打印机、电饭煲、热水器)都能通过局域网或者互联网进行连接,并且能够通过互联网与远程的云服务器端进行连接。智能终端设备数量和品类的爆炸性增长(2020年,预计会有超过500亿台的连接设备),越来越多的智能设备具有云服务器端访问权限和功能,随之而来的是云服务器端的访问量和业务请求量将爆炸性的增长,势必会给云服务器端造成很大的存储和计算压力。
目前智能家电存在数据处理能力不足和数据存储空间较小,对于这种现状,现阶段普遍将智能家电的数据发送到云服务器端进行存储和处理来解决智能家电存在的这些不足。然而,随着智能家电种类和数量的剧增,单纯仅依靠云服务器端来进行数据的存储势必会造成云服务器过大的存储和计算压力。
发明内容
本发明要解决的技术问题是:提供一种缓解云服务器存储和计算压力的协同存储系统,以解决数据采集端不能存储大量数据的问题并且减小云服务器端在忙碌时的存储和计算压力。
为解决上述问题,本发明采用的技术方案是:缓解云服务器存储和计算压力的协同存储系统,包括数据采集端、数据存储端和云服务器端;三者通过网络相互连接,并且数据采集端和数据存储端在同一个局域网中;数据采集端用于数据采集,并将采集到的数据发送给数据存储端或云服务器端;数据存储端用于接收并存储来自数据采集端的数据以及将存储数据发送给云服务器端;云服务器端用于接收并处理来自数据采集端或数据存储端的数据,并将处理结果发送给数据采集端;
数据采集端能够根据云服务器端的状态,选择将采集到的数据发送给云服务器端;或者选择将采集到的数据先暂存在数据存储端,待状态转变之后,再通过数据存储端发送给云服务器端。
进一步的,数据采集端和数据存储端在同一个局域网中。
进一步的,在数据采集端发送暂存数据之前,数据采集端会通过发送广播方式向局域网中的多个数据存储端发送存储请求消息。
进一步的,当服务器端为忙碌状态时,数据采集端选择将采集到的数据暂存在数据存储端,同时创建并维护一个数据信息表一,在数据采集端将数据向数据存储端发送完毕后,将所述数据信息表一发送给云服务器端,其中,所述数据信息表一包含暂存数据的编号以及数据存储端的地址;
所述暂存的过程为:数据采集端向数据存储端发送存储请求消息,之后数据采集端根据数据存储端对存储请求消息的响应情况,选择向数据存储端发送或者不发送需要暂存的数据;如果数据存储端选择响应存储请求消息,它接收并保存来自数据采集端的数据,同时建立一个数据信息表二,并将所述数据信息表二发送给云服务器端,其中,所述数据信息表二包含暂存数据的编号和暂存数据的地址索引。
进一步的,所述存储请求消息包括暂存数据的大小信息,数据存储端根据其剩余存储空间大小状态和暂存数据的大小信息,选择响应或者不响应存储请求消息。
进一步的,如果数据存储端选择响应存储请求消息,它会向数据采集端发送请求响应消息,其中,所述请求响应消息包含数据存储端的剩余存储空间大小信息,数据采集端根据接收到的所有请求响应消息,选择剩余存储空间最大的数据存储端进行数据发送。
进一步的,数据采集端选择剩余存储空间最大的数据存储端进行数据发送,其具体步骤如下:
a、判断发送请求响应消息的数据存储端个数,若为0,则等待一段时间后继续发送数据存储请求消息;若为1,则直接将数据发送给此数据存储端;若大于1,则执行步骤b;
b、根据接收到的多个请求响应消息,读取每个请求响应消息中的剩余存储空间大小信息,选择剩余存储空间最大的数据存储端进行数据发送。
进一步的,当服务器端非忙碌状态时:云服务器端接收来自数据采集端的数据;或者,
根据数据信息表一和数据信息表二,从数据信息表二中的暂存数据地址索引获取数据,过程如下:
(1)、云服务器端根据数据信息表一获取暂存数据的编号以及数据存储端地址,选取需要接收的编号,根据数据存储端的地址向编号对应的数据存储端发送包含数据编号的请求消息;
(2)、数据存储端接收并读取请求消息,获取其中的数据编号,并根据此数据编号检索数据信息表二,得到存储此数据的本地地址索引,根据此数据的本地地址索引取出该数据,并将该数据发送给云服务器端。
进一步的,数据存储端将向云服务器端发送完毕后的暂存数据删除。
本发明的有益效果是:在云服务器端忙碌时,数据采集端将数据暂时存储在数据存储端,解决了数据采集端不能存储大量数据的问题,同时也减小了云服务器端在忙碌时的存储和计算压力。
附图说明
图1为实施例结构框图;
图2为实施例数据采集端与数据存储端之间的数据交互框图;
图3为实施例数据存储端与云服务器端之间的数据交互框图。
具体实施方式
下面将结合本发明实施例的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,实施例包括数据采集端、数据存储端和云服务器端;三者通过网络相互连接,为了便于数据传输,以及后续的存储请求消息传递,可以让数据采集端和数据存储端在同一个局域网中。其中,数据采集端用于数据采集,并将采集到的数据发送给数据存储端或云服务器端;数据存储端用于接收并存储来自数据采集端的数据以及将存储数据发送给云服务器端;云服务器端用于接收并处理来自数据采集端或数据存储端的数据,并将处理结果发送给数据采集端。
数据采集端能够根据云服务器端的状态选择将数据发送到不同地方:当云服务器端为非忙碌状态时,选择将采集到的数据发送给云服务器端进行处理;当云服务器端为忙碌状态时,选择将采集到的数据先暂存在数据存储端,待云服务器为非忙碌状态时,再通过数据存储端发送给云服务器端。以下分别对这两种状态进行描述:
(一)、云服务器端为忙碌状态
数据采集端选择将数据发送到家庭局域网中的数据存储端。数据采集端可以是冰箱、电视、空调等。数据存储端为家庭里存储容量较大的智能设备,如手机、PAD、PC、NAS等。信息交互过程如图2所示,过程如下:
1、数据采集端通过发送广播的方式向局域网中的多个数据存储端发送数据存储请求消息,其中,存储请求消息包含所需存储空间大小等信息。
2、数据存储端接收数据采集端发送来的存储请求消息,读取消息中数据大小信息,然后获取自身的存储状态信息。数据存储端根据接收到的数据大小信息和自身所剩余的存储空间大小信息,判断自身所剩存储空间大小是否大于消息中数据大小,若为是,则向数据采集端发送请求响应,若为否,则不做响应。
如果数据存储端选择响应存储请求消息,它会向数据采集端发送请求响应消息,其中,所述请求响应消息包含数据存储端的剩余存储空间大小信息,数据采集端根据接收到的所有请求响应消息,选择剩余存储空间最大的数据存储端进行数据发送。这样便于数据采集端选择合适的数据存储端进行发送。
3、数据采集端接收到数据存储端发来的请求响应消息后,为选择更合适的数据存储端,在发送数据之前,会执行判断步骤,具体过程如下:a、判断发送请求响应消息的数据存储端个数,若为0,则等待一段时间后继续发送数据存储请求消息;若为1,则直接将数据发送给此数据存储端;若大于1,则执行步骤b;b、根据接收到的多个请求响应消息,读取每个请求响应消息中的剩余存储空间大小信息,选择剩余存储空间最大的数据存储端进行数据发送。
在上述过程中,数据采集端会建立并维护一个数据信息表一,用于存储在数据存储端中数据的编号和数据存储端地址。数据采集端在发送数据之前,将数据进行编号,将数据发送给数据存储端后,将此数据编号和数据存储端的地址加入数据信息表一中,并将此数据信息表发送给云服务器端。关于数据存储端的地址,需要说明的是,系统中有多个数据存储端,这里所述数据存储端的地址指的是数据存储端在系统中的地址,云服务器通过此地址可以快速地找到准确数据存储端,只有找到了准确的数据存储端,发送对应的编号,云服务器端才可以收到数据。
同时,数据存储端还会建立一个数据信息表二,并将此数据发送给云服务器端。所述数据信息表二包含暂存数据的编号和暂存数据存储地址索引,它用于当云服务器发来数据获取请求时,能够快速查找到所请求的暂存数据。当数据存储端接收到数据采集端发来的暂存数据时,将此数据存储到本地磁盘中,并将数据编号和暂存数据的地址索引加入到数据信息表二中。
(二)云服务器端为非忙碌状态
系统将同时执行以下的信息交互,根据需要我们可以选择优先执行其中一个或者随机执行:
1、数据采集端将数据直接发送到云服务器端。其中,数据采集端和云服务器端之间可以通过互联网等方式进行消息和数据的发送与接收。
2、如图3所示,云服务器端根据数据信息表一和数据信息表二,从数据信息表二中的暂存数据地址索引获取数据,过程如下:
(1)、云服务器端根据数据信息表一获取暂存数据的编号以及数据存储端地址,选取需要接收的编号,根据数据存储端的地址向编号对应的数据存储端发送请求消息,其中,请求消息中包含有请求获取的数据编号;
(2)、数据存储端接收到云服务器端发来的请求消息后,读取出请求消息中的数据编号,并根据此数据编号检索数据信息表二,得到存储此数据的本地地址索引,然后根据此数据的本地地址索引取出该数据,并将该数据发送给云服务器端。
为了回收数据存储端的存储空间,数据存储端在将数据发送给云服务器端后,可以将此数据删除。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (7)
1.缓解云服务器存储和计算压力的协同存储系统,包括数据采集端、数据存储端和云服务器端;三者通过网络相互连接;
数据采集端用于数据采集,并将采集到的数据发送给数据存储端或云服务器端;数据存储端用于接收并存储来自数据采集端的数据以及将存储数据发送给云服务器端;云服务器端用于接收并处理来自数据采集端或数据存储端的数据,并将处理结果发送给数据采集端;
其特征在于,
数据采集端能够根据云服务器端的状态,选择将采集到的数据发送给云服务器端;或者选择将采集到的数据先暂存在数据存储端,待状态转变之后,再通过数据存储端发送给云服务器端;
当服务器端为忙碌状态时,数据采集端选择将采集到的数据暂存在数据存储端,同时创建并维护一个数据信息表一,在数据采集端将数据向数据存储端发送完毕后,将所述数据信息表一发送给云服务器端,其中,所述数据信息表一包含暂存数据的编号以及数据存储端的地址;
所述暂存的过程为:数据采集端向数据存储端发送存储请求消息,之后数据采集端根据数据存储端对存储请求消息的响应情况,选择向数据存储端发送或者不发送需要暂存的数据;如果数据存储端选择响应存储请求消息,它接收并保存来自数据采集端的数据,同时建立一个数据信息表二,并将所述数据信息表二发送给云服务器端,其中,所述数据信息表二包含暂存数据的编号和暂存数据的地址索引;
当服务器端非忙碌状态时:
云服务器端接收来自数据采集端的数据;或者,
根据数据信息表一和数据信息表二,从数据信息表二中的暂存数据地址索引获取数据,过程如下:
(1)、云服务器端根据数据信息表一获取暂存数据的编号以及数据存储端地址,选取需要接收的编号,根据数据存储端的地址向编号对应的数据存储端发送包含数据编号的请求消息;
(2)、数据存储端接收并读取请求消息,获取其中的数据编号,并根据此数据编号检索数据信息表二,得到存储此数据的本地地址索引,根据此数据的本地地址索引取出该数据,并将该数据发送给云服务器端。
2.根据权利要求1所述的缓解云服务器存储和计算压力的协同存储系统,其特征在于,数据采集端和数据存储端在同一个局域网中。
3.根据权利要求2所述的缓解云服务器存储和计算压力的协同存储系统,其特征在于,在数据采集端发送暂存数据之前,数据采集端会通过发送广播方式向局域网中的多个数据存储端发送存储请求消息。
4.根据权利要求3所述的缓解云服务器存储和计算压力的协同存储系统,其特征在于,所述存储请求消息包括暂存数据的大小信息,数据存储端根据其剩余存储空间大小状态和暂存数据的大小信息,选择响应或者不响应存储请求消息。
5.根据权利要求4所述的缓解云服务器存储和计算压力的协同存储系统,其特征在于,如果数据存储端选择响应存储请求消息,它会向数据采集端发送请求响应消息,其中,所述请求响应消息包含数据存储端的剩余存储空间大小信息,数据采集端根据接收到的所有请求响应消息,选择剩余存储空间最大的数据存储端进行数据发送。
6.根据权利要求5所述的缓解云服务器存储和计算压力的协同存储系统,其特征在于,数据采集端选择剩余存储空间最大的数据存储端进行数据发送,其具体步骤如下:
a、判断发送请求响应消息的数据存储端个数,若为0,则等待一段时间后继续发送数据存储请求消息;若为1,则直接将数据发送给此数据存储端;若大于1,则执行步骤b;
b、根据接收到的多个请求响应消息,读取每个请求响应消息中的剩余存储空间大小信息,选择剩余存储空间最大的数据存储端进行数据发送。
7.根据权利要求3所述的缓解云服务器存储和计算压力的协同存储系统,其特征在于,数据存储端将向云服务器端发送完毕后的暂存数据删除。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510333425.9A CN104994141B (zh) | 2015-06-16 | 2015-06-16 | 缓解云服务器存储和计算压力的协同存储系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510333425.9A CN104994141B (zh) | 2015-06-16 | 2015-06-16 | 缓解云服务器存储和计算压力的协同存储系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104994141A CN104994141A (zh) | 2015-10-21 |
CN104994141B true CN104994141B (zh) | 2018-05-25 |
Family
ID=54305892
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510333425.9A Active CN104994141B (zh) | 2015-06-16 | 2015-06-16 | 缓解云服务器存储和计算压力的协同存储系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104994141B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105868312B (zh) * | 2016-03-25 | 2019-09-10 | 四川长虹电器股份有限公司 | 一种基于浏览器的设备管理方法及装置 |
CN106485803A (zh) * | 2016-11-07 | 2017-03-08 | 上海外服宝信信息技术有限公司 | 一种离线打卡方法、终端、服务器及系统 |
CN106648471A (zh) * | 2016-12-29 | 2017-05-10 | 深圳市中博科创信息技术有限公司 | 云平台数据存储方法及装置 |
CN110572445B (zh) * | 2019-08-23 | 2022-05-17 | 深圳华工能源技术有限公司 | 配用电数据采集存储空间管理方法、终端及存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102255763A (zh) * | 2011-08-30 | 2011-11-23 | 迈普通信技术股份有限公司 | 网络通信异常告警方法和以太网交换设备 |
CN203435086U (zh) * | 2013-09-04 | 2014-02-12 | 厦门神州鹰软件科技有限公司 | 一种基于云存储控制的网络摄像机 |
CN103957228A (zh) * | 2012-11-02 | 2014-07-30 | 洛克威尔自动控制技术股份有限公司 | 基于云的驱动监视方案 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101845290B1 (ko) * | 2011-08-25 | 2018-04-04 | 엘지전자 주식회사 | 장치 관리 명령을 통한 펌웨어 갱신 방법 및 장치 |
CN102710789B (zh) * | 2012-06-20 | 2017-03-22 | 腾讯科技(深圳)有限公司 | 智能终端间数据的交互方法、系统及装置 |
-
2015
- 2015-06-16 CN CN201510333425.9A patent/CN104994141B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102255763A (zh) * | 2011-08-30 | 2011-11-23 | 迈普通信技术股份有限公司 | 网络通信异常告警方法和以太网交换设备 |
CN103957228A (zh) * | 2012-11-02 | 2014-07-30 | 洛克威尔自动控制技术股份有限公司 | 基于云的驱动监视方案 |
CN203435086U (zh) * | 2013-09-04 | 2014-02-12 | 厦门神州鹰软件科技有限公司 | 一种基于云存储控制的网络摄像机 |
Also Published As
Publication number | Publication date |
---|---|
CN104994141A (zh) | 2015-10-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104994141B (zh) | 缓解云服务器存储和计算压力的协同存储系统 | |
CN111353840B (zh) | 订单信息处理方法、装置及电子设备 | |
CN103955436B (zh) | 一种数据处理装置和终端 | |
CN104348830B (zh) | 资源交换方法、装置和系统 | |
CN103780641B (zh) | 接入云桌面的方法、家庭网关和系统 | |
CN108845877B (zh) | 管理内存的方法、装置和系统 | |
CN102158346A (zh) | 基于云计算的信息采集系统及方法 | |
CN102316133A (zh) | 一种负载均衡方法及装置 | |
CN109558446A (zh) | 作业请求方法、装置、电子设备及存储介质 | |
CN110545450B (zh) | 一种节点分配方法、系统及电子设备和存储介质 | |
CN104980472A (zh) | 网络访问量的控制方法及装置 | |
CN108235051A (zh) | 直播系统及直播数据的存储和获取方法 | |
CN110099292A (zh) | 一种数据中心节点确定方法、装置及电子设备 | |
CN105391776A (zh) | 长连接消息的通信方法及系统 | |
CN107332703B (zh) | 一种多应用日志的查看方法及装置 | |
CN107592360A (zh) | 一种基于混合云的物联网数据聚合方法及系统 | |
CN111859127A (zh) | 消费数据的订阅方法、装置及存储介质 | |
CN109831467B (zh) | 数据传输方法、设备及系统 | |
CN108829735A (zh) | 并行执行计划的同步方法、装置、服务器及存储介质 | |
CN105335362B (zh) | 实时数据的处理方法及系统、即时处理系统 | |
CN105917703A (zh) | 广告能够经由无线局域网访问的存储能力 | |
CN108737223B (zh) | 基于负载均衡的健康咨询方法、装置、平台和存储介质 | |
CN104753984A (zh) | 一种数据传送方法及装置 | |
CN107678293A (zh) | 一种智能家居用健康管理信息数据推送管理方法 | |
CN103442286B (zh) | 一种机顶盒文件共享方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |