CN111400264A - 数据管理方法及数据存储系统 - Google Patents
数据管理方法及数据存储系统 Download PDFInfo
- Publication number
- CN111400264A CN111400264A CN201911240736.5A CN201911240736A CN111400264A CN 111400264 A CN111400264 A CN 111400264A CN 201911240736 A CN201911240736 A CN 201911240736A CN 111400264 A CN111400264 A CN 111400264A
- Authority
- CN
- China
- Prior art keywords
- multimedia information
- compression
- storage
- server
- storage server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013500 data storage Methods 0.000 title claims abstract description 33
- 238000000034 method Methods 0.000 title claims abstract description 28
- 238000013523 data management Methods 0.000 title claims abstract description 20
- 238000007906 compression Methods 0.000 claims abstract description 271
- 230000006835 compression Effects 0.000 claims abstract description 270
- 238000007726 management method Methods 0.000 claims abstract description 76
- 238000012544 monitoring process Methods 0.000 claims description 10
- 230000005540 biological transmission Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000004044 response Effects 0.000 description 4
- 230000003247 decreasing effect Effects 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000002035 prolonged effect Effects 0.000 description 2
- 238000013144 data compression Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000013468 resource allocation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/174—Redundancy elimination performed by the file system
- G06F16/1744—Redundancy elimination performed by the file system using compression, e.g. sparse files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/41—Indexing; Data structures therefor; Storage structures
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本申请公开了数据管理方法及数据存储系统。数据存储系统,包括:资源池,用于存储多媒体信息;管理服务器,用于:在第一次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第一次压缩指示,以便第一存储服务器按照第一次压缩指示中压缩比例,对第一多媒体信息进行压缩操作而得到压缩结果,并将多媒体信息更新为所述压缩结果;在第二次确定第一多媒体信息满足预定条件时,发送对第一多媒体信息的第二次压缩指示;在第N次确定第一多媒体信息满足预定条件时,发送对第一多媒体信息的第N次压缩指示,直到当前第一多媒体信息的数据量、与第一多媒体信息上传到第一存储服务器时的数据量的比值低于比例阈值。
Description
技术领域
本申请涉及数据存储技术领域,特别涉及数据管理方法及数据存储系统。
背景技术
在一些场景中,数据存储系统可以存储大量的多媒体信息(例如图片)。由于云存储系统资源有限,多媒体信息的存储时长到达预定的存储时长后会被删除。在多媒体信息被删除后,用户无法从数据存储系统获取该多媒体信息。因此,在数据存储系统资源未增加的情况下,多媒体信息的存储时长有待提高。
发明内容
本申请提出了一种数据存储系统,能够在数据存储系统的资源未增加的情况下,提高多媒体信息的存储时长。
根据本申请一个方面,提供一种数据存储系统,包括:
资源池,用于存储多媒体信息,所述资源池包括多个存储服务器;
管理服务器,用于:在第一次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第一次压缩指示,以便所述第一存储服务器在接收到第一次压缩指示后,按照第一次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将所述多媒体信息更新为所述压缩结果;
在第二次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第二次压缩指示,以便所述第一存储服务器在接收到第二次压缩指示后,按照第二次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将所述第一多媒体信息更新为所述压缩结果;
在第N次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第N次压缩指示,直到当前所述第一多媒体信息的数据量、与所述第一多媒体信息上传到所述第一存储服务器时的数据量的比值低于比例阈值,以便所述第一存储服务器在接收到第N次压缩指示后,按照第N次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将所述第一多媒体信息更新为所述压缩结果,其中N为大于2的正整数。
在一些实施例中,数据存储系统进一步包括网络服务器,用于在接收到终端设备发送的所述第一多媒体信息时,向所述管理服务器发送对所述第一多媒体信息的存储请求;
其中,所述管理服务器响应于所述存储请求,选定所述资源池中一个存储服务器,并将选定的存储服务器的访问地址发送到所述网络服务器;
所述网络服务器还用于,根据所述访问地址将所述第一多媒体信息上传到所述选定的存储服务器;
所述选定的存储服务器还用于在存储所述第一多媒体信息后,向所述管理服务器发送通知消息,所述通知消息包括:存储所述第一多媒体信息的开始时间点和所述第一多媒体信息的存储地址。
在一些实施例中,所述管理服务器根据下述方式确定第一多媒体信息满足预定条件:
监测所述资源池中的第一多媒体信息在所述资源池中的存储时长;
在所述存储时长每增加一个压缩间隔时长时,确定所述第一多媒体信息满足预定条件。
在一些实施例中,所述管理服务器根据下述方式确定第一多媒体信息满足预定条件:
监测所述资源池中第一存储服务器的占用空间;
在所述第一存储服务器的占用空间超过占用空间阈值时,确定所述第一多媒体信息满足预定条件。
在一些实施例中,所述管理服务器根据下述方式确定第一多媒体信息满足预定条件:
在所述存储时长达到非压缩时长之后,所述存储时长每增加一个压缩间隔时长,确定所述确定第一多媒体信息满足预定条件。
在一些实施例中,所述管理服务器进一步用于:每次在向所述第一存储服务器发送压缩指示之后,根据已发送压缩指示的次数,调节对与所述第一多媒体信息有关的压缩间隔时长的设定值。
在一些实施例中,所述管理服务器进一步用于:每次在向所述第一存储服务器发送所述压缩指示之后,根据已发送压缩指示的次数,增加下一次发送的压缩指示中压缩比例的设定值。
根据本申请一个方面,提供一种数据管理方法,包括:
监测资源池中的多媒体信息,其中,所述资源池包括多个存储服务器;
对于第一多媒体信息,在第一次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第一次压缩指示,以便所述第一存储服务器在接收到第一次压缩指示后,按照第一次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将所述第一多媒体信息更新为所述压缩结果;
在第二次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第二次压缩指示,以便所述第一存储服务器在接收到第二次压缩指示后,按照第二次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将所述第一多媒体信息更新为所述压缩结果;
在第N次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第N次压缩指示,直到当前所述第一多媒体信息的数据量、与所述第一多媒体信息上传到所述第一存储服务器时的数据量的比值低于比例阈值,以便所述第一存储服务器在接收到第N次压缩指示后,按照第N次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将所述第一多媒体信息更新为所述压缩结果,其中N为大于2的正整数。
在一些实施例中,数据管理方法进一步包括:
接收来自网络服务器的对第一多媒体信息的存储请求;
响应于所述存储请求,选定所述资源池中一个存储服务器,并将选定的存储服务器的访问地址发送到所述网络服务器,以便网络服务器根据所述访问地址将所述第一多媒体信息上传到所述选定的存储服务器;
接收所述选定的存储服务器在存储所述第一多媒体信息后发送的通知消息,所述通知消息包括:存储所述第一多媒体信息的开始时间点和所述第一多媒体信息的存储地址。
在一些实施例中,确定第一多媒体信息满足预定条件,包括:
监测所述资源池中的多媒体信息在所述资源池中的存储时长;
在所述存储时长每增加一个压缩间隔时长时,确定所述第一多媒体信息满足预定条件;。
在一些实施例中,确定第一多媒体信息满足预定条件,包括:
监测所述资源池中第一存储服务器的占用空间;
在所述第一存储服务器的占用空间超过占用空间阈值时,确定所述第一多媒体信息满足预定条件。
在一些实施例中,所述确定第一多媒体信息满足预定条件,包括:
在所述存储时长达到非压缩时长之后,所述存储时长每增加一个压缩间隔时长,确定所述确定第一多媒体信息满足预定条件。
在一些实施例中,数据管理方法进一步包括:每次在向所述第一存储服务器发送压缩指示之后,根据已发送压缩指示的次数,调节对与所述第一多媒体信息有关的压缩间隔时长的设定值。
在一些实施例中,数据管理方法进一步包括:每次在向所述第一存储服务器发送所述压缩指示之后,根据已发送压缩指示的次数,增加下一次发送的压缩指示中压缩比例的设定值。
综上,根据本申请的数据存储方案,通过多次判断多媒体信息是否满足预定条件,能够在每次满足预定条件时压缩一次多媒体信息,可以既降低多媒体信息的占用空间,又提高多媒体信息的存储时长。特别是,对多媒体信息的数据质量不敏感的场景中,数据存储方案可以极大满足对多媒体信息的长时间使用需求。
附图说明
图1示出了根据本申请一些实施例的应用场景的示意图;
图2示出了根据本申请一些实施例的数据管理方法300的流程图;
图3示出了根据本申请一些实施例的数据管理方法400的流程图。
具体实施方式
为使本申请的目的、技术方案及优点更加清楚明白,以下参照附图并举实施例,对本申请进一步详细说明。
图1示出了根据本申请一些实施例的应用场景。如图1所示,应用场景可以包括终端设备100和数据存储系统200。终端设备100可以将多媒体信息上传至数据存储系统200。数据存储系统200可以对多媒体信息进行管理。另外,终端设备100也可以从数据存储系统200下载多媒体信息。这里,多媒体信息例如可以是图片或者视频等等。
终端设备100例如可以是摄像机、移动终端、笔记本电脑、平板电脑或者掌上游戏机等设备。数据存储系统200也可以称为云存储系统。数据存储系统200例如可以包括一个或多个网络服务器(例如图1示出的210)、管理服务器220和资源池230。资源池230可以包括多个存储服务器。例如,图1示出的存储服务器231、232和233。这里,管理服务器220可以管理资源池230中存储服务器的元数据,以及管理存储服务器的任务分配。管理服务器220和资源池230组成的集合也可以称为存储集群。
另外说明的是,每个存储服务器也可以称为一个数据存储节点,例如可以是一个节点服务器或者虚拟服务器,本申请对此不做限制。在一些实施例中,每个存储服务器可以包括一个或多个磁盘。网络服务器220也可以称为数据存储系统200的网关。网络服务器220可以是一个WEB服务器,可以处理网络请求(例如http请求等等)。网络服务器220也可以是能够处理网络请求的其他设备。
网络服务器210可以从终端设备100等设备获取多媒体信息。另外,网络服务器210还可以向管理服务器220发送对多媒体信息的存储请求,即向管理服务器220申请对多媒体信息的存储空间。响应于存储请求,管理服务器220可以从资源池230中选定存储服务器。管理服务器220可以采用各种存储资源分配策略选定存储服务器,本申请对此不做限制。另外,管理服务器220可以将选定的存储服务器的访问地址(例如为IP地址)发送到网络服务器210。这样,网络服务器210可以根据访问地址,将多媒体信息上传到选定的存储服务器。例如,选定的存储服务器为231。存储服务器231在存储多媒体信息之后,可以向网络服务器210返回表示上传成功的响应消息。另外,存储服务器231还可以向管理服务器220发送通知消息。通知消息可以包括多媒体信息在存储服务器231中的存储地址。在一些实施例中,管理服务器220可以将通知消息的接收时间点作为存储服务器231存储多媒体信息的开始时间。在一些实施例中,通知消息还可以包括存储服务器231存储多媒体信息的开始时间。基于开始时间,管理服务器220可以累计多媒体信息在资源池230中的存储时长。
在一些实施例中,资源池230需要存储来自多个终端设备的多媒体信息。由于资源池230中存储空间有限,管理服务器220可以多媒体信息的存储时长到达设定时长时,删除多媒体信息。
在一些实施例中,管理服务器220可以在多媒体信息每次满足预定条件时,向存储多媒体信息的存储服务器发送一次压缩指示。
下面以第一多媒体信息为例,对多媒体信息的多次压缩过程进行说明。第一多媒体信息表示多个存储服务器中任一个多媒体信息。第一存储服务器表示资源池230中存储第一多媒体信息的存储服务器。压缩指示包括压缩比例。
在第一次确定第一多媒体信息满足预定条件时,管理服务器220可以向第一存储服务器发送对第一多媒体信息的第一次压缩指示。这样,第一存储服务器在接收到第一次压缩指示后,按照第一次压缩指示中压缩比例,对第一多媒体信息进行压缩操作而得到压缩结果,并将多媒体信息更新为压缩结果。
在第二次确定第一多媒体信息满足预定条件时,管理服务器220可以向第一存储服务器发送对第一多媒体信息的第二次压缩指示。第一存储服务器在接收到第二次压缩指示后,按照第二次压缩指示中压缩比例,对第一多媒体信息进行压缩操作而得到压缩结果,并将多媒体信息更新为压缩结果。
在第N次确定第一多媒体信息满足预定条件时,管理服务器220可以向第一存储服务器发送对第一多媒体信息的第N次压缩指示,直到当前第一多媒体信息的数据量、与第一多媒体信息上传到第一存储服务器时的数据量的比值低于比例阈值。第一存储服务器在接收到第N次压缩指示后,按照第N次压缩指示中压缩比例,对第一多媒体信息进行压缩操作而得到压缩结果,并将多媒体信息更新为压缩结果。其中N为大于2的正整数。
综上,根据本申请的数据存储系统200通过多次判断多媒体信息是否满足预定条件,能够在每次满足预定条件时压缩一次多媒体信息,可以既降低多媒体信息的占用空间,又提高多媒体信息的存储时长。特别是,对多媒体信息的数据质量不敏感的场景中,数据存储系统200可以极大满足对多媒体信息的长时间使用需求。
在一些实施例中,在资源池220的存储空间未增加的情况下,为了提高多媒体信息的存储时长,管理服务器220可以监测资源池230中的多媒体信息在资源池230中的存储时长。对于第一多媒体信息,管理服务器220可以在第一多媒体信息的存储时长每增加一个压缩间隔时长时,确定第一多媒体信息满足预定条件。换言之,管理服务器220可以在第一多媒体信息的存储时长每增加一个压缩间隔时长时,向第一存储服务器发送一次对第一多媒体信息的压缩指示。
在一些实施例中,在每次发送压缩指示之后,管理服务器220可以根据已发送的压缩指示的次数调节下一次发送的压缩指示中压缩比例。这里,取决于需求,调节压缩比例可以是增加或降低比例。
在一些实施例中,第一存储服务器每次在接收到压缩指示后,按照压缩指示中压缩比例,对第一多媒体信息进行压缩操作而得到压缩结果,并将多媒体信息更新为所述压缩结果。换言之,对于任一次压缩操作而言,第一存储服务器可以将本次压缩操作的压缩结果存储为最新的多媒体信息,而将本次压缩操作之前的多媒体信息删除。另外说明的是,第一存储服务器可以根据多媒体信息的类型,按照与类型对应的压缩算法进行数据压缩。例如,多媒体信息为图片。第一存储服务器可以利用图片压缩算法对多媒体信息进行压缩。在多媒体信息为视频时,第一存储服务器可以按照视频压缩算法压缩多媒体信息。压缩比例例如为5%,通过压缩操作,第一存储服务器可以将图片的数据量压缩为压缩前的95%。
在一些实施例中,管理服务器220可以监测资源池中第一存储服务器的占用空间。在第一存储服务器的占用空间超过占用空间阈值时,管理服务器220确定第一多媒体信息满足预定条件。换言之,每次确定第一存储服务器的占用空间超过占用空间阈值时,管理服务器220可以向第一存储服务器发送一次对第一多媒体信息的压缩指示。占用空间阈值例如为第一存储服务器的存储上限的80%,但不限于此。
综上,根据本申请的管理服务器可以根据存储服务器的占用空间的增长而自动触发对多媒体信息的压缩,从而能够既节省存储服务器的存储空间,又增加多媒体信息的存储时长。
下面对上文中第一多媒体信息存储到资源池230中第一存储服务器的过程进行说明。
在一些实施例中,网络服务器210在接收到终端设备100发送的第一多媒体信息时,向管理服务器220发送对第一多媒体信息的存储请求。管理服务器220响应于存储请求,选定资源池230中一个存储服务器(例如为231),并将选定的存储服务器的访问地址发送到网络服务器210。这里,选定的存储服务器为上文中第一存储服务器。网络服务器210根据访问地址将第一多媒体信息上传到选定的存储服务器。
选定的存储服务器在存储第一多媒体信息后,向管理服务器220发送通知消息。通知消息可以包括存储第一多媒体信息的开始时间点和第一多媒体信息的存储地址。这样,管理服务器220可以监测第一多媒体信息的存储时长,并向选定的存储服务器发送对第一多媒体信息的压缩指示。
在一些实施例中,对于第一多媒体信息而言,存储时长在每增加一个压缩间隔时长时,管理服务器220可以向第一存储服务器发送一次压缩指示,直到当前第一多媒体信息的数据量、与第一多媒体信息上传到第一存储服务器时的数据量(即第一多媒体信息在开始时间点的数据量)的比值低于比例阈值。这里,比例阈值例如为40%。在确定所述比值低于比例阈值时,管理服务器220可以指示第一存储服务器删除第一多媒体信息。低于比例阈值的多媒体信息可以被认为是使用价值较低的信息。以图片为例,在图片对应的比值低于比例阈值时,图片的清晰度较低,使用价值较低。这样,管理服务器220通过自动删除数据量低的多媒体信息,能够有效节省存储服务器的存储空间。
在一些实施例中,管理服务器220可以设定多媒体信息的非压缩时长。换言之,在非压缩时长内,多媒体信息不会被压缩。以第一多媒体信息为例,管理服务器220在非压缩间隔时长内不会发送压缩指示。在存储时长达到非压缩时长之后,存储时长每增加一个压缩间隔时长,管理服务器220可以确定第一多媒体信息满足预定条件。每次满足预定条件时,管理服务器220发送一次压缩指示,直到当前第一多媒体信息的数据量、与第一多媒体信息上传到第一存储服务器时的数据量的比值低于比例阈值。例如图3示出了发送压缩指示的流程图,非压缩时长为7天,压缩间隔时长为2天。管理服务器220可以在第9天过后第一次发送压缩指示,在第11天过后第二次发送压缩指示。后续发送的压缩指示的时间点依次类推。
在一些实施例中,对于第一多媒体信息而言,管理服务器220发送压缩指示的压缩间隔时长是固定的。即,管理服务器220按照固定的时间间隔发送压缩指示。
在一些实施例中,管理服务器220还可以调整压缩间隔时长。例如,每次在向第一存储服务器发送压缩指示之后,管理服务器220可以根据已发送的压缩指示的次数,调节对与第一多媒体信息有关的压缩间隔时长的设定值。例如,管理服务器220可以随着已发送次数的增加,降低压缩间隔时长的设定值。例如,非压缩时长为14天,初始的压缩间隔时长为7天。在第一次发送压缩指示之后,管理服务器220可以将压缩间隔时长调节为6天。在第二次发送压缩指示之后,管理服务器220可以将压缩间隔时长调节为5天。以第一多媒体信息为例,管理服务器220可以在第21天之后第一次发送压缩指示,在第27天之后第二次发送压缩指示,在第32天之后第三次发送压缩之后。这样,通过自动调整压缩间隔时长,管理服务器220可以灵活地调整对多媒体信息的压缩间隔时长。
在一些实施例中,管理服务器220可以按照固定的压缩比例发送压缩指示。在一些实施例中,管理服务器220可以调整压缩比例。例如,每次在向第一存储服务器发送压缩指示之后,管理服务器220根据已发送的所述压缩指示的次数,调节对与第一多媒体信息有关的所述压缩比例的设定值。例如,随着已发送压缩指示的次数的增加,管理服务器220可以增加压缩比例。例如,对于第一多媒体信息,在第一次发送对第一多媒体信息的压缩指示之前,压缩比例初始值为1/20。在第一次发送压缩指示之后,管理服务器220可以将压缩指示调节1/19。在第二次发送压缩指示之后,管理服务器220可以将压缩指示调节为1/18。这样,通过自动调整压缩比例,管理服务器220可以灵活地调整对多媒体信息的压缩比例。
图2示出了根据本申请一些实施例的数据管理方法300的流程图。方法300例如可以由管理服务器220执行。
在步骤S301中,监测资源池230中的多媒体信息(例如第一多媒体信息)。
在步骤S302中,在第一次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第一次压缩指示,以便第一存储服务器在接收到第一次压缩指示后,按照第一次压缩指示中压缩比例,对第一多媒体信息进行压缩操作而得到压缩结果,并将第一多媒体信息更新为压缩结果。
在步骤S303中,在第二次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第二次压缩指示,以便所述第一存储服务器在接收到第二次压缩指示后,按照第二次压缩指示中压缩比例,对第一多媒体信息进行压缩操作而得到压缩结果,并将第一多媒体信息更新为压缩结果。
在步骤S304中,在第N次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第N次压缩指示,直到当前第一多媒体信息的数据量、与第一多媒体信息上传到第一存储服务器时的数据量的比值低于比例阈值,以便第一存储服务器在接收到第N次压缩指示后,按照第N次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将第一多媒体信息更新为所述压缩结果,其中N为大于2的正整数。
综上,根据本申请的数据管理方法300,通过多次判断多媒体信息是否满足预定条件,能够在每次满足预定条件时压缩一次多媒体信息,可以既降低多媒体信息的占用空间,又提高多媒体信息的存储时长。特别是,对多媒体信息的数据质量不敏感的场景中,数据管理方法300可以极大满足对多媒体信息的长时间使用需求。
图3示出了根据本申请一些实施例的数据管理方法400的流程图。方法400例如可以由管理服务器220执行。在步骤S401中,接收来自网络服务器的对第一多媒体信息的存储请求。
在步骤S402中,响应于存储请求,选定所述资源池中一个存储服务器,并将选定的存储服务器的访问地址发送到网络服务器,以便网络服务器根据访问地址将所述第一多媒体信息上传到所述选定的存储服务器。
在步骤S403中,接收选定的存储服务器在存储第一多媒体信息后发送的通知消息。通知消息包括:存储所述第一多媒体信息的开始时间点和所述第一多媒体信息的存储地址。
在步骤S404中,监测资源池230中的多媒体信息(例如第一多媒体信息)。在步骤S405中,在第一次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第一次压缩指示,以便第一存储服务器在接收到第一次压缩指示后,按照第一次压缩指示中压缩比例,对第一多媒体信息进行压缩操作而得到压缩结果,并将第一多媒体信息更新为压缩结果。
在步骤S406中,在第二次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第二次压缩指示,以便所述第一存储服务器在接收到第二次压缩指示后,按照第二次压缩指示中压缩比例,对第一多媒体信息进行压缩操作而得到压缩结果,并将第一多媒体信息更新为压缩结果。
在步骤S407中,在第N次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第N次压缩指示,直到当前第一多媒体信息的数据量、与第一多媒体信息上传到第一存储服务器时的数据量的比值低于比例阈值,以便第一存储服务器在接收到第N次压缩指示后,按照第N次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将第一多媒体信息更新为所述压缩结果,其中N为大于2的正整数。
在一些实施例中,在步骤S405、S406和S407每次在向第一存储服务器发送压缩指示之后,方法400可以执行步骤S408,根据已发送的所述压缩指示的次数,调节对与第一多媒体信息有关的压缩间隔时长的设定值。
在步骤S405、S406和S407每次在向所述第一存储服务器发送所述压缩指示之后,方法400还可以执行步骤S409,根据已发送的压缩指示的次数,调节下一次发送的压缩指示中压缩比例的设定值。例如,增加或减小下一次发送的压缩指示中压缩比例的设定值。
在一些实施例中,步骤S405、S406和S407每次确定第一存储服务器的占用空间达到占用空间阈值时确定第一多媒体信息满足预定条件。这样,根据本申请的数据管理方法400可以根据存储服务器的占用空间的增长而自动触发对多媒体信息的压缩,从而能够既节省存储服务器的存储空间,又增加多媒体信息的存储时长。
在一些实施例中,在步骤S407中比值低于比例阈值时,管理服务器220可以指示第一存储服务器删除第一多媒体信息。这样,管理服务器220通过自动删除数据量低的多媒体信息,能够有效节省存储服务器的存储空间。方法400更具体的实施方式与图1中管理服务器220的实施方式一致,这里不再赘述。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。
Claims (14)
1.一种数据存储系统,其特征在于,包括:
资源池,用于存储多媒体信息,所述资源池包括多个存储服务器;
管理服务器,用于:在第一次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第一次压缩指示,以便所述第一存储服务器在接收到第一次压缩指示后,按照第一次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将所述第一多媒体信息更新为所述压缩结果;
在第二次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第二次压缩指示,以便所述第一存储服务器在接收到第二次压缩指示后,按照第二次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将所述第一多媒体信息更新为所述压缩结果;
在第N次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第N次压缩指示,直到当前所述第一多媒体信息的数据量、与所述第一多媒体信息上传到所述第一存储服务器时的数据量的比值低于比例阈值,以便所述第一存储服务器在接收到第N次压缩指示后,按照第N次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将所述第一多媒体信息更新为所述压缩结果,其中N为大于2的正整数。
2.如权利要求1所述的数据存储系统,其特征在于,进一步包括网络服务器,用于在接收到终端设备发送的所述第一多媒体信息时,向所述管理服务器发送对所述第一多媒体信息的存储请求;
其中,所述管理服务器响应于所述存储请求,选定所述资源池中一个存储服务器,并将选定的存储服务器的访问地址发送到所述网络服务器;
所述网络服务器还用于,根据所述访问地址将所述第一多媒体信息上传到所述选定的存储服务器;
所述选定的存储服务器还用于在存储所述第一多媒体信息后,向所述管理服务器发送通知消息,所述通知消息包括:存储所述第一多媒体信息的开始时间点和所述第一多媒体信息的存储地址。
3.如权利要求1所述的数据存储系统,其特征在于,所述管理服务器根据下述方式确定第一多媒体信息满足预定条件:
监测所述资源池中的第一多媒体信息在所述资源池中的存储时长;
在所述存储时长每增加一个压缩间隔时长时,确定所述第一多媒体信息满足预定条件。
4.如权利要求1所述的数据存储系统,其特征在于,所述管理服务器根据下述方式确定第一多媒体信息满足预定条件:
监测所述资源池中第一存储服务器的占用空间;
在所述第一存储服务器的占用空间超过占用空间阈值时,确定所述第一多媒体信息满足预定条件。
5.如权利要求3所述的数据存储系统,其特征在于,所述管理服务器根据下述方式确定第一多媒体信息满足预定条件:
在所述存储时长达到非压缩时长之后,所述存储时长每增加一个压缩间隔时长,确定所述确定第一多媒体信息满足预定条件。
6.如权利要求5所述的数据存储系统,其特征在于,所述管理服务器进一步用于:每次在向所述第一存储服务器发送压缩指示之后,根据已发送压缩指示的次数,调节对与所述第一多媒体信息有关的压缩间隔时长的设定值。
7.如权利要求5所述的数据存储系统,其特征在于,所述管理服务器进一步用于:每次在向所述第一存储服务器发送所述压缩指示之后,根据已发送压缩指示的次数,增加下一次发送的压缩指示中压缩比例的设定值。
8.一种数据管理方法,其特征在于,包括:
监测资源池中的多媒体信息,其中,所述资源池包括多个存储服务器;
对于第一多媒体信息,在第一次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第一次压缩指示,以便所述第一存储服务器在接收到第一次压缩指示后,按照第一次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将所述第一多媒体信息更新为所述压缩结果;
在第二次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第二次压缩指示,以便所述第一存储服务器在接收到第二次压缩指示后,按照第二次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将所述第一多媒体信息更新为所述压缩结果;
在第N次确定第一多媒体信息满足预定条件时,向第一存储服务器发送对第一多媒体信息的第N次压缩指示,直到当前所述第一多媒体信息的数据量、与所述第一多媒体信息上传到所述第一存储服务器时的数据量的比值低于比例阈值,以便所述第一存储服务器在接收到第N次压缩指示后,按照第N次压缩指示中压缩比例,对所述第一多媒体信息进行压缩操作而得到压缩结果,并将所述第一多媒体信息更新为所述压缩结果,其中N为大于2的正整数。
9.如权利要求8所述的数据管理方法,其特征在于,进一步包括:
接收来自网络服务器的对第一多媒体信息的存储请求;
响应于所述存储请求,选定所述资源池中一个存储服务器,并将选定的存储服务器的访问地址发送到所述网络服务器,以便网络服务器根据所述访问地址将所述第一多媒体信息上传到所述选定的存储服务器;
接收所述选定的存储服务器在存储所述第一多媒体信息后发送的通知消息,所述通知消息包括:存储所述第一多媒体信息的开始时间点和所述第一多媒体信息的存储地址。
10.如权利要求8所述的数据管理方法,其特征在于,确定第一多媒体信息满足预定条件,包括:
监测所述资源池中的第一多媒体信息在所述资源池中的存储时长;
在所述存储时长每增加一个压缩间隔时长时,确定所述第一多媒体信息满足预定条件。
11.如权利要求8所述的数据管理方法,其特征在于,确定第一多媒体信息满足预定条件,包括:
监测所述资源池中第一存储服务器的占用空间;
在所述第一存储服务器的占用空间超过占用空间阈值时,确定所述第一多媒体信息满足预定条件。
12.如权利要求10所述的数据存储系统,其特征在于,所述确定第一多媒体信息满足预定条件,包括:
在所述存储时长达到非压缩时长之后,所述存储时长每增加一个压缩间隔时长,确定所述确定第一多媒体信息满足预定条件。
13.如权利要求12所述的数据管理方法,其特征在于,进一步包括:每次在向所述第一存储服务器发送压缩指示之后,根据已发送压缩指示的次数,调节对与所述第一多媒体信息有关的压缩间隔时长的设定值。
14.如权利要求12所述的数据管理方法,其特征在于,进一步包括:每次在向所述第一存储服务器发送所述压缩指示之后,根据已发送压缩指示的次数,增加下一次发送的压缩指示中压缩比例的设定值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911240736.5A CN111400264A (zh) | 2019-12-06 | 2019-12-06 | 数据管理方法及数据存储系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911240736.5A CN111400264A (zh) | 2019-12-06 | 2019-12-06 | 数据管理方法及数据存储系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111400264A true CN111400264A (zh) | 2020-07-10 |
Family
ID=71432487
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911240736.5A Pending CN111400264A (zh) | 2019-12-06 | 2019-12-06 | 数据管理方法及数据存储系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111400264A (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105509017A (zh) * | 2015-12-31 | 2016-04-20 | 杭州光锥科技有限公司 | 路灯云存储系统及路灯系统 |
CN106066770A (zh) * | 2016-05-25 | 2016-11-02 | 北京小米移动软件有限公司 | 存储空间管理方法及装置 |
CN106357811A (zh) * | 2016-10-25 | 2017-01-25 | 广东欧珀移动通信有限公司 | 一种备份数据的删除方法、装置及系统 |
CN106933702A (zh) * | 2015-12-30 | 2017-07-07 | 深圳创锐思科技有限公司 | 一种智能终端存储空间管理的方法、装置及智能终端 |
CN107734336A (zh) * | 2016-08-10 | 2018-02-23 | 杭州海康威视数字技术股份有限公司 | 一种视频存储空间的压缩方法及装置 |
CN107948605A (zh) * | 2017-12-11 | 2018-04-20 | 日立楼宇技术(广州)有限公司 | 车载监控视频数据存储的方法、装置、设备及存储介质 |
CN110351312A (zh) * | 2018-04-02 | 2019-10-18 | 腾讯科技(深圳)有限公司 | 图片分享方法、装置、计算机设备和存储介质 |
-
2019
- 2019-12-06 CN CN201911240736.5A patent/CN111400264A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106933702A (zh) * | 2015-12-30 | 2017-07-07 | 深圳创锐思科技有限公司 | 一种智能终端存储空间管理的方法、装置及智能终端 |
CN105509017A (zh) * | 2015-12-31 | 2016-04-20 | 杭州光锥科技有限公司 | 路灯云存储系统及路灯系统 |
CN106066770A (zh) * | 2016-05-25 | 2016-11-02 | 北京小米移动软件有限公司 | 存储空间管理方法及装置 |
CN107734336A (zh) * | 2016-08-10 | 2018-02-23 | 杭州海康威视数字技术股份有限公司 | 一种视频存储空间的压缩方法及装置 |
CN106357811A (zh) * | 2016-10-25 | 2017-01-25 | 广东欧珀移动通信有限公司 | 一种备份数据的删除方法、装置及系统 |
CN107948605A (zh) * | 2017-12-11 | 2018-04-20 | 日立楼宇技术(广州)有限公司 | 车载监控视频数据存储的方法、装置、设备及存储介质 |
CN110351312A (zh) * | 2018-04-02 | 2019-10-18 | 腾讯科技(深圳)有限公司 | 图片分享方法、装置、计算机设备和存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10949112B2 (en) | Data push method and device, storage medium, and electronic device | |
CN111628847B (zh) | 数据传输方法及装置 | |
CN111200657B (zh) | 一种管理资源状态信息的方法和资源下载系统 | |
US9984013B2 (en) | Method, controller, and system for service flow control in object-based storage system | |
US10484464B2 (en) | Connection control device, connection control system, and non-transitory computer readable medium | |
US9432672B2 (en) | Image compression method and system with image compression time information | |
JP5430744B2 (ja) | 通信システムのリアルタイムの性能および負荷統計のためのシステムならびに方法 | |
US7240104B2 (en) | Method and apparatus for managing resources stored on a communication device | |
CN101136911B (zh) | 一种采用p2p技术下载文件的方法和p2p下载系统 | |
KR102286957B1 (ko) | 네트워크의 디바이스들에 의해 수행되는 지속적인 트래픽 세션들 사이에서 네트워크의 사용 가능한 대역폭을 분배하기 위한 방법 및 그 장치 | |
US20140165119A1 (en) | Offline download method, multimedia file download method and system thereof | |
US11102289B2 (en) | Method for managing resource state information and system for downloading resource | |
CN111597213B (zh) | 一种缓存方法、软件服务器及存储介质 | |
CN110856007B (zh) | 内容分发网络及其存储优化方法、电子设备及存储介质 | |
CN113630616A (zh) | 直播边缘节点资源管控方法及系统 | |
CN110324681B (zh) | 多媒体数据的切片方法、装置、存储介质及传输系统 | |
CN101159676B (zh) | 一种数据传输的方法及系统 | |
CN111064700B (zh) | 云游戏的下载方法、装置及系统 | |
CN110460486B (zh) | 服务节点的监控方法及系统 | |
US10063614B2 (en) | Method for obtaining a storage identifier in a hierarchical level of storage in a network for storing data | |
CN111400264A (zh) | 数据管理方法及数据存储系统 | |
CN110784534A (zh) | 数据服务方法、装置、系统及电子设备 | |
CN107846429B (zh) | 一种文件备份方法、装置和系统 | |
CN114338654A (zh) | 文件传输方法、存储服务分配方法、装置、设备及介质 | |
CN110784775A (zh) | 一种视频分片缓存方法、装置及视频点播系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |