CN107911713B - 一种磁盘的确定方法及装置 - Google Patents

一种磁盘的确定方法及装置 Download PDF

Info

Publication number
CN107911713B
CN107911713B CN201711089694.0A CN201711089694A CN107911713B CN 107911713 B CN107911713 B CN 107911713B CN 201711089694 A CN201711089694 A CN 201711089694A CN 107911713 B CN107911713 B CN 107911713B
Authority
CN
China
Prior art keywords
disk
file
service
request
service disk
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711089694.0A
Other languages
English (en)
Other versions
CN107911713A (zh
Inventor
丁浩
吴岩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN201711089694.0A priority Critical patent/CN107911713B/zh
Publication of CN107911713A publication Critical patent/CN107911713A/zh
Application granted granted Critical
Publication of CN107911713B publication Critical patent/CN107911713B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/0643—Management of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays
    • H04N21/2326—Scheduling disk or memory reading operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种磁盘的确定方法及装置，本发明中若历史服务磁盘中保存有获取文件的请求对应的文件，将历史服务磁盘作为响应请求的磁盘，此时就不需要使用服务磁盘进行回源操作，进而不会占用网络资源，减少网络堵塞。

Description

一种磁盘的确定方法及装置
技术领域
本发明涉及通信领域，更具体的说，涉及一种磁盘的确定方法及装置。
背景技术
内容分发网络CDN服务器中包括多块磁盘，这些磁盘中保存有大量的视频文件。其中，CDN服务器是为视频业务提供服务的视频CDN服务器。
当这些磁盘中的一个或多个磁盘发生损坏时，此时需要将损坏的磁盘更换为新的磁盘，而新的磁盘是格式化之后就进行使用。因此，新的磁盘上并没有存有视频文件，当CDN服务器根据一致性哈希算法将用户请求定位到新的磁盘上时，由于新的磁盘上并没有存储有视频文件，此时CDN服务器会指定该新的磁盘进行回源操作，以得到与用户请求相对应的视频文件。其中，回源是指从另一台服务器中下载与用户请求相对应的视频文件。
由于一块磁盘中存储的视频文件的数量较多，一般多达几十亿个视频文件，当磁盘损坏时，针对损坏的磁盘的每个用户请求，均需要进行回源操作，进而造成回源量较大，由于回源会占用较多的网络资源，进而会造成网络堵塞问题。
发明内容
有鉴于此，本发明提供一种磁盘的确定方法及装置，以解决当磁盘损坏时，针对损坏的磁盘的每个用户请求，均需要进行回源操作，会造成回源量较大，进而占用较多的网络资源造成网络堵塞的问题。
为解决上述技术问题，本发明采用了如下技术方案：
一种磁盘的确定方法，其特征在于，包括:
接收获取文件的请求；
判断为所述请求提供服务的服务磁盘中是否保存有所述请求对应的文件；其中，所述服务磁盘为损坏磁盘进行修复和挂载后的磁盘；
若所述服务磁盘中未保存有所述文件，确定上一次处理所述请求的历史服务磁盘；
若所述历史服务磁盘中保存有所述文件，将所述历史服务磁盘作为响应所述请求的磁盘。
优选地，若所述服务磁盘中保存有所述文件时，还包括：
将所述服务磁盘作为响应所述请求的磁盘。
优选地，将所述历史服务磁盘作为响应所述请求的磁盘之后，还包括：
将所述历史服务磁盘中保存的所述文件保存到所述服务磁盘中。
优选地，若所述历史服务磁盘中未保存有所述文件时，还包括：
从包含有所述文件的服务器中获取所述文件；
将所述文件保存到所述服务磁盘中；
将所述服务磁盘作为响应所述请求的磁盘。
优选地，确定上一次处理所述请求的历史服务磁盘之前，还包括：
实时读取所述服务磁盘的新文件的增加速度和所述服务磁盘的剩余存储空间百分比；其中，所述新文件为新保存到所述服务磁盘中的文件；
当所述新文件的增加速度不小于第一预设数值，和/或所述剩余存储空间百分比不小于第二预设数值，执行确定所述上一次处理所述请求的历史服务磁盘的步骤。
优选地，
所述服务磁盘为内容分发网络CDN服务器中包括所述服务磁盘在内的所有能够正常使用的磁盘进行一致性哈希算法确定的磁盘；
所述历史服务磁盘为所述CDN服务器中包括所述服务磁盘之外的所有能够正常使用的磁盘进行一致性哈希算法确定的磁盘。
一种磁盘的确定装置，包括:
请求接收模块，用于接收获取文件的请求；
判断模块，用于判断为所述请求提供服务的服务磁盘中是否保存有所述请求对应的文件；其中，所述服务磁盘为损坏磁盘进行修复和挂载后的磁盘；
第一确定模块，用于若所述服务磁盘中未保存有所述文件，确定上一次处理所述请求的历史服务磁盘；
第二确定模块，用于若所述历史服务磁盘中保存有所述文件，将所述历史服务磁盘作为响应所述请求的磁盘。
优选地，还包括：
第三确定模块，用于若所述服务磁盘中保存有所述文件时，将所述服务磁盘作为响应所述请求的磁盘。
优选地，还包括：
第一保存模块，用于所述第二确定模块将所述历史服务磁盘作为响应所述请求的磁盘后，将所述历史服务磁盘中保存的所述文件保存到所述服务磁盘中。
优选地，还包括：
获取模块，用于若所述历史服务磁盘中未保存有所述文件时，从包含有所述文件的服务器中获取所述文件；
第二保存模块，用于将所述文件保存到所述服务磁盘中；
第三确定模块，用于将所述服务磁盘作为响应所述请求的磁盘。
优选地，还包括：
读取模块，用于实时读取所述服务磁盘的新文件的增加速度和所述服务磁盘的剩余存储空间百分比；其中，所述新文件为新保存到所述服务磁盘中的文件；
所述第一确定模块，还用于当所述新文件的增加速度不小于第一预设数值，和/或所述剩余存储空间百分比不小于第二预设数值，确定所述上一次处理所述请求的历史服务磁盘。
优选地，
所述服务磁盘为内容分发网络CDN服务器中包括所述服务磁盘在内的所有能够正常使用的磁盘进行一致性哈希算法确定的磁盘；
所述历史服务磁盘为所述CDN服务器中包括所述服务磁盘之外的所有能够正常使用的磁盘进行一致性哈希算法确定的磁盘。
相较于现有技术，本发明具有以下有益效果：
本发明提供了一种磁盘的确定方法及装置，本发明中若历史服务磁盘中保存有获取文件的请求对应的文件，将历史服务磁盘作为响应请求的磁盘，此时就不需要使用服务磁盘进行回源操作，进而不会占用网络资源，减少网络堵塞。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本发明提供的一种磁盘的确定方法的方法流程图；
图2为本发明提供的另一种磁盘的确定方法的方法流程图；
图3为本发明提供的一种磁盘的确定装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例提供了一种磁盘的确定方法，其中，该确定方法应用于CDN服务器。其中，CDN服务器为视频业务提供服务的视频CDN服务器。
参照图1，该确定方法可以包括:
S11、接收获取文件的请求；
其中，文件可以是视频文件，也可以是其他类型的文件，如请求一个文章等。当该文件为视频文件时，该请求为获取一个视频文件。
具体的，当用户在使用视频软件观看视频时，如果用户想要观看一个成龙演的电影，此时通过点击视频软件上的该电影的图标，此时CDN服务器会接收到该请求。该请求表征用户想要获取一个视频文件的具体视频内容。
S12、判断为所述请求提供服务的服务磁盘中是否保存有所述请求对应的文件；若为所述请求提供服务的服务磁盘中未保存有所述请求对应的文件，执行步骤S13，若为所述请求提供服务的服务磁盘中保存有所述请求对应的文件，执行步骤S15。
其中，所述服务磁盘为损坏磁盘进行修复和挂载后的磁盘。
具体的，当为请求提供服务的服务磁盘为损坏后进行修复和挂载后的磁盘时，查看服务磁盘中是否保存有所述请求对应的文件。需要说明的是，此时服务磁盘可能是一个无损坏的磁盘，也可能是一个损坏后进行修复且挂载后的磁盘。其中，挂载是指为磁盘分配一个盘符。损坏后进行修复及挂载是指当一个磁盘损坏后，当重新使用这块磁盘时，需要对这块磁盘进行修复，修复完成后，将该磁盘挂载到服务器中，这块磁盘就可以正常使用。其中，修复可以是格式化操作。本实施例中，服务磁盘为损坏后进行修复和挂载后的磁盘。
其中，所述服务磁盘为内容分发网络CDN服务器中包括所述服务磁盘在内的所有能够正常使用的磁盘进行一致性哈希算法确定的磁盘。则确定服务磁盘的过程可以包括：
确定请求对应的服务磁盘时，可以采用一致性哈希算法。其中，一致性哈希算法是一种文件定位方法，通过一致性哈希算法，可以得到所需的视频文件存储在哪个磁盘中。进而能够根据一致性哈希算法，找到为用户请求提供服务的服务磁盘。
具体的，假设需要将X个文件存储在Y个磁盘中，则首先可以使用消息摘要算法第五版MD5算法计算出每个磁盘的哈希值，并将每个磁盘的哈希值映射到一个圆上的一个位置中，然后采用MD5算法计算出每个文件的哈希值，将每个文件的哈希值映射到一个圆上的一个位置中，最后分析每个文件，从文件映射到圆上的位置开始顺时针查找，将文件保存到找到的第一个磁盘中。
上面介绍了一致性哈希算法，将用户请求获取的文件和CDN服务器中的磁盘进行一致性哈希计算，就能够确定出应该存储该文件的服务磁盘。
S13、确定上一次处理所述请求的历史服务磁盘；
若服务磁盘中未保存有视频文件，此时去确定上一次处理所述请求的历史服务磁盘。具体的，在服务磁盘进行修复和挂载的过程中，当接收到一个请求，并且通过一致性哈希算法确定该请求应该是服务磁盘进行服务，但是由于服务磁盘不能够正常工作，此时会去重新确定一个磁盘来为用户服务，即使用历史服务磁盘为用户服务。
具体的，所述历史服务磁盘为所述CDN服务器中包括所述服务磁盘之外的所有能够正常使用的磁盘进行一致性哈希算法确定的磁盘。
其中，确定历史服务磁盘的过程是：
以除去服务磁盘之外的所有磁盘为基础，采用一致性哈希算法计算该请求对应的历史服务磁盘，需要说明的是，服务器以前可能接收到该请求，也可能没有接收到该请求，所以需要确认下是否有对应该请求对应的历史服务磁盘。
S14、若所述历史服务磁盘中保存有所述文件，将所述历史服务磁盘作为响应所述请求的磁盘。
具体的，若确定了历史服务磁盘后，该历史服务磁盘中保存有该文件，此时将历史服务磁盘作为响应请求的磁盘。具体的，历史服务磁盘为用户提供视频文件的内容。
可选的，在本实施例的基础上，将所述历史服务磁盘作为响应所述请求的磁盘之后，还包括：
将历史服务磁盘中保存的文件保存到服务磁盘中。
具体的，将视频文件保存到服务磁盘中的预设文件夹下。其中，文件是指用户请求的该文件。
本步骤中，将视频文件保存到服务磁盘后，当再次接收到相同的请求时，就可以使用服务磁盘为用户提供视频文件，不再需要确定上一次处理该请求的历史服务磁盘，使确定响应请求的磁盘的过程更简单。
S15、将服务磁盘作为响应请求的磁盘。
具体的，服务磁盘为用户提供视频文件的内容。用户可以直接从服务磁盘上下载该视频文件。
需要说明的是，服务磁盘在被修复和挂载的时候，其他磁盘中可能接收到服务磁盘对应的请求，此时会将请求对应的视频文件保存在自身中，而在服务磁盘被使用一段时间后，由于接收到对应的请求，以及获取了请求对应的视频文件，所以服务磁盘中会保存有一部分的视频文件。
本实施例中，若历史服务磁盘中保存有获取文件的请求对应的文件，将历史服务磁盘作为响应请求的磁盘，此时就不需要使用服务磁盘进行回源操作，进而不会占用网络资源，减少网络堵塞。
并且，将该文件保存到服务磁盘中，进而再次接收到该请求时，可以直接使用服务磁盘为用户服务，简化服务流程。
为了本领域的技术人员能够更加清楚的明白本申请，现举例介绍。
以下具体实现中，假设服务器一共有X块磁盘，损坏一块磁盘后还剩(X-1)块磁盘。
当某服务器某损坏磁盘(记为磁盘n)损坏后进行修复和挂载之后，有新的请求到达这台视频CDN服务器时，服务器执行以下流程：
1.按照X块磁盘进行一致性哈希计算，找到请求对应的文件预分配的磁盘，若文件所在磁盘为n，则执行步骤2；
2.查看磁盘n中是否存储有此文件，若存储有此文件，则使用磁盘n为此请求服务，结束；若不存储有此文件，则执行步骤3；
3.按照(X-1)块磁盘进行哈希计算(计算中将磁盘n去除；这种计算方式即是认为在磁盘n尚未修复时，请求应该分配到哪个磁盘)；若计算结果为磁盘m，查看磁盘m是否存储有此文件；
4.若磁盘m存储有此文件，则使用磁盘m为此条请求服务，同时将磁盘m上的此文件按照拷贝至磁盘n，结束；若磁盘m不存有此文件，则仍然使用磁盘n为此条请求服务，并进行回源，结束。
可选的，在图1对应的实施例的基础上，若历史服务磁盘中未保存有文件时，还包括：
从包含有文件的服务器中获取文件，将文件保存到服务磁盘中，并将服务磁盘作为响应用户请求的磁盘。
具体的，若历史服务磁盘中未保存有文件时，说明安装有服务磁盘和历史服务磁盘的服务器中并没有存在该请求对应的文件，此时需要去其他的服务器中查找该文件。
其中，本实施例中的服务器为边缘节点，边缘节点需要逐级向上级节点请求此文件，直到找到存储该文件对应的服务器为止，此时，将该文件保存到服务磁盘中。
需要说明的是，从包含有文件的服务器中获取文件，将文件保存到服务磁盘中，即为回源操作。
本实施例中，当包含有历史服务磁盘的服务器没有保存有请求对应的文件时，需要向其他服务器请求获得该文件，进而才能够为用户提供文件。
可选的，在上述任一实施例的基础上，确定上一次处理所述请求的历史服务磁盘之前，还包括:
S23、实时读取所述服务磁盘的新文件的增加速度和所述服务磁盘的剩余存储空间百分比；当新文件的增加速度不小于第一预设数值，和/或者服务磁盘的剩余存储空间百分比不小于第二预设数值，说明该服务磁盘上面保存的视频文件的数量较少，此时可以执行步骤S24；当新文件的增加速度小于第一预设数值，和/或者服务磁盘的剩余存储空间百分比小于第二预设数值，说明该服务磁盘上面保存的视频文件的数量较多，若历史服务磁盘中未保存有文件时，此时可以执行步骤S27。
其中，所述新文件为新保存到所述服务磁盘中的文件。具体的，由于服务磁盘被修复和挂载完成后，会不断为不同的请求进行服务，由于服务磁盘中保存的文件较少，进而当用户请求的文件没保存在服务磁盘中时，就会从其他历史服务磁盘或者是服务器中获取用户请求的文件，并保存到服务磁盘中，这些文件即为新文件。由于从其他历史服务磁盘或者是服务器中获取用户请求的文件不断被保存到服务磁盘中，进而新文件的增加速度和剩余存储空间百分比就会不断变化。
S27、从包含有所述文件的服务器中获取所述文件，并将所述文件保存到所述服务磁盘中；
具体的，当服务磁盘的新文件增加速度小于第一预设数值，或者服务磁盘的剩余存储空间百分比小于第二预设数值，说明服务磁盘上面已经保存了一定数量的视频文件，此时当服务磁盘中没有保存有请求的文件时，可以使服务磁盘进行回源操作，从其他服务器中得到视频文件。此时，由于服务磁盘上面已经保存了一定数量的视频文件，所以服务磁盘对应的回源操作也不会特别多，不会占用特别多的网络资源。
需要说明的是，本实施例中的其他步骤，均在上述实施例中进行了说明，请参照上述实施例中的相应内容，在此不再赘述。
本实施例中，通过判断服务磁盘的新文件的增加速度是否小于第一预设数值，和/或者判断服务磁盘的剩余存储空间百分比是否小于第二预设数值，来执行不同的操作，能够尽量减少回源操作，同时更快捷的处理用户请求，进而不会占用网络资源，减少网络堵塞以及提高服务质量。
可选的，在上述磁盘的确定方法的实施例的基础上，本发明的另一实施例中提供了一种磁盘的确定装置，参照图3，包括:
请求接收模块101，用于接收获取文件的请求；
判断模块102，用于判断为所述请求提供服务的服务磁盘中是否保存有所述请求对应的文件；其中，所述服务磁盘为损坏磁盘进行修复和挂载后的磁盘；
第一确定模块103，用于若所述服务磁盘中未保存有所述文件，确定上一次处理所述请求的历史服务磁盘；
第二确定模块104，用于若所述历史服务磁盘中保存有所述文件，将所述历史服务磁盘作为响应所述请求的磁盘。
进一步，还包括：
第三确定模块，用于若所述服务磁盘中保存有所述文件时，将所述服务磁盘作为响应所述请求的磁盘。
进一步，还包括：
第一保存模块，用于所述第二确定模块将所述历史服务磁盘作为响应所述请求的磁盘后，将所述历史服务磁盘中保存的所述文件保存到所述服务磁盘中。
进一步，所述服务磁盘为内容分发网络CDN服务器中包括所述服务磁盘在内的所有能够正常使用的磁盘进行一致性哈希算法确定的磁盘；
所述历史服务磁盘为所述CDN服务器中包括所述服务磁盘之外的所有能够正常使用的磁盘进行一致性哈希算法确定的磁盘。
本实施例中，若历史服务磁盘中保存有获取文件的请求对应的文件，将历史服务磁盘作为响应请求的磁盘，此时就不需要使用服务磁盘进行回源操作，进而不会占用网络资源，减少网络堵塞。
并且，将该文件保存到服务磁盘中，进而再次接收到该请求时，可以直接使用服务磁盘为用户服务，简化服务流程。
需要说明的是，本实施例中的各个模块的工作过程，请参照上述实施例中的相应说明，在此不再赘述。
可选的，在上述磁盘的确定装置的实施例的基础上，还包括：
获取模块，用于若所述历史服务磁盘中未保存有所述文件时，从包含有所述文件的服务器中获取所述文件；
第二保存模块，用于将所述文件保存到所述服务磁盘中；
第三确定模块，用于将所述服务磁盘作为响应所述请求的磁盘。
本实施例中，当包含有历史服务磁盘的服务器没有保存有请求对应的文件时，需要向其他服务器请求获得该文件，进而才能够为用户提供文件。
需要说明的是，本实施例中的各个模块的工作过程，请参照上述实施例中的相应说明，在此不再赘述。
可选的，在上述任一磁盘的确定装置的实施例的基础上，还包括：
读取模块，用于实时读取所述服务磁盘的新文件的增加速度和所述服务磁盘的剩余存储空间百分比；其中，所述新文件为新保存到所述服务磁盘中的文件；
所述第一确定模块，还用于当所述新文件的增加速度不小于第一预设数值，和/或所述剩余存储空间百分比不小于第二预设数值，确定所述上一次处理所述请求的历史服务磁盘。
本实施例中，通过判断服务磁盘的新文件的增加速度是否小于第一预设数值，和/或者判断服务磁盘的剩余存储空间百分比是否小于第二预设数值，来执行不同的操作，能够尽量减少回源操作，同时更快捷的处理用户请求，进而不会占用网络资源，减少网络堵塞以及提高服务质量。
需要说明的是，本实施例中的各个模块的工作过程，请参照上述实施例中的相应说明，在此不再赘述。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种磁盘的确定方法，其特征在于，包括:
接收获取文件的请求；
判断为所述请求提供服务的服务磁盘中是否保存有所述请求对应的文件；其中，所述服务磁盘为损坏磁盘进行修复和挂载后的磁盘；
若所述服务磁盘中未保存有所述文件，实时读取所述服务磁盘的新文件的增加速度和所述服务磁盘的剩余存储空间百分比；其中，所述新文件为新保存到所述服务磁盘中的文件；
当所述新文件的增加速度不小于第一预设数值，和/或所述剩余存储空间百分比不小于第二预设数值，确定上一次处理所述请求的历史服务磁盘；
若所述历史服务磁盘中保存有所述文件，将所述历史服务磁盘作为响应所述请求的磁盘。
2.根据权利要求1所述的确定方法，其特征在于，若所述服务磁盘中保存有所述文件时，还包括：
将所述服务磁盘作为响应所述请求的磁盘。
3.根据权利要求1所述的确定方法，其特征在于，将所述历史服务磁盘作为响应所述请求的磁盘之后，还包括：
将所述历史服务磁盘中保存的所述文件保存到所述服务磁盘中。
4.根据权利要求1所述的确定方法，其特征在于，若所述历史服务磁盘中未保存有所述文件时，还包括：
从包含有所述文件的服务器中获取所述文件；
将所述文件保存到所述服务磁盘中；
将所述服务磁盘作为响应所述请求的磁盘。
5.根据权利要求1所述的确定方法，其特征在于，
所述服务磁盘为内容分发网络CDN服务器中包括所述服务磁盘在内的所有能够正常使用的磁盘进行一致性哈希算法确定的磁盘；
所述历史服务磁盘为所述CDN服务器中包括所述服务磁盘之外的所有能够正常使用的磁盘进行一致性哈希算法确定的磁盘。
6.一种磁盘的确定装置，其特征在于，包括:
请求接收模块，用于接收获取文件的请求；
判断模块，用于判断为所述请求提供服务的服务磁盘中是否保存有所述请求对应的文件；其中，所述服务磁盘为损坏磁盘进行修复和挂载后的磁盘；
读取模块，用于若所述服务磁盘中未保存有所述文件，实时读取所述服务磁盘的新文件的增加速度和所述服务磁盘的剩余存储空间百分比；其中，所述新文件为新保存到所述服务磁盘中的文件；
第一确定模块，用于当所述新文件的增加速度不小于第一预设数值，和/或所述剩余存储空间百分比不小于第二预设数值，确定上一次处理所述请求的历史服务磁盘；
第二确定模块，用于若所述历史服务磁盘中保存有所述文件，将所述历史服务磁盘作为响应所述请求的磁盘。
7.根据权利要求6所述的确定装置，其特征在于，还包括：
第三确定模块，用于若所述服务磁盘中保存有所述文件时，将所述服务磁盘作为响应所述请求的磁盘。
8.根据权利要求6所述的确定装置，其特征在于，还包括：
第一保存模块，用于所述第二确定模块将所述历史服务磁盘作为响应所述请求的磁盘后，将所述历史服务磁盘中保存的所述文件保存到所述服务磁盘中。
9.根据权利要求6所述的确定装置，其特征在于，还包括：
获取模块，用于若所述历史服务磁盘中未保存有所述文件时，从包含有所述文件的服务器中获取所述文件；
第二保存模块，用于将所述文件保存到所述服务磁盘中；
第三确定模块，用于将所述服务磁盘作为响应所述请求的磁盘。
10.根据权利要求6所述的确定装置，其特征在于，
所述服务磁盘为内容分发网络CDN服务器中包括所述服务磁盘在内的所有能够正常使用的磁盘进行一致性哈希算法确定的磁盘；
所述历史服务磁盘为所述CDN服务器中包括所述服务磁盘之外的所有能够正常使用的磁盘进行一致性哈希算法确定的磁盘。
CN201711089694.0A 2017-11-08 2017-11-08 一种磁盘的确定方法及装置 Active CN107911713B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711089694.0A CN107911713B (zh) 2017-11-08 2017-11-08 一种磁盘的确定方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711089694.0A CN107911713B (zh) 2017-11-08 2017-11-08 一种磁盘的确定方法及装置

Publications (2)

Publication Number Publication Date
CN107911713A CN107911713A (zh) 2018-04-13
CN107911713B true CN107911713B (zh) 2020-05-22

Family

ID=61843607

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711089694.0A Active CN107911713B (zh) 2017-11-08 2017-11-08 一种磁盘的确定方法及装置

Country Status (1)

Country Link
CN (1) CN107911713B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103383690A (zh) * 2012-05-04 2013-11-06 深圳市腾讯计算机系统有限公司 分布式数据存储方法及系统
CN103747112A (zh) * 2013-12-24 2014-04-23 乐视网信息技术（北京）股份有限公司 一种cdn回源的方法、第一服务器及系统
CN104935648A (zh) * 2015-06-03 2015-09-23 北京快网科技有限公司 一种高性价比的cdn系统及文件预推、分片缓存的方法
CN105207993A (zh) * 2015-08-17 2015-12-30 深圳市云宙多媒体技术有限公司 一种cdn中数据的访问、调度方法和系统
US9454324B1 (en) * 2013-12-18 2016-09-27 Emc Corporation Methods and apparatus for data lifecycle analysis
CN106201834A (zh) * 2016-07-06 2016-12-07 乐视控股（北京）有限公司 一种磁盘损坏的处理方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103383690A (zh) * 2012-05-04 2013-11-06 深圳市腾讯计算机系统有限公司 分布式数据存储方法及系统
US9454324B1 (en) * 2013-12-18 2016-09-27 Emc Corporation Methods and apparatus for data lifecycle analysis
CN103747112A (zh) * 2013-12-24 2014-04-23 乐视网信息技术（北京）股份有限公司 一种cdn回源的方法、第一服务器及系统
CN104935648A (zh) * 2015-06-03 2015-09-23 北京快网科技有限公司 一种高性价比的cdn系统及文件预推、分片缓存的方法
CN105207993A (zh) * 2015-08-17 2015-12-30 深圳市云宙多媒体技术有限公司 一种cdn中数据的访问、调度方法和系统
CN106201834A (zh) * 2016-07-06 2016-12-07 乐视控股（北京）有限公司 一种磁盘损坏的处理方法和装置

Also Published As

Publication number Publication date
CN107911713A (zh) 2018-04-13

Similar Documents

Publication Publication Date Title
US10956403B2 (en) Verifying data consistency
CN106407207B (zh) 一种实时新增数据更新方法和装置
CN110865842B (zh) 一种ota升级方法和设备
CN109471843B (zh) 一种元数据缓存方法、系统及相关装置
CN108984295B (zh) 内存回收方法、计算机装置及计算机可读存储介质
US20170011049A1 (en) Attribute analyzer for data backup
CN105630779A (zh) 一种基于分布式文件系统的小文件存储方法和装置
CN110247985A (zh) 一种资源下载方法、装置、电子设备及介质
CN105260639A (zh) 一种脸部识别系统的数据更新的方法及装置
CN106657182B (zh) 云端文件处理方法和装置
CN105100964A (zh) 多媒体内容的处理方法、客户端及服务器
CN110764930B (zh) 基于消息模式的请求或应答处理方法及装置
CN101146111B (zh) 一种文件下载的方法及设备
CN109714214B (zh) 一种服务器异常的处理方法及管理设备
CN110784524A (zh) 一种云手机文件上传保活方法、装置及系统
CN107911713B (zh) 一种磁盘的确定方法及装置
CN102298527A (zh) 一种cpe并行升级版本的方法及实现系统
CN113905092B (zh) 一种确定可复用代理队列的方法、装置、终端及存储介质
CN105812894A (zh) 一种基于智能终端的视频文件处理方法和装置
CN108255417B (zh) 数据访问方法、电子装置及可读存储介质
CN111625397A (zh) 业务日志备份方法、集群、装置、电子设备及存储介质
GB2604809A (en) Continuous storage of data in system with limited storage capacity
CN107454018B (zh) 报文缓存管理器异常的处理方法及装置
US9727378B2 (en) Persistent unenrollment for devices under management
CN111179097B (zh) 保单批改的方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant