CN112395256B - 一种数据读取方法、电子设备及计算机存储介质 - Google Patents
一种数据读取方法、电子设备及计算机存储介质 Download PDFInfo
- Publication number
- CN112395256B CN112395256B CN201910765735.6A CN201910765735A CN112395256B CN 112395256 B CN112395256 B CN 112395256B CN 201910765735 A CN201910765735 A CN 201910765735A CN 112395256 B CN112395256 B CN 112395256B
- Authority
- CN
- China
- Prior art keywords
- storage space
- performance information
- storage
- target
- target data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003860 storage Methods 0.000 title claims abstract description 585
- 238000000034 method Methods 0.000 title claims abstract description 60
- 230000015654 memory Effects 0.000 claims description 34
- 238000004891 communication Methods 0.000 claims description 9
- 238000012544 monitoring process Methods 0.000 claims description 3
- 230000002194 synthesizing effect Effects 0.000 claims description 2
- 238000012545 processing Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 238000004590 computer program Methods 0.000 description 5
- 239000007787 solid Substances 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000005291 magnetic effect Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000012937 correction Methods 0.000 description 2
- 238000000638 solvent extraction Methods 0.000 description 2
- KLDZYURQCUYZBL-UHFFFAOYSA-N 2-[3-[(2-hydroxyphenyl)methylideneamino]propyliminomethyl]phenol Chemical compound OC1=CC=CC=C1C=NCCCN=CC1=CC=CC=C1O KLDZYURQCUYZBL-UHFFFAOYSA-N 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 201000001098 delayed sleep phase syndrome Diseases 0.000 description 1
- 208000033921 delayed sleep phase type circadian rhythm sleep disease Diseases 0.000 description 1
- 230000005294 ferromagnetic effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
- G06F21/6227—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database where protection concerns the structure of data, e.g. records, types, queries
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Bioethics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例公开了一种数据读取方法,该方法包括:接收用于读取目标数据的第一读取请求;基于所述第一读取请求,获取与所述目标数据对应的至少两个第一存储空间的性能信息;其中,每一第一存储空间存储有所述目标数据;基于所述至少两个第一存储空间的性能信息,从所述至少两个第一存储空间中确定第一目标存储空间;从所述第一目标存储空间读取所述目标数据。本发明实施例同时还公开了一种电子设备和计算机存储介质。通过上述方式,本发明实施例能够从性能符合要求的第一目标存储空间中读取目标数据,提高了读取目标数据时的读取性能。
Description
技术领域
本发明涉及电子与信息技术领域,尤其是涉及一种数据读取方法、电子设备及计算机存储介质。
背景技术
随着数据规模的指数性增长,传统的存储技术已经无法满足数据存储的需要,而分布式存储系统的出现则很好地解决了大规模数据的存储问题。相关技术中,若分布式存储系统中存储的数据量较多,分布式存储系统的每个存储空间中都会放置大量的数据,当需要读取的大量数据恰好集中在一个存储空间上,就会降低该存储空间中目标数据的读取性能。
发明内容
为解决上述技术问题,本发明实施例期望提供一种数据读取方法、电子设备及计算机存储介质,解决相关技术中当需要读取的大量数据恰好集中在一个存储空间上,会降低该存储空间中目标数据的读取性能的问题。
本发明的技术方案是这样实现的:
一种数据读取方法,所述方法包括:
接收用于读取目标数据的第一读取请求;
基于所述第一读取请求,获取与所述目标数据对应的至少两个第一存储空间的性能信息;其中,每一第一存储空间存储有所述目标数据;
基于所述至少两个第一存储空间的性能信息,从所述至少两个第一存储空间中确定第一目标存储空间;
从所述第一目标存储空间读取所述目标数据。
可选地,所述接收用于读取目标数据的第一读取请求之前,所述方法还包括:
获取至少两个第二存储空间中每一第二存储空间的性能信息;其中,所述至少两个第二存储空间包括所述至少两个第一存储空间;
相应地,所述基于所述第一读取请求,获取与所述目标数据对应的至少两个第一存储空间的性能信息,包括:
基于所述第一读取请求,从所述至少两个第二存储空间的性能信息中,获取与所述目标数据对应的至少两个第一存储空间的性能信息。
可选地,所述获取至少两个第二存储空间中每一第二存储空间的性能信息,包括:
监测所述每一第二存储空间的第一特征信息和第二特征信息;其中,所述第一特征信息用于表征所述第二存储空间的存储容量,所述第二特征信息用于表征所述第二存储空间的当前工作参数;
基于所述第一特征信息和所述第二特征信息,获取所述每一第二存储空间的性能信息。
可选地,所述基于所述至少两个第一存储空间的性能信息,从所述至少两个第一存储空间中确定第一目标存储空间,包括:
基于所述至少两个第一存储空间的性能信息,从所述至少两个第一存储空间中,确定性能信息大于或等于第一预设性能信息的第一存储空间为所述第一目标存储空间。
可选地,所述从所述第一目标存储空间读取所述目标数据,包括:
从每一第一目标存储空间中读取子目标数据;其中,每一第一目标存储空间的所述子目标数据的大小与所述每一第一目标存储空间的性能信息对应;
基于每一所述子目标数据合成所述目标数据。
可选地,所述从所述第一目标存储空间读取所述目标数据之后,所述方法还包括:
接收用于读取所述目标数据的第二读取请求;
基于所述第二读取请求,获取所述第一目标存储空间的第一性能信息;
若所述第一性能信息大于或等于第二预设性能信息,从所述第一目标存储空间读取所述目标数据;
若所述第一性能信息小于所述第二预设性能信息,获取所述至少两个第一存储空间中除所述第一目标存储空间外的第一存储空间的第二性能信息;
确定大于或等于第三预设性能信息的第二性能信息所对应的第一存储空间为第二目标存储空间;
从所述第二目标存储空间读取所述目标数据。
可选地,所述从所述第一目标存储空间读取所述目标数据,包括:
获取每一第一存储空间的存储介质的位置;其中,所述每一第一存储空间的存储介质中存储有所述目标数据;
基于所述每一第一存储空间的存储介质的位置,确定所述第一目标存储空间的存储介质的位置;
基于所述第一目标存储空间的存储介质的位置,从所述第一目标存储空间的存储介质中读取所述目标数据。
可选地,所述当前工作参数包括:类型、参数、吞吐量以及工作状态中的至少一者。
一种电子设备,所述电子设备包括:处理器、存储器和通信总线;
所述通信总线用于实现处理器和存储器之间的通信连接;
所述处理器用于执行存储器中的数据读取方法的程序,以实现以下步骤:
接收用于读取目标数据的第一读取请求;
基于所述第一读取请求,获取与所述目标数据对应的至少两个第一存储空间的性能信息;其中,每一第一存储空间存储有所述目标数据;
基于所述至少两个第一存储空间的性能信息,从所述至少两个第一存储空间中确定第一目标存储空间;
从所述第一目标存储空间读取所述目标数据。
一种计算机存储介质,该计算机存储介质存储有一个或者多个程序,一个或者多个程序可被一个或者多个处理器执行,以实现上述的数据读取方法的步骤。
本发明实施例所提供的数据读取方法、电子设备及计算机存储介质,接收用于读取目标数据的第一读取请求,基于第一读取请求,获取与目标数据对应的至少两个存储有目标数据的第一存储空间的性能信息,基于至少两个第一存储空间的性能信息,从至少两个第一存储空间中确定第一目标存储空间,从第一目标存储空间读取目标数据,从而在读取目标数据时,能够基于至少两个第一存储空间的性能信息确定符合要求的第一目标存储空间,并从性能符合要求的第一目标存储空间中读取目标数据,避免了当需要读取的大量数据恰好集中在一个存储空间上,会降低该存储空间中目标数据的读取性能的问题,因而提高了读取目标数据时的读取性能。
附图说明
图1为本发明实施例提供的一种数据读取方法的流程示意图;
图2为本发明实施例提供的另一种数据读取方法的流程示意图;
图3为本发明实施例提供的又一种数据读取方法的流程示意图;
图4为本发明另一实施例提供的一种数据读取方法的流程示意图;
图5为本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。
应理解,说明书通篇中提到的“本发明实施例”或“前述实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此,在整个说明书各处出现的“本发明实施例中”或“在前述实施例中”未必一定指相同的实施例。此外,这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中应。在本发明的各种实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
值得注意的是,电子设备执行本发明实施例的任一步骤可以为电子设备的处理器执行本发明实施例的任一步骤。本发明实施例中涉及到的第一特征信息、第二特征信息或性能信息可以为相应的数值信息。
为了保证数据安全,分布式存储通常会采用多种数据冗余方式,在分布式存储系统中,数据的存储方式通常分为以下三种:基于文件的完全副本冗余模式、基于文件分块完全副本冗余模式以及纠删码冗余模式。其中,基于文件的完全副本冗余是将完整文件复制多份分别放置于不同的故障域,已达到备份的目的,只要一个备份完整即可恢复原数据文件。基于文件分块的完全副本冗余是先将文件分块再复制一定份数存储到不同故障域。与完全文件备份的区别是存储文件是完整存储还是分块存储。基于文件的完全副本冗余模式和基于文件分块完全副本冗余模式这两种存储策略常见的是三副本,即将数据的3个完全一样的副本放置在分布式存储系统的不同故障域,以确保其中一部分硬件失效后数据依旧存在,当然,存储策略还可以是两副本、四副本或五副本。纠错码冗余的思想是将数据分块,然后通过编码的方式产生冗余块,即使部分数据分块丢失,通过对冗余块进行译码即可得到丢失的数据分块,通常情况下数据分块和冗余块分别存储在不同的故障域上。
然而,一般的分布式存储系统在数据冗余的处理机制上存在一定的缺陷。以三副本为例,将三个副本分别放置在分布式存储系统中的三个故障域中,并且指定一个副本为主副本,读取均从主副本读取。而集群中数据量很大,每个故障域上都会放了很多的数据副本。若此时特定业务所需要读取的大量数据的主副本恰好集中放置在其中的一个故障域上,就会降低该故障域中数据的读取性能。应理解,本发明实施例中的三副本包括主副本和两个从副本。
本发明实施例中提到的任一存储空间(包括第一存储空间、第二存储空间或存储空间)可以为故障域。故障域是指集体受故障影响的存储空间。故障域包括至少一个存储介质,存储介质可以为存储硬盘,存储硬盘可以为机械硬盘或固态硬盘。在其它实施例中,存储介质还可以为用于存储数据的任一载体,例如软盘、光盘、闪存、U盘或记忆棒等等,此处不一一列举。通常情况下,一个故障域内应包括多个存储介质。
本发明实施例提供一种数据读取方法,应用于电子设备,如图1所示,该方法包括以下步骤:
步骤101:接收用于读取目标数据的第一读取请求。
本发明是实施例中的电子设备可以为任一具有数据处理能力的设备,例如服务器、手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理、便捷式媒体播放器、导航装置、可穿戴设备、智能手环、计步器、数字TV或者台式计算机等。
接收用于读取目标数据的第一读取请求,可以包括:接收第一电子设备发送的用于读取目标数据的第一读取请求。其中,第一电子设备的类型可以与上述电子设备的类型相同或不同。
例如,当第一电子设备为电脑,电子设备为服务器时,当电脑需要获取目标数据时,可以向服务器发送用于获取目标数据的第一读取请求,服务器在接收到第一读取请求后,读取目标数据,并发送目标数据至电脑,从而电脑获得目标数据。
本发明实施例中的目标数据可以为文件、符号、图像以及声音等中的至少一个。第一读取请求中可以包括目标数据的标识信息、电子设备的IP地址、第一电子设备的IP地址、电子设备的端口号以及第一电子设备的端口号中的至少一个。
步骤102:基于第一读取请求,获取与目标数据对应的至少两个第一存储空间的性能信息。
其中,每一第一存储空间存储有目标数据。
在一种实施方式中,基于第一读取请求,获取与目标数据对应的至少两个第一存储空间的性能信息,可以包括:基于第一读取请求,获取存储空间配置组,从存储空间配置组中确定与目标数据对应的至少两个第一存储空间,并获取该至少两个第一存储空间的性能信息。在本发明实施例中,存储空间配置组包括数据和存储空间的对应关系。当电子设备接收到读取目标数据的第一读取请求后,从存储空间配置组中查找存储有目标数据的至少两个第一存储空间。存储空间配置组是分布式存储系统在存储包括目标数据的数据时确定的。应理解,从存储空间配置组中查找的存储有目标数据的第一存储空间的个数与存储策略相对应,例如,当存储策略为两副本的存储策略时,从存储空间配置组中查找到存储有目标数据的两个第一存储空间;当存储策略为三副本的存储策略时,从存储空间配置组中查找到存储有目标数据的三个第一存储空间,以此类推,此处不再一一列举。
在一种实施方式中,性能信息可以包括存储容量、类型、参数、吞吐量、工作状态、安全性、稳定性以及带宽中的至少一个。在另一种实施方式中,性能信息可以基于存储容量、类型、参数、吞吐量、工作状态、安全性、稳定性以及带宽中的至少一个通过数学计算来确定。本发明实施例的性能信息用于表征从第一存储空间中读取目标数据时的读取性能,当第一存储空间的性能信息大于或等于预设性能信息时,可以表征从第一存储空间中读取目标数据的读取性能高,当第一存储空间的性能信息小于预设性能信息时,表征从第一存储空间中读取目标数据的读取性能低。
以下以存储策略为三副本存储策略为例,步骤102可以通过下述方式来实现:基于第一读取请求,获取与目标数据对应的第一个存储空间的性能信息、第二个存储空间的性能信息以及第三个存储空间的性能信息;其中,第一个存储空间、第二个存储空间以及第三个存储空间均存储有目标数据。当存储策略为其它副本的存储策略时,步骤102的实现方式可以参照三副本存储策略的描述,此处不再赘述。
步骤103:基于至少两个第一存储空间的性能信息,从至少两个第一存储空间中确定第一目标存储空间。
本发明实施例中的第一目标存储空间的个数可以是一个或至少两个。
确定第一目标存储空间可以为确定符合要求的第一目标存储空间,例如,在存储策略为三副本存储策略时,若第一个存储空间和第二个存储空间均符合要求,则确定第一个存储空间和第二个存储空间均为第一目标存储空间。
步骤104:从第一目标存储空间读取目标数据。
在第一目标存储空间的个数是一个时,电子设备可以从第一目标存储空间读取目标数据。在第一目标存储空间的个数是至少两个时,电子设备可以从至少两个第一目标存储空间的任一个第一目标存储空间中读取目标数据,或者电子设备可以从至少两个第一目标存储空间的每一第一目标存储空间读取子目标数据,并基于子目标数据合成目标数据。
例如,以三副本存储策略为例,在确定第一个存储空间和第二个存储空间均为第一目标存储空间时,电子设备可以从第一个存储空间中读取目标数据,或者电子设备可以从第二个存储空间中读取目标数据,或者电子设备可以从第一个存储空间中读取子目标数据,从第二个存储空间中读取子目标数据,并基于第一个存储空间中的子目标数据和第二个存储空间的子目标数据合成得到目标数据。
本发明实施例所提供的数据读取方法,在读取目标数据时,能够基于至少两个第一存储空间的性能信息确定符合要求的第一目标存储空间,并从性能符合要求的第一目标存储空间中读取目标数据,避免了当需要读取的大量数据恰好集中在一个存储空间上,会降低该存储空间中目标数据的读取性能的问题,因而提高了读取目标数据时的读取性能。
基于前述实施例,本发明实施例提供一种数据读取方法,如图2所示,该方法包括以下步骤:
步骤201:电子设备获取至少两个第二存储空间中每一第二存储空间的性能信息。
其中,至少两个第二存储空间包括至少两个第一存储空间。应理解,至少两个第一存储空间的数量小于或等于至少两个第二存储空间的数量,至少两个第一存储空间属于至少两个第二存储空间。第一存储空间和第二存储空间可以是相同的存储空间或不同的存储空间。例如,在一种可行的实施方式中,至少两个第二存储空间可以包括存储空间A、存储空间B、存储空间C、存储空间D、存储空间E以及存储空间F,至少两个第一存储空间可以包括存储空间A、存储空间B以及存储空间C。
在本发明实施例中,至少两个第二存储空间可以为分布式存储系统的至少两个第二存储空间。分布式存储系统可以包括电子设备和至少两个第二存储空间,至少两个第二存储空间形成存储池(Data Protection Manager,DPM),其中,存储池为用于存储副本、卷影副本和传输日志的一组存储硬盘,存储硬盘可以为固态硬盘和/或机械硬盘。电子设备用于接收读取请求,并基于读取请求从第二存储空间中读取数据,第二存储空间用于存储数据。应理解,当存储策略是两副本的存储策略时,分布式存储系统中应包括至少两个第二存储空间,以使两个副本分别存储在至少两个第二存储空间中的两个第二存储空间上;当存储策略是三副本的存储策略时,分布式存储系统中应包括至少三个第二存储空间,以使三个副本分别存储在至少三个第二存储空间中的三个第二存储空间上。副本可以是具有预设大小的数据。
在一种实施方式中,步骤201可以通过步骤A1~A2的方式实现:
步骤A1:电子设备监测每一第二存储空间的第一特征信息和第二特征信息。
其中,第一特征信息用于表征第二存储空间的存储容量,第二特征信息用于表征第二存储空间的当前工作参数。在一种实施方式中,当前工作参数可以包括:类型、参数、吞吐量以及工作状态中的至少一者。在另一种实施方式中,当前工作参数可以基于类型、参数、吞吐量以及工作状态中的至少一者通过数学计算来确定。
第一特征信息可以与存储容量呈正相关的关系,存储容量可以根据第二存储空间内包括的多个存储硬盘中每一存储硬盘的存储容量确定,例如,当第二存储空间内包括存储硬盘A、存储硬盘B以及存储硬盘C,存储硬盘A的存储容量为100G,存储硬盘B的存储容量为200G,存储硬盘C的存储容量为300G,则第二存储空间的存储容量可以为100+200+300G=600G。
类型可以包括:第二存储空间内的存储硬盘是属于机械硬盘或固态硬盘,固态硬盘是串口硬盘(Serial Advanced Technology Attachment,SATA)或高速串行计算机扩展总线标准硬盘(peripheral component interconnect express,PCIe)等。参数可以基于第二存储空间内的存储硬盘的硬盘转速和/或存储硬盘存储单元类型确定。吞吐量(Transaction Per Second,TPS)可以基于第二存储空间内的存储硬盘的读写次数(Input/Output Per Second,IOPS)和带宽(Bandwidth,BW)确定。应理解,吞吐量是随着分布式存储系统的工作状态的改变而实时变化的参数。在一种实施方式中,吞吐量可基于公式确定,其中,带宽的单位为MB/s。当读写次数大于400或者带宽大于100MB/s时,确定吞吐量为1。上述公式中的TPS为吞吐量,IOPS为读写次数,BW为带宽。工作状态可以基于第二存储空间内的存储硬盘的坏块数、纠错次数、硬件温度、电流电压以及预计寿命至少一种确定,应理解,工作状态也是随着分布式存储系统的工作状态的改变而实时变化的参数。
步骤A2:电子设备基于第一特征信息和第二特征信息,获取每一第二存储空间的性能信息。
电子设备可以对第一特征信息和第二特征信息采用预设的数学计算,从而获取每一第二存储空间的性能信息。例如,在一种实施方式中,可以采用第一权值和第一特征信息相乘得到第一乘积,采用第二权值和第二特征信息相乘得到第二乘积,并将第一乘积和第二乘积相加得到第二存储空间的性能信息。
步骤202:电子设备接收用于读取目标数据的第一读取请求。
步骤203:电子设备基于第一读取请求,从至少两个第二存储空间的性能信息中,获取与目标数据对应的至少两个第一存储空间的性能信息。
由于电子设备能够获取分布式存储系统中包括的至少两个第二存储空间的性能信息,至少两个第一存储空间属于至少两个第二存储空间,因此,电子设备能够从获取的至少两个第二存储空间的性能信息中,获取与目标数据对应的至少两个第一存储空间的性能信息。
步骤204:电子设备基于至少两个第一存储空间的性能信息,从至少两个第一存储空间中,确定性能信息大于或等于第一预设性能信息的第一存储空间为第一目标存储空间。
在一种实施方式中,第一预设性能信息为至少两个第一存储空间的性能信息中的最高性能信息。在这种方式下,第一目标存储空间的个数为一个,且第一目标存储空间的性能信息是至少两个第一存储空间的性能信息的最高性能信息,从而,电子设备在读取目标数据时,将从性能最高的第一存储空间中读取目标数据,从而使目标数据的读取性能最高。最高性能信息表征从与最高性能信息对应的第一存储空间中读取目标数据时,在速度、稳定性、第一存储空间的消耗、产生的温度以及准确性中的至少一者综合最优。
在另一种实施方式中,第一预设性能信息为大于至少两个第一存储空间的性能信息中的最低性能信息M,且小于至少两个第一存储空间的性能信息中的最高性能信息N。第一预设性能信息可以为M和N之间的任一值,例如,第一预设性能信息可以为(M+N)/2。在这种方式下,第一目标存储空间的个数为一个或至少两个。
在又一种实施方式中,第一预设性能信息为至少两个第一存储空间的性能信息中的最低性能信息。在这种方式下,至少两个第一存储空间的数量,和第一目标存储空间的数量相同,即第一目标存储空间的个数为至少两个。
步骤205:电子设备从第一目标存储空间读取目标数据。
若第一目标存储空间的数量为至少两个,步骤205可以通过以下方式实现:从至少两个第一目标存储空间中任一第一目标存储空间读取目标数据,或者步骤205还可以通过以下步骤B1至B2的方式实现:
步骤B1:电子设备从每一第一目标存储空间中读取子目标数据。
其中,每一第一目标存储空间的子目标数据的大小与每一第一目标存储空间的性能信息对应。例如,第一目标存储空间的性能信息越高,从第一目标存储空间中读取的子目标数据的数据量越多。
电子设备从不同的两个第一目标存储空间中读取到的子目标数据的位置不重合,例如,在确定从第一个存储空间和第二个存储空间中读取子目标数据时,可以从第一个存储空间中读取部分目标数据得到第一个子目标数据,在第二个存储空间中读取目标数据的除部分目标数据外的数据得到第二个子目标数据。
步骤B2:电子设备基于每一子目标数据合成目标数据。
电子设备基于每一子目标数据合成目标数据,可以是电子设备对读取到的至少两个子目标数据进行拼接,得到目标数据。其中,每一子目标数据可以携带有偏移量,偏移量用于表征每一子目标数据在目标数据中的位置。在一种实施方式中,电子设备可以基于每一子目标数据携带的偏移量的大小,对至少两个子目标数据进行拼接,得到目标数据。
应需说明的是,本发明实施例对从每一目标存储空间中读取子目标数据的先后顺序不作限定,即可以依次从每一目标存储空间中读取,也可以并行从每一目标存储空间中读取。
通过上述方式,电子设备确定性能信息大于或等于第一预设性能信息的第一存储空间为第一目标存储空间,并从第一目标存储空间读取目标数据,从而在读取目标数据时,能够从性能较高的第一存储空间中读取目标数据,提高了读取目标数据的性能。
目标数据存储在第一存储空间的存储介质中。例如,在一种实施方式中,第一存储空间包括多个存储介质,第一存储空间可以为故障域,存储介质可以为存储硬盘,即故障域中包括多个存储硬盘,目标数据可以存储在故障域的一个存储硬盘或多个存储硬盘上。
在一种实施方式中,步骤205可以通过步骤C1至C3的方式实现:
步骤C1:电子设备获取每一第一存储空间的存储介质的位置。
其中,每一第一存储空间的存储介质中存储有目标数据。
电子设备可以基于第一存储空间的存储介质的位置从分布式存储系统中查找到第一存储空间的存储介质。每一第一存储空间的存储介质的位置是分布式存储系统在存储目标数据时确定的。
以三副本存储策略为例,目标数据对应三个存储有目标数据的第一存储空间,每一第一存储空间包括存储目标数据的存储介质,从而目标数据对应三个第一存储空间的存储介质的位置。
步骤C2:电子设备基于每一第一存储空间的存储介质的位置,确定第一目标存储空间的存储介质的位置。
由于第一目标存储空间是根据至少两个第一存储空间确定的,因此,第一目标存储空间的存储介质的位置,是可以基于至少两个第一存储空间的每一第一存储空间的存储介质的位置确定的。
步骤C3:电子设备基于第一目标存储空间的存储介质的位置,从第一目标存储空间的存储介质中读取目标数据。
需要说明的是,步骤C1至C3的读取目标数据的方案,可以应用到步骤B1至B2中,从而步骤B1至B2还可以通过以下方式来实现:电子设备可以先获取每一第一存储空间的存储介质的位置,其中,每一第一存储空间的存储介质中存储有目标数据,由于至少两个第一目标存储空间是基于至少两个第一存储空间确定的,从而电子设备可以基于每一第一存储空间的存储介质的位置,确定至少两个第一目标存储空间的存储介质的位置,而由于电子设备可以基于至少两个第一目标存储空间的存储介质的位置,查找到至少两个第一目标存储空间的存储介质,因此,电子设备可以基于至少两个第一目标存储空间的存储介质的位置,从每一第一目标存储空间的存储介质中读取子目标数据,其中,每一第一目标存储空间的存储介质中的子目标数据的大小与每一第一目标存储空间的性能信息对应,电子设备在读取到至少两个子目标数据后,可以基于每一子目标数据合成目标数据。
基于前述实施例,在本发明的其它实施例中,步骤205之后,如图3所示,数据读取方法还可以包括以下步骤:
步骤206:电子设备接收用于读取目标数据的第二读取请求。
电子设备接收到第二读取请求的时间可以晚于接收到第一读取请求的时间。在一种实施方式中,电子设备基于第一读取请求正在从第一目标存储空间内的目标存储介质读取目标数据时,接收到用于读取目标数据的第二读取请求,也就是说,在接收到第二读取请求时,电子设备基于第一读取请求读取的目标数据还没有读取完成。在另一种实施方式中,电子设备可以基于第一读取请求,从第一目标存储空间内的目标存储介质读取完目标数据后,接收到用于读取目标数据的第二读取请求,也就是说,在接收到第二读取请求时,电子设备基于第一读取请求已经读取到了目标数据。
电子设备接收用于读取目标数据的第二读取请求,可以包括:电子设备接收第二电子设备发送的用于读取目标数据的第二读取请求。第一电子设备和第二电子设备可以为不同的电子设备或者相同的电子设备。
步骤207:电子设备基于第二读取请求,获取第一目标存储空间的第一性能信息。
由于在接收到第二读取请求时,电子设备基于第一读取请求正在执行从第一目标存储空间中读取目标数据的操作,而在从第一目标存储空间中读取目标数据的过程中,会导致第一目标存储空间的性能信息变化。例如,电子设备接收到第一读取请求前,第一目标存储空间的性能信息为P,而在接收到第二读取请求时,此时第一目标存储空间的性能信息为Q,Q小于P。
在预设时间内,若确定读取目标数据的次数大于预设次数,电子设备可以将目标数据存放在目标存储空间的缓存中,以使电子设备再次接收到用于读取目标数据的读取请求后,可以直接从缓存中读取目标数据,从而加快了读取目标数据的速度。
步骤208:若第一性能信息大于或等于第二预设性能信息,电子设备从第一目标存储空间读取目标数据。
其中,第二预设性能信息可以小于、大于或等于第一预设性能信息。如此,由于基于第一读取请求的读取的目标数据是从第一目标存储空间读取到,在收到第二次读取请求后,确定第一目标存储空间的性能信息是否大于或等于第二预设性能信息,若是,则继续从第一目标存储空间读取数据。
步骤209:若第一性能信息小于第二预设性能信息,电子设备获取至少两个第一存储空间中除第一目标存储空间外的第一存储空间的第二性能信息。
其中,除第一目标存储空间外的第一存储空间的数量可以是一个或至少两个。
步骤210:电子设备确定大于或等于第三预设性能信息的第二性能信息所对应的第一存储空间为第二目标存储空间。
其中,第三预设性能信息可以大于、小于或等于第一预设性能信息。
在一种实施方式中,第三预设性能信息可以是第二性能信息中的最高性能信息。在另一种实施方式中,第三预设性能信息可以是大于第二性能信息中的最低性能信息,且小于最高性能信息的性能信息。在又一种实施方式中,第三预设性能信息可以是第二性能信息中的最低性能信息。
步骤211:电子设备从第二目标存储空间读取目标数据。
当第二目标存储空间的个数为一个时,电子设备从第二目标存储空间中读取目标数据。当第二目标存储空间的个数为至少两个时,电子设备可以从至少两个第二目标存储空间中的任一个第二目标存储空间中读取目标数据,或者可以从至少两个第二目标存储空间中的每一第二目标存储空间中读取子目标数据,并根据至少两个子目标数据合成目标数据;其中,每一第二目标存储空间的子目标数据的大小与每一第二目标存储空间的性能信息对应。
电子设备从第二目标存储空间读取目标数据,可以是电子设备从第二目标存储空间的存储介质中读取目标数据。
需要说明的是,本实施例中与其它实施例中相同步骤和相同内容的说明,可以参照其它实施例中的描述,此处不再赘述。
本发明实施例所提供的数据读取方法,电子设备监测至少两个第二存储空间中每一第二存储空间的第一特征信息和第二特征信息,并基于监测得到的第一特征信息和第二特征信息,获取至少两个第二存储空间中每一第二存储空间的性能信息,从而可以得到与目标数据对应的至少两个第一存储空间的实时性能信息,进而可以根据至少两个实时性能信息确定符合要求的第一目标存储空间,并从第一目标存储空间读取目标数据,提高了读取目标数据的性能;并且,电子设备若接收到第二读取请求,且第一目标存储空间的性能信息大于或等于第二预设性能信息,依旧从第一目标存储空间中读取目标数据,避免了从其它存储空间读取目标数据对其它存储空间的性能产生影响。
基于前述实施例,本发明实施例提供一种数据读取方法,如图4所示,该方法包括以下步骤:
步骤301:划分分布式存储系统的故障域。
划分分布式存储系统故障域可以是基于用户的需求进行划分。例如,分布式存储系统可以划分多个故障域,每一故障域有多个存储硬盘,每一个存储硬盘具有特定的容量。
步骤302:创建分布式存储系统的存储池并创建硬盘配置组。
由于分布式存储系统在故障域划分完成后,存储池也就基于各个故障域确定了,即多个故障域形成存储池。分布式存储系统可以接收写请求,并向故障域内的硬盘进行数据写入,基于数据的写入过程,得到硬盘配置组,其中,硬盘配置组中包括数据与存储硬盘之间的对应关系。写操作与硬盘配置组的对应关系是通过哈希实现的。例如,在进行三副本策略存储目标数据时,硬盘配置组中包括目标数据和三个存储硬盘之间的存储关系,其中,这三个存储硬盘中均存储有目标数据,且存储有从这三个存储硬盘都区目标数据的优先级。本发明实施中的硬盘配置组可以为上述实施例中的存储空间配置组。创建硬盘配置组可以是分布式存储系统在执行写操作时中创建的。
步骤303:电子设备监控分布式存储系统中每一故障域的存储温度。
故障域的存储温度与性能信息相对应。当故障域的性能信息表征该故障域的性能越高时(也即故障域的性能信息越高),该故障域的存储温度越低,反之,存储温度越高。
步骤304:客户端发起读请求。
通过客户端发送读请求,从而电子设备可以接收用于读取目标数据的第一读取请求。
步骤305:电子设备基于硬盘配置组查询读请求的目标数据所处的故障域。
当以三副本存储策略存储目标数据时,有三个故障域均存储目标数据。
步骤306:电子设备根据每一故障域的存储温度,查询目标数据所处的故障域的存储温度。
步骤307:电子设备选择最冷故障域,从最冷故障域的存储有目标数据的存储硬盘上读取目标数据。
最冷故障域为存储有目标数据的故障域的存储温度最低的故障域。最冷故障域也可以与至少两个性能信息中性能信息最高的故障域相同。
需要说明的是,本实施例中与其它实施例中相同步骤和相同内容的说明,可以参照其它实施例中的描述,此处不再赘述。
本发明实施例所提供的数据读取方法,由于每次接收到用于读取目标数据的读取请求后,都从最冷故障域中读取目标数据,因此,避免了当需要读取的大量数据恰好集中在一个故障域上,就会降低该故障域中数据的读取性能的问题。
基于前述实施例,本发明的实施例提供一种电子设备4,该电子设备4可以应用于图1~4对应的实施例提供的一种数据读取方法中,参照图5所示,该电子设备4可以包括:处理器41、存储器42和通信总线43,其中:
通信总线43用于实现处理器41和存储器42之间的通信连接。
处理器41用于执行存储器42中存储的数据读取方法的程序,以实现以下步骤:
接收用于读取目标数据的第一读取请求;
基于第一读取请求,获取与目标数据对应的至少两个第一存储空间的性能信息;其中,每一第一存储空间存储有目标数据;
基于至少两个第一存储空间的性能信息,从至少两个第一存储空间中确定第一目标存储空间;
从第一目标存储空间读取目标数据。
在本发明的其他实施例中,处理器41用于执行存储器42中存储的数据读取方法的程序,以实现以下步骤:
获取至少两个第二存储空间中每一第二存储空间的性能信息;其中,至少两个第二存储空间包括至少两个第一存储空间;
相应地,处理器41用于执行存储器42中存储的基于第一读取请求,获取与目标数据对应的至少两个第一存储空间的性能信息,以实现以下步骤:
基于第一读取请求,从至少两个第二存储空间的性能信息中,获取与目标数据对应的至少两个第一存储空间的性能信息。
在本发明的其他实施例中,处理器41用于执行存储器42中存储的获取至少两个第二存储空间中每一第二存储空间的性能信息,以实现以下步骤:
监测每一第二存储空间的第一特征信息和第二特征信息;其中,第一特征信息用于表征第二存储空间的存储容量,第二特征信息用于表征第二存储空间的当前工作参数;
基于第一特征信息和第二特征信息,获取每一第二存储空间的性能信息。
在本发明的其他实施例中,处理器41用于执行存储器42中存储的基于至少两个第一存储空间的性能信息,从至少两个第一存储空间中确定第一目标存储空间,以实现以下步骤:
基于至少两个第一存储空间的性能信息,从至少两个第一存储空间中,确定性能信息大于或等于第一预设性能信息的第一存储空间为第一目标存储空间。
在本发明的其他实施例中,处理器41用于执行存储器42中存储的从第一目标存储空间读取目标数据,以实现以下步骤:
从每一第一目标存储空间中读取子目标数据;其中,每一第一目标存储空间的子目标数据的大小与每一第一目标存储空间的性能信息对应;
基于每一子目标数据合成目标数据。
在本发明的其他实施例中,处理器41用于执行存储器42中存储的数据读取方法,以实现以下步骤:
接收用于读取目标数据的第二读取请求;
基于第二读取请求,获取第一目标存储空间的第一性能信息;
若第一性能信息大于或等于第二预设性能信息,从第一目标存储空间读取目标数据;
若第一性能信息小于第二预设性能信息,获取至少两个第一存储空间中除第一目标存储空间外的第一存储空间的第二性能信息;
确定大于或等于第三预设性能信息的第二性能信息所对应的第一存储空间为第二目标存储空间;
从第二目标存储空间读取目标数据。
在本发明的其他实施例中,处理器41用于执行存储器42中存储的从第一目标存储空间读取目标数据,以实现以下步骤:
获取每一第一存储空间的存储介质的位置;其中,每一第一存储空间的存储介质中存储有目标数据;
基于每一第一存储空间的存储介质的位置,确定第一目标存储空间的存储介质的位置;
基于第一目标存储空间的存储介质的位置,从第一目标存储空间的存储介质中读取目标数据。
在本发明的其他实施例中,当前工作参数包括:类型、参数、吞吐量以及工作状态中的至少一者。
需要说明的是,本实施例中处理器所执行的步骤的具体实现过程,可以参照图1~4对应的实施例提供的数据读取方法中的实现过程,此处不再赘述。
本发明实施例所提供的电子设备,在读取目标数据时,能够基于至少两个第一存储空间的性能信息确定符合要求的第一目标存储空间,并从性能符合要求的第一目标存储空间中读取目标数据,避免了当需要读取的大量数据恰好集中在一个存储空间上,会降低该存储空间中目标数据的读取性能的问题,因而提高了读取目标数据时的读取性能。
基于前述实施例,本发明的实施例提供一种计算机可读存储介质,计算机可读存储介质存储有一个或者多个程序,该一个或者多个程序可被一个或者多个处理器执行,以实现如上任一项的数据读取方法的步骤。本发明实施例中的计算机可读存储介质可以与上述的存储介质相同,也可以不同。
需要说明的是,上述处理器可以为特定用途集成电路(ASIC,ApplicationSpecific Integrated Circuit)、数字信号处理器(DSP,Digital Signal Processor)、数字信号处理装置(DSPD,Digital Signal Processing Device)、可编程逻辑装置(PLD,Programmable Logic Device)、现场可编程门阵列(FPGA,Field Programmable GateArray)、中央处理器(CPU,Central Processing Unit)、控制器、微控制器、微处理器中的至少一种。可以理解地,实现上述处理器功能的电子器件还可以为其它,本申请实施例不作具体限定。
需要说明的是,上述计算机存储介质/存储器可以是只读存储器(Read OnlyMemory,ROM)、可编程只读存储器(Programmable Read-Only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read-Only Memory,EPROM)、电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,EEPROM)、磁性随机存取存储器(Ferromagnetic Random Access Memory,FRAM)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(Compact Disc Read-Only Memory,CD-ROM)等存储器;也可以是包括上述存储器之一或任意组合的各种终端,如移动电话、计算机、平板设备、个人数字助理等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,从语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的型式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所描述的方法。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可从计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上仅为本申请的优选实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。
Claims (9)
1.一种数据读取方法,其特征在于,所述方法包括:
接收用于读取目标数据的第一读取请求;
基于所述第一读取请求,获取与所述目标数据对应的至少两个第一存储空间的性能信息;其中,每一第一存储空间存储有所述目标数据;所述性能信息用于表征从第一存储空间中读取所述目标数据时的读取性能;
基于所述至少两个第一存储空间的性能信息,从所述至少两个第一存储空间中确定第一目标存储空间;所述第一目标存储空间的性能信息是至少两个第一存储空间的性能信息中的最高性能信息;所述最高性能信息表征从与所述最高性能信息对应的第一存储空间中读取目标数据时,在速度、稳定性、第一存储空间的消耗、产生的温度以及准确性中的至少一者综合最优;
从所述第一目标存储空间读取所述目标数据;
接收用于读取所述目标数据的第二读取请求;
基于所述第二读取请求,获取所述第一目标存储空间的第一性能信息;
若所述第一性能信息大于或等于第二预设性能信息,从所述第一目标存储空间读取所述目标数据;
若所述第一性能信息小于所述第二预设性能信息,获取所述至少两个第一存储空间中除所述第一目标存储空间外的第一存储空间的第二性能信息;
确定大于或等于第三预设性能信息的第二性能信息所对应的第一存储空间为第二目标存储空间;
从所述第二目标存储空间读取所述目标数据。
2.根据权利要求1所述的方法,其特征在于,所述接收用于读取目标数据的第一读取请求之前,所述方法还包括:
获取至少两个第二存储空间中每一第二存储空间的性能信息;其中,所述至少两个第二存储空间包括所述至少两个第一存储空间;
相应地,所述基于所述第一读取请求,获取与所述目标数据对应的至少两个第一存储空间的性能信息,包括:
基于所述第一读取请求,从所述至少两个第二存储空间的性能信息中,获取与所述目标数据对应的至少两个第一存储空间的性能信息。
3.根据权利要求2所述的方法,其特征在于,所述获取至少两个第二存储空间中每一第二存储空间的性能信息,包括:
监测所述每一第二存储空间的第一特征信息和第二特征信息;其中,所述第一特征信息用于表征所述第二存储空间的存储容量,所述第二特征信息用于表征所述第二存储空间的当前工作参数;
基于所述第一特征信息和所述第二特征信息,获取所述每一第二存储空间的性能信息。
4.根据权利要求1所述的方法,其特征在于,所述基于所述至少两个第一存储空间的性能信息,从所述至少两个第一存储空间中确定第一目标存储空间,包括:
基于所述至少两个第一存储空间的性能信息,从所述至少两个第一存储空间中,确定性能信息大于或等于第一预设性能信息的第一存储空间为所述第一目标存储空间。
5.根据权利要求4所述的方法,其特征在于,所述从所述第一目标存储空间读取所述目标数据,包括:
从每一第一目标存储空间中读取子目标数据;其中,所述每一第一目标存储空间的所述子目标数据的大小与所述每一第一目标存储空间的性能信息对应;
基于每一所述子目标数据合成所述目标数据。
6.根据权利要求1所述的方法,其特征在于,所述从所述第一目标存储空间读取所述目标数据,包括:
获取每一第一存储空间的存储介质的位置;其中,所述每一第一存储空间的存储介质中存储有所述目标数据;
基于所述每一第一存储空间的存储介质的位置,确定所述第一目标存储空间的存储介质的位置;
基于所述第一目标存储空间的存储介质的位置,从所述第一目标存储空间的存储介质中读取所述目标数据。
7.根据权利要求3所述的方法,其特征在于,所述当前工作参数包括:类型、参数、吞吐量以及工作状态中的至少一者。
8.一种电子设备,其特征在于,所述电子设备包括:处理器、存储器和通信总线;
所述通信总线用于实现处理器和存储器之间的通信连接;
所述处理器用于执行存储器中的数据读取方法的程序,以实现以下步骤:
接收用于读取目标数据的第一读取请求;
基于所述第一读取请求,获取与所述目标数据对应的至少两个第一存储空间的性能信息;其中,每一第一存储空间存储有所述目标数据;所述性能信息用于表征从第一存储空间中读取所述目标数据时的读取性能;
基于所述至少两个第一存储空间的性能信息,从所述至少两个第一存储空间中确定第一目标存储空间;所述第一目标存储空间的性能信息是至少两个第一存储空间的性能信息中的最高性能信息;所述最高性能信息表征从与所述最高性能信息对应的第一存储空间中读取目标数据时,在速度、稳定性、第一存储空间的消耗、产生的温度以及准确性中的至少一者综合最优;
从所述第一目标存储空间读取所述目标数据;
接收用于读取所述目标数据的第二读取请求;
基于所述第二读取请求,获取所述第一目标存储空间的第一性能信息;
若所述第一性能信息大于或等于第二预设性能信息,从所述第一目标存储空间读取所述目标数据;
若所述第一性能信息小于所述第二预设性能信息,获取所述至少两个第一存储空间中除所述第一目标存储空间外的第一存储空间的第二性能信息;
确定大于或等于第三预设性能信息的第二性能信息所对应的第一存储空间为第二目标存储空间;
从所述第二目标存储空间读取所述目标数据。
9.一种计算机存储介质,其特征在于,所述计算机存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现如权利要求1至7中任一项所述的数据读取方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910765735.6A CN112395256B (zh) | 2019-08-19 | 2019-08-19 | 一种数据读取方法、电子设备及计算机存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910765735.6A CN112395256B (zh) | 2019-08-19 | 2019-08-19 | 一种数据读取方法、电子设备及计算机存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112395256A CN112395256A (zh) | 2021-02-23 |
CN112395256B true CN112395256B (zh) | 2024-05-03 |
Family
ID=74603566
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910765735.6A Active CN112395256B (zh) | 2019-08-19 | 2019-08-19 | 一种数据读取方法、电子设备及计算机存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112395256B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113778346B (zh) * | 2021-11-12 | 2022-02-11 | 深圳市名竹科技有限公司 | 数据读取方法、装置、设备和存储介质 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107273187A (zh) * | 2017-06-29 | 2017-10-20 | 深信服科技股份有限公司 | 读取位置获取方法及装置、计算机装置、可读存储介质 |
-
2019
- 2019-08-19 CN CN201910765735.6A patent/CN112395256B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107273187A (zh) * | 2017-06-29 | 2017-10-20 | 深信服科技股份有限公司 | 读取位置获取方法及装置、计算机装置、可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN112395256A (zh) | 2021-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10817212B2 (en) | Method and apparatus for creating a short hash handle highly correlated with a globally-unique hash signature | |
US10678751B2 (en) | Data protection and long term retention | |
US9495294B2 (en) | Enhancing data processing performance by cache management of fingerprint index | |
CN106708425B (zh) | 分布式多模存储管理 | |
US9116936B2 (en) | Inline learning-based selective deduplication for primary storage systems | |
US8347050B2 (en) | Append-based shared persistent storage | |
US10042751B1 (en) | Method and system for multi-tier all-flash array | |
US9665485B2 (en) | Logical and physical block addressing for efficiently storing data to improve access speed in a data deduplication system | |
US9798655B2 (en) | Managing a cache on storage devices supporting compression | |
US9330108B2 (en) | Multi-site heat map management | |
US9507720B2 (en) | Block storage-based data processing methods, apparatus, and systems | |
US8145930B2 (en) | Storage system and management information acquisition method for power saving | |
CN109976669B (zh) | 一种边缘存储方法、装置和存储介质 | |
US11995318B2 (en) | Deallocated block determination | |
CN109582213A (zh) | 数据重构方法及装置、数据存储系统 | |
US10963182B2 (en) | System and method for on-demand recovery points | |
CN111475108A (zh) | 一种分布式存储方法、计算机设备及计算机可读存储介质 | |
US10387043B2 (en) | Writing target file including determination of whether to apply duplication elimination | |
US11256434B2 (en) | Data de-duplication | |
CN112395256B (zh) | 一种数据读取方法、电子设备及计算机存储介质 | |
US11381400B2 (en) | Using double hashing schema to reduce short hash handle collisions and improve memory allocation in content-addressable storage systems | |
US20120151005A1 (en) | Image file download method | |
CN117492661A (zh) | 数据写入方法、介质、装置和计算设备 | |
US20230185822A1 (en) | Distributed storage system | |
CN116662268A (zh) | 分布式存储系统上精简置备的副本实时创建的方法及应用 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |