CN113190507B - 一种索引信息同步方法、装置及电子设备 - Google Patents
一种索引信息同步方法、装置及电子设备 Download PDFInfo
- Publication number
- CN113190507B CN113190507B CN202110529071.0A CN202110529071A CN113190507B CN 113190507 B CN113190507 B CN 113190507B CN 202110529071 A CN202110529071 A CN 202110529071A CN 113190507 B CN113190507 B CN 113190507B
- Authority
- CN
- China
- Prior art keywords
- storage medium
- index information
- target storage
- synchronized
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/13—File access structures, e.g. distributed indices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/178—Techniques for file synchronisation in file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/1847—File system types specifically adapted to static storage, e.g. adapted to flash memory or SSD
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
本发明实施例提供了一种索引信息同步方法、装置及电子设备,审计数据存储技术领域。该方法应用于电子设备,该电子设备中设置有固态硬盘SSD,该方法包括:确定待进行索引信息同步的目标存储介质,其中,所述目标存储介质为:接入所述电子设备的存储介质;判断所述SSD中是否记录有所述目标存储介质的同步进度信息,得到判断结果;其中,所述同步进度信息用于表明所述目标存储介质中的索引信息同步至所述SSD的进度;基于所述判断结果,从所述目标存储介质所存储的索引信息中,确定各个待同步索引信息;将所确定的各个待同步索引信息同步到所述SSD。与现有技术相比,应用本发明实施例提供的方案,能够实现将各类存储介质中的索引信息同步到SSD中。
Description
技术领域
本发明涉及数据存储技术领域,特别是涉及一种索引信息同步方法、装置及电子设备。
背景技术
当前,由于磁盘、网盘等各类存储介质具有较大的存储空间,因此,可以将文件、图片、音视频等各类数据存储到上述各类存储介质中,并在各类存储介质中生成所存储数据的索引信息。这样,通过检索各类存储介质中的索引信息,可以检索上述存储介质中所存储的数据。
并且,由于SSD(Solid State Disk,固态硬盘)具有读写速度快的优势,因此,通过检索SSD中的索引信息来检索上述存储介质中所存储的数据,无疑可以提高数据检索效率。
基于此,如何将各类存储介质中的索引信息同步到SSD中,成为当前亟待解决的问题。
发明内容
本发明实施例的目的在于提供一种索引信息同步方法、装置及电子设备,以实现将各类存储介质中的索引信息同步到SSD中。具体技术方案如下:
第一方面,本发明实施例提供了一种索引信息同步方法,应用于电子设备,所述电子设备中设置有固态硬盘SSD,所述方法包括:
确定待进行索引信息同步的目标存储介质;其中,所述目标存储介质为:接入所述电子设备的存储介质;
判断所述SSD中是否记录有所述目标存储介质的同步进度信息,得到判断结果;其中,所述同步进度信息用于表明所述目标存储介质中的索引信息同步至所述SSD的进度;
基于所述判断结果,从所述目标存储介质所存储的索引信息中,确定各个待同步索引信息;
将所确定的各个待同步索引信息同步到所述SSD。
可选的,一种具体实现方式中,所述确定待进行索引信息同步的目标存储介质的步骤,包括:
在检测到所述电子设备接入存储介质时,将所接入的存储介质确定为待进行索引信息同步的目标存储介质。
可选的,一种具体实现方式中,所述判断所述SSD中是否记录有所述目标存储介质的同步进度信息,得到判断结果的步骤,包括:
判断所述SSD中是否存在关于介质标识与同步进度信息的对应关系;其中,所述对应关系中,任一介质标识为:在所述SSD中同步过索引信息的存储介质的介质标识,且任一介质标识对应的同步进度信息为:具有该介质标识的存储介质的同步进度信息;
如果不存在,确定判断结果为未记录有所述目标存储介质的同步进度信息;
和/或,
如果存在,则在从所述对应关系中,查找到所述目标存储介质的介质标识的情况下,确定判断结果为记录有所述目标存储介质的同步进度信息;在从所述对应关系中,查找不到所述目标存储介质的介质标识的情况下,确定判断结果为未记录有所述目标存储介质的同步进度信息。
可选的,一种具体实现方式中,任一存储介质的同步进度信息包括:第一生成时刻;其中,所述第一生成时刻为:该存储介质中,被同步到所述SSD且生成时刻最早的索引信息的生成时刻;
所述基于所述判断结果,从所述目标存储介质所存储的索引信息中,确定各个待同步索引信息的步骤,包括:
若所述判断结果为记录有所述目标存储介质的同步进度信息,则从所述目标存储介质所存储的索引信息中,查找生成时刻早于目标生成时刻的各个索引信息,得到各个待同步索引信息;其中,所述目标生成时刻为:所述目标存储介质的同步进度信息中包括的第一生成时刻;
若所述判断结果为未记录有所述目标存储介质的同步进度信息,则将所述目标存储介质所存储的全部索引信息,确定为待同步索引信息。
可选的,一种具体实现方式中,所述目标存储介质的数量为多个;
所述将所确定的各个待同步索引信息同步到所述SSD的步骤,包括:
从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息,作为待利用索引信息;
从所述待利用索引信息所属的目标存储介质中,确定生成时刻属于目标时间范围的各个待同步索引信息;其中,所述目标时间范围为:所述待利用索引信息的生成时刻所在的同步周期,所述同步周期是按照预定时间粒度划分的;
将所确定的各个待同步索引信息,同步至所述SSD,并返回所述从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息的步骤。
可选的,一种具体实现方式中,所述方法还包括:
若所述判断结果为记录有所述目标存储介质的同步进度信息,则在所述将所确定的各个待同步索引信息同步到所述SSD的步骤之后,更新所述SSD中记录的所述目标存储介质的同步进度信息;
若所述判断结果为未记录有所述目标存储介质的同步进度信息,则在所述将所确定的各个待同步索引信息同步到所述SSD的步骤之后,在所述SSD中添加所述目标存储介质的同步进度信息。
可选的,一种具体实现方式中,所述方法还包括:
在检测到所述电子设备与所述目标存储介质断开连接,且连接断开的时长超过预设时长时,删除所述SSD中记录的所述目标存储介质的同步进度信息和从所述目标存储介质中同步的各个索引信息。
可选的,一种具体实现方式中,所述方法还包括:
在检测到所述目标存储介质中写入新的索引信息时,在所述SSD中同步写入所述新的索引信息。
第二方面,本发明实施例提供了一种索引信息同步装置,应用于电子设备,所述电子设备中设置有固态硬盘SSD,所述装置包括:
介质确定模块,用于确定待进行索引信息同步的目标存储介质;其中,所述目标存储介质为:接入所述电子设备的存储介质;
结果获得模块,用于判断所述SSD中是否记录有所述目标存储介质的同步进度信息,得到判断结果;其中,所述同步进度信息用于表明所述目标存储介质中的索引信息同步至所述SSD的进度;
信息确定模块,用于基于所述判断结果,从所述目标存储介质所存储的索引信息中,确定各个待同步索引信息;
信息同步模块,用于将所确定的各个待同步索引信息同步到所述SSD。
可选的,一种具体实现方式中,所述介质确定模块具体用于:
在检测到所述电子设备接入存储介质时,将所接入的存储介质确定为待进行索引信息同步的目标存储介质。
可选的,一种具体实现方式中,所述结果获得模块具体用于:
判断所述SSD中是否存在关于介质标识与同步进度信息的对应关系;其中,所述对应关系中,任一介质标识为:在所述SSD中同步过索引信息的存储介质的介质标识,且任一介质标识对应的同步进度信息为:具有该介质标识的存储介质的同步进度信息;
如果不存在,确定判断结果为未记录有所述目标存储介质的同步进度信息;和/或,
如果存在,则在从所述对应关系中,查找到所述目标存储介质的介质标识的情况下,确定判断结果为记录有所述目标存储介质的同步进度信息;在从所述对应关系中,查找不到所述目标存储介质的介质标识的情况下,确定判断结果为未记录有所述目标存储介质的同步进度信息。
可选的,一种具体实现方式中,任一存储介质的同步进度信息包括:第一生成时刻;其中,所述第一生成时刻为:该存储介质中,被同步到所述SSD且生成时刻最早的索引信息的生成时刻;所述信息确定模块具体用于:
若所述判断结果为记录有所述目标存储介质的同步进度信息,则从所述目标存储介质所存储的索引信息中,查找生成时刻早于目标生成时刻的各个索引信息,得到各个待同步索引信息;其中,所述目标生成时刻为:所述目标存储介质的同步进度信息中包括的第一生成时刻;
若所述判断结果为未记录有所述目标存储介质的同步进度信息,则将所述目标存储介质所存储的全部索引信息,确定为待同步索引信息。
可选的,一种具体实现方式中,所述目标存储介质的数量为多个;所述信息同步模块具体用于:
从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息,作为待利用索引信息;
从所述待利用索引信息所属的目标存储介质中,确定生成时刻属于目标时间范围的各个待同步索引信息;其中,所述目标时间范围为:所述待利用索引信息的生成时刻所在的同步周期,所述同步周期时按照预定时间粒度划分的;
将所确定的各个待同步索引信息,同步至所述SSD,并返回所述从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息的步骤。
可选的,一种具体实现方式中,所述装置还包括:
信息更新模块,用于若所述判断结果为记录有所述目标存储介质的同步进度信息,则在所述将所确定的各个待同步索引信息同步到所述SSD的步骤之后,更新所述SSD中记录的所述目标存储介质的同步进度信息;
信息添加模块,用于若所述判断结果为未记录有所述目标存储介质的同步进度信息,则在所述将所确定的各个待同步索引信息同步到所述SSD的步骤之后,在所述SSD中添加所述目标存储介质的同步进度信息。
可选的,一种具体实现方式中,所述装置还包括:
信息删除模块,用于在检测到所述电子设备与所述目标存储介质断开连接,且连接断开的时长超过预设时长时,删除所述SSD中记录的所述目标存储介质的同步进度信息和从所述目标存储介质中同步的各个索引信息。
可选的,一种具体实现方式中,所述装置还包括:
信息写入模块,用于在检测到所述目标存储介质中写入新的索引信息时,在所述SSD中同步写入所述新的索引信息。
第三方面,本发明实施例提供了一种电子设备,所述电子设备设置有固态硬盘SSD,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现上述第一方面提供的任一索引信息同步方法的步骤。
第四方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述第一方面提供的任一索引信息同步方法的步骤。
第五方面,本发明实施例提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述第一方面提供的任一索引信息同步方法的步骤。
本发明实施例有益效果:
以上可见,应用本发明实施例提供的方案,设置有SSD的电子设备可以首先确定待进行索引信息同步的目标存储介质,其中,该目标存储介质为接入该电子设备的存储介质,进而,便可以判断该SSD中是否记录有该目标存储介质的同步进度信息,并根据所得到的判断结果,从目标存储介质所存储的索引信息中,确定各个待同步索引信息,从而,将所确定的各个待同步索引信息同步到SSD中。
基于此,应用本发明实施例提供的方案,在确定待进行索引信息同步的目标存储介质后,便可以进一步的将目标存储介质中的待同步索引信息同步到SSD中,从而,可以实现将各类存储介质中的索引信息同步到SSD中。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种索引信息同步方法的流程示意图;
图2为图1中S102的一种具体实现方式的流程示意图;
图3为图1中S104的一种具体实现方式的流程示意图;
图4为本发明实施例提供的一种索引信息同步装置的结构示意图;
图5为本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
当前,由于SSD具有读写速度快的优势,因此,通过检索SSD中的索引信息来检索各类存储介质中所存储的数据,无疑可以提高数据检索效率。基于此,如何将各类存储介质中的索引信息同步到SSD中,成为当前亟待解决的问题。
为了解决上述技术问题,本发明实施例提供了一种索引信息同步方法。
其中,该索引信息同步方法可以适用于任一需要对各类存储介质中的数据进行检索的应用场景,例如,智能交通领域中对车辆信息进行检索、视频监控领域对监控信息进行检索等,这都是合理的。
进而,该索引信息同步方法可以应用于NVR(Network Video Recorder,网络视频录像机)、DVR(Digital Video Recorder,数字视频录像机)等各类电子设备中,该电子设备中设置有SSD,并且,该电子设备还可以接入有其他类型的存储介质,例如,该电子设备还可以接入有磁盘、电脑硬盘(Hard Disk Drive)、网盘等存储介质。其中,对于磁盘、电脑硬盘等以硬件实体的形式存在的各类存储介质而言,所谓接入是指:通过硬件接口,直接插入该存储介质,而对于网盘等以非硬件实体的形式存在的各类介质,所谓接入是指:通过网络接口,建立连接,以使得电子设备能够访问该存储介质。
此外,该电子设备和所接入的各类存储介质可以位于各类数据存储系统中,例如,分布式存储系统,那么,在这种情况下,所谓电子设备接入其他的各类存储介质,是指在该数据存储系统中,接入各类存储介质。也就是说,电子设备接入其他的各类存储介质时,可以是电子设备与所接入的存储介质直接连接,也可以是电子设备与所接入的存储介质间接连接。基于此,在本发明实施例中,电子设备接入其他的各类存储介质时,只要保证电子设备能够访问该存储介质即可,并非限定电子设备与所接入的存储介质直接连接。
进一步的,可选的,各类存储介质中所存储的各个索引信息中,可以包括索引信息所对应的数据的属性信息和/或索引信息所对应的数据的采集信息。
例如,若数据为人脸图片,则该数据的索引信息中可以包括:姓名、人脸模型信息、年龄、是否戴眼镜、是否背包、采集时间、采集地点等各类信息中的一种或多种;又例如,若数据为车辆图片,则该数据的索引信息中可以包括:车牌号、车辆颜色、车辆型号、车主姓名、采集时间、采集地点等各类信息中的一种或多种。
当然,各类存储介质中所存储的各个索引信息中还可以包括其他类型的信息,例如,若数据为车辆图片,则该数据的索引信息中还可以包括:该车辆的违章信息等。这都是合理的。
以上,本发明实施例提供的一种索引信息同步方法可以包括如下步骤:
确定待进行索引信息同步的目标存储介质;其中,所述目标存储介质为:接入所述电子设备的存储介质;
判断所述SSD中是否记录有所述目标存储介质的同步进度信息,得到判断结果;其中,所述同步进度信息用于表明所述目标存储介质中的索引信息同步至所述SSD的进度;
基于所述判断结果,从所述目标存储介质所存储的索引信息中,确定各个待同步索引信息;
将所确定的各个待同步索引信息同步到所述SSD。
以上可见,应用本发明实施例提供的方案,设置有SSD的电子设备可以首先确定待进行索引信息同步的目标存储介质,其中,该目标存储介质为接入该电子设备的存储介质,进而,便可以判断该SSD中是否记录有该目标存储介质的同步进度信息,并根据所得到的判断结果,从目标存储介质所存储的索引信息中,确定各个待同步索引信息,从而,将所确定的各个待同步索引信息同步到SSD中。
基于此,应用本发明实施例提供的方案,在确定待进行索引信息同步的目标存储介质后,便可以进一步的将目标存储介质中的待同步索引信息同步到SSD中,从而,可以实现将各类存储介质中的索引信息同步到SSD中。
下面,结合附图,对本发明实施例提供的一种索引信息同步方法进行具体说明。
图1为本发明实施例提供的的一种索引信息同步方法的流程示意图,如图1所示,该方法可以包括如下步骤S101-S104。
S101:确定待进行索引信息同步的目标存储介质;
其中,目标存储介质为:接入电子设备的存储介质;
在进行索引信息同步时,电子设备可以首先确定待进行索引信息同步的目标存储介质。其中,目标存储介质为接入电子设备的存储介质。
S102:判断SSD中是否记录有目标存储介质的同步进度信息,得到判断结果;
其中,同步进度信息用于表明目标存储介质中的索引信息同步至SSD的进度;
在确定得到待进行索引信息同步的的目标存储介质后,电子设备便可以判断自身所设置的SSD中是否记录有目标存储介质的同步进度信息,并得到判断结果。
其中,由于同步进度信息用于表明目标存储介质中的索引信息同步至SSD的进度,因此,也就是说,电子设备可以通过判断SSD中是否记录有目标存储介质的同步进度信息,判断是否曾经将目标存储介质中的索引信息同步到SSD中,即SSD中是否存储有目标存储介质中的索引信息。
S103:基于判断结果,从目标存储介质所存储的索引信息中,确定各个待同步索引信息;
进而,在得到上述判断结果后,电子设备便可以根据该判断结果从目标存储介质所存储的索引信息中,确定各个待同步索引信息。
S104:将所确定的各个待同步索引信息同步到SSD。
电子设备在确定各个待同步索引信息后,便可以将所确定的各个待同步索引信息同步SSD。
其中,可选的,SSD中可以记录有从存储介质中同步的索引信息的索引信息,从而,在将所确定的各个待同步索引信息同步到SSD后,可以在SSD中生成各个待同步索引信息的索引信息。
可选的,为了保证在通过检索SSD中的索引信息来检索上述存储介质中所存储的数据时,能够取得较高的数据检索效率,在将所确定的各个待同步索引信息同步到SSD时,可以在SSD中所存储的各个待同步索引信息中添加该待同步索引信息所属的存储介质的介质标识。也就是说,在SSD中所存储的索引信息中,可以包括该索引信息的来源,从而,通过SSD中每个索引信息中包括的介质标识,可以确定该索引信息是从哪个存储介质中同步的。
可选的,当SSD中所存储的索引信息的数量已经达到预设的数量上限,且仍然存在未执行同步的待同步索引信息时,可以将未执行同步的各个待同步索引信息覆盖存储到SSD中所存储的生成时刻最早的索引信息。
以上可见,应用本发明实施例提供的方案,设置有SSD的电子设备可以首先确定待进行索引信息同步的目标存储介质,其中,该目标存储介质为接入该电子设备的存储介质,进而,便可以判断该SSD中是否记录有该目标存储介质的同步进度信息,并根据所得到的判断结果,从目标存储介质所存储的索引信息中,确定各个待同步索引信息,从而,将所确定的各个待同步索引信息同步到SSD中。
基于此,应用本发明实施例提供的方案,在确定待进行索引信息同步的目标存储介质后,便可以进一步的将目标存储介质中的待同步索引信息同步到SSD中,从而,可以实现将各类存储介质中的索引信息同步到SSD中。
可选的,一种具体实现方式中,上述步骤S101,确定待进行索引信息同步的目标存储介质,可以包括如下步骤1011。
步骤1011:在检测到电子设备接入存储介质时,将所接入的存储介质确定为待进行索引信息同步的目标存储介质。
在本具体实现方式中,电子设备可以在检测到接入存储介质时,将所接入的存储介质确定为待进行索引信息同步的的目标存储介质。
也就是说,在电子设备的运行过程中,当电子设备检测到有新接入的存储介质时,则可以将所检测到的该新接入的存储介质确定为待进行索引信息同步的目标存储介质。
其中,上述所接入的存储介质可以是直接与电子设备连接的存储介质,也可以是接入电子设备所在的数据存储系统中的存储介质,这都是合理的。
可选的,一种具体实现方式中,上述步骤S101可以包括如下步骤1012。
步骤1012:在电子设备启动时,将电子设备所接入的各个存储介质确定为待进行索引信息同步的的目标存储介质。
在本具体实现方式中,电子设备可以是从断电状态重新启动,也可以是电子设备的首次启动,此时,电子设备在启动后,便可以将自身所接入的各个存储存储介质确定为待进行索引信息同步的目标存储介质。
可选的,一种具体实现方式中,如图2所示,上述步骤S102,判断SSD中是否记录有目标存储介质的同步进度信息,得到判断结果,可以包括如下步骤S1021-S1023。
S1021:判断SSD中是否存在关于介质标识与同步进度信息的对应关系;如果不存在,执行步骤S1022;如果存在执行步骤S1023;
其中,对应关系中,任一介质标识为:在SSD中同步过索引信息的存储介质的介质标识,且任一介质标识对应的同步进度信息为:具有该介质标识的存储介质的同步进度信息;
S1022:确定判断结果为未记录有目标存储介质的同步进度信息;
S1023;在从对应关系中,查找到目标存储介质的介质标识的情况下,确定判断结果为记录有目标存储介质的同步进度信息;在从对应关系中,查找不到目标存储介质的介质标识的情况下,确定判断结果为未记录有目标存储介质的同步进度信息。
在本具体实现方式中,电子设备可以首先判断SSD中是否存在关于介质标识与同步进度信息的对应关系。
进而,若电子设备判断出SSD中不存在关于介质标识与同步进度信息的对应关系,则电子设备便可以确定判断结果为未记录有目标存储介质的同步进度信息。例如,若电子设备为首次启动,则电子设备中未同步有任一存储介质中的索引信息,则电子设备中可以未建立关于介质标识与同步进度信息的对应关系,从而,电子设备中不存在关于介质标识与同步进度信息的对应关系,进而,电子设备也就未记录有目标存储介质的同步进度信息。
其中,可选的,电子设备可以利用映射表、信息条目等多种方式,建立介质标识与同步进度信息的对应关系。
若电子设备利用信息条目建立介质标识与同步进度信息的对应关系,则每一信息条目中可以包括:介质标识和同步进度信息,该信息条目中的介质标识即为在SSD中同步过索引信息的存储介质的介质标识,该信息条目中的同步进度信息即为:具有该信息条目中的介质标识的存储介质的同步进度信息。
相应的,若判断出SSD中存在关于介质标识与同步进度信息的对应关系,则电子设备可以进一步在该对应关系中,查找目标存储介质的介质标识。
其中,若电子设备在该对应关系中,查找到目标存储介质的介质标识,则可以说明SSD中记录有目标存储介质的同步进度信息,且所查找到的目标存储介质的介质标识对应的同步进度信息,即为目标存储介质的同步进度信息,这样,便可以确定判断结果为记录有目标存储介质的同步进度信息。
而若电子设备在该对应关系中,未查找到目标存储介质的介质标识,则可以说明SSD中未记录有目标存储介质的同步进度信息,这样,便可以确定判断结果为未记录有目标存储介质的同步进度信息。
在上述图2所示具体实现方式的基础上,在很多情况下,电子设备在判断出SSD中不存在关于介质标识与同步进度信息的对应关系的情况下,可以采用除上述步骤S1022之外的其他方式,判断SSD中是否记录有目标存储介质的同步进度信息。
例如,在判断出SSD中不存在关于介质标识与同步进度信息的对应关系的情况下,电子设备可以进一步判断SSD中是否存储有具有同步进度信息与索引信息的对应关系,其中,同步进度信息与索引信息的对应关系中,索引信息为:某一存储介质中被同步到SSD中的索引信息,索引信息对应的同步进度信息为:索引信息所属的存储介质的同步进度信息,索引信息中包括所属的存储介质的介质标识。这样,在电子设备判断出SSD中存储有具有同步进度信息与索引信息的对应关系的情况下,便可以进一步判断该同步进度信息与索引信息中,是否存在包括目标存储介质的介质标识的索引信息。进而,在判断出包括该同步进度信息与索引信息中,存在包括目标存储介质的介质标识的索引信息的情况下,便可以确定SSD中记录有目标存储介质的同步进度信息,且上述包括目标存储介质的介质标识的索引信息所对应的同步进度信息即为:目标存储介质的同步进度信息。
其中,需要说明的是,上述例子仅仅是对电子设备在判断出SSD中不存在关于介质标识与同步进度信息的对应关系的情况下,判断SSD中是否记录有目标存储介质的同步进度信息的方式的举例说明,而非限定。电子设备所采用的任一能够在判断出SSD中不存在关于介质标识与同步进度信息的对应关系的情况下,判断SSD中是否记录有目标存储介质的同步进度信息的方式均位于本发明的保护范围内。
相应的,在很多情况下,电子设备在判断出SSD中存在关于介质标识与同步进度信息的对应关系的情况下,也可以采用除上述步骤S1023之外的其他方式,判断SSD中是否记录有目标存储介质的同步进度信息。
例如,在判断出SSD中存在关于介质标识与同步进度信息的对应关系的情况下,电子设备可以判断目标存储介质是否为首次接入电子设备,如果是,则可以确定SSD中未记录有目标存储介质的同步进度信息,如果否,则SSD中未记录有目标存储介质的同步进度信息。
其中,需要说明的是,上述例子仅仅是对电子设备在判断出SSD中存在关于介质标识与同步进度信息的对应关系的情况下,判断SSD中是否记录有目标存储介质的同步进度信息的方式的举例说明,而非限定。电子设备所采用的任一能够在判断出SSD中存在关于介质标识与同步进度信息的对应关系的情况下,判断SSD中是否记录有目标存储介质的同步进度信息的方式均位于本发明的保护范围内。
基于此,可选的,一种具体实现方式中,上述步骤S102,判断SSD中是否记录有目标存储介质的同步进度信息,得到判断结果,可以包括如下步骤1和2:
步骤1:判断SSD中是否存在关于介质标识与同步进度信息的对应关系;如果不存在,执行步骤2;
其中,对应关系中,任一介质标识为:在SSD中同步过索引信息的存储介质的介质标识,且任一介质标识对应的同步进度信息为:具有该介质标识的存储介质的同步进度信息;
步骤2:确定判断结果为未记录有目标存储介质的同步进度信息。
其中,上述步骤1和2,与上述图2所示具体实现方式中的步骤S1021和S1022相同,在此不再赘述。
可选的,另一种具体实现方式中,上述步骤S102,判断SSD中是否记录有目标存储介质的同步进度信息,得到判断结果,可以包括如下步骤1和3:
步骤1:判断SSD中是否存在关于介质标识与同步进度信息的对应关系;如果存在,执行步骤3;
其中,对应关系中,任一介质标识为:在SSD中同步过索引信息的存储介质的介质标识,且任一介质标识对应的同步进度信息为:具有该介质标识的存储介质的同步进度信息;
步骤3:在从对应关系中,查找到目标存储介质的介质标识的情况下,确定判断结果为记录有目标存储介质的同步进度信息;在从对应关系中,查找不到目标存储介质的介质标识的情况下,确定判断结果为未记录有目标存储介质的同步进度信息。
其中,上述步骤1和3,与上述图2所示具体实现方式中的步骤S1021和S1023相同,在此不再赘述。
可选的,一种具体实现方式中,SSD中所记录的任一存储介质的同步进度信息可以包括:第一生成时刻;其中,第一生成时刻为:该存储介质中,被同步到SSD且生成时刻最早的索引信息的生成时刻。
需要强调的是:在本具体实现方式中,所谓索引信息的生成时刻是指:若索引信息所对应的数据未进行过修改,则该索引信息的生成时刻即为存储该数据时,同步创建该索引信息的时刻;若索引信息所对应的数据进行过修改,则该索引信息的生成时刻即为最近一次修改该数据时,同步修改该索引信息的时刻。也就是说,所谓索引信息的生成时刻为:对该索引信息进行创建和修改时,创建时刻和各个修改时刻中的最晚时刻。
进一步的,需要强调的是:在将存储介质中的索引信息同步到SSD中时,所同步的各个索引信息是按照生成时刻由晚到早的顺序进行同步的,也就是说,在进行索引信息同步时,越晚生成的索引信息可以越先被同步到SSD中。
基于此,以SSD中所记录的某个存储介质的同步进度信息为例,该存储介质的同步进度信息可以包括:第一生成时刻,而该第一生成时刻为:该存储介质中,被同步到SSD且生成时刻最早的索引信息的生成时刻。进而,该存储介质的同步信息可以表征:该存储介质中,生成时刻不早于上述第一生成时刻的各个索引信息,已经被同步至SSD中,而该存储介质中,生成时刻早于上述第一生成时刻的各个索引信息,还未被同步至SSD中。
例如,某个存储介质的同步进度信息中所包括的第一生成时刻为A;则该存储介质中,生成时刻不早于时刻A的各个索引信息已经被同步到SSD中,而该存储介质中,生成时刻早于时刻A的各个索引信息还未被同步到SSD。
相应的,在本具体实现方式中,上述步骤S103,基于判断结果,从目标存储介质所存储的索引信息中,确定各个待同步索引信息,可以包括如下步骤1031-1032。
步骤1031:若判断结果为记录有目标存储介质的同步进度信息,则从目标存储介质所存储的索引信息中,查找生成时刻早于目标生成时刻的各个索引信息,得到各个待同步索引信息;
其中,目标生成时刻为:目标存储介质的同步进度信息中包括的第一生成时刻。
在本具体实现方式中,针对目标存储介质,若判断出SSD中记录有目标存储介质的同步进度信息,则可以说明曾经将目标存储介质中的索引信息同步到SSD中,进而,可以获取目标存储介质的同步信息中所包括的第一生成时刻,并将目标存储介质的同步信息中所包括的第一生成时刻作为目标生成时刻。
其中,由于上述目标生成时刻为:该目标存储介质中,被同步到SSD且生成时刻最早的索引信息的生成时刻,从而,可以说明目标存储介质中生成时刻不早于上述目标生成时刻的索引信息已经被同步到SSD中,而生成时刻早于上述目标生成时刻的索引信息均未同步到SSD中。这样,电子设备便可以从目标存储介质所存储的索引信息中,查找生成时刻早于目标生成时刻的各个索引信息,得到各个待同步索引信息。
例如,目标存储介质A中存储有索引信息1和索引信息2,其中,索引信息1的生成时刻为a,索引信息2的生成时刻为b,且b晚于a,并且,SSD中所记录的目标存储介质的同步进度信息中包括的第一生成时刻为b,即目标生成时刻为b。因此,可以说明,SSD中已经同步有索引信息2,而未同步有索引信息1,从而,电子设备可以将索引信息1确定为待同步索引信息。
这样,对于目标存储介质而言,可以支持该目标存储介质的热插拔,从而,可以在目标存储介质断电再接入后,支持断点续同步,即在目标存储介质与电子设备断开连接后,当再次接入电子设备时,可以按照上次接入时的索引信息的同步进度,继续将未同步到SSD的索引信息同步到SSD中,而对于此次接入之前已经同步到SSD的索引信息而言,无需再次同步,以免造成重复同步,浪费SSD中的存储空间。
步骤1032:若判断结果为未记录有目标存储介质的同步进度信息,则将目标存储介质所存储的全部索引信息,确定为待同步索引信息。
相应的,针对目标存储介质,若判断出SSD中未记录有目标存储介质的同步进度信息,则可以说明未曾将目标存储介质中的索引信息同步到SSD中,也就是说,SSD中未存储有目标存储机介质中的任一索引信息,从而,需要将目标存储介质所存储的全部索引信息全部同步到SSD中。这样,电子设备便可以将目标存储介质所存储的全部索引信息,确定为待同步索引信息。
例如,目标存储介质A中存储有索引信息1-10,并且,SSD中未记录有目标存储介质的同步进度信息。因此,可以说明,SSD中未存储有索引信息1-10,从而,电子设备可以将索引信息1-10确定为待同步索引信息。
可选的,一种具体实现方式中,上述步骤S104,将所确定的各个待同步索引信息同步到SSD,可以包括如下步骤1040:
步骤1040:按照各个待同步索引信息的生成时刻由晚到早的顺序,依次将各个待同步索引信息同步到SSD。
在本具体方式中,在确定各个待同步索引信息后,电子设备可以进一步确定各个待同步索引索引信息的生成时刻,从而,可以按照各个待同步索引信息的生成时刻由晚到早的顺序,依次将各个待同步索引信息同步到SSD。
也就是说,在具体实现方式中,越晚生成的待同步索引信息,将会越早被同步到SSD中,这样,由于在对数据的实际检索过程中,用户往往更倾向于检索较晚生成的数据,因此,可以更好地提高数据检索效率。
可选的,一种具体实现方式中,若电子设备所确定的目标存储介质的数量为多个,则如图3所示,上述步骤S104,将所确定的各个待同步索引信息同步到SSD,可以包括如下步骤S1041-S1043。
S1041:从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息,作为待利用索引信息;
S1042:从待利用索引信息所属的目标存储介质中,确定生成时刻属于目标时间范围的各个待同步索引信息;
其中,目标时间范围为:待利用索引信息的生成时刻所在的同步周期,同步周期是按照预定时间粒度划分的。
S1043:将所确定的各个待同步索引信息,同步至SSD,并返回S1041。
在本具体实现方式中,在确定各个待同步索引信息后,电子设备可以从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息,作为待利用索引信息。
进而,电子设备可以确定该待利用索引信息所属的目标存储介质,以及该待利用索引信息的生成时刻所在的,且按照预定时间粒度划分的同步周期,得到目标时间范围。这样,电子设备便可以从待利用索引信息所属的目标存储介质中,确定生成时刻属于目标时间范围的各个待同步索引信息,并将所确定的各个待同步索引信息同步至SSD。
在将上述所确定的各个待同步索引信息同步至SSD后,若仍然存在未发生同步的待同步索引信息,则电子设备便可以返回上述步骤S1041,从所存在的未发生同步的待同步索引信息,再次确定生成时刻最晚的待同步索引信息,作为新的待利用索引信息,并继续执行后续的步骤S1042,以将从新的待利用索引信息所属的目标存储介质中,确定的生成时刻属于目标时间范围的各个待同步索引信息同步至SSD。进而,电子设备可以循环执行上述步骤S1041-S1043,直至不存在未发生同步的待同步索引信息。
其中,由于上述同步周期是按照预定时间粒度划分的,因此,上述同步周期可以是:预先设定的属于预定时间粒度的时长,对于每个同步周期而言,预先设定了该周期的起始时间和终止时间,而该起始时间和终止时间之间的时长为预定时间粒度所表征的时长。
例如,该预定时间粒度为一天(24小时),那么,各个同步周期即为:每个自然日。示例性的,若所确定的待利用索引信息的生成时刻为2020年12月1日9时,则待利用索引信息的生成时刻所在的,且按照预定时间粒度划分的同步周期即为:2020年12月1日0时至2020年12月1日24时。
又例如,该预定时间粒度为一个小时,那么,各个同步周期即为:每个用于记录当前时间的小时。示例性的,若所确定的待利用索引信息的生成时刻为2020年12月1日9时3分,则待利用索引信息的生成时刻所在的,且按照预定时间粒度划分的同步周期即为:2020年12月1日9时至2020年12月1日10时。
这样,在本具体实现方式中,电子设备可以分段对各个目标存储介质中的待同步索引信息进行同步,从而,可以使得保证各个目标存储介质的同步进度能够较为一致。
可选的,一种具体实现方式中,若电子设备所确定的目标存储介质的数量为多个,则上述步骤S104,将所确定的各个待同步索引信息同步到SSD,可以包括如下步骤1044-1046。
步骤1044:从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息,作为待利用索引信息;
步骤1045:从待利用索引信息所属的目标存储介质中,确定生成时刻与该待利用索引信息的生成时刻的差值不超过预设时长的各个待同步索引信息;
步骤1046:将所确定的各个待同步索引信息,同步至SSD,并返回步骤1044。
在本具体实现方式中,在确定各个待同步索引信息后,电子设备可以从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息,作为待利用索引信息。
进而,电子设备可以确定该待利用索引信息所属的目标存储介质,从而,电子设备便可以从该目标存储介质中,确定生成时刻与该待利用索引信息的生成时刻的差值不超过预设时长的各个待同步索引信息,并将所确定的各个待同步索引信息同步至SSD。
在将上述所确定的各个待同步索引信息同步至SSD后,若仍然存在未发生同步的待同步索引信息,则电子设备便可以返回上述步骤1044,从所存在的未发生同步的待同步索引信息,再次确定生成时刻最晚的待同步索引信息,作为新的待利用索引信息,并继续执行后续的步骤1045,以将从新的待利用索引信息所属的目标存储介质中,确定的生成时刻与该待利用索引信息的生成时刻的差值不超过预设时长的各个待同步索引信息同步至SSD。进而,电子设备可以循环执行上述步骤1044-1046,直至不存在未发生同步的待同步索引信息。
其中,上述预设时长可以是一个小时、半个小时、一天等任意时长,对此,本发明实施例不做具体限定。
例如,该预设时长为一天(24小时),那么,示例性的,若所确定的待利用索引信息的生成时刻为2020年12月1日9时,则便可以从将该待利用索引信息所属的目标存储介质中,确定生成时刻位于2020年11月30日9时至2020年12月1日9时之间的各个待同步索引信息。
又例如,该预设时长为一个小时,那么,示例性的,若所确定的待利用索引信息的生成时刻为2020年12月1日9时3分,则便可以从将该待利用索引信息所属的目标存储介质中,确定生成时刻位于2020年11月30日8时3分至2020年12月1日9时3分之间的各个待同步索引信息。
这样,在本具体实现方式中,电子设备可以分段对各个目标存储介质中的待同步索引信息进行同步,从而,可以使得保证各个目标存储介质的同步进度能够较为一致。
可选的,一种具体实现方式中,本发明实施例提供的一种同步信息索引方法还可以包括步骤105-106。
步骤105:若判断结果为记录有目标存储介质的同步进度信息,则在将所确定的各个待同步索引信息同步到SSD的步骤之后,更新SSD中记录的目标存储介质的同步进度信息;
步骤106:若判断结果为未记录有目标存储介质的同步进度信息,则在将所确定的各个待同步索引信息同步到SSD的步骤之后,在SSD中添加目标存储介质的同步进度信息。
为了保证SSD中可以记录有目标存储介质的最新的同步进度信息,那么,在将所确定的各个待同步索引信息同步到SSD之后,可以根据上述步骤S102的判断结果,在SSD中更新或添加目标存储介质的同步进度信息。
其中,若判断结果为记录有目标存储介质的同步进度信息,则在将所确定的各个待同步索引信息同步到SSD之后,可以更新SSD中记录的目标存储介质的同步进度信息。
可选的,若目标存储介质的同步进度信息中包括:目标存储介质中同步到SSD且生成时刻最早的索引信息,那么,在将所确定的各个待同步索引信息同步到SSD之后,可以将目标存储介质的同步进度信息中包括的生成时刻更新为:属于该目标存储介质的各个待同步索引信息中,生成时刻最早的索引信息的生成时刻。
相应的,若判断结果为未记录有目标存储介质的同步进度信息,则在将所确定的各个待同步索引信息同步到SSD之后,可以在SSD中添加目标存储介质的同步进度信息。
可选的,若目标存储介质的同步进度信息中包括:目标存储介质中同步到SSD且生成时刻最早的索引信息,那么,在将所确定的各个待同步索引信息同步到SSD之后,可以在SSD中添加目标存储介质的介质标识和目标索引信息的生成时刻的对应关系,其中,该目标存储介质的目标索引信息即为:目标存储介质中同步到SSD且生成时刻最早的索引信息,也就是说,该目标存储介质的目标索引信息为:属于该目标存储介质的各个待同步索引信息中,生成时刻最早的索引信息。
可选的,一种具体实现方式中,在SSD中存储有目标存储介质的同步进度信息的前提下,本发明实施例提供的一种同步信息索引方法还可以包括步骤107。
步骤107:在检测到电子设备与目标存储介质断开连接,且连接断开的时长超过预设时长时,删除SSD中记录的目标存储介质的同步进度信息和从目标存储介质中同步的各个索引信息。
在本具体实现方式中,电子设备在检测到目标存储介质与自身断开连接时,可以记录连接断开的时长,从而,在连接断开的时长超过预设时长时,电子设备便可以删除SSD中记录的该目标存储介质的同步进度信息和从目标存储介质中同步的各个索引信息。
其中,若目标存储介质与电子设备直接连接,那么,所谓目标存储介质与电子设备断开连接是指:目标存储介质断开与电子设备的直接连接,从而,电子设备无法继续访问目标存储介质。例如,若目标存储介质为磁盘、电脑硬盘等以硬件实体的形式存在的存储介质,则当目标存储介质从电子设备上拔掉时,目标存储介质与电子设备断开连接。
若目标存储介质与电子设备间接连接,那么,所谓目标存储介质与电子设备断开连接是指:目标存储介质断开与电子设备的间接连接,从而,电子设备无法继续访问目标存储介质。例如,若目标存储介质与电子设备位于同一数据存储系统中,那么,当目标存储存储介质从该数据存储系统中移除时,目标存储介质与电子设备断开连接。
这样,对于与电子设备的连接断开较长时间的目标存储介质而言,SSD将不再存储该目标存储介质的同步进度信息和从目标存储介质中同步的各个索引信息,从而,可以节省SSD的存储空间。
可选的,一种具体实现方式中,在SSD中存储有目标存储介质的同步进度信息的前提下,本发明实施例提供的一种同步信息索引方法还可以包括步骤108。
步骤108:在检测到目标存储介质中写入新的索引信息时,在SSD中同步写入新的索引信息。
在本具体实现方式中,在检测到目标存储介质中写入新的索引信息时,则可以说明目标存储介质中生成了新的索引信息,且在目标存储介质中存储的各个索引信息的生成时刻中,该新的索引信息的生成时刻最晚。
这样,为了使得SSD中能够同步存储有目标存储介质中的索引信息,在检测到目标存储介质中写入新的索引信息时,电子设备可以在SSD中同步写入该新的索引信息。
相应于上述本发明实施例提供的一种索引信息同步方法,本发明实施例还提供了一种索引信息同步装置。
其中,该装置应用于电子设备,该电子设备中设置有SSD。
图4为本发明实施例提供的一种索引信息同步装置的结构示意图。如图4所示,该装置可以包括如下模块:
介质确定模块410,用于确定待进行索引信息同步的目标存储介质;其中,所述目标存储介质为:接入所述电子设备的存储介质;
结果获得模块420,用于判断所述SSD中是否记录有所述目标存储介质的同步进度信息,得到判断结果;其中,所述同步进度信息用于表明所述目标存储介质中的索引信息同步至所述SSD的进度;
信息确定模块430,用于基于所述判断结果,从所述目标存储介质所存储的索引信息中,确定各个待同步索引信息;
信息同步模块440,用于将所确定的各个待同步索引信息同步到所述SSD。
以上可见,应用本发明实施例提供的方案,设置有SSD的电子设备可以首先确定待进行索引信息同步的目标存储介质,其中,该目标存储介质为接入该电子设备的存储介质,进而,便可以判断该SSD中是否记录有该目标存储介质的同步进度信息,并根据所得到的判断结果,从目标存储介质所存储的索引信息中,确定各个待同步索引信息,从而,将所确定的各个待同步索引信息同步到SSD中。
基于此,应用本发明实施例提供的方案,在确定待进行索引信息同步的目标存储介质后,便可以进一步的将目标存储介质中的待同步索引信息同步到SSD中,从而,可以实现将各类存储介质中的索引信息同步到SSD中。
可选的,一种具体实现方式中,所述介质确定模块410具体用于:
在检测到所述电子设备接入存储介质时,将所接入的存储介质确定为待进行索引信息同步的目标存储介质。
可选的,一种具体实现方式中,所述结果获得模块420具体用于:
判断所述SSD中是否存在关于介质标识与同步进度信息的对应关系;其中,所述对应关系中,任一介质标识为:在所述SSD中同步过索引信息的存储介质的介质标识,且任一介质标识对应的同步进度信息为:具有该介质标识的存储介质的同步进度信息;
如果不存在,确定判断结果为未记录有所述目标存储介质的同步进度信息;和/或,
如果存在,则在从所述对应关系中,查找到所述目标存储介质的介质标识的情况下,确定判断结果为记录有所述目标存储介质的同步进度信息;在从所述对应关系中,查找不到所述目标存储介质的介质标识的情况下,确定判断结果为未记录有所述目标存储介质的同步进度信息。
可选的,一种具体实现方式中,任一存储介质的同步进度信息包括:第一生成时刻;其中,所述第一生成时刻为:该存储介质中,被同步到所述SSD且生成时刻最早的索引信息的生成时刻;所述信息确定模块430具体用于:
若所述判断结果为记录有所述目标存储介质的同步进度信息,则从所述目标存储介质所存储的索引信息中,查找生成时刻早于目标生成时刻的各个索引信息,得到各个待同步索引信息;其中,所述目标生成时刻为:所述目标存储介质的同步进度信息中包括的第一生成时刻;
若所述判断结果为未记录有所述目标存储介质的同步进度信息,则将所述目标存储介质所存储的全部索引信息,确定为待同步索引信息。
可选的,一种具体实现方式中,所述目标存储介质的数量为多个;所述信息同步模块440具体用于:
从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息,作为待利用索引信息;
从所述待利用索引信息所属的目标存储介质中,确定生成时刻属于目标时间范围的各个待同步索引信息;其中,所述目标时间范围为:所述待利用索引信息的生成时刻所在的同步周期,所述同步周期时按照预定时间粒度划分的;
将所确定的各个待同步索引信息,同步至所述SSD,并返回所述从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息的步骤。
可选的,一种具体实现方式中,所述装置还包括:
信息更新模块,用于若所述判断结果为记录有所述目标存储介质的同步进度信息,则在所述将所确定的各个待同步索引信息同步到所述SSD的步骤之后,更新所述SSD中记录的所述目标存储介质的同步进度信息;
信息添加模块,用于若所述判断结果为未记录有所述目标存储介质的同步进度信息,则在所述将所确定的各个待同步索引信息同步到所述SSD的步骤之后,在所述SSD中添加所述目标存储介质的同步进度信息。
可选的,一种具体实现方式中,所述装置还包括:
信息删除模块,用于在检测到所述电子设备与所述目标存储介质断开连接,且连接断开的时长超过预设时长时,删除所述SSD中记录的所述目标存储介质的同步进度信息和从所述目标存储介质中同步的各个索引信息。
可选的,一种具体实现方式中,所述装置还包括:
信息写入模块,用于在检测到所述目标存储介质中写入新的索引信息时,在所述SSD中同步写入所述新的索引信息。
相应于上述本发明实施例提供的一种索引信息同步方法,本发明实施例还提供了一种电子设备,该电子设备设置有SSD;如图5所示,包括处理器501、通信接口502、存储器503和通信总线504,其中,处理器501,通信接口502,存储器503通过通信总线504完成相互间的通信,
存储器503,用于存放计算机程序;
处理器501,用于执行存储器503上所存放的程序时,实现上述本发明实施例提供的任一索引信息同步方法的步骤。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述本发明实施例提供的任一索引信息同步方法的步骤。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述本发明实施例提供的任一索引信息同步方法的步骤。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例、电子设备实施例、计算机可读存储介质实施例以及计算机程序产品实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。
Claims (18)
1.一种索引信息同步方法,其特征在于,应用于电子设备,所述电子设备中设置有固态硬盘SSD,所述方法包括:
确定待进行索引信息同步的目标存储介质;其中,所述目标存储介质为:接入所述电子设备的存储介质;
判断所述SSD中是否记录有所述目标存储介质的同步进度信息,得到判断结果;其中,所述同步进度信息用于表明所述目标存储介质中的索引信息同步至所述SSD的进度;
基于所述判断结果,从所述目标存储介质所存储的索引信息中,确定各个待同步索引信息;
将所确定的各个待同步索引信息同步到所述SSD。
2.根据权利要求1所述的方法,其特征在于,所述确定待进行索引信息同步的目标存储介质的步骤,包括:
在检测到所述电子设备接入存储介质时,将所接入的存储介质确定为待进行索引信息同步的目标存储介质。
3.根据权利要求1所述的方法,其特征在于,所述判断所述SSD中是否记录有所述目标存储介质的同步进度信息,得到判断结果的步骤,包括:
判断所述SSD中是否存在关于介质标识与同步进度信息的对应关系;其中,所述对应关系中,任一介质标识为:在所述SSD中同步过索引信息的存储介质的介质标识,且任一介质标识对应的同步进度信息为:具有该介质标识的存储介质的同步进度信息;
如果不存在,确定判断结果为未记录有所述目标存储介质的同步进度信息;
如果存在,则在从所述对应关系中,查找到所述目标存储介质的介质标识的情况下,确定判断结果为记录有所述目标存储介质的同步进度信息;在从所述对应关系中,查找不到所述目标存储介质的介质标识的情况下,确定判断结果为未记录有所述目标存储介质的同步进度信息。
4.根据权利要求1所述的方法,其特征在于,任一存储介质的同步进度信息包括:第一生成时刻;其中,所述第一生成时刻为:该存储介质中,被同步到所述SSD且生成时刻最早的索引信息的生成时刻;
所述基于所述判断结果,从所述目标存储介质所存储的索引信息中,确定各个待同步索引信息的步骤,包括:
若所述判断结果为记录有所述目标存储介质的同步进度信息,则从所述目标存储介质所存储的索引信息中,查找生成时刻早于目标生成时刻的各个索引信息,得到各个待同步索引信息;其中,所述目标生成时刻为:所述目标存储介质的同步进度信息中包括的第一生成时刻;
若所述判断结果为未记录有所述目标存储介质的同步进度信息,则将所述目标存储介质所存储的全部索引信息,确定为待同步索引信息。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述目标存储介质的数量为多个;
所述将所确定的各个待同步索引信息同步到所述SSD的步骤,包括:
从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息,作为待利用索引信息;
从所述待利用索引信息所属的目标存储介质中,确定生成时刻属于目标时间范围的各个待同步索引信息;其中,所述目标时间范围为:所述待利用索引信息的生成时刻所在的同步周期,所述同步周期是按照预定时间粒度划分的;
将所确定的各个待同步索引信息,同步至所述SSD,并返回所述从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息的步骤。
6.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
若所述判断结果为记录有所述目标存储介质的同步进度信息,则在所述将所确定的各个待同步索引信息同步到所述SSD的步骤之后,更新所述SSD中记录的所述目标存储介质的同步进度信息;
若所述判断结果为未记录有所述目标存储介质的同步进度信息,则在所述将所确定的各个待同步索引信息同步到所述SSD的步骤之后,在所述SSD中添加所述目标存储介质的同步进度信息。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
在检测到所述电子设备与所述目标存储介质断开连接,且连接断开的时长超过预设时长时,删除所述SSD中记录的所述目标存储介质的同步进度信息和从所述目标存储介质中同步的各个索引信息。
8.根据权利要求6所述的方法,其特征在于,所述方法还包括:
在检测到所述目标存储介质中写入新的索引信息时,在所述SSD中同步写入所述新的索引信息。
9.一种索引信息同步装置,其特征在于,应用于电子设备,所述电子设备中设置有固态硬盘SSD,所述装置包括:
介质确定模块,用于确定待进行索引信息同步的目标存储介质;其中,所述目标存储介质为:接入所述电子设备的存储介质;
结果获得模块,用于判断所述SSD中是否记录有所述目标存储介质的同步进度信息,得到判断结果;其中,所述同步进度信息用于表明所述目标存储介质中的索引信息同步至所述SSD的进度;
信息确定模块,用于基于所述判断结果,从所述目标存储介质所存储的索引信息中,确定各个待同步索引信息;
信息同步模块,用于将所确定的各个待同步索引信息同步到所述SSD。
10.根据权利要求9所述的装置,其特征在于,
所述介质确定模块具体用于:在检测到所述电子设备接入存储介质时,将所接入的存储介质确定为待进行索引信息同步的目标存储介质。
11.根据权利要求9所述的装置,其特征在于,所述结果获得模块具体用于:
判断所述SSD中是否存在关于介质标识与同步进度信息的对应关系;其中,所述对应关系中,任一介质标识为:在所述SSD中同步过索引信息的存储介质的介质标识,且任一介质标识对应的同步进度信息为:具有该介质标识的存储介质的同步进度信息;
如果不存在,确定判断结果为未记录有所述目标存储介质的同步进度信息;
如果存在,则在从所述对应关系中,查找到所述目标存储介质的介质标识的情况下,确定判断结果为记录有所述目标存储介质的同步进度信息;在从所述对应关系中,查找不到所述目标存储介质的介质标识的情况下,确定判断结果为未记录有所述目标存储介质的同步进度信息。
12.根据权利要求9所述的装置,其特征在于,任一存储介质的同步进度信息包括:第一生成时刻;其中,所述第一生成时刻为:该存储介质中,被同步到所述SSD且生成时刻最早的索引信息的生成时刻;所述信息确定模块具体用于:
若所述判断结果为记录有所述目标存储介质的同步进度信息,则从所述目标存储介质所存储的索引信息中,查找生成时刻早于目标生成时刻的各个索引信息,得到各个待同步索引信息;其中,所述目标生成时刻为:所述目标存储介质的同步进度信息中包括的第一生成时刻;
若所述判断结果为未记录有所述目标存储介质的同步进度信息,则将所述目标存储介质所存储的全部索引信息,确定为待同步索引信息。
13.根据权利要求9-12任一项所述的装置,其特征在于,所述目标存储介质的数量为多个;所述信息同步模块具体用于:
从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息,作为待利用索引信息;
从所述待利用索引信息所属的目标存储介质中,确定生成时刻属于目标时间范围的各个待同步索引信息;其中,所述目标时间范围为:所述待利用索引信息的生成时刻所在的同步周期,所述同步周期时按照预定时间粒度划分的;
将所确定的各个待同步索引信息,同步至所述SSD,并返回所述从所确定的各个未发生同步的待同步索引信息中,确定生成时刻最晚的待同步索引信息的步骤。
14.根据权利要求9-12任一项所述的装置,其特征在于,所述装置还包括:
信息更新模块,用于若所述判断结果为记录有所述目标存储介质的同步进度信息,则在所述将所确定的各个待同步索引信息同步到所述SSD的步骤之后,更新所述SSD中记录的所述目标存储介质的同步进度信息;
信息添加模块,用于若所述判断结果为未记录有所述目标存储介质的同步进度信息,则在所述将所确定的各个待同步索引信息同步到所述SSD的步骤之后,在所述SSD中添加所述目标存储介质的同步进度信息。
15.根据权利要求14所述的装置,其特征在于,所述装置还包括:
信息删除模块,用于在检测到所述电子设备与所述目标存储介质断开连接,且连接断开的时长超过预设时长时,删除所述SSD中记录的所述目标存储介质的同步进度信息和从所述目标存储介质中同步的各个索引信息。
16.根据权利要求14所述的装置,其特征在于,所述装置还包括:
信息写入模块,用于在检测到所述目标存储介质中写入新的索引信息时,在所述SSD中同步写入所述新的索引信息。
17.一种电子设备,其特征在于,所述电子设备设置有固态硬盘SSD,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-8任一所述的方法步骤。
18.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-8任一所述的方法步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110529071.0A CN113190507B (zh) | 2021-05-14 | 2021-05-14 | 一种索引信息同步方法、装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110529071.0A CN113190507B (zh) | 2021-05-14 | 2021-05-14 | 一种索引信息同步方法、装置及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113190507A CN113190507A (zh) | 2021-07-30 |
CN113190507B true CN113190507B (zh) | 2022-06-03 |
Family
ID=76981784
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110529071.0A Active CN113190507B (zh) | 2021-05-14 | 2021-05-14 | 一种索引信息同步方法、装置及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113190507B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109669623A (zh) * | 2017-10-13 | 2019-04-23 | 杭州海康威视系统技术有限公司 | 一种文件管理方法、文件管理装置、电子设备及存储介质 |
CN110222074A (zh) * | 2019-06-14 | 2019-09-10 | 北京金山云网络技术有限公司 | 索引查找方法、查找装置、电子设备及存储介质 |
US10503717B1 (en) * | 2014-12-30 | 2019-12-10 | EMC IP Holding Company LLC | Method for locating data on a deduplicated storage system using a SSD cache index |
CN111399762A (zh) * | 2019-11-27 | 2020-07-10 | 杭州海康威视系统技术有限公司 | 数据存储方法、装置及存储系统 |
CN109033360B (zh) * | 2018-07-26 | 2020-11-17 | 腾讯科技(深圳)有限公司 | 一种数据查询方法、装置、服务器及存储介质 |
CN112000426A (zh) * | 2020-07-24 | 2020-11-27 | 新华三大数据技术有限公司 | 一种数据处理方法及装置 |
-
2021
- 2021-05-14 CN CN202110529071.0A patent/CN113190507B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10503717B1 (en) * | 2014-12-30 | 2019-12-10 | EMC IP Holding Company LLC | Method for locating data on a deduplicated storage system using a SSD cache index |
CN109669623A (zh) * | 2017-10-13 | 2019-04-23 | 杭州海康威视系统技术有限公司 | 一种文件管理方法、文件管理装置、电子设备及存储介质 |
CN109033360B (zh) * | 2018-07-26 | 2020-11-17 | 腾讯科技(深圳)有限公司 | 一种数据查询方法、装置、服务器及存储介质 |
CN110222074A (zh) * | 2019-06-14 | 2019-09-10 | 北京金山云网络技术有限公司 | 索引查找方法、查找装置、电子设备及存储介质 |
CN111399762A (zh) * | 2019-11-27 | 2020-07-10 | 杭州海康威视系统技术有限公司 | 数据存储方法、装置及存储系统 |
CN112000426A (zh) * | 2020-07-24 | 2020-11-27 | 新华三大数据技术有限公司 | 一种数据处理方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN113190507A (zh) | 2021-07-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8250033B1 (en) | Replication of a data set using differential snapshots | |
CN103605585B (zh) | 一种基于数据发现的智能备份方法 | |
JP5924209B2 (ja) | バックアップ制御プログラム、バックアップ制御方法および情報処理装置 | |
US8938430B2 (en) | Intelligent data archiving | |
WO2019062574A1 (zh) | 一种元数据查询方法及装置 | |
CN111651127B (zh) | 一种基于叠瓦式磁记录盘的监控数据存储方法及装置 | |
US20140136496A1 (en) | System, method and non-transitory computer readable storage medium for supporting network file accessing and versioning with multiple protocols in a cloud storage server | |
US11176110B2 (en) | Data updating method and device for a distributed database system | |
CN102244758A (zh) | 一种基于录像文件的数据获取方法和设备 | |
US11250888B1 (en) | Flash memory and method for storing and retrieving embedded audio video data | |
CN100530190C (zh) | 用于处理信息的装置和方法 | |
CN103425785A (zh) | 数据存储系统及其用户数据存储、读取方法 | |
WO2017113694A1 (zh) | 文件同步方法、装置及系统 | |
CN103605617A (zh) | 一种记录存储数据发生变化的方法及装置 | |
CN114116611A (zh) | 一种文件扫描方法及相关装置 | |
CN113448946B (zh) | 数据迁移方法及装置、电子设备 | |
EP3822763B1 (en) | Data reading method, device, system, and distributed system | |
CN113360571B (zh) | 基于特征标记的电网监控系统内存库关系库同步方法 | |
US20140040242A1 (en) | Method and device based on android system for tracking imported file | |
US20140281125A1 (en) | Systems and methods for in-place reorganization of device storage | |
CN113190507B (zh) | 一种索引信息同步方法、装置及电子设备 | |
CN113553325A (zh) | 一种对象存储系统中聚合对象的同步方法和系统 | |
CN110866068B (zh) | 一种基于hdfs的公告数据存储方法及其装置 | |
CN111966533B (zh) | 电子文件管理方法、装置、计算机设备和存储介质 | |
CN114675783A (zh) | 一种数据存储方法、系统、设备以及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |