CN108920631A - 一种文件查询方法、装置、设备及可读存储介质 - Google Patents

Abstract

本发明公开了一种文件查询方法，包括：获取目标文件对应的目录路径，并在目录路径中确定不存在于当前客户端缓存的目录的集合；判断集合中是否存在相邻目录；若是，则基于集合中的每组相邻目录生成对应的目标查询路径，根据每个目标查询路径从服务端依次获取每组相邻目录；并基于集合中的每个非相邻目录生成对应的目录查询请求，根据每个目录查询请求依次从服务端获取每个非相邻目录；并将获取到的所有目录存入当前缓存，以供用户从缓存查询目标文件。该方法减少了访问服务端的次数，且一次访问可获取多个目录，因而提高了文件查询效率和分布式文件系统的性能。相应地，本发明公开的一种文件查询装置、设备及可读存储介质，同样具有上述技术效果。

Description

一种文件查询方法、装置、设备及可读存储介质

技术领域

本发明涉及数据集群技术领域，更具体地说，涉及一种文件查询方法、装置、设备及可读存储介质。

背景技术

在分布式文件系统中查询文件时，需要按照文件所属的目录路径的父子关系，一级级地查询每个目录，直至查询到目标文件。

若用户在客户端查询文件时，则需要按照文件所属的目录路径的父子关系，一级级地在当前客户端的缓存中查询，若某个目录不存在于缓存，则需要在服务端的服务器中进行查询，并将查询到的目录一级级存入当前客户端缓存，直至可以在缓存中查询到目标文件。

例如：当目标文件的目录路径为“a/b/c/d/e.txt”，且b、c、d三个目录均不存在于当前客户端缓存，此时需要依次发送三个查询请求，以在服务端的服务器中查询b、c、d三个目录。若此时要查询的目录的数量较多，那么发送的查询请求将越多，如此不仅加剧了服务端的服务器的数据处理量，还增加了访问延时，降低了文件查询效率，由此还可能降低分布式文件系统的性能。

因此，如何减少访问延时，提高文件查询效率，是本领域技术人员需要解决的问题。

发明内容

本发明的目的在于提供一种文件查询方法、装置、设备及可读存储介质，以减少访问延时，提高文件查询效率。

为实现上述目的，本发明实施例提供了如下技术方案：

一种文件查询方法，包括：

获取目标文件对应的目录路径，并在所述目录路径中确定不存在于当前客户端缓存的目录的集合；

判断所述集合中是否存在相邻目录；

若是，则基于所述集合中的每组相邻目录生成对应的目标查询路径，根据每个目标查询路径从服务端依次获取所述每组相邻目录，存入所述当前客户端缓存；并基于所述集合中的每个非相邻目录生成对应的目录查询请求，根据每个目录查询请求从所述服务端依次获取所述每个非相邻目录，存入所述当前客户端缓存，并在所述当前客户端缓存中查询所述目标文件。

其中，所述在所述目录路径中确定不存在于当前客户端缓存的目录的集合，包括：

按照目录之间的父子关系在所述当前客户端缓存中依次查找所述目录路径中的每个目录；

确定不存在于所述当前客户端缓存的目录的集合。

其中，当所述集合中存在相邻目录时，还包括：

将在所述集合中首次出现的相邻目录确定为目标目录组；

以所述目标目录组中的第一级目录至所述目标文件所在的目录生成对应的对象查询路径，并根据所述对象查询路径从所述服务端获取所述目标目录组，存入所述当前客户端缓存。

其中，还包括：

当目标目录不存在于所述当前客户端缓存时，判断所述目标目录的子目录是否存在于预设的目录统计表；其中，所述目标目录的子目录采用“目标目录名+所述目标目录的子目录名”的方式进行记录；

若否，则确定所述目标目录的子目录不存在于所述当前客户端缓存。

一种文件查询装置，包括：

获取模块，用于获取目标文件对应的目录路径，并在所述目录路径中确定不存在于当前客户端缓存的目录的集合；

判断模块，用于判断所述集合中是否存在相邻目录；

执行模块，用于当所述集合中存在相邻目录时，基于所述集合中的每组相邻目录生成对应的目标查询路径，根据每个目标查询路径从服务端依次获取所述每组相邻目录，存入所述当前客户端缓存；并基于所述集合中的每个非相邻目录生成对应的目录查询请求，根据每个目录查询请求从所述服务端依次获取所述每个非相邻目录，存入所述当前客户端缓存，并在所述当前客户端缓存中查询所述目标文件。

其中，所述获取模块包括：

查找单元，用于按照目录之间的父子关系在所述当前客户端缓存中依次查找所述目录路径中的每个目录；

确定单元，用于确定不存在于所述当前客户端缓存的目录的集合。

其中，还包括：

确定模块，用于当所述集合中存在相邻目录时，将在所述集合中首次出现的相邻目录确定为目标目录组；

生成模块，用于以所述目标目录组中的第一级目录至所述目标文件所在的目录生成对应的对象查询路径，并根据所述对象查询路径从所述服务端获取所述目标目录组，存入所述当前客户端缓存。

其中，还包括：

子目录判断模块，用于当目标目录不存在于所述当前客户端缓存时，判断所述目标目录的子目录是否存在于预设的目录统计表；其中，所述目标目录的子目录采用“目标目录名+所述目标目录的子目录名”的方式进行记录；

子目录确定模块，用于当所述目标目录的子目录不存在于预设的目录统计表时，确定所述目标目录的子目录不存在于所述当前客户端缓存。

一种文件查询设备，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现上述任意一项所述的文件查询方法的步骤。

一种可读存储介质，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述任意一项所述的文件查询方法的步骤。

通过以上方案可知，本发明实施例提供的一种文件查询方法，包括：获取目标文件对应的目录路径，并在所述目录路径中确定不存在于当前客户端缓存的目录的集合；判断所述集合中是否存在相邻目录；若是，则基于所述集合中的每组相邻目录生成对应的目标查询路径，根据每个目标查询路径从服务端依次获取所述每组相邻目录，存入所述当前客户端缓存；并基于所述集合中的每个非相邻目录生成对应的目录查询请求，根据每个目录查询请求从所述服务端依次获取所述每个非相邻目录，存入所述当前客户端缓存，并在所述当前客户端缓存中查询所述目标文件。

可见，所述方法通过在目录路径中确定不存在于当前客户端缓存的目录的集合，并判断集合中是否存在相邻目录，若是，则基于集合中的每组相邻目录生成对应的目标查询路径，根据每个目标查询路径从服务端依次获取每组相邻目录，存入当前客户端缓存；并基于所述集合中的每个非相邻目录生成对应的目录查询请求，根据每个目录查询请求依次从服务端获取每个非相邻目录，存入当前客户端缓存，进而在当前客户端缓存中查询目标文件。如此通过减少访问服务端的次数，减少了访问延时；同时，由于每个目标查询路径可一次性获取多个目录，所以提高了文件的查询效率，也不会影响分布式文件系统的性能。

相应地，本发明实施例提供的一种文件查询装置、设备及可读存储介质，也同样具有上述技术效果。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例公开的一种文件查询方法流程图；

图2为本发明实施例公开的另一种文件查询方法流程图；

图3为本发明实施例公开的一种文件查询装置示意图；

图4为本发明实施例公开的一种文件查询设备示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例公开了一种文件查询方法、装置、设备及可读存储介质，以减少访问延时，提高文件查询效率。

参见图1，本发明实施例提供的一种文件查询方法，包括：

S101、获取目标文件对应的目录路径；

S102、在目录路径中确定不存在于当前客户端缓存的目录的集合；

S103、判断集合中是否存在相邻目录；若是，则执行S104；若否，则执行S106；

S104、基于集合中的每组相邻目录生成对应的目标查询路径，根据每个目标查询路径从服务端依次获取每组相邻目录，存入当前客户端缓存，并执行S105；

在本实施例中，若不存在于当前客户端缓存的目录组成的集合中存在相邻目录时，则基于集合中存在的每组相邻目录生成各自对应的目标查询路径，并根据每个目标查询路径从服务端依次获取每组相邻目录，存入当前客户端缓存。其中，由于每个目标查询路径对应一个相邻目录组，即对应多个目录，因此可一次性从服务端获取多个目录，从而提高了文件的查询效率。

例如：当目标文件对应的目录路径为“a/b/c/d/e/f/g/h/i/j.txt”，且不存在于当前客户端缓存的目录为b、c、e、f、h和j时，那么由b、c、e、f、h和j组成的集合中存在两组相邻目录，其分别为：b和c，e和f。那么分别基于b和c，e和f生成两个目标查询路径，分别为：“b/c.txt”和“e/f.txt”，此时按照目录之间的父子关系依次获取每组相邻目录，即：首先根据“b/c.txt”从服务端获取b和c，进而根据“e/f.txt”从服务端获取e和f，并将获取到的b和c，e和f存入当前客户端缓存。

S105、基于集合中的每个非相邻目录生成对应的目录查询请求，根据每个目录查询请求从服务端依次获取每个非相邻目录，存入当前客户端缓存，并执行S107；

具体的，基于集合中的非相邻目录，即单独存在的目录，可生成对应的目录查询请求，根据每个目录查询请求从服务端依次获取每个非相邻目录，并存入当前客户端缓存。

例如：对于上述集合中存在的h和j，可分别生成两个目录查询请求，分别为：“目录h的查询请求”和“目录j的查询请求”，此时按照目录之间的父子关系依次获取h和j，即：首先根据“目录h的查询请求”从服务端获取h，进而根据“目录j的查询请求”从服务端获取j，并将获取到的h和j存入当前客户端缓存。

S106、基于集合中的每个目录生成对应的目录查询请求，并依据目录查询请求从服务端依次获取每个目录，存入当前客户端缓存，并执行S107；

具体的，当集合中不存在相邻目录时，则基于集合中的每个目录生成对应的目录查询请求，并依据目录查询请求从服务端依次获取每个目录，存入当前客户端缓存。

例如：当目标文件的目录路径为“a/b/c/d/e.txt”，且不存在于当前客户端缓存的目录为a、c、e时，此时a、c、e组成的集合中不存在相邻目录，则a、c、e可看作非相邻目录，此时基于a、c、e生成三个目录查询请求，分别为：“目录a的查询请求”、“目录c的查询请求”和“目录e的查询请求”；此时按照目录之间的父子关系依次获取a、c和e，即：首先根据“目录a的查询请求”从服务端获取a，进而根据“目录c的查询请求”从服务端获取c，最后根据“目录e的查询请求”从服务端获取e，并将获取到的a、c和e存入当前客户端缓存。

S107、在当前客户端缓存中查询目标文件。

具体的，当目标文件对应的目录路径均缓存至当前客户端时，用户便可在缓存中查询该目标文件。

可见，本实施例提供了一种文件查询方法，所述方法通过在目录路径中确定不存在于当前客户端缓存的目录的集合，并判断集合中是否存在相邻目录，若是，则基于集合中的每组相邻目录生成对应的目标查询路径，根据每个目标查询路径从服务端依次获取每组相邻目录，存入当前客户端缓存；并基于所述集合中的每个非相邻目录生成对应的目录查询请求，根据每个目录查询请求依次从服务端获取每个非相邻目录，存入当前客户端缓存，进而在当前客户端缓存中查询目标文件。如此通过减少访问服务端的次数，减少了访问延时；同时，由于每个目标查询路径可一次性获取多个目录，所以提高了文件的查询效率，也不会影响分布式文件系统的性能。

本发明实施例公开了一种文件查询方法，相对于上一实施例，本实施例对技术方案作了进一步的说明和优化。

参见图2，本发明实施例提供的另一种文件查询方法，包括：

S201、获取目标文件对应的目录路径；

S202、在目录路径中确定不存在于当前客户端缓存的目录的集合；

S203、判断集合中是否存在相邻目录；若是，则执行S204；若否，则执行S206；

S204、将在集合中首次出现的相邻目录确定为目标目录组，并执行S205；

S205、以目标目录组中的第一级目录至目标文件所在的目录生成对应的对象查询路径，并根据对象查询路径从服务端获取目标目录组，存入当前客户端缓存，并执行S207；

具体的，当集合中存在相邻目录时，在集合中确定首次出现的相邻目录，并将确定为目标目录组，进而以目标目录组中的第一级目录至目标文件所在的目录生成对应的对象查询路径，并根据对象查询路径从服务端获取目标目录组，存入当前客户端缓存。

例如：当目标文件对应的目录路径为“a/b/c/d/e/f/g/h/i/j.txt”，且不存在于当前客户端缓存的目录为b、c、e、f、h和j时，那么由b、c、e、f、h和j组成的集合中存在两组相邻目录，其分别为：b和c，e和f。此时b和c即为首次出现的相邻目录。因为每个目录的查找均需要先找到它的父目录，因此需要按照目录之间的父子关系的顺序进行查找。

此种情况下，将b和c确定为目标目录组，该目标目录组中的第一级目录即为b，目标文件所在的目录即为j，那么以b至j之间的所有目录生成对应的对象查询路径，则对象查询目录为：“b/c/d/e/f/g/h/i/j.txt”，并根据“b/c/d/e/f/g/h/i/j.txt”从服务端获取b、c、d、e、f、g、h、i和j，并将获取到的b、c、d、e、f、g、h、i和j存入当前客户端缓存。

S206、基于集合中的每个目录生成对应的目录查询请求，并依据目录查询请求从服务端依次获取每个目录，存入当前客户端缓存，并执行S207；

S207、在当前客户端缓存中查询目标文件。

可见，本实施例提供了另一种文件查询方法，该方法通过在目录路径中确定不存在于当前客户端缓存的目录的集合，并判断集合中是否存在相邻目录，若是，则将在集合中首次出现的相邻目录确定为目标目录组，以目标目录组中的第一级目录至目标文件所在的目录生成对应的对象查询路径，并根据对象查询路径从服务端获取目标目录组，存入当前客户端缓存，进而在当前客户端缓存中查询目标文件。如此通过减少访问服务端的次数，减少了访问延时；同时，由于每个目标查询路径可一次性获取多个目录，所以提高了文件的查询效率，也不会影响分布式文件系统的性能。

基于上述任意实施例，需要说明的是，所述在所述目录路径中确定不存在于当前客户端缓存的目录的集合，包括：

按照目录之间的父子关系在所述当前客户端缓存中依次查找所述目录路径中的每个目录；

确定不存在于所述当前客户端缓存的目录的集合。

具体的，由于每个目录的查找均需要先找到它的父目录，因此需要按照目录之间的父子关系的顺序进行查找。

例如：当目标文件的目录路径为“a/b/c/d/e.txt”时，则需要依据a、b、c、d、e之间的父子关系，顺序在当前客户端缓存中查找a、b、c、d、e，直至确定出不存在于当前客户端缓存的目录组成的集合。

基于上述任意实施例，需要说明的是，还包括：

当目标目录不存在于所述当前客户端缓存时，判断所述目标目录的子目录是否存在于预设的目录统计表；其中，所述目标目录的子目录采用“目标目录名+所述目标目录的子目录名”的方式进行记录；

若否，则确定所述目标目录的子目录不存在于所述当前客户端缓存。

具体的，当目标目录不存在于当前客户端缓存时，无法直接确定目标目录的子目录是否存在于当前客户端缓存，为此可采用“目标目录名+所述目标目录的子目录名”的方式预先将目标目录的子目录存储于目录统计表，以便于确定目标目录的子目录。

例如：存在两级目录a/b，当a不存在于当前客户端缓存时，可判断b是否存在于预设的目录统计表，若是，则说明b存在于当前客户端缓存；若否，则说明b不存在于当前客户端缓存。其中，b采用“目标目录名+目标目录的子目录名”的方式记录于目录统计表中，即b的目录名为“a+b”，此种记录方式可以避免同名目录出现的情况。

例如：若目录a和目录c下均存在目录b，即存在a/b和c/b，此时便出现了同名目录b，若仅以目录b的目录名“b”记录目录b，便无法区分出该目录b是目录a的子目录还是目录c的子目录。但是倘若以“目标目录名+目标目录的子目录名”的方式记录目录b，则目录a下的目录b为“a+b”，目录c下的目录b为“c+b”，如此便可清楚地区分出同名目录b。

下面对本发明实施例提供的一种文件查询装置进行介绍，下文描述的一种文件查询装置与上文描述的一种文件查询方法可以相互参照。

参见图3，本发明实施例提供的一种文件查询装置，包括：

获取模块301，用于获取目标文件对应的目录路径，并在所述目录路径中确定不存在于当前客户端缓存的目录的集合；

判断模块302，用于判断所述集合中是否存在相邻目录；

执行模块303，用于当所述集合中存在相邻目录时，基于所述集合中的每组相邻目录生成对应的目标查询路径，根据每个目标查询路径从服务端依次获取所述每组相邻目录，存入所述当前客户端缓存；并基于所述集合中的每个非相邻目录生成对应的目录查询请求，根据每个目录查询请求从所述服务端依次获取所述每个非相邻目录，存入所述当前客户端缓存，并在所述当前客户端缓存中查询所述目标文件。

其中，所述获取模块包括：

查找单元，用于按照目录之间的父子关系在所述当前客户端缓存中依次查找所述目录路径中的每个目录；

确定单元，用于确定不存在于所述当前客户端缓存的目录的集合。

其中，还包括：

确定模块，用于当所述集合中存在相邻目录时，将在所述集合中首次出现的相邻目录确定为目标目录组；

生成模块，用于以所述目标目录组中的第一级目录至所述目标文件所在的目录生成对应的对象查询路径，并根据所述对象查询路径从所述服务端获取所述目标目录组，存入所述当前客户端缓存。

其中，还包括：

子目录判断模块，用于当目标目录不存在于所述当前客户端缓存时，判断所述目标目录的子目录是否存在于预设的目录统计表；其中，所述目标目录的子目录采用“目标目录名+所述目标目录的子目录名”的方式进行记录；

子目录确定模块，用于当所述目标目录的子目录不存在于预设的目录统计表时，确定所述目标目录的子目录不存在于所述当前客户端缓存。

下面对本发明实施例提供的一种文件查询设备进行介绍，下文描述的一种文件查询设备与上文描述的一种文件查询方法及装置可以相互参照。

参见图4，本发明实施例提供的一种文件查询设备，包括：

存储器401，用于存储计算机程序；

处理器402，用于执行所述计算机程序时实现上述任意实施例所述的文件查询方法的步骤。

下面对本发明实施例提供的一种可读存储介质进行介绍，下文描述的一种可读存储介质与上文描述的一种文件查询方法、装置及设备可以相互参照。

一种可读存储介质，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上述任意实施例所述的文件查询方法的步骤。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种文件查询方法，其特征在于，包括：

获取目标文件对应的目录路径，并在所述目录路径中确定不存在于当前客户端缓存的目录的集合；

判断所述集合中是否存在相邻目录；

若是，则基于所述集合中的每组相邻目录生成对应的目标查询路径，根据每个目标查询路径从服务端依次获取所述每组相邻目录，存入所述当前客户端缓存；并基于所述集合中的每个非相邻目录生成对应的目录查询请求，根据每个目录查询请求从所述服务端依次获取所述每个非相邻目录，存入所述当前客户端缓存，并在所述当前客户端缓存中查询所述目标文件。

2.根据权利要求1所述的文件查询方法，其特征在于，所述在所述目录路径中确定不存在于当前客户端缓存的目录的集合，包括：

按照目录之间的父子关系在所述当前客户端缓存中依次查找所述目录路径中的每个目录；

确定不存在于所述当前客户端缓存的目录的集合。

3.根据权利要求1所述的文件查询方法，其特征在于，当所述集合中存在相邻目录时，还包括：

将在所述集合中首次出现的相邻目录确定为目标目录组；

以所述目标目录组中的第一级目录至所述目标文件所在的目录生成对应的对象查询路径，并根据所述对象查询路径从所述服务端获取所述目标目录组，存入所述当前客户端缓存。

4.根据权利要求1-3任意一项所述的文件查询方法，其特征在于，还包括：

当目标目录不存在于所述当前客户端缓存时，判断所述目标目录的子目录是否存在于预设的目录统计表；其中，所述目标目录的子目录采用“目标目录名+所述目标目录的子目录名”的方式进行记录；

若否，则确定所述目标目录的子目录不存在于所述当前客户端缓存。

5.一种文件查询装置，其特征在于，包括：

获取模块，用于获取目标文件对应的目录路径，并在所述目录路径中确定不存在于当前客户端缓存的目录的集合；

判断模块，用于判断所述集合中是否存在相邻目录；

执行模块，用于当所述集合中存在相邻目录时，基于所述集合中的每组相邻目录生成对应的目标查询路径，根据每个目标查询路径从服务端依次获取所述每组相邻目录，存入所述当前客户端缓存；并基于所述集合中的每个非相邻目录生成对应的目录查询请求，根据每个目录查询请求从所述服务端依次获取所述每个非相邻目录，存入所述当前客户端缓存，并在所述当前客户端缓存中查询所述目标文件。

6.根据权利要求5所述的文件查询装置，其特征在于，所述获取模块包括：

查找单元，用于按照目录之间的父子关系在所述当前客户端缓存中依次查找所述目录路径中的每个目录；

确定单元，用于确定不存在于所述当前客户端缓存的目录的集合。

7.根据权利要求5所述的文件查询装置，其特征在于，还包括：

确定模块，用于当所述集合中存在相邻目录时，将在所述集合中首次出现的相邻目录确定为目标目录组；

生成模块，用于以所述目标目录组中的第一级目录至所述目标文件所在的目录生成对应的对象查询路径，并根据所述对象查询路径从所述服务端获取所述目标目录组，存入所述当前客户端缓存。

8.根据权利要求5-7任意一项所述的文件查询装置，其特征在于，还包括：

子目录判断模块，用于当目标目录不存在于所述当前客户端缓存时，判断所述目标目录的子目录是否存在于预设的目录统计表；其中，所述目标目录的子目录采用“目标目录名+所述目标目录的子目录名”的方式进行记录；

子目录确定模块，用于当所述目标目录的子目录不存在于预设的目录统计表时，确定所述目标目录的子目录不存在于所述当前客户端缓存。

9.一种文件查询设备，其特征在于，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如权利要求1-4任意一项所述的文件查询方法的步骤。

10.一种可读存储介质，其特征在于，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1-4任意一项所述的文件查询方法的步骤。