CN110427350A

CN110427350A - 数据迁移中的数据处理方法及装置、存储设备及介质

Info

Publication number: CN110427350A
Application number: CN201910626722.0A
Authority: CN
Inventors: 刘佳; 王永亮
Original assignee: Beijing Wutong Chelian Technology Co Ltd
Current assignee: Beijing Wutong Chelian Technology Co Ltd
Priority date: 2019-07-11
Filing date: 2019-07-11
Publication date: 2019-11-08

Abstract

本申请实施例提供的一种数据迁移中的文件处理方法及装置，存储设备及介质。所述数据迁移中的文件处理方法，包括：在第二存储媒介内，设置从第一存储媒介待迁入目标数据的标识信息；在所述目标数据从所述第一存储媒介迁入到所述第二存储媒介的过程中，接收基于所述标识信息产生的数据请求；基于存储在所述第一存储媒介的所述目标数据，响应所述数据请求。

Description

数据迁移中的数据处理方法及装置、存储设备及介质

技术领域

本发明涉及存储技术领域但不限于存储技术领域，尤其涉及一种数据迁移中的文件处理方法及装置，存储设备及介质。

背景技术

利用存储介质存储数据，在扩容或者存储介质维护更新、或者数据梳理的过程中，都存储在数据的迁移。在有些情况下，数据在迁移的过程中，对该数据的数据请求就需要暂停，这会导致基于该数据的服务中止及用户体验差的问题

发明内容

有鉴于此，本发明实施例期望提供一种数据迁移中的文件处理方法及装置，存储设备及介质。

本发明的技术方案是这样实现的：

本申请实施例第一方面提供一种数据迁移中的数据处理方法，其特征在于，包括：

在第二存储媒介内，设置从第一存储媒介待迁入目标数据的标识信息；

在所述目标数据从所述第一存储媒介迁入到所述第二存储媒介的过程中，接收基于所述标识信息产生的数据请求；

基于存储在所述第一存储媒介的所述目标数据，响应所述数据请求。

基于上述方案，所述方法还包括：

在所述第二存储媒介内，建立所述标识信息和所述目标数据在所述第一存储媒介的第一存储地址之间的第一映射关系；

所述基于存储在所述第一存储媒介的所述目标数据，响应所述数据请求，包括：

若所述数据请求是在所述目标数据从第一存储媒介迁入到所述第二存储媒介过程中接收的，根据所述第一映射关系确定所述目标数据在所述第一存储媒介的第一存储地址；

基于第一存储地址从所述第一存储媒介，读取待响应所述数据请求的所述目标数据。

基于上述方案，所述方法还包括：

在所述目标数据完全写入到所述第二存储媒介后，删除所述第一映射关系；

和/或

在所述数据请求为删除请求时，删除所述第一映射关系。

基于上述方案，所述方法还包括：

确定数据请求的类型；

根据所述数据请求的类型，基于存储在所述第一存储媒介的所述目标数据，响应所述数据请求。

基于上述方案，所述根据所述数据请求的类型，基于存储在所述第一存储媒介的所述目标数据，响应所述数据请求，包括以下至少之一：

当所述数据请求为查看请求时，从所述第一存储介质读取所述目标数据并显示读取的所述目标数据；

当所述数据请求为删除请求时，停止所述目标数据从所述第一存储媒介迁入到所述第二存储媒介；

当所述数据请求为删除请求时，停止所述目标数据从所述第一存储媒介迁入到所述第二存储媒介，并删除所述第一存储介质的所述目标数据；

当所述数据请求为修改请求时，利用第三存储媒介记录所述目标数据的更新状况信息；在目标数据写入到所述第二存储媒介后，基于更新状况更新存储到所述第二存储媒介内的所述目标数据。

基于上述方案，所述方法还包括：

根据所述目标数据的数据量在所述第二存储介质内分配目标存储空间；其中，所述目标存储空间的存储容量大于所述目标数据的数据量。

基于上述方案，所述方法还包括：

在所述目标数据从所述第一存储介质写入到所述第二存储介质的过程结后，释放所述目标存储空间的剩余存储空间；

和/或

在所述数据请求为删除请求时，释放所述目标存储空间。

本申请实施例第二方面提供一种数据迁移中的数据处理装置，包括：

设置模块，用于在第二存储媒介内，设置从第一存储媒介待迁入目标数据的标识信息；

迁移模块，用于在所述目标数据从所述第一存储媒介迁入到所述第二存储媒介的过程中，接收基于所述标识信息产生的数据请求；

响应模块，用于基于存储在所述第一存储媒介的所述目标数据，响应所述数据请求。

本申请实施例第三方面提供一种存储设备，包括：

存储器；

处理器，与所述存储器连接，用于通过执行存储在所述存储器上的计算机可执行指令，能够实现上述任意实施例提供的数据迁移中的文件处理方法。

本申请实施例第四方面提供一种计算机存储介质，所述计算机存储介质存储有计算机可执行指令；所述计算机可执行指令被处理器执行后，能够实现上述任意实施例提供的数据迁移中的文件处理方法。

本发明实施例提供的技术方案，在目标数据从第一存储介质迁移到第二存储介质的过程中，若接收到数据请求依然会响应，在响应时是基于第一存储介质上存储的目标数据进行响应，减少了数据迁移过程中必须等待数据迁移完成之后，才能进行数据请求的响应，减少了因为数据迁移导致的服务中止和用户的体验不好的问题。

附图说明

图1为本申请实施例提供的一种数据迁移中的数据处理方法的流程示意图；

图2为本申请实施例提供的另一种数据迁移中的数据处理方法的流程示意图；

图3为本申请实施例提供的再一种数据迁移中的数据处理方法的流程示意图；

图4为本申请实施例提供的一种数据迁移中的数据处理装置的结构示意图；

图5为本申请实施例提供的一种存储设备的结构示意图。

具体实施方式

以下结合说明书附图及具体实施例对本发明的技术方案做进一步的详细阐述。

如图1所示，本实施例提供一种数据迁移中的数据处理方法，包括：

步骤S110：在第二存储媒介内，设置从第一存储媒介待迁入目标数据的标识信息；

步骤S120：在所述目标数据从所述第一存储媒介迁入到所述第二存储媒介的过程中，接收基于所述标识信息产生的数据请求；

步骤S130：基于存储在所述第一存储媒介的所述目标数据，响应所述数据请求。

本实施例提供的数据处理方法，应用于各种存储设备中。

在本实施例中第一存储媒介和第二存储媒介对应了不同的存储介质，相互之间是无法通过修改存储映射关系，就能够实现数据迁移的。

在一些实施例中，所述第一存储媒介和第二存储媒介可以归属于不同的存储器；这两个存储器属于同一个设备，通过总线等内部接口连接到处理器。

在另一些实施例中，所述第一存储媒介和第二存储媒介和属于同一存储器的不同存储盘。例如，D盘和E盘属于同一个物理存储器，但是由于存储区域的划分，D盘和E盘之间的数据迁移时，不能像同盘数据迁移那样，通过更改存储映射关系就简便的完成。

本申请中，若目标数据需要从第一存储介质迁移到第二存储介质，目标数据必须从第一存储介质拷贝并写入到第二存储介质。而第二存储介质和第一存储介质可对应于不同的存储器，或者，或者对应于同一个存储器的不同存储盘。

在本实施例中所述目标数据可为来自一个文件的数据，例如，该文件可为：图像文件、文本文件、视频文件、音频文件、日志文件等各种文件。

目标数据来自一个文件，在复制的过程中若未完全复制完成，通常在跨存储媒介复制时，是不能响应数据请求的。

所述标识信息包括但不限于：目标数据的图标和/或链接信息。

在本实施例中，该标识信息是设置在第二存储介质内的。例如，存储在第二存储介质上的文件图标等。

所述数据请求是直接作用于第二存储介质上标识信息的数据请求。该数据请求可包括各种对数据进行操作的请求，例如，查看请求、复制请求、删除请求、写入请求、修改请求等。

在本实施例中，为了响应数据请求，基于该目标数据提供服务，会基于依旧保存在第一存储媒介上的所述目标数据，响应所述数据请求，减少了数据迁移过程中的服务的停止的现象。

在本实施例中，所述数据迁移包括：数据从第一存储介质复制到第二存储介质；和/或，数据从第一存储介质剪切到第二存储介质。

在一些实施例中，如图2所示，所述方法还包括：

步骤S121：在所述第二存储媒介内，建立所述标识信息和所述目标数据在所述第一存储媒介的第一存储地址之间的第一映射关系；

所述步骤S130可包括：

步骤S131：若所述数据请求是在所述目标数据从第一存储媒介迁入到所述第二存储媒介过程中接收的，根据所述第一映射关系确定所述目标数据在所述第一存储媒介的第一存储地址；

步骤S132：基于第一存储地址从所述第一存储媒介，读取待响应所述数据请求的所述目标数据。

在本实施例中，在第二存储媒介内建立标识信息与第一存储地址的第一因素和关系，该第一存储地址指向的是第一存储介质。所述第一存储地址包括两部分，第一部分用于指示存储介质；第二部分用于指示第一部分指示的存储介质上的存储位置。

在所述第二存储介质内还建立有第二映射关系，该第二映射关系为：所述标识信息与所述目标数据在所述第二存储介质上的第二存储地址之间的映射关系。在本实施例中，所述第二存储地址可仅包括：用于指示所述目标数据在第二存储介质上的存储位置的地址信息。

在本实施例中，如此，基于针对于第二存储介质上的标识信息，可以基于第一映射关系，使得处理器可以读取到第一存储介质上第一存储地址的目标数据；如此，减少目标第二存储介质中还未完整的获取到目标数据无法响应数据请求的现象。

在一些实施例中，如图3所示，所述方法还包括：

步骤S141：在所述目标数据完全写入到所述第二存储媒介后，删除所述第一映射关系；

和/或

步骤S142：在所述数据请求为删除请求时，删除所述第一映射关系。

例如，在所述目标数据写入到所述第二存储媒介后，则第二存储媒介上第二存储地址存储的所述目标数据就可以用于直接响应数据请求了，则此时可以删除所述第一映射关系。后续，若接收到作用于第二存储介质的标识信息的数据请求，直接基于所述第二映射关系响应所述数据请求。

在一些实施例中，若在目标数据还在写入第二存储介质的过程中，就接收到了删除该目标数据的请求，此时同样可以删除所述第一映射关系。在一些实施例中，基于删除请求删除所述第一映射关系的同时，还会删除所述目标数据的标识信息，如此，后续用户在第二存储媒介上就看不到该标识信息了。

在一些实施例中，所述方法还包括：确定数据请求的类型；

所述步骤S130可包括：

对于目标数据的操作请求可包括多种，在本实施例中，会根据数据请求的类型来执行所述步骤S140。

在一些实施例中，所述步骤S140包括：

若所述数据请求为查看请求，基于所述第一映射关系响应所述数据请求，从第一存储介质读取所述目标数据并显示。

在还有一些实施例中，所述方法还包括：

若在目标数据写入到第二存储介质的过程中，若针对于第二存储介质上的标识信息的数据请求是查看请求以外的请求，则存储所述操作请求；在所述目标数据完全写入所述第二存储介质之后，再响应所述操作请求。此时这种，非查看请求的操作请求，由于操作请求的存储，用户不用重复输入该操作请求的指令。

在一些实施例中，所述步骤S140可包括以下至少之一：

针对于删除请求，需要结合当前数据的迁移类型，若当前数据迁移类型是：复制迁移，则直接停止目标数据从第一存储媒介写入到第二存储媒介，不用删除第一存储媒介上存储的目标数据。

针对于删除请求，若当前数据前迁移是剪切迁移，则除了直接停止目标数据从第一存储媒介写入到第二存储媒介以外，还需要删除第一存储媒介上的目标数据。

所述数据请求还包括修改请求，例如在包含目标数据的文件内追加数据和/或更新数据等。

此时，针对数据请求为修改请求时，会先利用第三存储介质揭露目标数据的更新状况信息，然后基于更新状况信息，在目标数据完全写入到第二存储介质以后再更新已写入到第二存储媒介上的目标数据。

例如，利用缓存或者不同于第一存储媒介和/或第二存储媒介的第三存储媒介，暂时存储追加到目标数据中的数据内容，在目标数据完全写入到第二存储媒介之后，再将存储在第三存储媒介上的数据内容追加到第二存储媒介的目标数据内。

在一些实施例中，所述方法还包括：

在数据进行迁移的过程中，会根据数据量在第二存储介质内分配存储空间，且一般分配的存储空间的存储容量等于所述数据量，而本申请实施例中，分配的目标存储空间的容量略大于存储目标数据所需的容量，例如，目标存储空间的容量为1.05倍或者1.1倍或者1.2倍所述目标数据所需的实际存储容量等。如此，允许在数据迁移过程中数据更新请求引入更多数据，在目标数据写入第二存储介质之后，无需重新分配存储空间。

由于是目标存储空间的容量大于目标数据实际所需的实际存储容量，为了确保存储空间的有效利用率，所述方法还包括：

和/或，

在所述数据请求为删除请求时，释放所述目标存储空间。

在完成数据迁移之后，释放剩余的存储空间。

在数据迁移过程中接收到删除请求，除了停止数据迁移之外，还会删除已迁移到第二存储介质上的数据，并且释放分配的存储空间。

如图4所示，本实施例提供一种数据迁移中的数据处理装置，包括：

设置模块110，用于在第二存储媒介内，设置从第一存储媒介待迁入目标数据的标识信息；

迁移模块120，用于在所述目标数据从所述第一存储媒介迁入到所述第二存储媒介的过程中，接收基于所述标识信息产生的数据请求；

响应模块130，用于基于存储在所述第一存储媒介的所述目标数据，响应所述数据请求。

在一些实施例中，所述设置模块110、迁移模块120及响应模块130可为程序模块；所述程序模块被处理器执行后，能够实现前述各个模块的功能。

在另一些实施例中，所述设置模块110、迁移模块120及响应模块130可为软硬结合模块；所述软硬结合模块包括但不限于可编程阵列；所述可编程阵列包括但不限于复杂可编程阵列和现场可编程阵列。

在还有一些实施例中，所述设置模块110、迁移模块120及响应模块130可为纯硬件模块，该纯硬件模块包括但不限于专用集成电路。

在一些实施例中，所述装置还包括：

建立模块，用于在所述第二存储媒介内，建立所述标识信息和所述目标数据在所述第一存储媒介的第一存储地址之间的第一映射关系；

所述响应模块130，具体用于若所述数据请求是在所述目标数据从第一存储媒介迁入到所述第二存储媒介过程中接收的，根据所述第一映射关系确定所述目标数据在所述第一存储媒介的第一存储地址；

在一些实施例中，所述装置还包括：

删除模块，用于在所述目标数据完全写入到所述第二存储媒介后，删除所述第一映射关系；和/或，在所述数据请求为删除请求时，删除所述第一映射关系。

在一些实施例中，所述装置还包括：

确定模块，用于确定数据请求的类型；

所述响应模块130，具体用于根据所述数据请求的类型，基于存储在所述第一存储媒介的所述目标数据，响应所述数据请求。

在一些实施例中，所述响应模块130，具体用于执行以下至少之一：当所述数据请求为查看请求时，从所述第一存储介质读取所述目标数据并显示读取的所述目标数据；当所述数据请求为删除请求时，停止所述目标数据从所述第一存储媒介迁入到所述第二存储媒介；当所述数据请求为删除请求时，停止所述目标数据从所述第一存储媒介迁入到所述第二存储媒介，并删除所述第一存储介质的所述目标数据；当所述数据请求为修改请求时，利用第三存储媒介记录所述目标数据的更新状况信息；在目标数据写入到所述第二存储媒介后，基于更新状况更新存储到所述第二存储媒介内的所述目标数据。

在一些实施例中，所述装置还包括：

分配模块，用于根据所述目标数据的数据量在所述第二存储介质内分配目标存储空间；其中，所述目标存储空间的存储容量大于所述目标数据的数据量。

在一些实施例中，所述装置还包括：

释放模块，用于在所述目标数据从所述第一存储介质写入到所述第二存储介质的过程结后，释放所述目标存储空间的剩余存储空间；和/或，在所述数据请求为删除请求时，释放所述目标存储空间。

以下结合上述任意实施例提供两个具体示例：

示例1：

跨存储媒介复制、移动、删除等文件现有方案在都是先读取源文件在按照字节操作到目标地址显示后才能对文件再次操作。例如，在数据量为十兆等阈值以上的文件在操作文件过程中有进度提示，导致不能做其他操作只能等到文件操作完成后才能处理其他操作。

本示例针对这种跨媒介的数据迁移过程中的数据请求的响应方法，可如下：

通过技术映射方案将操作的文件显示到目标地址，这样在目标文件就可以看到选中操作的文件可以对文件查看等操作，同时在后台开服务去复制文件到目标地址，操作完成后解除第一映射关系，这样操作在操作文件操作时不需要用户等待完成就可以做其他操作。

示例2：

本示例提供一种跨存储媒介的数据迁移过程中的数据请求处理方法，可包括：

选择要操作的文件并选择目标地址；此处的目标地址对应于前述的第二存储地址；

确认粘贴后将选中的文件和目标地址做映射关系，把文件显示到目标地址并且根据复制的文件数据量在目标地址分配存储空间；这个时候在目标地址点击文件查看需先判断当前目录是都有查看文件存在，存在则操作当前文件夹文件，不存在则操作的文件实际上是源文件；

后台开启服务对选中的文件进行读取到目标地址；

完成后解除和原存储地址的文件的映射关系；

在后台操作中如果再次对目标文件进行复制、移动操作实际上是操作的带有映射关系的原文件，如果执行删除目标文件操作则停止后台服务对文件的操作删除已操作的数据解除映射关系，如果是对原文件执行删除操作首先判断文件是否有映射关系存在，如果有则执行隐藏操作，待后台操作完成在执行解除映射关系在执行删除操作，释放分配的存储空间。

如图5所示，本实施例还提供一种存储设备，包括：

存储器，用于信息存储；

处理器，与存储器连接，用于通过执行存储在所述存储器上的计算机可执行指令，控制所述收发器的信息收发并实现前述任意实施例提供的语音唤醒处理方法，例如，如图1至图3任一所示的方法。

所述处理器可为各种类型的处理器件，例如，中央处理器、微处理器、数字信号处理器或者可编程阵列等。

所述处理器，可以通过总线与所述存储器连接，例如，所述总线可为集成电路总线等。

在一些实施例中，所述存储设备还包括：语音唤醒模组，该语音唤醒模组至少包括麦克风及与麦克风连接的语音识别引擎等。

本实施例还提供一种计算机存储介质，所述计算机存储介质上存储有计算机可执行指令；所述计算机可执行指令被执行后，能够实现前述任意实施例提供的语音唤醒处理方法，例如，如图1至图3任一所示的方法。本实施例提供的计算机存储介质可为非瞬间存储介质。

在本申请所提供的几个实施例中，应该理解到，所揭露的设备和方法，可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。

上述作为分离部件说明的单元可以是、或也可以不是物理上分开的，作为单元显示的部件可以是、或也可以不是物理单元，即可以位于一个地方，也可以分布到多个网络单元上；可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。

另外，在本发明各实施例中的各功能单元可以全部集成在一个处理模块中，也可以是各单元分别单独作为一个单元，也可以两个或两个以上单元集成在一个单元中；上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

本申请任意实施例公开的技术特征，在不冲突的情况下，可以任意组合形成新的方法实施例或设备实施例。

本申请任意实施例公开的方法实施例，在不冲突的情况下，可以任意组合形成新的方法实施例。

本申请任意实施例公开的设备实施例，在不冲突的情况下，可以任意组合形成新的设备实施例。

本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：移动存储设备、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims

1.一种数据迁移中的数据处理方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

和/或

在所述数据请求为删除请求时，删除所述第一映射关系。

4.根据权利要求1至3任一项所述的方法，其特征在于，所述方法还包括：

确定数据请求的类型；

5.根据权利要求4所述的方法，其特征在于，所述根据所述数据请求的类型，基于存储在所述第一存储媒介的所述目标数据，响应所述数据请求，包括以下至少之一：

6.根据权利要求1至3任一项所述的方法，其特征在于，所述方法还包括：

7.根据权利要求6所述的方法，其特征在于，所述方法还包括：

和/或，

在所述数据请求为删除请求时，释放所述目标存储空间。

8.一种数据迁移中的数据处理装置，其特征在于，包括：

9.一种存储设备，其特征在于，包括：

存储器；

处理器，与所述存储器连接，用于通过执行存储在所述存储器上的计算机可执行指令，能够实现权利要求1至7任一项提供的方法。

10.一种计算机存储介质，所述计算机存储介质存储有计算机可执行指令；所述计算机可执行指令被处理器执行后，能够实现权利要求1至7任一项提供的方法。