CN103257958A - 一种基于云存储的翻译方法及系统 - Google Patents

Abstract

本发明实施例公开一种基于云存储的翻译方法，包括：应用终端向云存储平台发起文件写入，云存储平台对文件进行分片存储；翻译平台对分片存储到云存储平台的文件进行分布式翻译；本发明实施例还公开一种基于云存储的翻译系统。根据本发明实施例的技术方案，多个翻译服务器可同时参与文件的翻译过程，大大提高翻译速度。

Description

一种基于云存储的翻译方法及系统

技术领域

本发明实施例涉及计算机网络领域的存储和处理技术，尤其涉及一种基于云存储的翻译方法及系统。

背景技术

随着世界范围内人员交往的增多，语言的文本在各种语言之间的翻译需求越来越多，尤其是长文本的翻译和多语种的翻译，以及目标语言是小语种的翻译，这些需求会越来越多。仅靠单机版的翻译软件要解决这些需求是很困难的，不仅占用的资源较多，而且需要不停的升级翻译软件。对于长文本的翻译，使用单机版的翻译软件，速度慢、效率低。

随着云计算和云存储技术的发展，待翻译的文本和翻译后的文本，在将来都是存放在云存储平台上的多个存储服务器之中，且对用户透明。语言翻译系统也需要适应这种趋势，能够提供更强的翻译能力和更方便的管理能力。

分布式的语言翻译系统，是满足这些需求的一种可行方法。分布式语言翻译系统，需要更深入地考虑云计算和云存储环境下，如何解决分布式语言翻译的新构架，以及提供分布式翻译便捷调度的实际商用能力，需要解决的问题包括如何重用云存储的分片能力、如何调度分布式翻译能力等，但是现有技术中还没有解决这些问题的具体方案。

发明内容

有鉴于此，本发明实施例的主要目的在于提供一种基于云存储的翻译方法及系统，翻译平台中的多个翻译服务器可同时参与文件的翻译过程，大大提高翻译速度。

为达到上述目的，本发明实施例的技术方案是这样实现的：

本发明提供一种基于云存储的翻译方法，包括：

应用终端向云存储平台发起文件写入，云存储平台对文件进行分片存储；

翻译平台对分片存储到云存储平台的文件进行分布式翻译。

上述方法中，该方法还包括：应用终端从云存储平台读取存储的文件；读取的文件为翻译前的文件或翻译后的目标文件。

上述方法中，所述应用终端向云存储平台发起文件写入，云存储平台对文件进行分片存储为：

应用终端通过云存储平台的FAC向云存储平台的FLR发送写入文件的请求消息；FLR向FAC返回写入文件参数响应消息，告知可提供服务的FAS的列表和存储策略；

FAC根据存储策略对本地的文件进行分片处理，并按照预先配置的规则和可提供服务的FAS列表向可服务的FAS逐个写入文件分片；

FAS返回保存文件分片成功的响应消息给FAC，FAC向FLR发送携带注册信息的请求消息，向FLR申请记录注册；FLR记录请求消息中的注册信息，并通过FAC向用户终端返回写入文件成功的响应消息。

上述方法中，

所述存储策略包括分片大小、副本数量；

所述文件的每个分片的大小按照适合独立翻译的片段大小进行分割，或按照绝对大小进行分割；按照绝对大小进行分割时，按照完整的语句和分隔符为单位进行分割；

所述注册信息包括原始文件名称、文件ID、文件存储信息；所述文件存储信息包括文件的副本数量、分片数量、分片ID、分片长度、分片存放位置。

上述方法中，所述翻译平台对分片存储到云存储平台的文件进行分布式翻译为：

应用终端通过FAC向翻译平台的翻译管理模块发起文件翻译操作请求，翻译管理模块从FLR读取文件存储信息，生成一个或多个文件分片的翻译任务，并分派给一个或多个翻译服务器；翻译管理模块发送分片翻译指令给一个或多个翻译服务器，收到分片翻译指令的一个或多个翻译服务器从指定的FAS读取文件分片；

一个或多个翻译服务器同时进行一个或多个文件分片的翻译处理，生成一个或多个翻译后的目标文件分片，并将自身翻译后的目标文件分片保存到指定的FAS。

上述方法中，该方法还包括：

FAS向翻译服务器返回保存翻译后的目标文件分片成功的响应消息，翻译服务器向FLR发送保存翻译后的目标文件分片的文件存储信息请求消息；

FLR对目标文件分片的文件存储信息保存成功后，通过翻译服务器向翻译管理模块返回文件分片的翻译完成响应消息；

所有分片都已经翻译完成时，翻译管理模块通过FAC向应用终端返回文件翻译成功响应消息。

上述方法中，

所述发起文件翻译操作请求时，请求消息中携带待翻译的文件ID、翻译参数；所述翻译参数包括翻译前后的文件的语言类型。

上述方法中，所述应用终端从云存储平台读取存储的文件为：

应用终端通过FAC向FLR发起读取文件请求，FLR向FAC返回读取文件信息响应消息，FAC从一个或多个FAS读取文件分片；

FAS返回携带文件分片的文件分片读取成功响应消息，FAC对收到的各文件分片进行聚合得到一个完整文件，或对前后相连的多个文件分片进行聚合；

FAC将聚合后得到的完整文件或文件块提供给应用终端。

本发明还提供一种基于云存储的翻译系统，包括：应用终端、云存储平台、翻译平台；其中，

应用终端，用于向云存储平台发起文件写入；

云存储平台，用于对文件进行分片存储；

翻译平台，用于对分片存储到云存储平台的文件进行分布式翻译。

上述系统中，所述应用终端还用于，从云存储平台读取存储的文件，读取的文件为翻译前的文件或翻译后的目标文件。

本发明实施例提供的基于云存储的翻译方法及系统，应用终端向云存储平台发起文件写入，云存储平台对文件进行分片存储；翻译平台对分片存储到云存储平台的文件进行分布式翻译，利用分布式工作的翻译平台进行文件的翻译时，多个翻译服务器可同时参与文件的翻译过程，大大提高翻译速度。

附图说明

图1是本发明实施例实现基于云存储的翻译方法的流程示意图；

图2是本发明实施例中步骤101的具体实现方法的流程示意图；

图3是本发明实施例实现基于云存储的翻译方法的组网示例图；

图4是本发明实施例实现基于云存储的翻译方法的架构示例图；

图5是本发明实施例实现步骤102的具体实现方法的流程示意图；

图6是本发明实施例实现步骤103的具体实现方法的流程示意图；

图7是本发明实施例实现基于云存储的翻译系统的结构示意图。

具体实施方式

本发明实施例的基本思想是：应用终端向云存储平台发起文件写入，云存储平台对文件进行分片存储；翻译平台对分片存储到云存储平台的文件进行分布式翻译。

下面通过附图及具体实施例对本发明实施例再做进一步的详细说明。

本发明实施例提供一种基于云存储的翻译方法，图1是本发明实施例实现基于云存储的翻译方法的流程示意图，如图1所示，该方法包括以下步骤：

步骤101，应用终端向云存储平台发起文件写入，云存储平台对文件进行分片存储。

步骤102，翻译平台对分片存储到云存储平台的文件进行分布式翻译。

云存储平台对文件进行分片存储后，或对分片存储到云存储平台的文件进行分布式翻译后，该方法还可以包括：步骤103，应用终端从云存储平台读取存储的文件。

图2是本发明实施例中步骤101的具体实现方法的流程示意图，是应用终端向云存储平台发起文件写入，云存储平台对文件进行分片存储的具体实施方式，如图2所示，并结合图3和图4，该方法包括以下步骤：

步骤201，应用终端向云存储平台的文件存储客户端(FAC，File AccessClient)发送写入文件的请求消息；其中，所述请求消息中携带请求写入的全路径文件名称、文件大小等。

步骤202，FAC向云存储平台的文件位置记录器(FLR，File LocationRegister)转发写入文件的请求消息。

步骤203，收到FAC发送的请求消息后，FLR向FAC返回写入文件参数响应消息，用于向FAC告知可提供服务的文件访问服务器(FAS，File AccessServer)的列表、存储策略等；其中，存储策略包括分片大小、副本数量；文件的每个分片的大小可以完全一样也可以不一样，对文件的分片，优先按照适合独立翻译的片段大小进行分割，或按章节保存，也可以按照绝对大小进行分割，所述绝对大小可以是1M字节等；如果按照绝对大小进行分割，则需要按照完整的语句或分隔符为单位。

步骤204，收到写入文件参数响应消息后，FAC根据其中的存储策略对本地的文件进行分片处理，并按照预先配置的规则和可提供服务的FAS列表向可服务的FAS逐个写入文件分片；所述预先配置的规则指的是应用终端配置的文件分片与FAS的对应关系，FAC需要根据该对应关系将文件分片写入到对应的可服务的FAS中。

步骤205，FAS返回保存文件分片成功的响应消息给FAC，该响应消息中携带文件分片的存储物理位置。

步骤206，收到文件分片成功的响应消息后，FAC向FLR发送请求消息，用于向FLR申请记录注册，所述请求消息中携带有注册信息，该注册信息包括原始文件名称、文件ID、文件存储信息等，其中文件存储信息包括文件的副本数量、分片数量、分片ID、分片长度、分片存放位置等。

步骤207，收到FAC的请求消息后，FLR记录请求消息中的注册信息。

步骤208，FLR向FAC返回写入文件记录成功的响应消息。

步骤209，FAC向应用终端返回写入文件成功的响应消息。

本发明实施例中的应用终端可以是文件下载客户端、写入文件的应用程序、翻译客户端、读取文件的应用程序和终端等；其中，文件下载客户端可以是将网络文件下载到本地并保存到云存储平台中的客户端，例如FTP、迅雷等下载软件，还可以是以URL形式将网络文件下载到本地但只提供URL参数，下载的网络文件保存到云存储平台中的客户端。写入文件的应用程序指的是写入云存储平台的应用程序，该应用程序可以通过多种途径和开放文件接口(如POSIX、CIFS、NFS等接口)，将文件等写入云存储平台，该应用程序也包括任何希望调用翻译平台的应用程序。翻译客户端指的是发送请求以进行翻译的客户端，可以是包含移动终端、PC、机顶盒等终端上的文本查看、文本编辑的客户端软件，也可以是Web服务器，Web服务器将Web客户的翻译请求传递给翻译平台；翻译客户端从云存储平台中读取的文件可以是翻译前的文件或翻译后的目标文件。读取文件的应用指的是读取云存储平台中文件的客户端应用程序，该客户端应用程序通过开放文件接口(如POSIX、CIFS、NFS等接口)，从云存储平台中读取文件，进行文件查看、编辑等操作。终端包括移动终端、PC、机顶盒等终端上的文本查看、编辑的客户端软件，该客户端软件从云存储平台中读取的文件可以是翻译前的文件或翻译后的目标文件。

图5是本发明实施例实现步骤102的具体实现方法的流程示意图，是翻译平台对分片存储到云存储平台的文件进行分布式翻译的具体实施方式，如图5所示，并结合图3和图4，该方法包括以下步骤：

步骤501，应用终端向FAC发送请求消息，用于向FAC发起文件翻译操作请求；请求消息中携带待翻译的文件ID、翻译参数等；其中，翻译参数包括翻译前后的文件的语言类型等。

步骤502，FAC向翻译平台的翻译管理模块转发文件翻译请求消息，该请求消息中仍然携带待翻译的文件ID、翻译参数等。

步骤503，收到请求消息后，翻译管理模块根据请求消息中携带的待翻译的文件ID，从FLR读取该文件ID对应的文件存储信息。

步骤504，FLR通过响应消息返回文件存储信息给翻译管理模块；其中，响应消息中携带的文件存储信息包括待翻译的文件的副本数量、分片数量、分片ID、分片大小、分片存放位置等。

步骤505，翻译管理模块收到响应消息后，根据实时监控的可用的翻译服务器列表，生成一个或多个文件分片的翻译任务，分派给可用的翻译服务器列表中的一个或多个翻译服务器。

步骤506，翻译管理模块发送分片翻译指令给一个或多个翻译服务器，该分片翻译指令中携带待翻译的文件分片的文件存储信息和翻译后的目标文件分片的文件存储信息，以及对应的翻译参数。

步骤507，收到分片翻译指令的一个或多个翻译服务器，对分片翻译指令中携带的内容进行解析执行，根据分片翻译指令中的待翻译的文件分片的文件存储信息，从指定的FAS读取文件分片。

步骤508，FAS返回文件分片给对应的翻译服务器。

步骤509，一个或多个翻译服务器根据分片翻译指令中携带的翻译参数，可同时进行一个或多个文件分片的翻译处理，生成一个或多个翻译后的目标文件分片。

步骤510，翻译成功后，翻译服务器将自身翻译后的目标文件分片保存到指定的FAS。该FAS与翻译前的文件分片存放的FAS可以相同，也可以不同。

步骤511，FAS向翻译服务器返回保存翻译后的目标文件分片成功的响应消息。

步骤512，收到保存翻译后的目标文件分片成功的响应消息后，翻译服务器向FLR发送保存翻译后的目标文件分片的文件存储信息请求消息。

步骤513，FLR对翻译后的目标文件分片的文件存储信息保存成功后，返回保存成功响应消息给翻译服务器。

步骤514，收到保存成功响应消息的翻译服务器返回文件分片的翻译完成响应消息给翻译管理模块。

步骤515，翻译管理模块判断是否所有文件分片的翻译都已经完成，如果未完成，则继续等待各文件分片的翻译完成；如果所有分片都已经翻译完成，执行步骤516。

步骤516，翻译管理模块向FAC返回文件翻译成功响应消息；这里，所有翻译后的目标文件分片此时并不需要聚合为一个文件。

步骤517，收到文件翻译成功响应消息后，FAC向应用终端返回文件翻译成功响应消息，至此翻译操作完成。

在某些情况下，翻译服务器与FAS可以集成为一个单元，即物理设备上重用，例如FAS在云存储能力负荷较低的场景。集成时，为了避免翻译能力和云存储能力对CPU、内存等资源的占用冲突，将集成的物理服务器虚拟化，为翻译能力和云存储能力提供单独的虚拟机，各自虚拟机界定对资源占用的范围，这个范围可以根据云存储和翻译需求，自适应的进行弹性在线调整资源分配。

图6是本发明实施例实现步骤103的具体实现方法的流程示意图，是应用终端从云存储平台读取存储的文件的具体实施方式，如图6所示，并结合图3和图4，该方法包括以下步骤：

步骤601，应用终端向FAC发送请求消息，用于向FAC发起读取文件请求；请求读取的文件可以是翻译前的文件，也可以是翻译后的目标文件。

步骤602，FAC向FLR转发收到的请求消息，用于向FLR发起读取文件请求。

步骤603，FLR向FAC返回读取文件信息响应消息，该读取文件信息响应消息中携带文件存储信息。

步骤604，FAC根据获得的文件存储信息从一个或多个FAS读取文件分片。

步骤605，FAS返回文件分片读取成功响应消息，其中携带文件分片。

步骤606，FAC对收到的文件分片进行管理，即对各文件分片进行聚合得到一个完整文件，或对前后相连的多个文件分片进行聚合，得到文件块。

步骤607，FAC将聚合后得到的完整文件或文件块提供给应用终端。

为实现上述方法，本发明实施例还提供一种基于云存储的翻译系统，图7是本发明实施例实现基于云存储的翻译系统的结构示意图，如图7所示，该系统包括：应用终端71、云存储平台72、翻译平台73；其中，

应用终端71，用于向云存储平台72发起文件写入；

云存储平台72，用于对文件进行分片存储；

翻译平台73，用于对分片存储到云存储平台的文件进行分布式翻译。

所述应用终端71还用于，从云存储平台72读取存储的文件，读取的文件为翻译前的文件或翻译后的目标文件。

所述云存储平台72进一步包括：FAC 721、FLR 722、FAS 723；

所述翻译平台73进一步包括：翻译管理模块731和翻译服务器732。

具体的，所述应用终端71向云存储平台72发起文件写入，云存储平台72对文件进行分片存储为：应用终端通过云存储平台的FAC向云存储平台的FLR发送写入文件的请求消息；FLR向FAC返回写入文件参数响应消息，告知可提供服务的FAS的列表和存储策略；FAC根据存储策略对本地的文件进行分片处理，并按照预先配置的规则和可提供服务的FAS列表向可服务的FAS逐个写入文件分片；FAS返回保存文件分片成功的响应消息给FAC，FAC向FLR发送携带注册信息的请求消息，向FLR申请记录注册；FLR记录请求消息中的注册信息，并通过FAC向用户终端返回写入文件成功的响应消息。

其中，所述存储策略包括分片大小、副本数量；所述文件的每个分片的大小按照适合独立翻译的片段大小进行分割，或按照绝对大小进行分割。按照绝对大小进行分割时，按照完整的语句和分隔符为单位进行分割；

所述注册信息包括原始文件名称、文件ID、文件存储信息；所述文件存储信息包括文件的副本数量、分片数量、分片ID、分片长度、分片存放位置。

具体的，所述翻译平台73对分片存储到云存储平台72的文件进行分布式翻译为：应用终端通过FAC向翻译平台的翻译管理模块发起文件翻译操作请求，翻译管理模块从FLR读取文件存储信息，生成一个或多个文件分片的翻译任务，并分派给一个或多个翻译服务器；翻译管理模块发送分片翻译指令给一个或多个翻译服务器，收到分片翻译指令的一个或多个翻译服务器从指定的FAS读取文件分片；一个或多个翻译服务器同时进行一个或多个文件分片的翻译处理，生成一个或多个翻译后的目标文件分片，并将自身翻译后的目标文件分片保存到指定的FAS。FAS向翻译服务器返回保存翻译后的目标文件分片成功的响应消息，翻译服务器向FLR发送保存翻译后的目标文件分片的文件存储信息请求消息；FLR对目标文件分片的文件存储信息保存成功后，通过翻译服务器向翻译管理模块返回文件分片的翻译完成响应消息；所有分片都已经翻译完成时，翻译管理模块通过FAC向应用终端返回文件翻译成功响应消息。

其中，所述发起文件翻译操作请求时，请求消息中携带待翻译的文件ID、翻译参数；所述翻译参数包括翻译前后的文件的语言类型。

具体的，所述应用终端71从云存储平台72读取存储的文件为：应用终端通过FAC向FLR发起读取文件请求，FLR向FAC返回读取文件信息响应消息，FAC从一个或多个FAS读取文件分片；FAS返回携带文件分片的文件分片读取成功响应消息，FAC对收到的各文件分片进行聚合得到一个完整文件，或对前后相连的多个文件分片进行聚合；FAC将聚合后得到的完整文件或文件块提供给应用终端。

本发明实施例中提供的基于云存储的翻译方法及系统中，云存储平台中翻译的文件分片是分段存储的，因此可以被分布式执行操作的翻译服务器作为待加翻译文件而直接使用。同时，翻译后的目标文件分片也不必立即合成为一个目标文件，而是和翻译前的文件分片一样，分别存储在各个FAS中。在应用终端需要使用目标文件时，才会读取这些文件分片，并组成一个完整的目标文件给应用终端。

本发明实施例的技术方案具有以下技术效果：

云存储平台中待翻译的文件分片，可以直接被分布式工作的翻译服务器作为待翻译的文件分片使用，减少了重复的文件分片和聚合过程。由于有多个翻译服务器可以同时参与源文件的翻译过程，大大提高了翻译的速度，尤其适合长文本、多语种的翻译。此外，翻译平台运行在服务器端，避免了应用终端的翻译软件不断地升级，也不需要在应用终端安装所有目标语言的相关文件，可大大降低客户使用的难度，减少了运行成本，很适合小语种的翻译。

以上所述，仅为本发明实施例的较佳实施例而已，并非用于限定本发明实施例的保护范围，凡在本发明实施例的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明实施例的保护范围之内。

Claims (10)

1.一种基于云存储的翻译方法，其特征在于，该方法包括：

应用终端向云存储平台发起文件写入，云存储平台对文件进行分片存储；

翻译平台对分片存储到云存储平台的文件进行分布式翻译。

2.根据权利要求1所述的方法，其特征在于，该方法还包括：应用终端从云存储平台读取存储的文件；读取的文件为翻译前的文件或翻译后的目标文件。

3.根据权利要求1所述的方法，其特征在于，所述应用终端向云存储平台发起文件写入，云存储平台对文件进行分片存储为：

应用终端通过云存储平台的FAC向云存储平台的FLR发送写入文件的请求消息；FLR向FAC返回写入文件参数响应消息，告知可提供服务的FAS的列表和存储策略；

FAC根据存储策略对本地的文件进行分片处理，并按照预先配置的规则和可提供服务的FAS列表向可服务的FAS逐个写入文件分片；

FAS返回保存文件分片成功的响应消息给FAC，FAC向FLR发送携带注册信息的请求消息，向FLR申请记录注册；FLR记录请求消息中的注册信息，并通过FAC向用户终端返回写入文件成功的响应消息。

4.根据权利要求3所述的方法，其特征在于，

所述存储策略包括分片大小、副本数量；

所述文件的每个分片的大小按照适合独立翻译的片段大小进行分割，或按照绝对大小进行分割；按照绝对大小进行分割时，按照完整的语句和分隔符为单位进行分割；

所述注册信息包括原始文件名称、文件ID、文件存储信息；所述文件存储信息包括文件的副本数量、分片数量、分片ID、分片长度、分片存放位置。

5.根据权利要求1所述的方法，其特征在于，所述翻译平台对分片存储到云存储平台的文件进行分布式翻译为：

应用终端通过FAC向翻译平台的翻译管理模块发起文件翻译操作请求，翻译管理模块从FLR读取文件存储信息，生成一个或多个文件分片的翻译任务，并分派给一个或多个翻译服务器；翻译管理模块发送分片翻译指令给一个或多个翻译服务器，收到分片翻译指令的一个或多个翻译服务器从指定的FAS读取文件分片；

一个或多个翻译服务器同时进行一个或多个文件分片的翻译处理，生成一个或多个翻译后的目标文件分片，并将自身翻译后的目标文件分片保存到指定的FAS。

6.根据权利要求5所述的方法，其特征在于，该方法还包括：

FAS向翻译服务器返回保存翻译后的目标文件分片成功的响应消息，翻译服务器向FLR发送保存翻译后的目标文件分片的文件存储信息请求消息；

FLR对目标文件分片的文件存储信息保存成功后，通过翻译服务器向翻译管理模块返回文件分片的翻译完成响应消息；

所有分片都已经翻译完成时，翻译管理模块通过FAC向应用终端返回文件翻译成功响应消息。

7.根据权利要求5所述的方法，其特征在于，

所述发起文件翻译操作请求时，请求消息中携带待翻译的文件ID、翻译参数；所述翻译参数包括翻译前后的文件的语言类型。

8.根据权利要求2所述的方法，其特征在于，所述应用终端从云存储平台读取存储的文件为：

应用终端通过FAC向FLR发起读取文件请求，FLR向FAC返回读取文件信息响应消息，FAC从一个或多个FAS读取文件分片；

FAS返回携带文件分片的文件分片读取成功响应消息，FAC对收到的各文件分片进行聚合得到一个完整文件，或对前后相连的多个文件分片进行聚合；

FAC将聚合后得到的完整文件或文件块提供给应用终端。

9.一种基于云存储的翻译系统，其特征在于，该系统包括：应用终端、云存储平台、翻译平台；其中，

应用终端，用于向云存储平台发起文件写入；

云存储平台，用于对文件进行分片存储；

翻译平台，用于对分片存储到云存储平台的文件进行分布式翻译。

10.根据权利要求9所述的系统，其特征在于，所述应用终端还用于，从云存储平台读取存储的文件，读取的文件为翻译前的文件或翻译后的目标文件。

Images