CN105159891B - 一种构建多语言网站实时翻译的方法 - Google Patents

Abstract

一种多语言网站实时翻译的方法，1)组建翻译集群方法，所有集群内的翻译机按名称排序，便于监测其状态及出现问题时的排查；按照一定规则，抽取一定数量的翻译机，形成调度翻译集群；剩余的翻译机，按待翻译的语言种类平均分配，形成多个有语言种类特色的独立翻译集群；2)划分待翻译数据块方法，将所有待翻译数据按待翻译的语言种类划分，形成不同语言种类的待翻译数据集合；3)数据块翻译方法，将待翻译数据块发送到对应的独立翻译集群中的翻译机翻译；调度翻译集群判断后协助翻译速度最慢的那个独立翻译集群一起翻译，待调度翻译集群翻译完成后，寻找下一个需要帮助的翻译集群。

Description

一种构建多语言网站实时翻译的方法

技术领域

本发明涉及互联网信息技术领域，具体涉及一种构建多语言网站实时翻译的方法。

背景技术

随着国际化进程的不断加快，机器翻译或机器辅助在线翻译已经公开了极多技术，多语言网站在互联网中的地位日渐突出，伴随而来的是海量数据实时翻译的问题，当前多语言网站实时翻译大多采用将数据均分到不同的翻译机进行翻译的方法。此方法在高并发、数据量大的情况下，翻译延迟现象比较严重，原因主要有两方面：一是数据方面，由于多语言混杂，翻译机需要频繁切换语言接口；二是翻译机本身翻译速度不同，易发生木桶短板效应。

发明内容

为了解决现有的问题，本发明目的是，提出一种多语言网站实时翻译的方法，旨在实现高并发、数据量大的情况下的多语言网站实时翻译。

本发明技术方案是：一种多语言网站实时翻译的方法，通过组建翻译集群、划分待翻译数据块和数据块翻译进行高并发、数据量大情况下的多语言网站实时翻译；

1)组建翻译集群方法，具体步骤如下：

步骤一、所有集群内的翻译机按名称排序，便于监测其状态及出现问题时的排查；

步骤二、按照一定规则，抽取一定数量的翻译机，形成调度翻译集群；

步骤三、剩余的翻译机，按待翻译的语言种类平均分配，形成多个有语言种类特色的独立翻译集群，若为各个独立翻译集群平均分配整数台翻译机后有剩下的余数，再逐个分配，各个语言种类的独立翻译集群的翻译机数量差不超过一台；

2)划分待翻译数据块方法，具体步骤如下：

步骤一、将所有待翻译数据按待翻译的语言种类划分，形成不同语言种类的待翻译数据集合；

步骤二、将各类语言种类的待翻译数据集合，按对应语言种类独立翻译集群的翻译机数量动态平均分配，形成多个待翻译数据块；

3)数据块翻译方法，具体步骤如下：

步骤一、将待翻译数据块发送到对应的独立翻译集群中的翻译机翻译；

步骤二、由于每个独立翻译集群的翻译速度不尽相同，对待翻译数据的处理速度不一样，调度翻译集群会协助翻译速度最慢的那个独立翻译集群一起翻译，待调度翻译集群翻译完成后，寻找下一个需要帮助的翻译集群。

进一步，将翻译机按待翻译的语言种类形成独立翻译集群，大大减少翻译机切换语言的频率，有效地减少翻译机卡机、死机，翻译错位等问题。

2)中步骤二的翻译机数量动态平均分配，具体如下，首先将各类语言的待翻译数据量，按对应语言独立翻译集群的翻译机数量平均分配，若为各个翻译机平均分配整数条数据后有剩下的余数，再逐条分配各个翻译机，各个翻译机的翻译数据量差不超过一条；下一次翻译数据分配前，统计独立翻译集群内各翻译机未翻译完的数据量，再分配，使得每一次分配后，一个独立翻译集群内的各个翻译机的数据量差不超过一条，如此保证所有翻译机的平均翻译速度，提升独立翻译集群的整体翻译速度。

调度翻译集群判断后协助翻译速度最慢的那个独立翻译集群一起翻译，调度翻译集群在翻译时采用翻译机数量动态平均分配的方法，如此提升各个独立翻译集群的翻译速度，使得在数据量大、高并发的情况下，各类语言网站的实时翻译不阻塞。

本发明的有益效果，与现有技术相比，其显著优点为：

(1)将翻译机按待翻译的语言种类形成独立翻译集群，不需频繁切换语言接口，有效地减少翻译机卡机、死机，翻译错位等问题。

(2)按一个独立翻译集群内的各翻译机的翻译速度，动态平均分配翻译数据量，如此保证所有翻译机的平均翻译速度，提升独立翻译集群的整体翻译速度。

(3)设有调度翻译集群，会协助翻译速度最慢的那个独立翻译集群一起翻译，如此提升各个独立翻译集群的翻译速度，使得在数据量大、高并发的情况下，不易发生木桶短板效应。

附图说明

图1为本发明实施例组建翻译集群的示意图。

图2为本发明实施例划分待翻译数据块的示意图。

图3为本发明实施例数据块翻译的示意图。

具体实施方式

为了使本发明的目的、技术方案和优点更加清楚，下面结合附图和具体实施例对本发明进行详细描述。

如图1所示，为本发明实施例组建翻译集群的示意图，具体为：

步骤一、所有翻译机按名称排序，便于监测其状态及出现问题时的排查。本实施例假设名称为翻译机的IP。

步骤二、按照一定规则，抽取一定数量的翻译机，形成调度翻译集群。本实施例假设数量为X台翻译机。X可为语言种类的数量的1-3倍。

步骤三、剩余的翻译机，按待翻译的语言种类平均分配，形成多个有语言特色的独立翻译集群，若为各个独立翻译集群平均分配整数台翻译机后有剩下的余数，再逐个分配，各个独立翻译集群的翻译机数量差不超过一台。本实施例假设待翻译的语言种类为N类，各个独立翻译集群分配到的翻译机数量为Y台或Z 台，则Y＝Z或Y–Z＝1。

如图2所示，为本发明实施例划分待翻译数据块的示意图，具体为：

步骤一、将所有待翻译数据按待翻译的语言种类划分，形成不同种类语言的待翻译数据集合。本实施例假设待翻译的语言种类为N类。

步骤二、将各类语言的待翻译数据集合，按对应语言独立翻译集群的翻译机数量动态平均分配，形成多个待翻译数据块；

步骤二的动态平均分配具体为首先将各类语言的待翻译数据量，按对应语言独立翻译集群的翻译机数量平均分配，若为各个翻译机平均分配整数条数据量后有剩下的余数，再逐条分配，各个翻译机的数据量差不超过一条；下一次分配前，统计独立翻译集群内各翻译机未翻译完的数据量，再分配，使得每一次分配后，一个独立翻译集群内的各个翻译机的数据量差不超过一条。本实施例将各类语言的待翻译数据集合，按对应语言独立翻译集群的翻译机数量(Y台或Z台，且Y ＝Z或Y–Z＝1)动态平均分配，使得每一次分配后，一个独立翻译集群内的各个翻译机的数据量差不超过一条。

如图3所示，为本发明实施例数据块翻译的示意图，具体为：

步骤一、将待翻译数据块发送到对应的独立翻译集群中的翻译机翻译。

步骤二、由于每个独立翻译集群的翻译速度不尽相同，对待翻译数据的处理速度不一样，调度翻译集群会协助翻译速度最慢的那个独立翻译集群一起翻译，待翻译完成后，寻找下一个需要帮助的翻译集群。本实例假设当前翻译 速度最慢的独立翻译集群为法语翻译集群。调度翻译集群在翻译时亦参照翻译机数量动态平均分配的方法。如此保证所有翻译机的平均翻译速度，提升独立翻译集群的整体翻译速度。

以上所述仅为本发明专利的实施例而已，并不用以限制本发明专利，凡在本发明专利的精神和原则之内所做的任何修改、等同替换和改进等，均以包含在本发明专利的保护范围之内。

Claims (1)

1.一种多语言网站实时翻译的方法，其特征在于通过组建翻译集群、划分待翻译数据块和数据块翻译进行高并发、数据量大情况下的多语言网站实时翻译；

1）组建翻译集群方法，具体步骤如下：

步骤一、所有集群内的翻译机按名称排序，便于监测其状态及出现问题时的排查；

步骤二、按照一定规则，抽取一定数量的翻译机，形成调度翻译集群；

步骤三、剩余的翻译机，按待翻译的语言种类平均分配，形成多个有语言种类特色的独立翻译集群，若为各个独立翻译集群平均分配整数台翻译机后有剩下的余数，再逐个分配，各个语言种类的独立翻译集群的翻译机数量差不超过一台；

2）划分待翻译数据块方法，具体步骤如下：

步骤一、将所有待翻译数据按待翻译的语言种类划分，形成不同语言种类的待翻译数据集合；

步骤二、将各类语言种类的待翻译数据集合，按对应语言种类独立翻译集群的翻译机数量动态平均分配，形成多个待翻译数据块；

3）数据块翻译方法，具体步骤如下：

步骤一、将待翻译数据块发送到对应的独立翻译集群中的翻译机翻译；

步骤二、由于每个独立翻译集群的翻译速度不尽相同，对待翻译数据的处理速度不一样，调度翻译集群会协助翻译速度最慢的那个独立翻译集群一起翻译，待调度翻译集群翻译完成后，寻找下一个需要帮助的翻译集群；

2）中步骤二的翻译机数量动态平均分配，具体如下，首先将各类语言的待翻译数据量，按对应语言独立翻译集群的翻译机数量平均分配，若为各个翻译机平均分配整数条数据后有剩下的余数，再逐条分配各个翻译机，各个翻译机的翻译数据量差不超过一条；下一次翻译数据分配前，统计独立翻译集群内各翻译机未翻译完的数据量，再分配，使得每一次分配后，一个独立翻译集群内的各个翻译机的数据量差不超过一条，如此保证所有翻译机的平均翻译速度，提升独立翻译集群的整体翻译速度；

数据块翻译方法中，调度翻译集群会协助翻译速度最慢的那个独立翻译集群一起翻译，调度翻译集群在翻译时采用翻译机数量动态平均分配的方法，如此提升各个独立翻译集群的翻译速度，使得在数据量大、高并发的情况下，各类语言网站的实时翻译不阻塞；

所述的组建翻译集群方法中，将翻译机按待翻译的语言种类形成独立翻译集群，减少翻译机切换语言的频率，有效地减少翻译机卡机、死机，翻译错位问题。