CN107111613A - 基于计算机的翻译系统和方法 - Google Patents
基于计算机的翻译系统和方法 Download PDFInfo
- Publication number
- CN107111613A CN107111613A CN201580055053.6A CN201580055053A CN107111613A CN 107111613 A CN107111613 A CN 107111613A CN 201580055053 A CN201580055053 A CN 201580055053A CN 107111613 A CN107111613 A CN 107111613A
- Authority
- CN
- China
- Prior art keywords
- message
- text
- speech
- client
- language
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013519 translation Methods 0.000 title claims abstract description 103
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000004891 communication Methods 0.000 claims abstract description 35
- 238000012790 confirmation Methods 0.000 claims description 3
- 238000006243 chemical reaction Methods 0.000 claims description 2
- 238000012545 processing Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 18
- 230000008569 process Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/565—Conversion or adaptation of application format or content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
- G06F40/58—Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/06—Message adaptation to terminal or network requirements
- H04L51/063—Content adaptation, e.g. replacement of unsuitable content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/42382—Text-based messaging services in telephone networks such as PSTN/ISDN, e.g. User-to-User Signalling or Short Message Service for fixed networks
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/39—Electronic components, circuits, software, systems or apparatus used in telephone systems using speech synthesis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/40—Electronic components, circuits, software, systems or apparatus used in telephone systems using speech recognition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2242/00—Special services or facilities
- H04M2242/12—Language recognition, selection or translation arrangements
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Artificial Intelligence (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Information Transfer Between Computers (AREA)
- Machine Translation (AREA)
Abstract
一种用于消息的翻译和通信的基于计算机的系统和方法包括使用传输协议将采用源语言的消息从第一客户端设备发送到第二客户端设备。由第一客户端设备或第二客户端设备使用传输协议将源语言消息发送到用于将消息从源语言翻译为目的语言的翻译服务器。采用其目的语言形式的消息被显示和存储。翻译服务器是在线的或离线的。文本到语音转换器和语音到文本转换器被用于将原始文本消息转换为语音或者将原始语音转换为文本,以用于传输到第二客户端设备。
Description
交叉引用
本申请在此要求于2015年10月8日提交的美国非临时申请号14/878,532和于2014年10月8日提交的美国临时申请号62/061498的优先权权益,每个的内容通过引用方式整体并入本文。
技术领域
本发明大体涉及基于机器或计算机的翻译系统和方法的领域,并且更具体地涉及用于提供应用服务、基于云的、基于文本的和基于语音的消息传送和翻译的系统和方法。这提供具有在所有语言之间的所有方向对文本到语音文本进行翻译和转换的能力的多语言系统。如本文中所使用的,“翻译”旨在意指采用一种语言的语句或词语的含义到采用另一语言的相同含义的转换。
背景技术
基于文本的消息传送&基于语音的消息传送是通信的方法,借此文本字符串和语音记录能够被发送和接收为翻译的消息。消息可以在人们之间进行交换以便传送信息。各种类型和配置的基于计算机的翻译和/或转换系统和方法在本领域中是已知的。用于翻译的一个这种示例被描述在于2015年10月1日公开的国际申请WO 2015/145259中,其内容通过引用整体并入本文。如在WO 2015/145259中说明和描述的,计算机系统被用于实现翻译。类似地,在本发明中,翻译系统被使用。另外,于2013年1月3日公开的美国公开申请2013/000359描述和说明了一种基于计算机的通信系统和方法,其通过引用整体并入本文。其他类似的系统和方法在本领域中是已知的。这种系统是在本发明中采用的类型以用于促进和实现本文中的发明。
发明内容
本发明提供了用于对来自第一客户端的用于翻译和传输到第二客户端的消息(无论是语音的还是文本的)进行授权和注册的系统和方法,其中服务器对消息进行翻译并将所翻译的消息提供到第二客户端。本发明的基于计算机的系统和方法包括使用传输协议将采用源语言的消息从第一客户端设备发送到第二客户端设备。由第一客户端设备或第二客户端设备使用传输协议将源语言消息发送到用于将消息从源语言翻译为目的语言的翻译服务器。采用其目的语言形式的消息被显示和存储。翻译服务器是在线的或离线的。文本到语音转换器和语音到文本转换器被用于将原始文本消息转换为语音或者将原始语音转换为文本,以用于传输到第二客户端设备。
附图说明
将结合附图中图示的示例性实施例描述本发明,在附图中:
图1(a)和图1(b)分别是:用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统(翻译服务器)的在两个设备之间的文本到文本通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统(翻译服务器)的在两个设备之间的文本到文本通信序列的处理步骤的流程图;
图2(a)和图2(b)分别是:用于利用在本发明的示例实施例中使用的基于云的翻译系统的在两个设备之间的文本到文本通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的基于云的翻译系统的在两个设备之间的文本到文本通信序列的处理步骤的流程图;
图3(a)和图3(b)分别是:用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统、离线语音到文本转换器和离线文本到语音转换器的在两个设备之间的文本到文本通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统、离线语音到文本转换器和离线文本到语音转换器的在两个设备之间的文本到语音通信序列的处理步骤的流程图;
图4(a)和图4(b)分别是:用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统、基于云的语音到文本转换器和基于云的文本到语音转换器的在两个设备之间的文本到语音通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统、基于云的语音到文本转换器和基于云的文本到语音转换器的在两个设备之间的文本到语音通信序列的处理步骤的流程图;
图5(a)和图5(b)分别是:用于利用在本发明的示例实施例中使用的嵌入式基于云的翻译系统、离线语音到文本转换器和离线文本到语音转换器的在两个设备之间的文本到语音通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的嵌入式基于云的翻译系统、离线语音到文本转换器和离线文本到语音转换器的在两个设备之间的文本到语音通信序列的处理步骤的流程图;
图6(a)和图6(b)分别是:用于利用在本发明的示例实施例中使用的嵌入式基于云的翻译系统、基于云的语音到文本转换器和基于云的文本到语音转换器的在两个设备之间的文本到语音通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的嵌入式基于云的翻译系统、基于云的语音到文本转换器和基于云的文本到语音转换器的在两个设备之间的文本到语音通信序列的处理步骤的流程图;
图7(a)和图7(b)分别是:用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统、离线语音到文本转换器和离线文本到语音转换器的在两个设备之间的语音到文本通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统、离线语音到文本转换器和离线文本到语音转换器的在两个设备之间的语音到文本通信序列的处理步骤的流程图;
图8(a)和图8(b)分别是:用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统、基于云的语音到文本转换器和基于云的文本到语音转换器的在两个设备之间的语音到文本通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统、基于云的语音到文本转换器和基于云的文本到语音转换器的在两个设备之间的语音到文本通信序列的处理步骤的流程图;
图9(a)和图9(b)分别是:用于利用在本发明的示例实施例中使用的嵌入式基于云的翻译系统、离线语音到文本转换器和离线文本到语音转换器的在两个设备之间的语音到文本通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的嵌入式基于云的翻译系统、离线语音到文本转换器和离线文本到语音转换器的在两个设备之间的语音到文本通信序列的处理步骤的流程图;
图10(a)和图10(b)分别是:用于利用在本发明的示例实施例中使用的嵌入式基于云的翻译系统、基于云的语音到文本转换器和基于云的文本到语音转换器的在两个设备之间的语音到文本通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的嵌入式基于云的翻译系统、基于云的语音到文本转换器和基于云的文本到语音转换器的在两个设备之间的语音到文本通信序列的处理步骤的流程图;
图11(a)和图11(b)分别是:用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统、离线语音到文本转换器和离线文本到语音转换器的在两个设备之间的语音到语音通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统、离线语音到文本转换器和离线文本到语音转换器的在两个设备之间的语音到语音通信序列的处理步骤的流程图;
图12(a)和图12(b)分别是:用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统、基于云的语音到文本转换器和基于云的文本到语音转换器的在两个设备之间的语音到语音通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的嵌入式离线翻译系统、基于云的语音到文本转换器和基于云的文本到语音转换器的在两个设备之间的语音到语音通信序列的处理步骤的流程图;
图13(a)和图13(b)分别是:用于利用在本发明的示例实施例中使用的嵌入式基于云的翻译系统、离线语音到文本转换器和离线文本到语音转换器的在两个设备之间的语音到语音通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的嵌入式基于云的翻译系统、离线语音到文本转换器和离线文本到语音转换器的在两个设备之间的语音到语音通信序列的处理步骤的流程图;
图14(a)和图14(b)分别是:用于利用在本发明的示例实施例中使用的嵌入式基于云的翻译系统、基于云的语音到文本转换器和基于云的文本到语音转换器的在两个设备之间的语音到语音通信序列的系统元件的示意图;以及图示了用于利用在本发明的示例实施例中使用的嵌入式基于云的翻译系统、基于云的语音到文本转换器和基于云的文本到语音转换器的在两个设备之间的语音到语音通信序列的处理步骤的流程图;
图15(a)和图15(b)分别是:用于授权的系统元件的示意图;以及图示了用于授权的处理步骤的流程图;
图16(a)和图16(b)分别是:用于注册的系统元件的示意图;以及图示了用于注册的处理步骤的流程图;
图17(a)和图17(b)分别是:用于文本消息翻译的系统元件的示意图;以及图示了用于文本消息翻译的处理步骤的流程图;以及
图18(a)和图18(b)分别是:用于发送语音消息的系统元件的示意图;以及图示了用于发送语音消息的处理步骤的流程图。
具体实施方式
现在更详细地参考附图,图1(a)和图1(b)至图14(a)和图14(b)都图示了作为本发明的实施例的各种通信序列的系统元件和处理步骤。
现在具体地转到图1(a),示出了用于通过翻译系统(翻译服务器)11在发送消息的第一客户端1与接收消息的第二客户端2之间进行通信的系统元件。
图1(b)图示了利用离线翻译系统从客户端1到客户端2的文本到文本消息翻译/通信的过程。在步骤12处,客户端设备1将采用原始源语言的消息发送到客户端设备2,在步骤13处,客户端设备2接收采用原始源语言的消息。在步骤14处,客户端2之后将文本消息发送到离线翻译系统,并且在步骤15处,之后将文本发送回到客户端2以用于采用目的语言进行显示。
图2(a)和图2(b)图示了利用在线翻译系统对从客户端1到客户端2的消息的类似的文本到文本序列翻译和通信。在图2(a)中,图示了如图1(a)中的相同的系统元件。然而,过程在这里是不同的。在步骤21处,客户端1将采用原始源语言的文本消息发送到客户端2,在步骤22处,客户端2接收采用原始源语言的文本消息。然而,这里,客户端2将采用原始源语言的文本消息发送到翻译系统11,在翻译系统11中,在步骤23处将文本消息翻译成目的语言。在翻译之后,在步骤23处,将采用其目的语言的所翻译的消息发送到客户端2并显示采用目的语言的消息。
图3(a)和图3(b)图示了利用离线翻译系统和离线语音识别系统对消息的文本到语音翻译序列。在图3(a)处,系统元件为客户端1、语音识别系统31、翻译系统32和客户端2。语音识别系统31包括语音到文本转换器31(a)和文本到语音转换器31(b)。这里,过程包括在步骤33处客户端1将采用其原始源语言的文本消息发送到客户端2,在步骤34处,客户端2接收采用其原始源语言的文本消息。在步骤35处,客户端2之后将文本消息发送到离线翻译系统32以在步骤35处进行翻译。在步骤36处,之后由文本到语音转换器31(b)将在翻译之后现在采用其目的语言的文本消息转换为采用目的语言的语音消息。在步骤37处,客户端接收采用目的语言的文本消息和语音消息两者。
现在转到图4(a)和图4(b),图示了从客户端1到客户端2的另一文本到语音翻译序列。这里,翻译系统是离线的,但是语音识别系统是在线的。在步骤41处客户端1将采用原始源语言的文本消息发送到客户端2。在步骤42处,客户端2接收采用原始源语言的文本消息并将消息发送到翻译系统32,翻译系统32将文本消息翻译成目的语言并且之后将采用目的语言的文本消息发送到语音识别系统31,在语音识别系统31中,在步骤44处,由文本到语音转换器31(b)将文本消息转换为采用目的语言的语音消息。在步骤45处,之后将采用目的语言的文本消息和语音消息发送到客户端2,客户端2接收采用目的语言的文本消息和语音消息两者。
在图5(a)和图5(b)中图示了另一文本到语音翻译序列。在该布置中,在步骤51处,将采用源语言的消息从客户端1发送到客户端2,在步骤52处,客户端2接收采用原始源语言的消息。消息之后被发送到在线翻译系统52,在在线翻译系统52中,在步骤53处,将消息翻译为目的语言。目的语言文本之后被转发到语音识别系统31,其是离线的,在语音识别系统31中,在步骤54处,由文本到语音转换器31(b)将目的语言文本转换为采用目的语言的语音消息。由此,在步骤55处,将其发送到客户端2,客户端2接收采用目的语言的文本消息和语音消息两者。
在图6(a)和图6(b)中图示了另一文本到语音翻译序列,其中,在步骤61处,将采用其原始源语言的文本消息发送到客户端2,在步骤62处,客户端2接收采用其原始源语言的消息。客户端2将采用其原始源语言的文本消息发送到翻译系统62,其是在线系统,以用于在步骤63处将其翻译成目的语言。在翻译之后,在步骤63处,现在采用其目的语言的文本消息被发送回到客户端2,在步骤64处,客户端2接收采用其目的语言的文本消息,并且之后将采用目的语言的文本消息发送到在线语音识别系统31,在在线语音识别系统31中,在步骤65处,由文本到语音转换器31(b)将文本消息转换为采用目的语言的语音消息。采用目的语言的文本消息和语音消息之后被发送到客户端2,在步骤66处,客户端2接收其。
图7(a)和图7(b)图示了利用用于将来自客户端1的语音信息发送成用于递送到客户端2的文本消息的离线语音识别系统的离线翻译序列。在步骤73处,客户端1记录采用源语言的语音消息,其之后被发送以用于在步骤74处由语音识别系统31的文本到语音转换器31(b)转换为文本消息。文本消息形式之后被发送到客户端2,在步骤75处,客户端2接收其。仍然采用其源语言的文本消息之后由翻译系统72(其是离线的)翻译,并且在步骤77处,所翻译的文本消息之后被显示在客户端2处。
图8(a)和图8(b)示出了在步骤83处客户端1记录采用其源语言的语音消息并且其将所记录的消息发送到在线语音识别系统31,在在线语音识别系统31中,在步骤84处,语音消息由语音到文本转换器31(a)转换为采用源语言的文本消息。所转换的文本消息被发送到客户端1,在步骤85处,客户端1接收采用其原始源语言的所转换的文本消息。其后,所转换的文本消息被发送到客户端2,在步骤86处,客户端2接收采用其原始源语言的所转换的文本消息,并且客户端2在那时将其发送到离线翻译系统82以用于翻译,在离线翻译系统82中,在步骤87处,所转换的文本消息被翻译为文本目的语言。在步骤88处,文本目的语言之后被发送到客户端2。
图9(a)和图9(b)图示了序列,其中客户端1记录采用源语言的语音消息并将其发送到离线语音识别系统31,在离线语音识别系统31中,在步骤94处,语音消息由语音到文本转换器31(a)转换为采用源语言的文本消息。所转换的文本消息之后被发送到客户端2,在客户端2中,在步骤95处,接收所转换的文本消息并且之后,所转换的文本消息被发送到在线翻译系统92,在在线翻译系统92中,在步骤96处,文本消息被翻译为目的语言。采用文本形式的所翻译的消息之后被发送到客户端2,在客户端2中,在步骤97处,采用目的语言显示所翻译的文本消息。
图10(a)和图10(b)图示了又一语音到文本翻译序列。这里,客户端1记录采用源语言的语音消息并将其发送到在线语音识别系统31,在在线语音识别系统31中,在步骤104处,所记录的采用源语言的语音消息由转换器31(a)转换为采用相同源语言的文本消息。文本消息之后被发送到客户端1,在步骤105处,客户端1接收其并将其发送到客户端2,在步骤106处,客户端2接收其。采用源语言的文本消息之后被发送到在线翻译系统102,在在线翻译系统102中,在步骤107处,文本消息被翻译成目的语言。最终,所翻译的文本消息被发送到客户端2,在客户端2中,在步骤108处,采用目的语言显示所翻译的文本消息。
在图11中图示了从一个客户端设备到另一客户端设备的消息的又一翻译序列,这次为从语音到语音。在步骤113处,客户端1记录采用源语言的语音消息并将该消息发送到语音识别系统31,在语音识别系统31中,在步骤114处,由转换器31(a)将该消息转换为仍然采用源语言的文本消息。现在采用文本形式的所转换的消息被发送到客户端2,在步骤115处,客户端2接收其。采用源语言的文本消息之后被发送到离线翻译系统,在离线翻译系统中,在步骤116处,其被翻译成采用文本形式的目的语言。步骤117是其中现在采用目的语言的文本消息由语音识别系统31的文本到语音转换器31(b)转换成语音消息并将采用目的语言的文本消息和语音消息两者发送到客户端2,在步骤118处,客户端2接收其。
图12(a)和图12(b)图示了使用离线翻译系统和在线语音识别系统的语音到语音翻译序列。在该序列中,在步骤123处,客户端1记录采用源语言的语音消息并将其发送到语音识别系统31的转换器31(a),在语音识别系统31的转换器31(a)中,在步骤124处,该消息被转换为采用源语言的文本消息。采用源语言的文本消息之后从语音识别系统121被发送回到客户端1,在步骤125处,客户端1接收其。采用源语言的文本消息之后被发送到客户端2,在步骤126处,客户端2接收其并且之后将其发送到翻译系统122以用于在步骤127处将其翻译成目的语言。采用文本形式的所翻译的消息之后被发送回到语音识别系统31,在语音识别系统31中,在步骤128处,该消息由转换器31(b)转换为语音消息,但是这次采用目的语言。采用目的语言的采用文本和语音形式两者的所翻译的消息之后被发送到客户端2,在客户端2中,在步骤129处,它们被接收。
图13(a)和图13(b)图示了利用嵌入式的基于云的在线翻译系统和离线语音到文本转换器和离线文本到语音转换器的在设备客户端1与客户端2之间的语音到语音通信序列。这里,在步骤133处,客户端1记录采用源语言的语音消息并将该语音消息发送到语音识别系统31,在语音识别系统31中,在步骤134处,该语音消息由转换器31(a)转换为采用源语言的文本消息。所转换的文本消息之后被发送回到客户端2,在步骤135处,客户端2接收采用源语言的文本消息。客户端2之后将文本消息发送到嵌入式的基于云的翻译系统132,在嵌入式的基于云的翻译系统132中,在步骤136处,将该文本消息翻译成目的语言。所翻译的文本消息之后被发送到在语音识别系统31处的语音转换器31(b),在语音识别系统31处的语音转换器31(b)中,在步骤137处,文本消息被转换为采用目的语言的语音消息并且之后采用目的语言、采用文本和语音格式两者被发送到客户端2,在步骤138处,客户端2接收其。
图14(a)和图14(b)表示使用嵌入式的基于云的在线翻译系统和具有语音到文本转换器和文本到语音转换器两者的基于云的语音识别系统的在客户端1与客户端2之间的语音到语音通信序列。在该序列中,在步骤143处,在客户端1处记录采用源语言的语音消息并将该语音消息发送到在线语音识别系统31,在在线语音识别系统31中,在步骤144处,语音到文本转换器31(a)将该语音消息转换为采用源语言的文本消息。文本消息之后被发送回到客户端1,在步骤145处,客户端1接收其。文本消息之后被重新发送到客户端2,在步骤146处,客户端2接收其。文本消息被发送到翻译系统142,在翻译系统142中,在步骤147处,将该文本消息翻译成采用文本格式的目的语言。文本翻译被发送到客户端2,在步骤148处,客户端2接收采用目的语言的文本翻译并且之后将其发送到语音识别系统31,在语音识别系统31中,在步骤149处,由文本到语音转换器31(b)将其转换成采用目的语言的语音消息。在步骤150处,客户端2接收采用目的语言的所翻译的和所转换的文本和语音消息。
为了处理各种序列,需要授权。通过将包含用户的电话号码和独特设备ID(智能电话)的一个http请求或多个http请求发送到服务器来完成授权。
图15(a)和图15(b)图示了授权。如图示的,诸如客户端1的客户端设备被连接到服务器3。在步骤151处,在客户端设备处的应用获得用户的设备ID和电话号码,并且经由一个http或多个http将它们发送到服务器3。在步骤152处,服务器对设备ID和电话号码进行匹配并将访问服务器需要的访问令牌或密钥发回,并且在步骤153处,将令牌或密钥本地存储在客户端1处。
用户经由XMPP协议(或其他类似的方法)交换消息。接收到的消息被本地存储在客户端设备上以用于随后显示。如果用户使得能够翻译针对显示的对话的消息,则所有传入的消息被翻译成由用户指定的语言。
如以上所指出的,基于文本和语音的消息传送是通信技术,其中文本字符串和语音记录可以被发送和接收为翻译的消息。
在图18(a)和图18(b)处图示了对语音消息进行发送。这里,客户端1被连接到服务器181,服务器181被连接到语音识别系统31,语音识别系统31转而被连接到连接到客户端2的翻译服务器183。为了发送语音消息,在步骤184处,在客户端1设备处记录语音消息并且之后将其发送到服务器181,在服务器181中,在步骤185处将其归档和存储。在步骤186处,目标ID之后被发送到第二客户端设备,客户端2。在步骤187处,接收到的消息之后被显示在客户端2处的对话框中,并且原始消息可以被回放。用户可以之后在上下文菜单中选择对消息进行翻译。为此,客户端2将语音消息发送到语音识别系统31的语音到文本转换器31(a),在语音识别系统31的语音到文本转换器31(a)中,在步骤188处,该语音消息被转换为采用原始源语言的文本消息。所识别的文本消息被本地存储为文本以用于将来在步骤189处进行翻译。在步骤190处,消息可以之后由翻译服务器103翻译并且可以之后由客户端2本地存储以用于稍后显示。在步骤191处,用户可以使用语音识别系统31的文本到语音转换器31(b)并回放所翻译的语音消息。
在图17(a)和图17(b)处图示了文本消息的翻译。在步骤172处,文本消息可以经由可扩展消息处理与出席协议(XMPP)(针对基于XML(可扩展标记语言)的面向消息的中间件的通信协议,其使得能够在任何两个或更多个网络实体之间进行结构化且又可扩展的数据的接近实时交换)被发送到客户端2。当在客户端2处被接收到时,在173处,消息可以被本地存储以用于稍后显示。
在步骤174处,消息可以之后由翻译服务器171翻译,并且之后在步骤175处,根据翻译显示设置来显示消息。用于翻译的参数,例如源语言、目的语音和文本被提供到翻译服务/服务器。所翻译的文本还被本地存储在客户端设备上以用于将来查看。用户可以回放(由设备或第三方应用)所合成的所翻译的语音消息。
用户经由XMPP协议(或任何其他类似的方法)交换消息。接收到的消息被本地存储在设备上以用于稍后显示。如果用户使得能够翻译针对所显示的对话的消息,则所有传入的消息被翻译成由用户指定的语言。
如果消息已经被翻译,则取决于显示偏好,可以显示翻译的消息或者原始消息和翻译的消息两者。在出错的情况下,将显示消息的原始文本和出错图标。翻译尝试的时间被存储在设备上。在消息的将来查看时,程序将在自上次未成功的尝试已经经过两天时尝试再次对其进行翻译。
如图16(a)和图16(b)中图示的,设备的注册通过用户在步骤161处输入采用国际格式的电话号码(如果还没有由在客户端设备1处的操作系统(OS服务)完成的话)来完成。在步骤162处,客户端设备将具有确认代码的短消息系统(SMS)发送到所提供的电话号码,并且在步骤163处,用户通过输入经由一个http请求或多个http请求发送回的确认代码来确认注册。在步骤164处,服务器对设备ID、电话号码和确认代码进行匹配。在步骤165处,用户将姓名和照片提交到客户端,其中,在166处,服务器将用户的数据记录到数据库。其后,在步骤167处,应用开始授权过程。
尽管已经结合详细示出和描述的当前优选实施例说明和描述了本发明,但是不旨在将本发明限于示出的细节,因为可以在任何方面不脱离本发明的精神的情况下进行各种修改和结构变化。实施例被选择和描述以便最好地解释本发明的原理和实际应用从而使得本领域技术人员能够最好地利用本发明和具有如适于所预见到的特定使用的各种修改的各种实施例。
Claims (17)
1.一种用于消息的翻译和通信的基于计算机的方法,包括:使用传输协议将采用源语言的消息从第一客户端设备发送到第二客户端设备,由所述第一客户端设备或所述第二客户端设备使用传输协议将所述源语言消息发送到用于将所述消息从所述源语言翻译为目的语言的翻译服务器,显示采用其目的语言的所述消息,并且存储采用其目的语言的所述消息,所述翻译服务器是在线的或离线的。
2.根据权利要求1所述的方法,其中,所述协议是XMPP(可扩展消息处理与出席协议)。
3.根据权利要求1所述的方法,其中,在对所述消息进行翻译之前,所述消息被发送到所述第二客户端设备。
4.根据权利要求1所述的方法,其中,所述消息是文本消息。
5.根据权利要求4所述的方法,还包括在将所述消息从其源语言翻译为所述目的语言之后使用在线或离线文本到语音转换器将所述文本消息转换为语音消息。
6.根据权利要求4所述的方法,还包括在将所述消息从其源语言翻译为所述目的语言之前使用在线或离线文本到语音转换器将所述文本消息转换为语音消息。
7.根据权利要求3所述的方法,其中,所述消息是文本消息,所述文本消息在将所述消息从其源语言翻译为所述目的语言之后使用在线或离线文本到语音转换器被转换为语音消息。
8.根据权利要求1所述的方法,其中,所述消息是语音消息。
9.根据权利要求8所述的方法,还包括在将所述消息从其源语言翻译为其目的语言之前由语音到文本转换器将所述语音消息转换为文本消息。
10.根据权利要求9所述的方法,其中,所述源语言消息由所述第一客户端发送到所述语音到文本转换器并且之后在转换为采用所述源语言的文本消息之后被发送回到所述第一客户端,所述转换的文本消息之后被转发到所述第二客户端,还包括以下步骤:将所述转换的文本消息发送到翻译服务器以用于翻译为目的语言,将所述翻译的文本消息从所述翻译服务器发送到文本到语音转换器,所述文本到语音转换器将所翻译的文本消息转换为采用所述目的语言的语音消息,并且两者都采用所述目的语言的所述翻译的文本消息和所述翻译的语音消息被转发到所述第二客户端。
11.根据权利要求1所述的方法,还包括由用户对设备进行注册。
12.根据权利要求11所述的方法,其中,注册的所述步骤包括输入被转发到服务器的用户电话号码,由所述服务器将确认代码发送到所述输入的电话号码,由所述用户确认注册。
13.根据权利要求12所述的方法,其中,由所述用户确认注册包括用户输入所述确认代码以用于经由一个http或多个http请求传输到所述服务器,对设备ID、所述电话号码和所述确认代码进行匹配,并且将其向用户确认并且将其记录在数据库中。
14.根据权利要求13所述的方法,还包括通过使所述用户输入所述设备ID和电话号码并经由一个http或多个http将所述设备ID和电话号码发送到服务器以用于由所述服务器与先前注册的用户进行匹配并将访问密钥返回给所述用户来对用户进行授权。
15.一种用于实现用于采用源语言的消息的翻译和通信的方法的系统,包括:计算机,其具有用于传输所述消息的软件;翻译服务器,其与所述计算机连接或通信以用于将所述消息从其源语言翻译为目的语言;第一客户端,与所述计算机和所述翻译服务器连接以用于初始化要被发送到第二客户端和/或所述翻译服务器的消息。
16.根据权利要求15所述的系统,还包括文本到语音转换器,其与所述计算机和/或与所述第一客户端和/或与所述第二客户端连接或通信以用于将文本消息转换为语音消息以用于传输到所述第二客户端。
17.根据权利要求15所述的系统,还包括:文本到语音转换器,其与所述计算机和/或与所述第一客户端和/或与所述第二客户端连接或通信以用于将文本消息转换为语音消息以用于传输到所述第二客户端;以及语音到文本转换器,其与所述计算机和/或所述翻译服务器和与所述第一客户端和/或与所述第二客户端连接以用于将所述语音消息转换为文本消息。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201462061498P | 2014-10-08 | 2014-10-08 | |
US62/061,498 | 2014-10-08 | ||
PCT/IB2015/002129 WO2016055864A1 (en) | 2014-10-08 | 2015-10-08 | Computer based translation system and method |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107111613A true CN107111613A (zh) | 2017-08-29 |
Family
ID=59294798
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580055053.6A Pending CN107111613A (zh) | 2014-10-08 | 2015-10-08 | 基于计算机的翻译系统和方法 |
Country Status (2)
Country | Link |
---|---|
EP (1) | EP3204870A4 (zh) |
CN (1) | CN107111613A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108595444A (zh) * | 2018-04-03 | 2018-09-28 | 深圳市沃特沃德股份有限公司 | 语音翻译方法和装置 |
CN109286725A (zh) * | 2018-10-15 | 2019-01-29 | 华为技术有限公司 | 翻译方法及终端 |
CN110111770A (zh) * | 2019-05-10 | 2019-08-09 | 濮阳市顶峰网络科技有限公司 | 一种网络多语言社交翻译方法、系统、设备及介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6339754B1 (en) * | 1995-02-14 | 2002-01-15 | America Online, Inc. | System for automated translation of speech |
CN103246645A (zh) * | 2013-05-27 | 2013-08-14 | 江苏圆坤科技发展有限公司 | 一种翻译方法和翻译系统 |
CN104010267A (zh) * | 2013-02-22 | 2014-08-27 | 三星电子株式会社 | 支持基于翻译的通信服务方法和系统和支持该服务的终端 |
-
2015
- 2015-10-08 CN CN201580055053.6A patent/CN107111613A/zh active Pending
- 2015-10-08 EP EP15849745.3A patent/EP3204870A4/en not_active Withdrawn
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6339754B1 (en) * | 1995-02-14 | 2002-01-15 | America Online, Inc. | System for automated translation of speech |
CN104010267A (zh) * | 2013-02-22 | 2014-08-27 | 三星电子株式会社 | 支持基于翻译的通信服务方法和系统和支持该服务的终端 |
CN103246645A (zh) * | 2013-05-27 | 2013-08-14 | 江苏圆坤科技发展有限公司 | 一种翻译方法和翻译系统 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108595444A (zh) * | 2018-04-03 | 2018-09-28 | 深圳市沃特沃德股份有限公司 | 语音翻译方法和装置 |
CN109286725A (zh) * | 2018-10-15 | 2019-01-29 | 华为技术有限公司 | 翻译方法及终端 |
US11893359B2 (en) | 2018-10-15 | 2024-02-06 | Huawei Technologies Co., Ltd. | Speech translation method and terminal when translated speech of two users are obtained at the same time |
CN110111770A (zh) * | 2019-05-10 | 2019-08-09 | 濮阳市顶峰网络科技有限公司 | 一种网络多语言社交翻译方法、系统、设备及介质 |
Also Published As
Publication number | Publication date |
---|---|
EP3204870A1 (en) | 2017-08-16 |
EP3204870A4 (en) | 2018-06-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9934786B2 (en) | Speech recognition and transcription among users having heterogeneous protocols | |
US9530415B2 (en) | System and method of providing speech processing in user interface | |
WO2021135548A1 (zh) | 语音的意图识别方法、装置、计算机设备及存储介质 | |
CN1333385C (zh) | 用于通信系统的语音浏览器启用器 | |
CN101207586B (zh) | 用于实时自动通信的方法和系统 | |
CN1984201B (zh) | 语音服务系统和方法 | |
CN1160700C (zh) | 提供网络协同会话服务的系统和方法 | |
US20160110348A1 (en) | Computer Based Translation System and Method | |
EP2274870B1 (en) | Open architecture based domain dependent real time multi-lingual communication service | |
US7983399B2 (en) | Remote notification system and method and intelligent agent therefor | |
US20020032591A1 (en) | Service request processing performed by artificial intelligence systems in conjunctiion with human intervention | |
US20110067059A1 (en) | Media control | |
CN107004407A (zh) | 增强型语音端点确定 | |
CN107112016A (zh) | 多模态状态循环 | |
CN102439661A (zh) | 用于车辆内自动交互的面向服务语音识别 | |
CN101207584B (zh) | 自动提供文本交换服务的方法和系统 | |
WO2005112374A1 (en) | Method for transmitting messages from a sender to a recipient, a messaging system and message converting means | |
CN102369568A (zh) | 使用语音通信交互式地访问托管服务的系统和方法 | |
CN106409283A (zh) | 基于音频的人机混合交互系统及方法 | |
CN107111613A (zh) | 基于计算机的翻译系统和方法 | |
US7941561B2 (en) | System and method for communications over a computer network | |
JP2005151553A (ja) | ボイス・ポータル | |
CN106899637A (zh) | 互联网访问多语种智能识别系统 | |
JP2011090572A (ja) | 共有スペース管理システム、共有スペース管理方法及び共有スペース提供サーバ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20170829 |
|
WD01 | Invention patent application deemed withdrawn after publication |