CN105117391A - 翻译语言 - Google Patents

翻译语言 Download PDF

Info

Publication number
CN105117391A
CN105117391A CN201510568416.8A CN201510568416A CN105117391A CN 105117391 A CN105117391 A CN 105117391A CN 201510568416 A CN201510568416 A CN 201510568416A CN 105117391 A CN105117391 A CN 105117391A
Authority
CN
China
Prior art keywords
language
translation
audio data
mobile device
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510568416.8A
Other languages
English (en)
Other versions
CN105117391B (zh
Inventor
M·J·勒博
J·N·吉特科夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN105117391A publication Critical patent/CN105117391A/zh
Application granted granted Critical
Publication of CN105117391B publication Critical patent/CN105117391B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/40Processing or translation of natural language
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/40Processing or translation of natural language
    • G06F40/58Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/42348Location-based services which utilize the location information of a target
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2203/00Aspects of automatic or semi-automatic exchanges
    • H04M2203/20Aspects of automatic or semi-automatic exchanges related to features of supplementary services
    • H04M2203/2061Language aspects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2242/00Special services or facilities
    • H04M2242/12Language recognition, selection or translation arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/58Details of telephonic subscriber devices including a multilanguage function

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Theoretical Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Signal Processing (AREA)
  • Machine Translation (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本申请的各实施例涉及翻译语言。一种在服务器上执行的在语言之间翻译的方法,包括:从移动设备接收用于第一语言的第一音频数据;将第一音频数据翻译为用于第二语言的第二音频数据;接收移动设备已经在两个位置之间移动这样的指示;并且响应于指示向移动设备发送第二音频数据。

Description

翻译语言
分案申请说明
本申请是国际申请日为2011年8月2日、于2013年4月1日进入中国国家阶段的、申请号为201180047863.9、名称为“翻译语言”的中国发明专利申请的分案申请。
技术领域
本专利申请总体上描述使用比如移动电话之类的移动设备以实现语言翻译。
背景技术
电子语言翻译概念至少约从20世纪80年代起就已经问世。例如,“星际迷航:下一代(StarTrek:TheNextGeneration)”以虚构的“通用”翻译器为特征,该翻译器将人物的讲话语言自动翻译成它的目标受众的语言并且反之亦然。
如今,计算机硬件的能力已经演变至电子语言翻译成为现实这一点。例如,在移动领域中,DLPMOBILE近来发布了“讲话通用翻译器”。这一应用或者“app”允许两个用户使用移动电话用他们自己的语言相互通信。参照图1,“讲话通用翻译器”允许用户从支持的语言的列表之中选择用于翻译的语言。在图1的示例中,选择的语言是分别由美国和意大利国旗代表的英语10和意大利语11。在例如用英语讲话之前,用户触摸触屏15的英语侧14上的麦克风图标12。用户继而向移动电话中讲话。作为响应,在英语文本域16中显示与用户的讲话对应的英语文本。在意大利语文本域17中显示与用户的翻译成意大利语的讲话对应的意大利语文本,并且从移动电话输出意大利语讲话。第二用户(例如,说意大利语者)可以通过触摸触屏11的意大利语侧20上的麦克风图标19并且向移动电话中说意大利语来做出响应。在这一情况下,重复这一过程以使得来自移动电话的输出是英语文本和英语讲话。
发明内容
一般而言,本专利申请描述用于在语言之间翻译的技术。这样的技术的示例包括:从移动设备接收用于第一语言的第一音频数据;翻译第一音频数据以产生用于第二语言的第二音频数据;接收移动设备已经在两个位置之间移动这样的指示;以及响应于指示向移动设备发送第二音频数据。这一示例可以单独地或者在组合中包括以下特征或者在本专利申请中描述的任何其它特征中的一个或者多个特征。
翻译第一音频数据以产生第二音频数据可以包括:基于第一音频数据生成第一语言的第一文本;将第一文本翻译成第二语言的第二文本;以及根据第二文本生成第二音频数据。
前述示例也可以包括:向移动设备和计算机中的至少一项发送第一文本或者第二文本;标识移动设备的地理位置;和/或基于地理位置指定第一语言。在发送第二音频之后,可以接收来自移动设备的针对第一音频数据的不同翻译的请求。
前述示例可以包括:向移动设备提供语言选项;从语言选项之中接收一个或者多个选择;以及基于一个或者多个选择指定第一语言和第二语言中的一种或者多种语言。可以经由语音命令执行第一语言和第二语言中的一种或者多种语言的指定。
一种用于在语言之间翻译的技术的另一示例包括在服务器和在移动设备执行的动作。在服务器执行的动作可以包括:从移动设备接收用于第一语言的第一音频数据;翻译第一音频数据以产生用于第二语言的第二音频数据;以及向移动设备发送第二音频数据。在移动设备执行的动作可以包括:存储第二音频数据;检测移动设备的运动;以及响应于运动播放第二音频数据。这一示例可以单独地或者在组合中包括以下特征或者在本专利申请中描述的任何其它特征中的一个或者多个特征。
翻译第一音频数据以产生第二音频数据可以包括:基于第一音频数据生成第一语言的第一文本;将第一文本翻译成第二语言的第二文本;以及根据第二文本生成第二音频数据。
前述示例可以包括:向移动设备和计算机中的至少一项发送第一文本或者第二文本;标识移动设备的地理位置;和/或基于地理位置指定第一语言和第二语言中的至少一种语言。
一种用于在语言之间翻译的技术的另一示例包括:将移动设备相互关联,其中移动设备中的每个移动设备被配置用于作为音频数据源和作为用于音频数据的目的地操作;从移动设备中的第一移动设备接收用于第一语言的第一音频数据;翻译第一音频数据以产生用于第二语言的第二音频数据;以及向移动设备中的第二移动设备发送第二音频数据。在这一示例中,移动设备中的第一移动设备和移动设备中的第二移动设备是不同的移动设备。这一示例可以单独地或者在组合中包括以下特征或者在本专利申请中描述的任何其它特征中的一个或者多个特征。
翻译第一音频数据以产生第二音频数据可以包括:基于第一音频数据生成第一语言的第一文本;将第一文本翻译成第二语言的第二文本;以及根据第二文本生成第二音频数据。
这一示例也可以包括:向移动设备中的第一移动设备、移动设备中的第二移动设备和计算机中的至少一项发送第一文本或者第二文本;标识移动设备中的第一移动设备和/或移动设备中的第二移动设备的地理位置;和/或基于地理位置指定第一语言和第二语言中的至少一种语言。
可以将前述技术中的全部或者部分技术实施为一种包括在一个或者多个非瞬态机器可读存储介质上存储的并且在一个或者多个处理设备上可执行的指令的计算机程序产品。可以将前述技术中的全部或者部分技术实施为一种可以包括一个或者多个处理设备和存储器的装置、方法或者电子系统,该存储器用于存储用于实施所说明的功能的可执行指令。
根据本发明的一个示例性实施例,提供了一种在移动设备上执行的、作为用于在语言之间翻译的过程的一部分的方法,所述方法包括:向服务器发送与第一语言对应的数据;向所述服务器发送与第二语言对应的数据;基于输入讲话来生成初始音频数据,所述初始音频数据按照初始语言;向所述服务器发送所述初始音频数据;接收与所述初始音频数据的翻译对应的翻译数据,所述翻译数据与目标语言对应;在所述移动设备上的存储器中存储所述翻译数据;标识所述移动设备在第一用户与第二用户之间的移动,其中所述移动设备的移动至少包括相对于预定义参考、有角度地移动所述移动设备;以及响应于所述移动设备的所述移动:(a)从所述存储器取回所述翻译数据;以及(b)从所述翻译数据生成输出音频数据,所述输出数据包括所述输入讲话到所述目标语言的翻译;其中,在所述移动设备在第一位置中的情况下,所述初始语言是所述第一语言并且所述目标语言是所述第二语言,并且在所述移动设备在第二位置中的情况下,所述初始语言是所述第二语言并且所述目标语言是所述第一语言;并且其中所述移动设备相对于在所述第一语言与所述第二语言之间的翻译的随后操作被所述移动设备的随后移动自动地触发。
在上述方法中,还包括:接收分别与按照所述第一语言的所述输入讲话或者按照所述第二语言的所述输入讲话对应的第一文本或者第二文本。
在上述方法中,其中与所述第一语言对应的所述数据或者与所述第二语言对应的所述数据中的至少一项包括所述移动设备的地理位置。
在上述方法中,还包括:发送对于所述初始音频数据的不同翻译的请求。
在上述方法中,还包括:在所述移动设备上接收语言选项;以及输出来自所述语言选项之中的一个或者多个选择;其中所述初始语言和所述目标语言中的至少一项基于所述一个或者多个选择。
在上述方法中,其中输出经由语音命令被执行。
根据本发明的一个示例性实施例,提供了一个或者多个非瞬态机器可读介质,所述一个或者多个非瞬态机器可读介质存储指令,所述指令能够由一个或者多个处理设备执行以用于在语言之间翻译,所述指令能够被执行以执行操作,所述操作包括:向服务器发送与第一语言对应的数据;向所述服务器发送与第二语言对应的数据;基于输入讲话来生成初始音频数据,所述初始音频数据按照初始语言;向所述服务器发送所述初始音频数据;接收与所述初始音频数据的翻译对应的翻译数据,所述翻译数据与目标语言对应;在所述移动设备上的存储器中存储所述翻译数据;标识所述移动设备在第一用户与第二用户之间的移动,其中所述移动设备的移动至少包括相对于预定义参考、有角度地移动所述移动设备;以及响应于所述移动设备的所述移动:(a)从所述存储器取回所述翻译数据;以及(b)从所述翻译数据生成输出音频数据,所述输出数据包括所述输入讲话到所述目标语言的翻译;其中,在所述移动设备在第一位置中的情况下,所述初始语言是所述第一语言并且所述目标语言是所述第二语言,并且在所述移动设备在第二位置中的情况下,所述初始语言是所述第二语言并且所述目标语言是所述第一语言;并且其中所述移动设备相对于在所述第一语言与所述第二语言之间的翻译的随后操作被所述移动设备的随后移动自动地触发。
在上述一个或者多个非瞬态机器可读介质中,其中所述操作包括:接收分别与按照所述第一语言的所述输入讲话或者按照所述第二语言的所述输入讲话对应的第一文本或者第二文本。其中与所述第一语言对应的所述数据或者与所述第二语言对应的所述数据中的至少一项包括所述移动设备的地理位置。
在上述一个或者多个非瞬态机器可读介质中,其中与所述第一语言对应的所述数据或者与所述第二语言对应的所述数据中的至少一项包括所述移动设备的地理位置。
在上述一个或者多个非瞬态机器可读介质中,其中所述操作包括:发送对于所述初始音频数据的不同翻译的请求。
在上述一个或者多个非瞬态机器可读介质中,其中所述操作包括:在所述移动设备上接收语言选项;以及输出来自所述语言选项之中的一个或者多个选择;其中所述初始语言和所述目标语言中的至少一项基于所述一个或者多个选择。
在上述一个或者多个非瞬态机器可读介质中,其中输出经由语音命令被执行。
根据本发明的一个示例性实施例,提供了一种用于在语言之间翻译的电子系统,所述电子系统包括:一个或者多个处理设备;以及一个或者多个机器可读介质,所述一个或者多个机器可读介质存储指令,所述指令能够由所述一个或者多个处理设备执行以执行操作,所述操作包括:向服务器发送与第一语言对应的数据;向所述服务器发送与第二语言对应的数据;基于输入讲话来生成初始音频数据,所述初始音频数据按照初始语言;向所述服务器发送所述初始音频数据;接收与所述初始音频数据的翻译对应的翻译数据,所述翻译数据与目标语言对应;在所述移动设备上的存储器中存储所述翻译数据;标识所述移动设备在第一用户与第二用户之间的移动,其中所述移动设备的移动至少包括相对于预定义参考、有角度地移动所述移动设备;以及响应于所述移动设备的所述移动:(a)从所述存储器取回所述翻译数据;以及(b)从所述翻译数据生成输出音频数据,所述输出数据包括所述输入讲话到所述目标语言的翻译;其中,在所述移动设备在第一位置中的情况下,所述初始语言是所述第一语言并且所述目标语言是所述第二语言,并且在所述移动设备在第二位置中的情况下,所述初始语言是所述第二语言并且所述目标语言是所述第一语言;并且其中所述移动设备相对于在所述第一语言与所述第二语言之间的翻译的随后操作被所述移动设备的随后移动自动地触发。
在上述电子系统中,其中所述操作包括:接收分别与按照所述第一语言的所述输入讲话或者按照所述第二语言的所述输入讲话对应的第一文本或者第二文本。
在上述电子系统中,其中与所述第一语言对应的所述数据或者与所述第二语言对应的所述数据中的至少一项包括所述移动设备的地理位置。
在上述电子系统中,其中所述操作包括发送对于所述初始音频数据的不同翻译的请求。
在上述电子系统中,其中所述操作包括:在所述移动设备上接收语言选项;以及输出来自所述语言选项之中的一个或者多个选择;其中所述初始语言和所述目标语言中的至少一项基于所述一个或者多个选择。
在上述电子系统中,其中输出经由语音命令被执行。
根据本发明的一个示例性实施例,提供了一种用于在语言之间翻译的电子系统,所述电子系统包括:用于向服务器发送与第一语言对应的数据和与第二语言对应的数据的装置;用于基于输入讲话来生成初始音频数据的装置,所述初始音频数据按照初始语言;用于向所述服务器发送所述初始音频数据的装置;用于接收与所述初始音频数据的翻译对应的翻译数据的装置,所述翻译数据与目标语言对应;用于在所述移动设备上的存储器中存储所述翻译数据的装置;用于标识所述移动设备在第一用户与第二用户之间的移动的装置,其中所述移动设备的移动至少包括相对于预定义参考、有角度地移动所述移动设备;以及用于响应于所述移动设备的所述移动来执行以下操作的装置:(a)从所述存储器取回所述翻译数据;以及(b)从所述翻译数据生成输出音频数据,所述输出数据包括所述输入讲话到所述目标语言的翻译;其中,在所述移动设备在第一位置中的情况下,所述初始语言是所述第一语言并且所述目标语言是所述第二语言,并且在所述移动设备在第二位置中的情况下,所述初始语言是所述第二语言并且所述目标语言是所述第一语言;并且其中所述移动设备相对于在所述第一语言与所述第二语言之间的翻译的随后操作被所述移动设备的随后移动自动地触发。
根据本发明的一个示例性实施例,提供了一种计算机实现的方法,包括:在客户端设备处从服务器接收与按照第一语言的用户输入讲话向第二语言的翻译对应的第一音频数据;在所述客户端处接收与按照所述第二语言的用户输入讲话对应的第二音频数据;基于接收(i)与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据,以及(ii)与按照所述第二语言的用户输入讲话对应的所述第二音频数据,来确定翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据;以及基于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定,向所述服务器传输与按照所述第二语言的用户输入讲话对应的所述第二音频数据以用于从所述第二语言向所述第一语言翻译。
在上述方法中,其中翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定在没有接收到附加用户输入的情况下被做出,所述附加用户输入指示对于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的请求。
在上述方法中,其中翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定包括:基于接收(i)与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据,以及(ii)与按照所述第二语言的用户输入讲话对应的所述第二音频数据,来将与按照所述第二语言的用户输入讲话对应的所述第二音频数据分类为将在没有从与所述客户端设备关联的用户接收到附加指令的情况下被自动地翻译的音频数据。
在上述方法中,其中与按照所述第二语言的用户输入讲话对应的所述第二音频数据与由与所述客户端设备关联的麦克风接收到的、按照所述第二语言的用户输入讲话对应。
在上述方法中,包括:提供与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据以用于输出;以及在提供与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据以用于输出之后,接收与按照所述第二语言的用户输入讲话对应的所述第二音频数据。
在上述方法中,包括:在所述客户端设备处接收标识第二客户端设备的信息;以及基于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定,向所述服务器传输与按照所述第二语言的用户输入讲话对应的所述第二音频数据和标识所述第二客户端设备的信息。
在上述方法中,其中所述客户端设备和所述第二客户端设备被配对。
根据本发明的一个示例性实施例,提供了一种系统,包括:一个或者多个计算机和存储指令的一个或者多个存储设备,所述指令能够操作以在由所述一个或者多个计算机执行时,使得所述一个或者多个计算机执行操作,所述操作包括:在客户端设备处从服务器接收与按照第一语言的用户输入讲话向第二语言的翻译对应的第一音频数据;在所述客户端处接收与按照所述第二语言的用户输入讲话对应的第二音频数据;基于接收(i)与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据,以及(ii)与按照所述第二语言的用户输入讲话对应的所述第二音频数据,来确定翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据;以及基于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定,向所述服务器传输与按照所述第二语言的用户输入讲话对应的所述第二音频数据以用于从所述第二语言向所述第一语言翻译。
在上述系统中,其中翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定在没有接收到附加用户输入的情况下被做出,所述附加用户输入指示对于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的请求。
在上述系统中,其中翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定包括:基于接收(i)与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据,以及(ii)与按照所述第二语言的用户输入讲话对应的所述第二音频数据,来将与按照所述第二语言的用户输入讲话对应的所述第二音频数据分类为将在没有从与所述客户端设备关联的用户接收到附加指令的情况下被自动地翻译的音频数据。
在上述系统中,其中与按照所述第二语言的用户输入讲话对应的所述第二音频数据与由与所述客户端设备关联的麦克风接收到的、按照所述第二语言的用户输入讲话对应。
在上述系统中,其中所述操作包括:提供与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据以用于输出;以及在提供与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据以用于输出之后,接收与按照所述第二语言的用户输入讲话对应的所述第二音频数据。
在上述系统中,其中所述操作包括:在所述客户端设备处接收标识第二客户端设备的信息;以及基于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定,向所述服务器传输与按照所述第二语言的用户输入讲话对应的所述第二音频数据和标识所述第二客户端设备的信息。
在上述系统中,其中所述客户端设备和所述第二客户端设备被配对。
根据本发明的一个示例性实施例,提供了一种编码有计算机程序的计算机可读存储设备,所述程序包括指令,所述指令如果由一个或者多个计算机执行则使得所述一个或者多个计算机执行操作,所述操作包括:在客户端设备处从服务器接收与按照第一语言的用户输入讲话向第二语言的翻译对应的第一音频数据;在所述客户端处接收与按照所述第二语言的用户输入讲话对应的第二音频数据;基于接收(i)与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据,以及(ii)与按照所述第二语言的用户输入讲话对应的所述第二音频数据,来确定翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据;以及基于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定,向所述服务器传输与按照所述第二语言的用户输入讲话对应的所述第二音频数据以用于从所述第二语言向所述第一语言翻译。
在上述设备中,其中翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定在没有接收到附加用户输入的情况下被做出,所述附加用户输入指示对于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的请求。
在上述设备中,其中翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定包括:基于接收(i)与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据,以及(ii)与按照所述第二语言的用户输入讲话对应的所述第二音频数据,来将与按照所述第二语言的用户输入讲话对应的所述第二音频数据分类为将在没有从与所述客户端设备关联的用户接收到附加指令的情况下被自动地翻译的音频数据。
在上述设备中,其中与按照所述第二语言的用户输入讲话对应的所述第二音频数据与由与所述客户端设备关联的麦克风接收到的、按照所述第二语言的用户输入讲话对应。
在上述设备中,其中所述操作包括:提供与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据以用于输出;以及在提供与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据以用于输出之后,接收与按照所述第二语言的用户输入讲话对应的所述第二音频数据。
在上述设备中,其中所述操作包括:在所述客户端设备处接收标识第二客户端设备的信息;以及基于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定,向所述服务器传输与按照所述第二语言的用户输入讲话对应的所述第二音频数据和标识所述第二客户端设备的信息。
在附图和以下说明书中阐述一个或者多个实现方式的细节。将从说明书和附图中以及从权利要求中清楚其它特征、目的和优点。
附图说明
图1是现有技术的语言翻译接口的框图。
图2是在概念上示出使用移动设备以实现语言翻译的框图。
图3是可以在其上实施图2中描绘的过程的网络系统的框图。
图4是可以在图3的网络系统中包括的服务器的架构的框图。
图5是可以在图3的网络系统中包括的移动设备的架构的框图。
图6是示出用于执行语言翻译的过程的流程图。
图7示出用于在图6的过程中选择语言的输入屏幕。
图8是在概念上示出使用移动设备以实现语言翻译的备选方法的框图。
图9是示出用于根据图8的方法执行语言翻译的过程的流程图。
图10示出可以用来实施这里描述的过程的计算机设备和移动计算设备的示例。
在各图中的相似标号指示相似要素。
具体实施方式
这里描述用于使用移动计算设备(或者简称为“移动设备”)来翻译语言的过程。根据一个这样的过程,第一用户用一种语言(比如英语)向移动设备中讲话。向服务器发送所得音频文件以用于翻译成第二语言,比如法语。第一用户向第二用户传递移动设备。响应于移动设备的传递,取回并且在移动设备上向第二用户播放包含第二语言的翻译的音频文件。
图2是在概念上示出前述过程的框图。具体而言,图2是示出使用移动设备以实现语言翻译的框图。图2示出系统21,该系统包括通过网络与服务器25通信的移动设备24。在这一示例中,移动设备是具有高级计算能力的被称为智能电话的蜂窝电话。移动设备24包含用于在语言之间翻译的应用(“app”)26。用户27和29激活这一翻译app以启动语言翻译。在一个示例中,app将向用户询问将翻译哪种语言。用户可以例如经由触屏菜单项目或者语音输入来选择在他们的在这一示例中为英语与法语的母语之间翻译。备选地,如下文描述的那样,移动设备24的地理位置可以被用来指定语言中的一种(或者两种)语言。
为了开始翻译过程,用户27用他的母语(例如,英语)向移动设备24中讲话。翻译app26生成与该讲话对应的音频数据30,并且向服务器25转发该音频数据。在服务器25上运行的翻译程序31将用于用户的母语32(例如,英语)的音频数据翻译成用于另一用户的母语34(例如,法语)的音频数据35。从一个用户27向另一用户29传递移动设备24。通过网络向移动设备24提供音频数据35。母语为法语的用户29继而在移动设备24上收听音频数据35。
通过以这一方式使用移动设备24,用户29能够获得用户27的英语语言讲话的法语语言翻译。用户29继而可以用法语向移动设备24中讲话。继而可以反向重复该过程以将用户29的法语语言讲话转换成可以在移动设备24上向用户27播放的英语语言讲话。通过在用户27与29之间来回传递移动设备24,二者可以通过设备24用他们的母语进行对话。如下文描述的那样,移动设备24的传递可以是用于向每个用户的音频回放的自动触发。也就是说,可以响应于检测到的移动设备24的运动来取回用于目标语言的音频数据以用于回放。在一个实现方式中,在服务器25上存储音频数据35,并且由翻译app26响应于检测到的运动从该服务器取回该音频数据以用于回放。在另一实现方式中,在移动设备24上的存储器中存储音频数据35,并且由翻译app26响应于检测到的运动从该存储器取回该音频数据。
使用移动设备的运动作为用于音频回放的触发可以使翻译过程更用户友好并且可以减少与翻译app的交互量。移动设备的运动可以例如由向移动设备中构建的加速度计检测并且向翻译app26转送以触发音频回放。在一个示例中,可以通过检测与移动设备的面垂直的矢量已经穿过一个或者多个平面(例如,竖直平面和/或水平平面)来确定移动设备的位置改变。以这一方式,有可能确定是否已经翻转移动设备和/或将移动设备旋转预定义角度,由此指示设备已经从一个用户向另一用户传递。
图3示出可以在其上实施图2中描绘的过程的网络系统40。网络系统40包括移动设备24和其它移动设备、网络41、服务器25和与包括但不限于地理位置服务42和翻译服务44的各种服务的连接。
服务器25可以是单个服务器或者在相同位置或者在不同位置的服务器组。图4是服务器25的框图。服务器25包括处理设备45、存储器46和网络接口47。例如,包括数据总线和母板的总线系统49可以用来建立和控制在服务器25的部件之间的数据通信。
处理设备45可以包括一个或者多个微处理器。广而言之,处理设备45可以包括能够接收和存储数据并且通过网络41通信的任何适当处理器和/或逻辑。存储器46可以包括硬驱动和随机存取存储器存储设备、比如动态随机存取存储器,或者其它类型的非瞬态机器可读存储设备。如图3中所示,存储器46存储处理器45可执行的计算机程序。翻译程序31在这些计算机程序之中。如下文说明的那样,翻译程序31将来自一种语言的音频数据翻译成另一语言的音频数据。“另一”语言可以被称为“目标”语言。
翻译程序31可以包括用来实施这里描述的语言翻译过程的计算机程序。这些程序可以是相同程序的分离的例程或者子例程。在一个实现方式中,这些程序包括讲话识别器52、语言翻译器53和音频生成器24。
讲话识别器52接收音频数据30并且将音频数据转换成如下文本,该文本代表用户的母语的讲话。讲话识别器52可以包括用于识别单词、词性等的子例程。例如,讲话识别器可以包括用于将声音分解成子部分并且使用那些子部分以标识单词的讲话分割例程、用于标识单词的含义的单词去歧义例程、用于标识句子结构、词性等的句法词典和用于补偿用户的语言的地区或者外来口音的例程。由讲话识别器52的输出的文本可以是如下文件,该文件包含自描述计算语言(比如XML(可扩展标记语言)或者其变体)的文本。自描述计算语言可以在这一情境中有用,因为它们实现以其它计算机程序可识别的方式标记单词、句子、段落和语法特征。因此,另一计算机程序(比如语言翻译器53)可以读取文本文件、例如标识单词、句子、段落和语法特征并且按照需要使用该信息。
语言翻译器53读取由讲话识别器52输出的文本文件并且使用用户的母语(例如,用户27的语言)的这一文本文件以生成用于预先指定的目标语言(例如,用户29的语言)的文本文件。例如,语言翻译器53可以读取英语语言文本文件并且基于英语语言文本文件生成法语语言文本文件。语言翻译器53可以包括或者参考将用户的母语语言与目标语言相关的电子词典。语言翻译器53也可以包括或者参考目标语言的句法词典以如果必要则相对于母语修改目标语言的单词布局。例如,在英语中,形容词通常先于名词。对照而言,在一些语言(比如法语)中,(多数)形成跟随名词。语法词典可以用来例如基于在英语语言文本文件中包含的标签设置目标语言的单词顺序和其它语法特征。语言翻译器53的输出除了它是以目标语言之外可以是与由讲话识别器产生的文本文件相似的文本文件。文本文件可以是以自描述语言,比如XML或者其变体。
音频生成器54读取由语言翻译器53输出的文本文件,并且基于文本文件中的文本生成音频数据。由于根据目标语言组织文本文件,所以生成的音频数据用于目标语言的讲话。可以用一个或者多个指示符生成音频数据以合成具有口音或者性别特性的讲话。例如,指示符可以向移动设备指定所得讲话用于男人或者女人。口音可以专属于在其上将播放音频数据的移动设备。例如,如果语言转换是从法语到英语并且移动电话位于澳大利亚,则音频生成器54可以包括用于用澳大利亚口音合成英语语言讲话的指示符。
参照图5,移动设备24可以是移动电话或者智能电话并且包括用户输入接口59,比如小型QWERTY硬件键盘、触屏和/或数字键区。移动设备24可以使用无线连接(比如蜂窝电话数据连接、Wi-Fi连接)或者可以用于向网络上的设备(比如服务器25)发送数据和从这些设备接收数据的其它无线连接来接入网络41。
图5是可以在图3的网络系统中包括的移动设备24的架构的框图。在这一示例中,移动设备24包括处理器60和将翻译app26与操作系统(OS)62一起存储的存储器61、语音合成器64以及在移动设备上可执行的其它程序65。在这一示例中,翻译app26用于启动语言翻译过程并且在必要程度上请求和接收涉及语言翻译的用户输入。例如,翻译app可以提示用户输入将在其间翻译的语言、向用户提示他们的位置并且向用户提供用于一种或者多种语言的翻译的文本。可以在制造时向移动设备24中编程翻译app26或者用户可以从网站下载它。
移动设备24也可以包括从用户接收音频输入的讲话输入接口65。例如,讲话输入接口65可以包括将来自用户的话语中的声音转换成音频数据30的麦克风。讲话输入接口65向翻译app26传递音频数据30,该翻译app将该数据输出与适当指令一起向在服务器25中运行的翻译程序31转发。
回顾图3,网络41可以包括一个或者多个网络,比如局域网、广域网和/或因特网。网络41中的一个或者多个网络可以是无线的,比如蜂窝电话网络或者Wi-Fi网络。
经由网络41可访问各种服务。例如,翻译程序31可以访问翻译服务44和地理位置服务42。翻译服务44可以是用于翻译公司的站点。如下文描述的那样,如果认为由翻译程序31提供的机器翻译不可被用户接受,则可以要求翻译公司提供用于音频输入的人工翻译。地理位置(或者“geo-location”)服务42可以提供关于移动设备24的位置的信息。例如,如下文描述的那样,翻译应用26可以提供用于使用本地语言作为翻译的语言之一的选项,或者它可以默认使用本地语言。翻译程序31可以联系翻译服务44以标识正运行翻译app26的移动设备的位置以便标识适当本地语言。可以使用任何适当地理位置服务。
图6是示出用于执行语言翻译的过程68的流程图。在图6中,将过程68分成在移动设备24上执行的左部分70和在服务器25上执行的右部分71(例如,左部分或者其部分由翻译app26执行,并且右部分或者其部分由翻译程序31执行)。可以不同地分配图6中所示的动作。例如,在其它实现方式中,由服务器25执行的动作可以由移动设备24执行并且反之亦然。
从移动设备24启动过程68。具体而言,用户通过语音或者触屏输入执行(72)语言翻译app26。在执行时,语言翻译app26可以提供输入屏幕,比如图7中所示的输入屏幕。就这一点而言,图7示出用于在图6的过程中选择语言的输入屏幕。从这一点,用户可以从支持的语言的列表74选择(73)初始语言。在这一情境中,初始语言是首先向移动设备中讲出的语言。同样,语音或者触屏输入可以用来进行选择。备选地,用户可以选择默认语言75为初始语言。默认语言可以是在移动设备的当前地理位置说的语言。例如,如果移动设备位于美国,则默认语言可以是英语。用户也选择目标语言。在这一示例中,目标语言是初始语言将被翻译成的语言。就这一点而言,标示“初始”和“目标”随着在用户之间传递移动设备而改变。例如,如果第一用户向移动设备中说英语,则初始语言为英语。继而,可以向第二用户传递移动设备以听见第一用户的英语讲话的法语翻译。继而,如果第二用户向移动设备中说法语,则初始语言变成法语并且目标语言变成英语,以此类推。
根据过程68,移动设备24接收第一用户的讲话并且将该讲话转换(77)成音频数据。翻译app26获得音频数据并且经由网络41向服务器25中的翻译程序31发送(78)该音频数据。可以将与初始语言和目标语言对应的标识符与音频数据一起或者在音频数据之前或者之后发送。如果用户已经指定了默认语言,则也可以发送这一效果的指示。
服务器25中的翻译程序31从翻译app26接收(79)音频数据并且如果适用则接收语言标识符。翻译程序31标识(80)初始语言和目标语言。这可以通过识别标识符来简单地完成。如果语言标识符之一指示默认语言,则翻译程序31可以联系地理位置服务42以标识用于移动设备的默认语言。为此,翻译程序31可以将移动设备的IP地址与它可以根据音频数据推断的任何其它地理标记一起向翻译服务44提供。地理位置服务42可以用移动设备24的地理位置向翻译程序31进行响应。翻译程序31继而可以查询数据库或者任何其它来源以标识在移动设备的地理位置说的主要语言。在已经标识主要语言之后,翻译程序31可以经由移动设备24提示用户确认它已经确定的默认语言可接受。类似地,如果已知位置为双语(例如,西班牙巴塞罗那),则翻译程序31可以提示用户从在位置说的语言(例如,用于巴塞罗那的加泰罗尼亚语或者西班牙语)的列表选择适当语言。在比如这样的情况下,可以基于地理选择初始语言和目标语言二者。
在一个备选实现方式中,翻译程序可以基于语言的词汇表和/或语法标识初始和/或目标语言。例如,翻译app26可以提示每个用户27和29向移动设备24中讲话。可以将这一讲话翻译成翻译程序31可标识的音频数据流。每种语言的词汇表和语法可以用来向翻译程序标识每种语言。这一特征可以在用户(例如,移动设备的所有者27)不确定另一用户说哪种语言时有用。可以向翻译程序31中并入用于这一识别类型的工具。备选地,翻译程序31可以查询经由网络41可访问的用于这一识别类型的服务。如果选择了不正确语言,则用户可以具有用于告知翻译程序31“重试”以例如标识用于一种(或者两种)语言的下一最佳候选的选项。这可以被重复直至标识了正确语言。
在任何情况下,在翻译程序31已经标识初始和目标语言之后,可以翻译(82)来自移动设备24的音频数据。为此,讲话识别器52生成(84)与接收的音频数据对应的文本文件(例如,XML文件)。文本文件中的文本代表用户的他的母语(例如,英语)的讲话。语言翻译器53将文本文件翻译(85)成用于目标语言(例如,法语)的文本。在上述示例中,语言翻译器53标识在由讲话识别器52生成的文本文件中包含的英语语言文本的词汇表和语法。语言翻译器53自行使用工具以生成包含英语语言文本的法语语言翻译的文本文件(例如,XML文件)。音频生成器54读取由语言翻译器53生成的文本文件并且使用法语语言文本以生成(86)可以播放的音频数据以生成用于文本的法语讲话。如上文描述的那样,音频数据可以包含指定如何根据音频数据合成法语讲话的一个或者多个指示符。
在一个实现方式中,可以在服务器25中存储生成的音频数据直至翻译程序31接收(87)已经从一个用户向另一用户传递(88)移动设备这样的指示。例如,如图6的虚线部分中所示,翻译app26可以例如从移动设备24上的翻译app接收已经从一个用户27向另一用户27传递移动设备24这样的指示。翻译app26可以在它将输出已经传递移动设备这样的指示之前需要预定义的最小移动量。在任何情况下,响应于从一个用户向另一用户传递移动设备,翻译app26可以向服务器25输出指示以发送生成的音频数据。翻译程序31可以接收这一指示并且作为响应向移动设备24发送(89)存储的音频数据(例如,图2的音频数据35)。
在另一实现方式中,翻译程序31可以简单地向移动设备24发送(89)生成的音频数据35,由此绕过图6的动作87。在如同这样的实现方式中,在移动设备24上的存储器中存储生成的音频数据。如上文描述的那样,翻译app26可以响应于检测到从一个用户27向另一用户29传递移动设备从该存储器取回音频数据。
移动设备24因此获得(90)用于用于目标语言的生成的音频数据。它的语音合成器使用生成的音频数据以合成(91)与之对应的讲话。语音合成器可以使用与生成的音频数据相关联的任何指示符以影响如何合成讲话(例如,以提供性别专属或者口音专属讲话类型)。移动设备向用户播放(94)合成的讲话。用户29由此能够用他的母语(或者优选语言)接收由用户27用用户29的母语(或者优选语言)提供的讲话的可听翻译。
PAUSE可以除了反序之外重复前述过程。更具体而言,用户29可以保持拥有移动设备24并且在听见翻译之后用他的母语(例如法语)向移动设备24中讲话。根据上文描述的过程,可以将这一法语语言讲话翻译成可以在向用户27传递回移动设备24之后在移动设备24上播放的英语语言讲话。随后,用户27可以保持拥有移动设备24并且在听见法语语言翻译之后用他的母语、例如英语向移动设备24中讲话。根据上文描述的过程,可以将这一讲话翻译成例如法语并且在向用户29传递回移动设备24之后在移动设备24上播放该讲话。只要二者希望对话,这一来回过程就可以继续。
注意任一用户无需在初始设置动作72、73之后与翻译app26交互。也就是说,在已经执行翻译app26并且翻译程序31标识两种语言之后,翻译过程从用户的观点来看是自动的。无需用于翻译app26或者控制翻译app26继续翻译的进一步指令。简单地在用户之间来回传递移动设备将继续该过程。
翻译app26可以提供用于请求除了翻译程序31提供的翻译之外的备选翻译的选项。例如,如果用户29不能理解翻译(例如法语语言讲话),则用户29可以请求提供备选翻译。这一请求可以经由向移动设备24的触屏或者可听命令输入。就这一点而言,翻译app26和翻译程序31可以被配置用于识别可听命令为不是为翻译而提供的讲话的部分。例如用户可以用不能在正常讲话中出现的短语或者类似地不可能出现的数字键作为命令的开始。在任何情况下,响应于针对备选翻译的请求,翻译程序31可以请求对象音频数据的来自翻译服务44的翻译。翻译服务44可以提供比翻译程序31提供的翻译更鲁棒的机器语言翻译,或者它可以运用实际人员以执行翻译或者校正机器生成的翻译。备选地,翻译服务44可以运用实际人员,该人员可以被翻译程序31联系并且可以参与(conference)在两个用户之间的对话并且收费执行实时翻译。翻译程序31可以使用适当VoIP(IP语音)协议来参与翻译器。
翻译程序31可以提供在两个用户之间的对话的电子邮件(e-mail)或者文本消息(SMS-短消息服务)转录。当然,文本消息可能不可用于更长对话。转录可以包含一种语言或者两种语言的对话版本。为了接收这些转录,用户可以经由翻译app26或者通过与之关联的网站向翻译程序31注册。可以例如在激活翻译app时或者附近提供这一注册选项。翻译程序31可以类似地向移动设备24提供翻译的讲话的实时文本消息。例如翻译程序31可以将包含与音频数据对应的文本的文本消息与用于每种语言的音频数据一起向移动设备提供。也可以向指定的计算机提供转录。
取代在用户之间来回传递单个移动设备,翻译程序31可以提供从移动设备向不同移动设备接收的讲话的翻译。图8是在概念上示出这一过程的框图。在图8中,系统21包括通过网络相互通信并且与服务器25通信的移动设备24a、24b。每个移动设备24a、24b包含用于在语言之间翻译的翻译app26的实例。在操作中,激活每个应用,并且配对移动设备24a、24b。翻译app26可以是上文关于图6描述的相同app,例如这可以是具有翻译app26的附加功能。备选地,与app26不同的翻译app可以用来提供这一功能。
翻译app可以向用户询问将翻译哪些语言。用户可以例如经由在他们的相应设备上的触屏菜单项目或者语音输入来选择在他们的在这一示例中为英语和法语的母语之间翻译。备选地,如上文描述的那样,移动设备24a和/或24b的地理位置可以用来指定语言中的一种或者两种语言。
为了开始翻译过程,用户27用他的母语(例如英语)向移动设备24a中讲话。移动设备24a生成与该讲话对应的音频数据30并且将该音频数据与目标移动设备24b的标识(例如IP地址)一起向服务器25转发。服务器25将用于用户的母语(例如英语)的音频数据翻译成用于另一用户(29)的母语(例如法语)的音频数据35。通过网络向移动设备24b提供这一音频数据35。母语为法语的用户29在移动设备24b上收听音频数据35。通过以这一方式使用移动设备24b,用户29能够获得用户27的英语语言讲话的法语语言翻译。用户29然后可以用法语向移动设备24b中讲话。然后可以反序重复该过程以将用户29的法语语言讲话转换成可以在移动设备24a上向用户27播放的英语语言讲话。
基于接收用户的讲话来触发翻译可以使翻译过程更用户友好并且可以减少与翻译app和移动设备的交互量。
图9是示出用于执行语言翻译的过程100的流程图。在图9中,将过程100分成在第一移动设备24a上执行的左部分101和在服务器25上执行的中央部分102以及在第二移动设备24b上执行的右部分103。然而注意可以不同地分配图9中所示过程。例如在其它实现方式中,可以在移动设备上执行服务器25执行的动作并且反之亦然。以·过程100的一些要素与过程68(图6)的一些要素相同。下文指出并且这里将仅简要地讨论在两幅图中相同的那些要素。
参照图9,在移动设备24a和24b中的每个移动设备执行(104,105)翻译app。随后配对(106,107)移动设备24a和24b。可以例如通过将两个移动设备“碰撞”在一起来配对移动设备。碰撞使用每个移动设备的位置以交换信息。备选地,用户可以人工配对移动设备。例如用户可以向他的移动设备中的翻译app中录入另一移动设备的电话号码,并且另一用户可以进行相同操作。借助配对,每个翻译app26可以获得包含另一翻译app的移动设备的标识、例如IP地址。移动设备可以将这一信息与用于输入讲话的音频数据一起向翻译程序31发送。服务器因此知道应当向何处、例如向在通信中指定的IP地址的移动设备发送音频数据的翻译。
在每个移动设备24a和24b的用户然后可以向每个执行翻译app中录入(108,109)待翻译的语音、例如法语和英语。每个用户可以录入两种语言。例如用户可以录入他的母语和他的在另一移动设备的对应者的语言。备选地,单个用户可以录入两种语言或者可以基于地理确定一种或者两种语言。在又一备选中,每个用户可以向他们的相应设备中讲话,并且可以自动标识他们的语言。在任何情况下,用户然后可以通过向他的移动设备中讲话来启动翻译过程。过程100以与过程68中相同的方式将该讲话转换(110)成音频数据。将该数据与用于另一移动设备的语言选择和标识符一起向服务器25发送(111)。
服务器25中的翻译程序31从移动设备24a接收(212)音频数据并且如果适用则接收语言标识符。翻译程序31以与过程68中相同的方式标识(113)初始和目标语言。翻译程序31也标识翻译的音频将被发送到的移动设备24b。可以基于任何适当信息、比如IP地址或者电话号码标识这一移动设备24b。
在翻译程序31已经标识初始和目标语言以及目标移动设备之后,可以翻译(114)来自移动设备24a的音频数据。可以用与过程68中相同的方式执行翻译以生成目标语言的音频数据。在一个实现方式中,可以在服务器25中存储生成的音频数据直至翻译程序31从移动设备24b接收对取回数据的请求。例如移动设备24b可以对来自它的用户的语音或者语音命令做出反应。作为响应,移动设备24b可以向服务器25发送用于发送(115)翻译的音频数据的指令。在另一实现方式中,翻译程序31可以简单地向移动设备24b发送生成的音频数据。在如同这样的实现方式中,在移动设备24b上的存储器中存储生成的音频数据。移动设备24b上的翻译app可以响应于检测到语音或者语音命令来取回音频数据。
移动设备24b因此获得(116)用于目标语言的生成的音频数据。它的语音合成器使用生成的音频数据以用上文描述的方式合成(17)与之对应的讲话。移动设备24b然后播放(118)讲话。可以除了反序之外重复前述过程。也就是说,翻译的讲话的接收者现在可以向他的移动设备中讲话。如上文描述的那样,翻译程序翻译该讲话并且向原讲话者提供它。这一来回过程可以如初继续。
图10示出可以用来实施这里描述的过程的通用计算机设备1000和通用移动计算机设备1050的示例,这些过程包括移动站侧过程和/或服务器侧过程。计算设备1000旨在于代表各种形式的数字计算机、比如膝上型计算机、桌面型计算机、工作站、个人数字助理、服务器、刀片服务器、主机和其它适当计算机。计算设备1050旨在于代表各种形式的移动设备、比如个人数字助理、蜂窝电话、智能电话和其它相似计算设备。这里所示部件、它们的连接和关系及其功能意味着仅为示例而并非意味着限制在本文中描述和/或要求保护的本发明的实现方式。
计算设备1000可以实施运行翻译程序31的服务器25。计算设备1000包括处理器1002、存储器1004、存储设备1006、连接到存储器1004和高速扩展端口1010的高速接口1008以及连接到低速总线1014和存储设备1006的低速接口1012。使用各种总线来互连并且可以在共同母板上装配或者以如适当的其它方式装配部件1002、1004、1006、1008、1010和1012中的每个部件。处理器1002可以处理用于在计算设备1000内执行的指令,这些指令包括存储器1004中或者存储设备1006上存储的用于在外部输入/输出设备、比如耦合到高速接口1008的显示器1016上显示用于GUI的图形信息的指令。在其它实现方式中,多个处理器和/或多个总线可以如适当的那样与多个存储器和存储器类型一起使用。也可以连接多个计算设备1000而每个设备提供必需操作的部分(例如作为服务器组、成组刀片服务器或者多处理器系统)。
存储器1004存储计算设备1000内的信息。在一个实现方式中,存储器1004是一个或者多个易失性存储器单元。在另一实现方式中,存储器1004是一个或者多个非易失性存储器单元。存储器1004也可以是另一形式的计算机可读介质、比如磁盘或者光盘。
存储设备1006能够提供用于计算设备1000的海量存储装置。在一个实现方式中,存储设备1006可以是或者包含计算机可读介质、比如软盘设备、硬盘设备、光盘设备或者带设备、闪存或者其它相似固态存储器设备或者如下设备的阵列,这些设备包括存储区域网络或者其它配置中的设备。可以在信息载体中有形地实现计算机程序产品。计算机程序产品也可以包含在执行时执行一种或者多种方法、比如上文描述的方法的指令。信息载体是计算机或者机器可读介质、比如存储器1004、存储设备1006、在处理器1002上的存储器或者传播的信号。例如信息载体可以是非瞬态机器可读存储介质。
高速控制器1008管理用于计算设备1000的带宽密集操作,而低速控制器1012管理更低带宽密集操作。这样的功能分配仅为示例。在一个实现方式中,高速控制器1008耦合到存储器1004、显示器1016(例如通过图形处理器或者加速器)并且耦合到可以接受各种扩展卡(未示出)的高速扩展端口1010。在该实现方式中,低速控制器1012耦合到存储设备1006和低速扩展端口1014。可以包括各种通信端口(例如USB、蓝牙、以太网、无线以太网)的低速扩展端口可以例如通过网络适配器耦合到一个或者多个输入/输出设备、比如键盘、指示设备、扫描仪或者联网设备、比如交换机或者路由器。
如图中所示可以用多个不同形式实施计算设备1000。例如可以实施它为标准服务器1020或者多次实施于成组这样的服务器中。也可以实施它为架式服务器系统1024的部分。此外,可以在个人计算机、比如膝上型计算机1022中实施它。备选地,来自计算设备1000的部件可以与移动设备(未示出)、比如设备1050中的其它部件组合。这样的设备中的每个设备可以包含计算设备1000、1050中的一个或者多个计算设备,并且整个系统可以由相互通信的多个计算设备1000、1050组成。
计算设备1050可以是这里描述的移动设备的一个实现方式。计算设备1050包括处理器1052、存储器1064、输入/输出设备、比如显示器1054、通信接口1066和收发器1068以及其它部件。设备1050也可以具有用于提供附加存储装置的存储设备、比如微驱动或者其它设备。使用各种总线来互连部件1050、1052、1064、1054、1066和1068中的每个部件,并且可以在共同母板上或者以如适当的其它方式装配部件中的若干部件。
处理器1052可以执行计算设备1050内的指令,这些指令包括存储器1064中存储的指令。可以实施处理器为包括分离以及多个模拟和数字处理器的芯片的芯片组。处理器可以例如提供设备1050的其它部件的协调、比如控制用户接口、由设备1050运行的应用和设备1050的无线通信。
处理器1052可以通过控制接口1058和耦合到显示器1054的显示接口1056来与用户通信。显示器1054可以例如是TFT(薄膜晶体管液晶显示器)或者OLED(有机发光二极管)显示器或者其它适当显示器技术。显示器接口1056可以包括用于驱动显示器1054以向用户呈现图形和其它信息的适当电路。控制接口1058可以从用户接收命令并且转换它们用于向处理器1052提交。此外,可以提供与处理器1052通信的外部接口1062以便实现设备1050与其它设备的近区域通信。外部接口1062可以例如在一些实现方式中提供有线通信或者在其它实现方式中提供无线通信,并且也可以使用多个接口。
存储器1064存储计算设备1050内的信息。可以实施存储器1064为一种或者多种计算机可读介质、一个或者多个易失性存储器单元或者一个或者多个非易失性存储器单元中的一项或者多项。也可以提供扩展存储器1074并且该扩展存储器可以通过可以例如包括SIMM(单列直插存储器模块)卡接口的扩展接口1072连接到设备1050。这样的扩展存储器1074可以提供用于设备1050的额外存储空间或者也可以存储用于设备1050的应用或者其它信息。具体而言,扩展存储器1074可以包括用于实现或者补充上文描述的过程的指令并且也可以包括安全信息。因此例如可以提供扩展存储器1074作为用于设备1050的安全模块并且可以用允许安全使用设备1050的指令来对扩展存储器1074编程。此外,可以经由SIMM卡将安全应用与附加信息一起提供、比如以不可黑客方式将标识信息放置于SIMM卡上。
如下文讨论的那样,存储器可以例如包括闪存和/或NVRAM存储器。在一个实现方式中,在信息载体中有形地实现计算机程序产品。计算机程序产品包含在被执行时执行一种或者多种方法、比如上文描述的方法的指令。信息载体是计算机或者机器可读介质、比如存储器1064、扩展存储器1074、在处理器1052上的存储器或者可以例如通过收发器1068或者外部接口1062接收的传播的信号。
设备1050可以通过可以在必要时可以包括数字信号处理电路的通信接口1066无线地通信。通信接口1066可以在各种模式或者协议、比如GSM语音呼叫、SMS、EMS或者MMS消息接发、CDMA、TDMA、PDC、WCDMA、CDMA2000或者GPRS以及其它模式或者协议之下提供通信。可以例如通过射频收发器1068出现这样的通信。此外,可以比如使用蓝牙、WiFi或者其它这样的收发器(未示出)来出现短程通信。此外,GPS(全球定位系统)接收器模块1070可以向设备1050提供附加的与导航和位置有关的无线数据,该数据可以如适当的那样由在设备1050上运行的应用使用。
设备1050也可以使用音频编码解码器1060来可听地通信,该编码解码器可以从用户接收讲话的信息并且将它转换成可用数字信息。音频编码解码器1060可以类似地比如通过例如在设备1050的头戴式受话器中的扬声器生成用于用户的可听声音。这样的声音可以包括来自语音电话呼叫的声音、可以包括记录的声音(例如语音消息、音乐文件等)并且也可以包括由在设备1050上操作的应用生成的声音。
如图中所示,可以用多个不同形式实施计算设备1050。例如可以实施它为可以用来执行这里免受的移动设备侧过程的蜂窝电话1080。也可以实施它为智能电话1082、个人数字助理或者其它相似移动设备的部分。
可以在数字电子电路、集成电路、特殊设计的ASIC(专用集成电路)、计算机硬件、固件、软件和/或其组合中实现这里描述的系统和技术的各种实现方式。这些各种实现方式可以包括在如下可编程系统上可执行和/或可解译的一个或者多个计算机程序中的实现方式,该可编程系统包括可以是特殊或者通用的至少一个可编程处理器、至少一个输入设备和至少一个输出设备,该可编程处理器被耦合用于从存储系统接收数据和指令以及向存储系统传输数据和指令。
这些计算机程序(也称为程序、软件、软件应用或者代码)包括用于可编程处理器的机器指令并且可以用高级过程和/或面向对象的编程语言和/或用汇编/机器语言来实施。如这里所用,术语“机器可读介质”、“计算机可读介质”指代用来向可编程处理器提供机器指令和/或数据的任何计算机程序产品、装置和/或设备(例如磁盘、光盘、存储器、可编程逻辑器件(PLD)),该计算机程序产品、装置和/或设备包括接收机器指令为机器可读信号的机器可读介质。术语“机器可读信号”指代用来向可编程处理器提供机器指令和/或数据的任何信号。
为了提供与用户的交互,可以在如下计算机上实施这里描述的系统和技术,该计算机具有用于向用户显示信息的显示设备(例如CRT(阴极射线管)或者LCD(液晶显示器)监视器)以及用户可以用来向计算机提供输入的键盘和指示设备(例如鼠标或者跟踪球)。其它种类的设备也可以用来提供与用户的交互;例如向用户提供的反馈可以是任何形式的感官反馈(例如可视反馈、听觉反馈或者触觉反馈);并且可以用包括声音、话音或者触觉输入的任何形式接收来自用户的输入。
可以在如下计算系统中实施这里描述的系统和技术,该计算系统包括后端部件(例如作为数据服务器)或者包括中间件部件(例如应用服务器)或者包括前端部件(例如具有如下图形用户接口或者网上浏览器的客户端计算机,用户可以通过该图形用户接口或者网上浏览器来与这里描述的系统和技术的实现方式交互)或者这样的后端、中间件或者前端部件的任何组合。系统的部件可以由任何数字数据通信形式或者介质(例如通信网络)互连。通信网络的示例包括局域网(“LAN”)、广域网(“WAN”)和因特网。
计算系统可以包括客户端和服务器。客户端和服务器一般相互远离并且通常通过通信网络来交互。借助在相应计算机上运行并且相互具有客户端-服务器关系的计算机程序来产生客户端和服务器关系。
已经描述许多实现方式。然而将连接可以进行各种修改而未脱离本发明的精神实质和范围。
此外,在图中描绘的逻辑流程无需所示特定顺序或者依次顺序以实现希望的结果。此外,可以提供其它步骤或者可以从描述的流程消除步骤,并且可以向描述的系统添加或者从描述的系统去除其它部件。因而,其它实现方式在所附权利要求的范围内。
可以组合这里描述的不同实现方式的要素以形成上文未具体阐述的其它实现方式。可以从这里描述的过程、计算机程序、网页等省去要素而未不利地影响它们的操作。另外,可以将各种分离要素组合成一个或者多个个别要素以执行这里描述的功能。
这里未具体描述的其它实现方式也在所附权利要求的范围内。

Claims (39)

1.一种在移动设备上执行的、作为用于在语言之间翻译的过程的一部分的方法,所述方法包括:
向服务器发送与第一语言对应的数据;
向所述服务器发送与第二语言对应的数据;
基于输入讲话来生成初始音频数据,所述初始音频数据按照初始语言;
向所述服务器发送所述初始音频数据;
接收与所述初始音频数据的翻译对应的翻译数据,所述翻译数据与目标语言对应;
在所述移动设备上的存储器中存储所述翻译数据;
标识所述移动设备在第一用户与第二用户之间的移动,其中所述移动设备的移动至少包括相对于预定义参考、有角度地移动所述移动设备;以及
响应于所述移动设备的所述移动:(a)从所述存储器取回所述翻译数据;以及(b)从所述翻译数据生成输出音频数据,所述输出数据包括所述输入讲话到所述目标语言的翻译;
其中,在所述移动设备在第一位置中的情况下,所述初始语言是所述第一语言并且所述目标语言是所述第二语言,并且在所述移动设备在第二位置中的情况下,所述初始语言是所述第二语言并且所述目标语言是所述第一语言;并且
其中所述移动设备相对于在所述第一语言与所述第二语言之间的翻译的随后操作被所述移动设备的随后移动自动地触发。
2.根据权利要求1所述的方法,还包括:
接收分别与按照所述第一语言的所述输入讲话或者按照所述第二语言的所述输入讲话对应的第一文本或者第二文本。
3.根据权利要求1所述的方法,其中与所述第一语言对应的所述数据或者与所述第二语言对应的所述数据中的至少一项包括所述移动设备的地理位置。
4.根据权利要求1所述的方法,还包括:
发送对于所述初始音频数据的不同翻译的请求。
5.根据权利要求1所述的方法,还包括:
在所述移动设备上接收语言选项;以及
输出来自所述语言选项之中的一个或者多个选择;
其中所述初始语言和所述目标语言中的至少一项基于所述一个或者多个选择。
6.根据权利要求5所述的方法,其中输出经由语音命令被执行。
7.一个或者多个非瞬态机器可读介质,所述一个或者多个非瞬态机器可读介质存储指令,所述指令能够由一个或者多个处理设备执行以用于在语言之间翻译,所述指令能够被执行以执行操作,所述操作包括:
向服务器发送与第一语言对应的数据;
向所述服务器发送与第二语言对应的数据;
基于输入讲话来生成初始音频数据,所述初始音频数据按照初始语言;
向所述服务器发送所述初始音频数据;
接收与所述初始音频数据的翻译对应的翻译数据,所述翻译数据与目标语言对应;
在所述移动设备上的存储器中存储所述翻译数据;
标识所述移动设备在第一用户与第二用户之间的移动,其中所述移动设备的移动至少包括相对于预定义参考、有角度地移动所述移动设备;以及
响应于所述移动设备的所述移动:(a)从所述存储器取回所述翻译数据;以及(b)从所述翻译数据生成输出音频数据,所述输出数据包括所述输入讲话到所述目标语言的翻译;
其中,在所述移动设备在第一位置中的情况下,所述初始语言是所述第一语言并且所述目标语言是所述第二语言,并且在所述移动设备在第二位置中的情况下,所述初始语言是所述第二语言并且所述目标语言是所述第一语言;并且
其中所述移动设备相对于在所述第一语言与所述第二语言之间的翻译的随后操作被所述移动设备的随后移动自动地触发。
8.根据权利要求7所述的一个或者多个非瞬态机器可读介质,其中所述操作包括:
接收分别与按照所述第一语言的所述输入讲话或者按照所述第二语言的所述输入讲话对应的第一文本或者第二文本。
9.根据权利要求7所述的一个或者多个非瞬态机器可读介质,其中与所述第一语言对应的所述数据或者与所述第二语言对应的所述数据中的至少一项包括所述移动设备的地理位置。
10.根据权利要求7所述的一个或者多个非瞬态机器可读介质,其中所述操作包括:
发送对于所述初始音频数据的不同翻译的请求。
11.根据权利要求7所述的一个或者多个非瞬态机器可读介质,其中所述操作包括:
在所述移动设备上接收语言选项;以及
输出来自所述语言选项之中的一个或者多个选择;
其中所述初始语言和所述目标语言中的至少一项基于所述一个或者多个选择。
12.根据权利要求11所述的一个或者多个非瞬态机器可读介质,其中输出经由语音命令被执行。
13.一种用于在语言之间翻译的电子系统,所述电子系统包括:
一个或者多个处理设备;以及
一个或者多个机器可读介质,所述一个或者多个机器可读介质存储指令,所述指令能够由所述一个或者多个处理设备执行以执行操作,所述操作包括:
向服务器发送与第一语言对应的数据;
向所述服务器发送与第二语言对应的数据;
基于输入讲话来生成初始音频数据,所述初始音频数据按照初始语言;
向所述服务器发送所述初始音频数据;
接收与所述初始音频数据的翻译对应的翻译数据,所述翻译数据与目标语言对应;
在所述移动设备上的存储器中存储所述翻译数据;
标识所述移动设备在第一用户与第二用户之间的移动,其中所述移动设备的移动至少包括相对于预定义参考、有角度地移动所述移动设备;以及
响应于所述移动设备的所述移动:(a)从所述存储器取回所述翻译数据;以及(b)从所述翻译数据生成输出音频数据,所述输出数据包括所述输入讲话到所述目标语言的翻译;
其中,在所述移动设备在第一位置中的情况下,所述初始语言是所述第一语言并且所述目标语言是所述第二语言,并且在所述移动设备在第二位置中的情况下,所述初始语言是所述第二语言并且所述目标语言是所述第一语言;并且
其中所述移动设备相对于在所述第一语言与所述第二语言之间的翻译的随后操作被所述移动设备的随后移动自动地触发。
14.根据权利要求13所述的电子系统,其中所述操作包括:
接收分别与按照所述第一语言的所述输入讲话或者按照所述第二语言的所述输入讲话对应的第一文本或者第二文本。
15.根据权利要求13所述的电子系统,其中与所述第一语言对应的所述数据或者与所述第二语言对应的所述数据中的至少一项包括所述移动设备的地理位置。
16.根据权利要求13所述的电子系统,其中所述操作包括发送对于所述初始音频数据的不同翻译的请求。
17.根据权利要求13所述的电子系统,其中所述操作包括:
在所述移动设备上接收语言选项;以及
输出来自所述语言选项之中的一个或者多个选择;
其中所述初始语言和所述目标语言中的至少一项基于所述一个或者多个选择。
18.根据权利要求17所述的电子系统,其中输出经由语音命令被执行。
19.一种用于在语言之间翻译的电子系统,所述电子系统包括:
用于向服务器发送与第一语言对应的数据和与第二语言对应的数据的装置;
用于基于输入讲话来生成初始音频数据的装置,所述初始音频数据按照初始语言;
用于向所述服务器发送所述初始音频数据的装置;
用于接收与所述初始音频数据的翻译对应的翻译数据的装置,所述翻译数据与目标语言对应;
用于在所述移动设备上的存储器中存储所述翻译数据的装置;
用于标识所述移动设备在第一用户与第二用户之间的移动的装置,其中所述移动设备的移动至少包括相对于预定义参考、有角度地移动所述移动设备;以及
用于响应于所述移动设备的所述移动来执行以下操作的装置:(a)从所述存储器取回所述翻译数据;以及(b)从所述翻译数据生成输出音频数据,所述输出数据包括所述输入讲话到所述目标语言的翻译;
其中,在所述移动设备在第一位置中的情况下,所述初始语言是所述第一语言并且所述目标语言是所述第二语言,并且在所述移动设备在第二位置中的情况下,所述初始语言是所述第二语言并且所述目标语言是所述第一语言;并且
其中所述移动设备相对于在所述第一语言与所述第二语言之间的翻译的随后操作被所述移动设备的随后移动自动地触发。
20.一种计算机实现的方法,包括:
在客户端设备处从服务器接收与按照第一语言的用户输入讲话向第二语言的翻译对应的第一音频数据;
在所述客户端处接收与按照所述第二语言的用户输入讲话对应的第二音频数据;
基于接收(i)与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据,以及(ii)与按照所述第二语言的用户输入讲话对应的所述第二音频数据,来确定翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据;以及
基于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定,向所述服务器传输与按照所述第二语言的用户输入讲话对应的所述第二音频数据以用于从所述第二语言向所述第一语言翻译。
21.根据权利要求20所述的方法,其中翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定在没有接收到附加用户输入的情况下被做出,所述附加用户输入指示对于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的请求。
22.根据权利要求20所述的方法,其中翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定包括:
基于接收(i)与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据,以及(ii)与按照所述第二语言的用户输入讲话对应的所述第二音频数据,来将与按照所述第二语言的用户输入讲话对应的所述第二音频数据分类为将在没有从与所述客户端设备关联的用户接收到附加指令的情况下被自动地翻译的音频数据。
23.根据权利要求20所述的方法,其中与按照所述第二语言的用户输入讲话对应的所述第二音频数据与由与所述客户端设备关联的麦克风接收到的、按照所述第二语言的用户输入讲话对应。
24.根据权利要求20所述的方法,包括:
提供与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据以用于输出;以及
在提供与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据以用于输出之后,接收与按照所述第二语言的用户输入讲话对应的所述第二音频数据。
25.根据权利要求20所述的方法,包括:
在所述客户端设备处接收标识第二客户端设备的信息;以及
基于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定,向所述服务器传输与按照所述第二语言的用户输入讲话对应的所述第二音频数据和标识所述第二客户端设备的信息。
26.根据权利要求25所述的方法,其中所述客户端设备和所述第二客户端设备被配对。
27.一种系统,包括:
一个或者多个计算机和存储指令的一个或者多个存储设备,所述指令能够操作以在由所述一个或者多个计算机执行时,使得所述一个或者多个计算机执行操作,所述操作包括:
在客户端设备处从服务器接收与按照第一语言的用户输入讲话向第二语言的翻译对应的第一音频数据;
在所述客户端处接收与按照所述第二语言的用户输入讲话对应的第二音频数据;
基于接收(i)与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据,以及(ii)与按照所述第二语言的用户输入讲话对应的所述第二音频数据,来确定翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据;以及
基于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定,向所述服务器传输与按照所述第二语言的用户输入讲话对应的所述第二音频数据以用于从所述第二语言向所述第一语言翻译。
28.根据权利要求27所述的系统,其中翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定在没有接收到附加用户输入的情况下被做出,所述附加用户输入指示对于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的请求。
29.根据权利要求27所述的系统,其中翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定包括:
基于接收(i)与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据,以及(ii)与按照所述第二语言的用户输入讲话对应的所述第二音频数据,来将与按照所述第二语言的用户输入讲话对应的所述第二音频数据分类为将在没有从与所述客户端设备关联的用户接收到附加指令的情况下被自动地翻译的音频数据。
30.根据权利要求27所述的系统,其中与按照所述第二语言的用户输入讲话对应的所述第二音频数据与由与所述客户端设备关联的麦克风接收到的、按照所述第二语言的用户输入讲话对应。
31.根据权利要求27所述的系统,其中所述操作包括:
提供与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据以用于输出;以及
在提供与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据以用于输出之后,接收与按照所述第二语言的用户输入讲话对应的所述第二音频数据。
32.根据权利要求27所述的系统,其中所述操作包括:
在所述客户端设备处接收标识第二客户端设备的信息;以及
基于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定,向所述服务器传输与按照所述第二语言的用户输入讲话对应的所述第二音频数据和标识所述第二客户端设备的信息。
33.根据权利要求32所述的系统,其中所述客户端设备和所述第二客户端设备被配对。
34.一种编码有计算机程序的计算机可读存储设备,所述程序包括指令,所述指令如果由一个或者多个计算机执行则使得所述一个或者多个计算机执行操作,所述操作包括:
在客户端设备处从服务器接收与按照第一语言的用户输入讲话向第二语言的翻译对应的第一音频数据;
在所述客户端处接收与按照所述第二语言的用户输入讲话对应的第二音频数据;
基于接收(i)与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据,以及(ii)与按照所述第二语言的用户输入讲话对应的所述第二音频数据,来确定翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据;以及
基于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定,向所述服务器传输与按照所述第二语言的用户输入讲话对应的所述第二音频数据以用于从所述第二语言向所述第一语言翻译。
35.根据权利要求34所述的设备,其中翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定在没有接收到附加用户输入的情况下被做出,所述附加用户输入指示对于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的请求。
36.根据权利要求34所述的设备,其中翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定包括:
基于接收(i)与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据,以及(ii)与按照所述第二语言的用户输入讲话对应的所述第二音频数据,来将与按照所述第二语言的用户输入讲话对应的所述第二音频数据分类为将在没有从与所述客户端设备关联的用户接收到附加指令的情况下被自动地翻译的音频数据。
37.根据权利要求34所述的设备,其中与按照所述第二语言的用户输入讲话对应的所述第二音频数据与由与所述客户端设备关联的麦克风接收到的、按照所述第二语言的用户输入讲话对应。
38.根据权利要求34所述的设备,其中所述操作包括:
提供与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据以用于输出;以及
在提供与按照所述第一语言的用户输入讲话向所述第二语言的所述翻译对应的所述第一音频数据以用于输出之后,接收与按照所述第二语言的用户输入讲话对应的所述第二音频数据。
39.根据权利要求34所述的设备,其中所述操作包括:
在所述客户端设备处接收标识第二客户端设备的信息;以及
基于翻译与按照所述第二语言的用户输入讲话对应的所述第二音频数据的所述确定,向所述服务器传输与按照所述第二语言的用户输入讲话对应的所述第二音频数据和标识所述第二客户端设备的信息。
CN201510568416.8A 2010-08-05 2011-08-02 翻译语言 Active CN105117391B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/851,083 US8775156B2 (en) 2010-08-05 2010-08-05 Translating languages in response to device motion
US12/851,083 2010-08-05
CN201180047863.9A CN103299361B (zh) 2010-08-05 2011-08-02 翻译语言

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201180047863.9A Division CN103299361B (zh) 2010-08-05 2011-08-02 翻译语言

Publications (2)

Publication Number Publication Date
CN105117391A true CN105117391A (zh) 2015-12-02
CN105117391B CN105117391B (zh) 2019-03-01

Family

ID=45556770

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201510568416.8A Active CN105117391B (zh) 2010-08-05 2011-08-02 翻译语言
CN201180047863.9A Active CN103299361B (zh) 2010-08-05 2011-08-02 翻译语言

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201180047863.9A Active CN103299361B (zh) 2010-08-05 2011-08-02 翻译语言

Country Status (4)

Country Link
US (5) US8775156B2 (zh)
EP (1) EP2601596B1 (zh)
CN (2) CN105117391B (zh)
WO (1) WO2012018802A2 (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106528545A (zh) * 2016-10-19 2017-03-22 腾讯科技(深圳)有限公司 一种语音信息的处理方法及装置
CN106935240A (zh) * 2017-03-24 2017-07-07 百度在线网络技术(北京)有限公司 基于人工智能的语音翻译方法、装置、终端设备和云端服务器
CN107241681A (zh) * 2017-05-24 2017-10-10 深圳市沃特沃德股份有限公司 同声翻译的实现方法和装置
CN107291703A (zh) * 2017-05-17 2017-10-24 百度在线网络技术(北京)有限公司 翻译服务应用中的发音方法及装置
CN108765045A (zh) * 2018-03-29 2018-11-06 阿里巴巴集团控股有限公司 车辆使用中跨语言的处理方法和装置
CN110688840A (zh) * 2019-09-26 2020-01-14 联想(北京)有限公司 一种文本转换方法及装置
CN111046680A (zh) * 2018-10-15 2020-04-21 华为技术有限公司 一种翻译方法及电子设备
CN111684410A (zh) * 2018-01-30 2020-09-18 松下知识产权经营株式会社 语言呈现装置、语音呈现方法和语言呈现程序
CN111837178A (zh) * 2018-03-14 2020-10-27 倍播看科技有限公司 语音处理系统和处理语音信号的方法
CN111841006A (zh) * 2019-04-19 2020-10-30 宏碁股份有限公司 多媒体处理方法以及电子系统
CN112417900A (zh) * 2020-11-25 2021-02-26 北京乐我无限科技有限责任公司 一种翻译方法、装置、电子设备及计算机可读存储介质
WO2021097892A1 (zh) * 2019-11-22 2021-05-27 深圳动听汽车经纪有限公司 翻译系统、翻译方法、翻译机及存储介质
CN113678200A (zh) * 2019-02-21 2021-11-19 谷歌有限责任公司 端到端语音转换

Families Citing this family (351)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001013255A2 (en) * 1999-08-13 2001-02-22 Pixo, Inc. Displaying and traversing links in character array
US8645137B2 (en) * 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
ITFI20010199A1 (it) * 2001-10-22 2003-04-22 Riccardo Vieri Sistema e metodo per trasformare in voce comunicazioni testuali ed inviarle con una connessione internet a qualsiasi apparato telefonico
US7669134B1 (en) 2003-05-02 2010-02-23 Apple Inc. Method and apparatus for displaying information during an instant messaging session
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US20080129520A1 (en) * 2006-12-01 2008-06-05 Apple Computer, Inc. Electronic device with enhanced audio feedback
US7912828B2 (en) * 2007-02-23 2011-03-22 Apple Inc. Pattern searching methods and apparatuses
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
ITFI20070177A1 (it) 2007-07-26 2009-01-27 Riccardo Vieri Sistema per la creazione e impostazione di una campagna pubblicitaria derivante dall'inserimento di messaggi pubblicitari all'interno di uno scambio di messaggi e metodo per il suo funzionamento.
US9053089B2 (en) 2007-10-02 2015-06-09 Apple Inc. Part-of-speech tagging using latent analogy
US8595642B1 (en) 2007-10-04 2013-11-26 Great Northern Research, LLC Multiple shell multi faceted graphical user interface
US8165886B1 (en) 2007-10-04 2012-04-24 Great Northern Research LLC Speech interface system and method for control and interaction with applications on a computing system
US8364694B2 (en) 2007-10-26 2013-01-29 Apple Inc. Search assistant for digital media assets
US8620662B2 (en) 2007-11-20 2013-12-31 Apple Inc. Context-aware unit selection
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8327272B2 (en) 2008-01-06 2012-12-04 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
US8065143B2 (en) 2008-02-22 2011-11-22 Apple Inc. Providing text input using speech data and non-speech data
US8289283B2 (en) * 2008-03-04 2012-10-16 Apple Inc. Language input interface on a device
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8464150B2 (en) 2008-06-07 2013-06-11 Apple Inc. Automatic language identification for dynamic text processing
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8768702B2 (en) 2008-09-05 2014-07-01 Apple Inc. Multi-tiered voice feedback in an electronic device
US8898568B2 (en) 2008-09-09 2014-11-25 Apple Inc. Audio user interface
US8352272B2 (en) * 2008-09-29 2013-01-08 Apple Inc. Systems and methods for text to speech synthesis
US8712776B2 (en) 2008-09-29 2014-04-29 Apple Inc. Systems and methods for selective text to speech synthesis
US20100082328A1 (en) * 2008-09-29 2010-04-01 Apple Inc. Systems and methods for speech preprocessing in text to speech synthesis
US8355919B2 (en) * 2008-09-29 2013-01-15 Apple Inc. Systems and methods for text normalization for text to speech synthesis
US8583418B2 (en) 2008-09-29 2013-11-12 Apple Inc. Systems and methods of detecting language and natural language strings for text to speech synthesis
US8396714B2 (en) * 2008-09-29 2013-03-12 Apple Inc. Systems and methods for concatenation of words in text to speech synthesis
US8352268B2 (en) * 2008-09-29 2013-01-08 Apple Inc. Systems and methods for selective rate of speech and speech preferences for text to speech synthesis
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US9959870B2 (en) 2008-12-11 2018-05-01 Apple Inc. Speech recognition involving a mobile device
US8862252B2 (en) 2009-01-30 2014-10-14 Apple Inc. Audio user interface for displayless electronic device
USD625733S1 (en) 2009-03-04 2010-10-19 Apple Inc. Graphical user interface for a display screen or portion thereof
US8380507B2 (en) * 2009-03-09 2013-02-19 Apple Inc. Systems and methods for determining the language to use for speech generated by a text to speech engine
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US20120311585A1 (en) 2011-06-03 2012-12-06 Apple Inc. Organizing task items that represent tasks to perform
US10540976B2 (en) 2009-06-05 2020-01-21 Apple Inc. Contextual voice commands
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US20110010179A1 (en) * 2009-07-13 2011-01-13 Naik Devang K Voice synthesis and processing
US20110066438A1 (en) * 2009-09-15 2011-03-17 Apple Inc. Contextual voiceover
EP2325838A1 (en) * 2009-10-27 2011-05-25 verbavoice GmbH A method and system for transcription of spoken language
US8682649B2 (en) 2009-11-12 2014-03-25 Apple Inc. Sentiment prediction from textual data
US8600743B2 (en) * 2010-01-06 2013-12-03 Apple Inc. Noise profile determination for voice-related feature
US20110167350A1 (en) * 2010-01-06 2011-07-07 Apple Inc. Assist Features For Content Display Device
US8311838B2 (en) * 2010-01-13 2012-11-13 Apple Inc. Devices and methods for identifying a prompt corresponding to a voice input in a sequence of prompts
US8381107B2 (en) 2010-01-13 2013-02-19 Apple Inc. Adaptive audio feedback system and method
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US8639516B2 (en) 2010-06-04 2014-01-28 Apple Inc. User-specific noise suppression for voice quality improvements
US8713021B2 (en) 2010-07-07 2014-04-29 Apple Inc. Unsupervised document clustering using latent semantic density analysis
US9104670B2 (en) 2010-07-21 2015-08-11 Apple Inc. Customized search or acquisition of digital media assets
US8775156B2 (en) 2010-08-05 2014-07-08 Google Inc. Translating languages in response to device motion
US8719006B2 (en) 2010-08-27 2014-05-06 Apple Inc. Combined statistical and rule-based part-of-speech tagging for text-to-speech synthesis
US8719014B2 (en) 2010-09-27 2014-05-06 Apple Inc. Electronic device with text error correction based on voice recognition data
JP5017441B2 (ja) * 2010-10-28 2012-09-05 株式会社東芝 携帯型電子機器
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US10515147B2 (en) 2010-12-22 2019-12-24 Apple Inc. Using statistical language models for contextual lookup
US8781836B2 (en) 2011-02-22 2014-07-15 Apple Inc. Hearing assistance system for providing consistent human speech
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US8849628B2 (en) * 2011-04-15 2014-09-30 Andrew Nelthropp Lauder Software application for ranking language translations and methods of use thereof
US11758212B2 (en) * 2011-04-29 2023-09-12 Frequency Ip Holdings, Llc Aggregation and presentation of video content items with feed item customization
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US10672399B2 (en) 2011-06-03 2020-06-02 Apple Inc. Switching between text data and audio data based on a mapping
US8812294B2 (en) 2011-06-21 2014-08-19 Apple Inc. Translating phrases from one language into another using an order-based set of declarative rules
US8706472B2 (en) 2011-08-11 2014-04-22 Apple Inc. Method for disambiguating multiple readings in language conversion
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US8762156B2 (en) 2011-09-28 2014-06-24 Apple Inc. Speech recognition repair using contextual information
USD671558S1 (en) 2011-10-04 2012-11-27 Apple Inc. Display screen or portion thereof with icon
US8494838B2 (en) * 2011-11-10 2013-07-23 Globili Llc Systems, methods and apparatus for dynamic content management and delivery
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) * 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
USD703231S1 (en) 2012-03-06 2014-04-22 Apple Inc. Display screen or portion thereof with graphical user interface
US9292498B2 (en) * 2012-03-21 2016-03-22 Paypal, Inc. Device orientation based translation system
USD705808S1 (en) 2012-03-27 2014-05-27 Apple Inc. Display screen or portion thereof with animated graphical user interface
US8731513B2 (en) * 2012-04-27 2014-05-20 United States Cellular Corporation System and method for delivering mobile wireless broadcast messages in designated languages
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US8775442B2 (en) 2012-05-15 2014-07-08 Apple Inc. Semantic search using a single-source semantic model
US10019994B2 (en) 2012-06-08 2018-07-10 Apple Inc. Systems and methods for recognizing textual identifiers within a plurality of words
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
USD703695S1 (en) 2012-06-10 2014-04-29 Apple Inc. Display screen or portion thereof with graphical user interface
USD711408S1 (en) 2012-06-10 2014-08-19 Apple Inc. Display screen or portion thereof with graphical user interface
USD754159S1 (en) 2012-06-11 2016-04-19 Apple Inc. Display screen or portion thereof with graphical user interface
US9824695B2 (en) * 2012-06-18 2017-11-21 International Business Machines Corporation Enhancing comprehension in voice communications
CN102811284A (zh) * 2012-06-26 2012-12-05 深圳市金立通信设备有限公司 一种语音输入自动翻译为目标语言的方法
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US8935167B2 (en) 2012-09-25 2015-01-13 Apple Inc. Exemplar-based latent perceptual modeling for automatic speech recognition
US9137314B2 (en) 2012-11-06 2015-09-15 At&T Intellectual Property I, L.P. Methods, systems, and products for personalized feedback
WO2014074629A1 (en) * 2012-11-06 2014-05-15 Intuit Inc. Stack-based adaptive localization and internationalization of applications
CN104854852B (zh) * 2012-12-06 2018-04-20 萨罗尼科斯贸易与服务一人有限公司 用于为电话通话的语音到文本转录确定语言的方法和设备
US20140163948A1 (en) * 2012-12-10 2014-06-12 At&T Intellectual Property I, L.P. Message language conversion
US9183197B2 (en) 2012-12-14 2015-11-10 Microsoft Technology Licensing, Llc Language processing resources for automated mobile language translation
AU349920S (en) * 2013-01-05 2013-07-29 Samsung Electronics Co Ltd Display screen for an electronic device
DE212014000045U1 (de) 2013-02-07 2015-09-24 Apple Inc. Sprach-Trigger für einen digitalen Assistenten
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US9661282B2 (en) * 2013-03-14 2017-05-23 Google Inc. Providing local expert sessions
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
US10642574B2 (en) 2013-03-14 2020-05-05 Apple Inc. Device, method, and graphical user interface for outputting captions
US9733821B2 (en) 2013-03-14 2017-08-15 Apple Inc. Voice control to diagnose inadvertent activation of accessibility features
US10572476B2 (en) 2013-03-14 2020-02-25 Apple Inc. Refining a search based on schedule items
US9977779B2 (en) 2013-03-14 2018-05-22 Apple Inc. Automatic supplementation of word correction dictionaries
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
WO2014144949A2 (en) 2013-03-15 2014-09-18 Apple Inc. Training an at least partial voice command system
US8965129B2 (en) 2013-03-15 2015-02-24 Translate Abroad, Inc. Systems and methods for determining and displaying multi-line foreign language translations in real time on mobile devices
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
US11151899B2 (en) 2013-03-15 2021-10-19 Apple Inc. User training by intelligent digital assistant
KR101904293B1 (ko) 2013-03-15 2018-10-05 애플 인크. 콘텍스트-민감성 방해 처리
JP6317772B2 (ja) 2013-03-15 2018-04-25 トランスレート アブロード,インコーポレイテッド 外国語の文字セットおよびそれらの翻訳を資源に制約のあるモバイル機器上にリアルタイムで表示するためのシステムおよび方法
US20140317523A1 (en) * 2013-04-19 2014-10-23 Microsoft Corporation User experience mode transitioning
US20130238311A1 (en) * 2013-04-21 2013-09-12 Sierra JY Lou Method and Implementation of Providing a Communication User Terminal with Adapting Language Translation
US9430465B2 (en) * 2013-05-13 2016-08-30 Facebook, Inc. Hybrid, offline/online speech translation system
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
DE112014002747T5 (de) 2013-06-09 2016-03-03 Apple Inc. Vorrichtung, Verfahren und grafische Benutzerschnittstelle zum Ermöglichen einer Konversationspersistenz über zwei oder mehr Instanzen eines digitalen Assistenten
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
USD739873S1 (en) * 2013-06-10 2015-09-29 Huawei Technologies Co., Ltd. Display screen with icon
CN105265005B (zh) 2013-06-13 2019-09-17 苹果公司 用于由语音命令发起的紧急呼叫的系统和方法
AU2014306221B2 (en) 2013-08-06 2017-04-06 Apple Inc. Auto-activating smart responses based on activities from remote devices
US9355094B2 (en) 2013-08-14 2016-05-31 Google Inc. Motion responsive user interface for realtime language translation
USD748140S1 (en) * 2013-09-03 2016-01-26 Samsung Electronics Co., Ltd. Display screen portion with icon
JP2015060423A (ja) * 2013-09-19 2015-03-30 株式会社東芝 音声翻訳装置、音声翻訳方法およびプログラム
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
KR102214178B1 (ko) * 2013-12-13 2021-02-10 한국전자통신연구원 자동 통역 장치 및 방법
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
EP3149728B1 (en) 2014-05-30 2019-01-16 Apple Inc. Multi-command single utterance input method
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
USD771112S1 (en) 2014-06-01 2016-11-08 Apple Inc. Display screen or portion thereof with graphical user interface
US9740687B2 (en) 2014-06-11 2017-08-22 Facebook, Inc. Classifying languages for objects and entities
KR20150145109A (ko) * 2014-06-18 2015-12-29 삼성전자주식회사 자동 번역을 위한 장치 및 방법
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
WO2016018004A1 (en) * 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Method, apparatus, and system for providing translated content
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9501264B2 (en) * 2014-09-04 2016-11-22 Tg Llc User corrections in translation
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
JP2017535852A (ja) * 2014-10-08 2017-11-30 アドベンター マネジメント リミテッド コンピュータベースの翻訳システムおよび方法
US9690781B1 (en) 2014-10-17 2017-06-27 James E. Niles System for automatically changing language of an interactive informational display for a user by referencing a personal electronic device of the user
US9507775B1 (en) 2014-10-17 2016-11-29 James E. Niles System for automatically changing language of a traveler's temporary habitation by referencing a personal electronic device of the traveler
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9864744B2 (en) 2014-12-03 2018-01-09 Facebook, Inc. Mining multi-lingual data
WO2016090132A1 (en) * 2014-12-04 2016-06-09 Ibiquity Digital Corporation Systems and methods for emergency vehicle proximity warnings using digital radio broadcast
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9904450B2 (en) 2014-12-19 2018-02-27 At&T Intellectual Property I, L.P. System and method for creating and sharing plans through multimodal dialog
US9830404B2 (en) 2014-12-30 2017-11-28 Facebook, Inc. Analyzing language dependency structures
US10067936B2 (en) 2014-12-30 2018-09-04 Facebook, Inc. Machine translation output reranking
US9830386B2 (en) 2014-12-30 2017-11-28 Facebook, Inc. Determining trending topics in social media
US9477652B2 (en) 2015-02-13 2016-10-25 Facebook, Inc. Machine learning dialect identification
USD749115S1 (en) 2015-02-20 2016-02-09 Translate Abroad, Inc. Mobile device with graphical user interface
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
USD760746S1 (en) 2015-06-04 2016-07-05 Apple Inc. Display screen or portion thereof with animated graphical user interface
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US9734142B2 (en) 2015-09-22 2017-08-15 Facebook, Inc. Universal translation
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
CN105302800A (zh) * 2015-10-19 2016-02-03 黄阳光 通过互联网对商品交谈信息进行远程翻译的方法及装置
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10133738B2 (en) 2015-12-14 2018-11-20 Facebook, Inc. Translation confidence scores
US9734143B2 (en) 2015-12-17 2017-08-15 Facebook, Inc. Multi-media context language processing
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
JP2017120616A (ja) * 2015-12-25 2017-07-06 パナソニックIpマネジメント株式会社 機械翻訳方法、及び、機械翻訳システム
US9805029B2 (en) * 2015-12-28 2017-10-31 Facebook, Inc. Predicting future translations
US9747283B2 (en) 2015-12-28 2017-08-29 Facebook, Inc. Predicting future translations
US10002125B2 (en) 2015-12-28 2018-06-19 Facebook, Inc. Language model personalization
US9697824B1 (en) * 2015-12-30 2017-07-04 Thunder Power New Energy Vehicle Development Company Limited Voice control system with dialect recognition
US9805030B2 (en) * 2016-01-21 2017-10-31 Language Line Services, Inc. Configuration for dynamically displaying language interpretation/translation modalities
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
CN105912532B (zh) * 2016-04-08 2020-11-20 华南师范大学 基于地理位置信息的语言翻译方法及系统
JPWO2017191711A1 (ja) * 2016-05-02 2019-03-07 ソニー株式会社 制御装置、制御方法およびコンピュータプログラム
CN106027657A (zh) * 2016-05-25 2016-10-12 徐子枫 基于互联网的企业管理信息交流方法和系统
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
US10902215B1 (en) 2016-06-30 2021-01-26 Facebook, Inc. Social hash for language models
US10902221B1 (en) 2016-06-30 2021-01-26 Facebook, Inc. Social hash for language models
KR101835222B1 (ko) 2016-08-04 2018-03-06 문준 외국어 번역앱의 사용자 인터페이스 제공 장치 및 방법
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
AU2017328161B2 (en) 2016-09-13 2022-02-17 Magic Leap, Inc. Sensory eyewear
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US9747282B1 (en) 2016-09-27 2017-08-29 Doppler Labs, Inc. Translation with conversational overlap
US10951720B2 (en) 2016-10-24 2021-03-16 Bank Of America Corporation Multi-channel cognitive resource platform
JP6876936B2 (ja) * 2016-11-11 2021-05-26 パナソニックIpマネジメント株式会社 翻訳装置の制御方法、翻訳装置、および、プログラム
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US10431216B1 (en) * 2016-12-29 2019-10-01 Amazon Technologies, Inc. Enhanced graphical user interface for voice communications
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US10741174B2 (en) * 2017-01-24 2020-08-11 Lenovo (Singapore) Pte. Ltd. Automatic language identification for speech
US11582174B1 (en) 2017-02-24 2023-02-14 Amazon Technologies, Inc. Messaging content data storage
CN108538284A (zh) * 2017-03-06 2018-09-14 北京搜狗科技发展有限公司 同声翻译结果的展现方法及装置、同声翻译方法及装置
TW201834438A (zh) * 2017-03-08 2018-09-16 捷音特科技股份有限公司 耳麥翻譯系統
CN107122179A (zh) * 2017-03-31 2017-09-01 阿里巴巴集团控股有限公司 语音的功能控制方法和装置
IL252071A0 (en) * 2017-05-03 2017-07-31 Google Inc Contextual language translation
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
JP6614395B2 (ja) 2017-08-31 2019-12-04 ヤマハ株式会社 情報提供方法および情報提供装置
CN107515862A (zh) * 2017-09-01 2017-12-26 北京百度网讯科技有限公司 语音翻译方法、装置及服务器
USD843442S1 (en) 2017-09-10 2019-03-19 Apple Inc. Type font
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10380249B2 (en) 2017-10-02 2019-08-13 Facebook, Inc. Predicting future trending topics
US11328130B2 (en) * 2017-11-06 2022-05-10 Orion Labs, Inc. Translational bot for group communication
CN107943796B (zh) * 2017-11-17 2022-03-04 珠海市魅族科技有限公司 一种翻译方法和装置、终端、可读存储介质
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
CN111492365A (zh) * 2018-01-03 2020-08-04 谷歌有限责任公司 使用辅助设备盒子进行翻译
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US20190220520A1 (en) * 2018-01-16 2019-07-18 Chih Hung Kao Simultaneous interpretation system, server system, simultaneous interpretation device, simultaneous interpretation method, and computer-readable recording medium
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
JP7171402B2 (ja) * 2018-03-29 2022-11-15 パナソニックホールディングス株式会社 音声翻訳装置、音声翻訳方法及びそのプログラム
US11182567B2 (en) * 2018-03-29 2021-11-23 Panasonic Corporation Speech translation apparatus, speech translation method, and recording medium storing the speech translation method
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US10691894B2 (en) * 2018-05-01 2020-06-23 Disney Enterprises, Inc. Natural polite language generation system
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US11076039B2 (en) 2018-06-03 2021-07-27 Apple Inc. Accelerated task performance
US11545144B2 (en) * 2018-07-27 2023-01-03 Samsung Electronics Co., Ltd. System and method supporting context-specific language model
US10652693B2 (en) 2018-09-10 2020-05-12 International Business Machines Corporation Cognitive location and navigation services for custom applications
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11361168B2 (en) * 2018-10-16 2022-06-14 Rovi Guides, Inc. Systems and methods for replaying content dialogue in an alternate language
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
JP2020087347A (ja) * 2018-11-30 2020-06-04 株式会社リコー 音声操作システム、音声操作方法、及び音声操作プログラム
CN111742364A (zh) * 2018-12-14 2020-10-02 谷歌有限责任公司 用于联网系统的基于语音的接口
USD920373S1 (en) * 2018-12-21 2021-05-25 Mitsubishi Electric Corporation Display screen with graphical user interface
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
CN111508484B (zh) * 2019-01-31 2024-04-19 阿里巴巴集团控股有限公司 语音数据的处理方法及装置
USD902221S1 (en) 2019-02-01 2020-11-17 Apple Inc. Electronic device with animated graphical user interface
USD900871S1 (en) 2019-02-04 2020-11-03 Apple Inc. Electronic device with animated graphical user interface
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11232271B1 (en) * 2019-04-11 2022-01-25 Meta Platforms, Inc. Systems and methods for message-based interaction
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11003853B2 (en) * 2019-05-14 2021-05-11 Language Line Services, Inc. Language identification system for live language interpretation via a computing device
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
CN110335610A (zh) * 2019-07-19 2019-10-15 北京硬壳科技有限公司 多媒体翻译的控制方法及显示器
US11551675B2 (en) 2019-09-03 2023-01-10 Samsung Electronics Co., Ltd. Electronic device and method for controlling the electronic device thereof
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
US11489794B2 (en) 2019-11-04 2022-11-01 Bank Of America Corporation System for configuration and intelligent transmission of electronic communications and integrated resource processing
US11507749B2 (en) * 2019-11-11 2022-11-22 Language Line Services, Inc. Configuration for providing a service through a mobile language interpretation platform
GB2590470A (en) * 2019-12-19 2021-06-30 Nokia Technologies Oy Providing an audio object
EP3881218A1 (en) * 2020-02-06 2021-09-22 Google LLC Stable real-time translations of audio streams
US20210312143A1 (en) * 2020-04-01 2021-10-07 Smoothweb Technologies Limited Real-time call translation system and method
US11411950B2 (en) 2020-04-28 2022-08-09 Bank Of America Corporation Electronic system for integration of communication channels and active cross-channel communication transmission
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
CN113938706B (zh) * 2020-07-14 2023-02-10 花瓣云科技有限公司 一种增加字幕和/或音频的方法及系统
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
KR102264224B1 (ko) * 2020-12-30 2021-06-11 주식회사 버넥트 실시간 번역 서비스 기반의 원격 커뮤니케이션 방법 및 그 시스템
CN114912467A (zh) * 2021-02-09 2022-08-16 艾锐势企业有限责任公司 用于同声传译的电子设备、方法、介质及程序
USD1003939S1 (en) * 2021-09-26 2023-11-07 OAW Holdings LLC Display screen or portion thereof with icon

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050261890A1 (en) * 2004-05-21 2005-11-24 Sterling Robinson Method and apparatus for providing language translation
US20080221862A1 (en) * 2007-03-09 2008-09-11 Yahoo! Inc. Mobile language interpreter with localization
US20090048821A1 (en) * 2005-07-27 2009-02-19 Yahoo! Inc. Mobile language interpreter with text to speech
US20100030549A1 (en) * 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback

Family Cites Families (67)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07210558A (ja) * 1994-01-20 1995-08-11 Fujitsu Ltd 機械翻訳装置
US6292769B1 (en) * 1995-02-14 2001-09-18 America Online, Inc. System for automated translation of speech
US5715466A (en) * 1995-02-14 1998-02-03 Compuserve Incorporated System for parallel foreign language communication over a computer network
US5712901A (en) * 1996-06-26 1998-01-27 Mci Communications Corporation Automatic voice/text translation of phone mail messages
US6161082A (en) * 1997-11-18 2000-12-12 At&T Corp Network based language translation system
JP3822990B2 (ja) 1999-01-07 2006-09-20 株式会社日立製作所 翻訳装置、記録媒体
US6266642B1 (en) * 1999-01-29 2001-07-24 Sony Corporation Method and portable apparatus for performing spoken language translation
US6233561B1 (en) * 1999-04-12 2001-05-15 Matsushita Electric Industrial Co., Ltd. Method for goal-oriented speech translation in hand-held devices using meaning extraction and dialogue
JP2001100781A (ja) * 1999-09-30 2001-04-13 Sony Corp 音声処理装置および音声処理方法、並びに記録媒体
KR100387918B1 (ko) * 2000-07-11 2003-06-18 이수성 통역기
US20020091509A1 (en) * 2001-01-02 2002-07-11 Yacov Zoarez Method and system for translating text
US7050979B2 (en) * 2001-01-24 2006-05-23 Matsushita Electric Industrial Co., Ltd. Apparatus and method for converting a spoken language to a second language
AUPR360701A0 (en) * 2001-03-06 2001-04-05 Worldlingo, Inc Seamless translation system
CN1159702C (zh) * 2001-04-11 2004-07-28 国际商业机器公司 具有情感的语音-语音翻译系统和方法
JP3933449B2 (ja) * 2001-11-22 2007-06-20 株式会社東芝 コミュニケーション支援装置
AUPR956901A0 (en) * 2001-12-17 2002-01-24 Jayaratne, Neville Real time translator
US20030120478A1 (en) * 2001-12-21 2003-06-26 Robert Palmquist Network-based translation system
US7272377B2 (en) * 2002-02-07 2007-09-18 At&T Corp. System and method of ubiquitous language translation for wireless devices
US20030212962A1 (en) * 2002-05-08 2003-11-13 Amikai, Inc. Thin client-server architecture for automated machine translation
WO2004049195A2 (en) * 2002-11-22 2004-06-10 Transclick, Inc. System and method for language translation via remote devices
KR100534409B1 (ko) * 2002-12-23 2005-12-07 한국전자통신연구원 자동 음성번역 서비스를 위한 전화망 사용자 인터페이스시스템 및 그 제어 방법
JP3920812B2 (ja) 2003-05-27 2007-05-30 株式会社東芝 コミュニケーション支援装置、支援方法、及び支援プログラム
US20040267527A1 (en) * 2003-06-25 2004-12-30 International Business Machines Corporation Voice-to-text reduction for real time IM/chat/SMS
US7539619B1 (en) * 2003-09-05 2009-05-26 Spoken Translation Ind. Speech-enabled language translation system and method enabling interactive user supervision of translation and speech recognition accuracy
US7310605B2 (en) * 2003-11-25 2007-12-18 International Business Machines Corporation Method and apparatus to transliterate text using a portable device
US7412388B2 (en) * 2003-12-12 2008-08-12 International Business Machines Corporation Language-enhanced programming tools
US20050192714A1 (en) * 2004-02-27 2005-09-01 Walton Fong Travel assistant device
WO2005101235A1 (ja) * 2004-04-12 2005-10-27 Matsushita Electric Industrial Co., Ltd. 対話支援装置
US7464081B2 (en) * 2004-04-12 2008-12-09 Hewlett-Packard Development Company, L.P. Web based dynamic data translation service and method
US20070016401A1 (en) * 2004-08-12 2007-01-18 Farzad Ehsani Speech-to-speech translation system with user-modifiable paraphrasing grammars
WO2006083690A2 (en) * 2005-02-01 2006-08-10 Embedded Technologies, Llc Language engine coordination and switching
US20060253272A1 (en) * 2005-05-06 2006-11-09 International Business Machines Corporation Voice prompts for use in speech-to-speech translation system
JP4439431B2 (ja) * 2005-05-25 2010-03-24 株式会社東芝 コミュニケーション支援装置、コミュニケーション支援方法およびコミュニケーション支援プログラム
JP4064413B2 (ja) * 2005-06-27 2008-03-19 株式会社東芝 コミュニケーション支援装置、コミュニケーション支援方法およびコミュニケーション支援プログラム
US7460884B2 (en) 2005-06-29 2008-12-02 Microsoft Corporation Data buddy
US20070004451A1 (en) * 2005-06-30 2007-01-04 C Anderson Eric Controlling functions of a handheld multifunction device
US7552053B2 (en) * 2005-08-22 2009-06-23 International Business Machines Corporation Techniques for aiding speech-to-speech translation
US7657006B2 (en) * 2005-12-15 2010-02-02 At&T Intellectual Property I, L.P. Messaging translation services
US8265933B2 (en) * 2005-12-22 2012-09-11 Nuance Communications, Inc. Speech recognition system for providing voice recognition services using a conversational language model
WO2008011537A2 (en) * 2006-07-19 2008-01-24 Chacha Search, Inc. Method, system, and computer readable medium useful in managing a computer-based system for servicing user initiated tasks
JP4271224B2 (ja) * 2006-09-27 2009-06-03 株式会社東芝 音声翻訳装置、音声翻訳方法、音声翻訳プログラムおよびシステム
JP4481972B2 (ja) * 2006-09-28 2010-06-16 株式会社東芝 音声翻訳装置、音声翻訳方法及び音声翻訳プログラム
US7801721B2 (en) * 2006-10-02 2010-09-21 Google Inc. Displaying original text in a user interface with translated text
US8972268B2 (en) * 2008-04-15 2015-03-03 Facebook, Inc. Enhanced speech-to-speech translation system and methods for adding a new word
US8046233B2 (en) * 2006-11-21 2011-10-25 Lionbridge Technologies, Inc. Methods and systems for local, computer-aided translation using remotely-generated translation predictions
WO2008066836A1 (en) * 2006-11-28 2008-06-05 Treyex Llc Method and apparatus for translating speech during a call
US20080133245A1 (en) * 2006-12-04 2008-06-05 Sehda, Inc. Methods for speech-to-speech translation
US7978176B2 (en) * 2007-01-07 2011-07-12 Apple Inc. Portrait-landscape rotation heuristics for a portable multifunction device
US20080177528A1 (en) * 2007-01-18 2008-07-24 William Drewes Method of enabling any-directional translation of selected languages
US20080214160A1 (en) 2007-03-01 2008-09-04 Sony Ericsson Mobile Communications Ab Motion-controlled audio output
US8799307B2 (en) * 2007-05-16 2014-08-05 Google Inc. Cross-language information retrieval
US8825468B2 (en) * 2007-07-31 2014-09-02 Kopin Corporation Mobile wireless display providing speech to speech translation and avatar simulating human attributes
US20090177462A1 (en) * 2008-01-03 2009-07-09 Sony Ericsson Mobile Communications Ab Wireless terminals, language translation servers, and methods for translating speech between languages
US8478578B2 (en) * 2008-01-09 2013-07-02 Fluential, Llc Mobile speech-to-speech interpretation system
JP2009205579A (ja) * 2008-02-29 2009-09-10 Toshiba Corp 音声翻訳装置およびプログラム
WO2009129315A1 (en) 2008-04-15 2009-10-22 Mobile Technologies, Llc System and methods for maintaining speech-to-speech translation in the field
US8594995B2 (en) * 2008-04-24 2013-11-26 Nuance Communications, Inc. Multilingual asynchronous communications of speech messages recorded in digital media files
US20100057435A1 (en) * 2008-08-29 2010-03-04 Kent Justin R System and method for speech-to-speech translation
TWI365394B (en) * 2008-09-11 2012-06-01 First Int Computer Inc Operating apparatus for hand-held electronic apparatus and method thereof
TWI498810B (zh) * 2008-10-27 2015-09-01 Htc Corp 顯示方法與顯示控制模組
US20100185432A1 (en) * 2009-01-22 2010-07-22 Voice Muffler Corporation Headset Wireless Noise Reduced Device for Language Translation
US8843359B2 (en) * 2009-02-27 2014-09-23 Andrew Nelthropp Lauder Language translation employing a combination of machine and human translations
US9519417B2 (en) * 2009-08-31 2016-12-13 Twin Harbor Labs, LLC System and method for orientation-based object monitoring and device for the same
US8775156B2 (en) 2010-08-05 2014-07-08 Google Inc. Translating languages in response to device motion
US8849628B2 (en) * 2011-04-15 2014-09-30 Andrew Nelthropp Lauder Software application for ranking language translations and methods of use thereof
US9600474B2 (en) * 2013-11-08 2017-03-21 Google Inc. User interface for realtime language translation
US9477657B2 (en) * 2014-06-11 2016-10-25 Verizon Patent And Licensing Inc. Real time multi-language voice translation

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050261890A1 (en) * 2004-05-21 2005-11-24 Sterling Robinson Method and apparatus for providing language translation
US20090048821A1 (en) * 2005-07-27 2009-02-19 Yahoo! Inc. Mobile language interpreter with text to speech
US20080221862A1 (en) * 2007-03-09 2008-09-11 Yahoo! Inc. Mobile language interpreter with localization
US20100030549A1 (en) * 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106528545A (zh) * 2016-10-19 2017-03-22 腾讯科技(深圳)有限公司 一种语音信息的处理方法及装置
CN106528545B (zh) * 2016-10-19 2020-03-17 腾讯科技(深圳)有限公司 一种语音信息的处理方法及装置
CN106935240A (zh) * 2017-03-24 2017-07-07 百度在线网络技术(北京)有限公司 基于人工智能的语音翻译方法、装置、终端设备和云端服务器
CN107291703B (zh) * 2017-05-17 2021-06-08 百度在线网络技术(北京)有限公司 翻译服务应用中的发音方法及装置
CN107291703A (zh) * 2017-05-17 2017-10-24 百度在线网络技术(北京)有限公司 翻译服务应用中的发音方法及装置
WO2018214314A1 (zh) * 2017-05-24 2018-11-29 深圳市沃特沃德股份有限公司 同声翻译的实现方法和装置
CN107241681A (zh) * 2017-05-24 2017-10-10 深圳市沃特沃德股份有限公司 同声翻译的实现方法和装置
CN111684410A (zh) * 2018-01-30 2020-09-18 松下知识产权经营株式会社 语言呈现装置、语音呈现方法和语言呈现程序
CN111837178A (zh) * 2018-03-14 2020-10-27 倍播看科技有限公司 语音处理系统和处理语音信号的方法
CN108765045B (zh) * 2018-03-29 2020-11-10 创新先进技术有限公司 车辆使用中跨语言的处理方法和装置
CN108765045A (zh) * 2018-03-29 2018-11-06 阿里巴巴集团控股有限公司 车辆使用中跨语言的处理方法和装置
CN111046680A (zh) * 2018-10-15 2020-04-21 华为技术有限公司 一种翻译方法及电子设备
CN111046680B (zh) * 2018-10-15 2022-05-24 华为技术有限公司 一种翻译方法及电子设备
US11570299B2 (en) 2018-10-15 2023-01-31 Huawei Technologies Co., Ltd. Translation method and electronic device
US11843716B2 (en) 2018-10-15 2023-12-12 Huawei Technologies Co., Ltd. Translation method and electronic device
CN113678200A (zh) * 2019-02-21 2021-11-19 谷歌有限责任公司 端到端语音转换
CN111841006A (zh) * 2019-04-19 2020-10-30 宏碁股份有限公司 多媒体处理方法以及电子系统
CN110688840A (zh) * 2019-09-26 2020-01-14 联想(北京)有限公司 一种文本转换方法及装置
WO2021097892A1 (zh) * 2019-11-22 2021-05-27 深圳动听汽车经纪有限公司 翻译系统、翻译方法、翻译机及存储介质
CN112417900A (zh) * 2020-11-25 2021-02-26 北京乐我无限科技有限责任公司 一种翻译方法、装置、电子设备及计算机可读存储介质

Also Published As

Publication number Publication date
EP2601596A2 (en) 2013-06-12
EP2601596B1 (en) 2020-03-25
US20180293229A1 (en) 2018-10-11
US20200410174A1 (en) 2020-12-31
CN103299361A (zh) 2013-09-11
US20140288919A1 (en) 2014-09-25
CN105117391B (zh) 2019-03-01
US10817673B2 (en) 2020-10-27
US20120035907A1 (en) 2012-02-09
EP2601596A4 (en) 2014-01-15
US8386231B2 (en) 2013-02-26
US20120035908A1 (en) 2012-02-09
US8775156B2 (en) 2014-07-08
CN103299361B (zh) 2015-10-21
WO2012018802A2 (en) 2012-02-09
WO2012018802A3 (en) 2012-04-26
US10025781B2 (en) 2018-07-17

Similar Documents

Publication Publication Date Title
CN103299361B (zh) 翻译语言
CN103035240B (zh) 用于使用上下文信息的语音识别修复的方法和系统
CN105493027B (zh) 用于实时语言翻译的用户界面
US11011170B2 (en) Speech processing method and device
CN103080927B (zh) 使用搜索结果的自动路由
CN105955703B (zh) 依赖于状态的查询响应
CN105229728A (zh) 多识别器语音识别
CN104541325A (zh) 混合模型语音识别
CN107112013A (zh) 用于创建可定制对话系统引擎的平台
KR20090099069A (ko) 플렉시블 텍스트 기반 언어 식별을 제공하는 방법, 장치 및 컴퓨터 판독가능 저장 매체
US8239202B2 (en) System and method for audibly outputting text messages
CN104462058B (zh) 字符串识别方法及装置
US20100268525A1 (en) Real time translation system and method for mobile phone contents
CN112269864A (zh) 生成播报语音的方法、装置、设备和计算机存储介质
JP2019185737A (ja) 検索方法及びそれを用いた電子機器
CN111966803B (zh) 对话模拟方法、装置、存储介质及电子设备
CN103294370A (zh) 触发按键操作的方法和设备
KR102092058B1 (ko) 인터페이스 제공 방법 및 장치
KR20220108919A (ko) 전자 장치 및 전자 장치의 단축 명령어 수행 방법
CN110931014A (zh) 基于正则匹配规则的语音识别方法及装置
KR20200101103A (ko) 사용자 입력을 처리하는 전자 장치 및 방법
CN110674645B (zh) 一种转换中文、英文语言的信息沟通方法及电子设备
CN115116429A (zh) 中英文混合识别方法、装置和计算机设备
KR20230052106A (ko) 전자 장치 및 전자 장치의 동작 방법
KR20230050849A (ko) 파라미터 값을 식별하는 전자 장치 및 이의 동작 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: American California

Applicant after: Google limited liability company

Address before: American California

Applicant before: Google Inc.

GR01 Patent grant
GR01 Patent grant