CN104509080A - 基于动态上下文的语言确定 - Google Patents

基于动态上下文的语言确定 Download PDF

Info

Publication number
CN104509080A
CN104509080A CN201380040776.XA CN201380040776A CN104509080A CN 104509080 A CN104509080 A CN 104509080A CN 201380040776 A CN201380040776 A CN 201380040776A CN 104509080 A CN104509080 A CN 104509080A
Authority
CN
China
Prior art keywords
language
user
input
electronic equipment
group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380040776.XA
Other languages
English (en)
Inventor
M-L·库伊
M·范奥斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Publication of CN104509080A publication Critical patent/CN104509080A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233Character input methods
    • G06F3/0237Character input methods using prediction or retrieval techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/232Orthographic correction, e.g. spell checking or vowelisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/263Language identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/274Converting codes to words; Guess-ahead of partial word inputs
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/005Language recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72436User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for text messaging, e.g. short messaging services [SMS] or e-mails
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/58Details of telephonic subscriber devices including a multilanguage function
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/70Details of telephonic subscriber devices methods for entering alphabetical characters, e.g. multi-tap or dictionary disambiguation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Input From Keyboards Or The Like (AREA)
  • Document Processing Apparatus (AREA)
  • Machine Translation (AREA)

Abstract

本发明呈现了用于促进消息撰写的方法、系统、计算机可读介质和装置。在一些实施例中,电子计算设备可接收用户输入并且基于该用户输入来确定一组上下文属性。设备可基于一组上下文属性来确定语言,以确定期望用于消息撰写的语言,并且将键盘布局切换成对应于所确定的语言的键盘布局。另外,设备可基于一组上下文属性来确定可用于消息撰写的一种或多种语言,并且启用与那些语言相关联的功能。另外,在一些实施例中,设备可基于一组上下文属性根据用户的口述来确定一种或多种语言,并且生成音频输入的文本表示。

Description

基于动态上下文的语言确定
技术领域
本发明整体涉及用于在电子环境中撰写消息的系统和方法,并且具体地涉及使用电子设备上的一种或多种语言来撰写消息。
背景技术
越来越多的个体可使用不同的语言和/或多于一种语言来撰写消息和/或与不同的人进行交流。各种计算系统包括移动设备提供允许用户使用多种语言来撰写消息的功能。例如,当用户激活用户的键盘设置下的多种语言时(例如,添加键盘语言诸如阿拉伯语键盘或德语键盘),移动设备可使得用户能够使用不同语言进行键入。当激活用户的设备上的不同语言时,用户可通过选择特定键盘或键盘布局(例如,经由对移动设备上所显示的用户界面上的用户可选项目的选择)来在任何文本字段中访问所激活的键盘。这样,当用户选择指示键盘之间的切换的用户可选项目时,用户可在同一文档中使用两种或更多种语言进行键入。
通常,每个计算系统与一种系统语言或默认语言相关联,其中预装应用程序(例如,照片应用程序、电子邮件应用程序)使用系统语言。当用户通过选择文本字段来指示期望进行键入时,显示对应于默认语言的键盘布局。用户然后可通过手动地指示所期望的键盘布局来将默认键盘布局切换成对应于所期望的语言的所期望的键盘布局。如所提及的,用户可选择用户可选项目(例如,球形按钮),该用户可选项目允许用户在设备上的所激活的键盘布局之间来回切换直到显示所期望的键盘布局。然而,可能不期望当用户从在一个场景中撰写信息改变成在另一个场景中撰写信息时要求用户手动地切换键盘布局。
发明内容
本发明的某些实施例涉及动态地确定一种或多种语言以用于在电子环境中撰写消息。
电子设备的用户可通过经由电子设备上所显示的虚拟键盘输入字符来撰写消息,诸如电子邮件、文本消息、短消息服务(SMS)消息、记事、备忘录等。在一些实施例中,电子设备可确定有关撰写的上下文并且基于该上下文来确定最适合于该撰写(或最可能是期望的语言)的语言。响应于确定语言,电子设备可将输入语言修改成所确定的语言。在一些实施例中,电子设备可通过将虚拟键盘布局切换成对应于所确定的语言的键盘布局来修改输入语言。在电子设备加载对应于所确定的语言的键盘布局之后,用户可使用所期望的语言来撰写消息。通过动态地确定并加载所期望的键盘语言,电子设备避免用户必须识别当前加载的键盘布局并随后手动地将键盘布局改变成对应于所期望的语言的键盘布局。
本发明的某些实施例涉及动态地确定一种或多种语言以用于启用与该一种或多种语言相关联的功能。在一些实施例中,与语言相关联的功能可包括自动校正功能、自动完成功能、自动文本功能、语法检查功能、拼写检查功能等。在一些实施例中,电子设备可经由对应于初始语言的键盘布局来接收用户输入。在一些实施例中,电子设备可基于用户输入来确定上下文。例如,上下文可包括用户输入的内容、用户和/或电子设备的特征。电子设备可基于上下文来确定一种或多种语言。例如,当用户输入的内容涉及旧金山市(San Francisco)、法式蛋白杏仁饼干(French macaroons)和法式长棍面包(baguette)时,电子设备可确定一种或多种语言包括英语和法语。又如,当电子设备确定用户能够流利地讲西班牙语和德语时,电子设备可确定包括这两种语言的一种或多种语言。响应于确定一种或多种语言,电子设备可加载对应于该一种或多种语言的词典,以便激活与一种或多种语言相关联的功能。这样,用户可使用一种或多种语言来撰写消息,同时与一种或多种语言相关联的功能得以启用。
另外,本发明的某些实施例涉及动态地确定一种或多种语言以用于提供音频输入的准确的文本表示。在一些实施例中,电子设备可从用户接收音频输入并且确定有关音频输入的上下文。上下文可基于用户或电子设备中的至少一者来确定。例如,上下文可包括由用户所讲的语言和由用户所持的口音。又如,上下文可包括电子设备的位置。在一些实施例中,电子设备然后可基于有关音频输入的上下文来正确地确定在音频输入中所使用的一种或多种语言。一旦识别音频输入中所使用的一种或多种语言,电子设备可提供音频输入的文本表示。在一些实施例中,响应于识别一种或多种语言,电子设备可启用与该一种或多种语言相关联的功能,并且除了提供文本表示之外还基于该功能来提供建议。
以下详细描述连同附图将提供对本发明的实质和优点的更好的理解。
附图说明
图1示出了根据本发明的一些实施例的系统的简化框图。
图2示出了根据一些实施例的与图1中的键盘语言切换子系统类似的键盘语言切换子系统的更详细图示的实例。
图3示出了根据一些实施例的用于加载对应于所期望的语言的键盘布局的示例性过程。
图4A-4D示出了根据一些实施例的用于基于上下文来切换语言输入模式的屏幕图像的示例性序列。
图5A-5D示出了根据一些实施例的用于基于上下文来切换电子设备上的语言输入模式的屏幕图像的另一示例性序列。
图6示出了根据一些实施例的与图1中的功能启用子系统类似的功能启用子系统的更详细图示的实例。
图7示出了根据一些实施例的用于针对一种或多种语言来启用功能的示例性过程。
图8A-8D示出了根据一些实施例的用于启用与一种或多种语言相关联的功能的屏幕图像的示例性序列。
图9示出了根据一些实施例的与图1中的口述子系统相同或类似的口述子系统的更详细图示的实例。
图10示出了根据一些实施例的用于抄录包括一种或多种语言的音频输入的示例性过程。
图11A-11B示出了根据一些实施例的用于从由用户正在口述的消息抄录用户输入的屏幕图像的示例性序列。
图12是根据一些实施例的可结合图1中的系统的部件的计算机系统100的简化框图。
图13示出了根据一些实施例的用于实现本发明的各种方面的分布式系统的简化图。
具体实施方式
在以下描述中,出于说明的目的,阐述了许多细节、实例和实施例。然而,本领域的普通技术人员将认识到,本发明不限于所陈述的实施例,并且本发明可在没有所讨论的具体细节中的一些的情况下实践本发明。另外,以框图形式示出包括熟知的结构和设备的实例和实施例中的一些,以免模糊具有不必要的细节的描述。
本发明的某些实施例涉及促进电子环境中的消息撰写。在一些实施例中,电子设备可通过将对应于一种语言的键盘布局修改成对应于另一种语言的另一种键盘布局来促进用户的消息撰写。因为用户可能期望在不同上下文中使用不同语言来撰写消息,电子设备可确定有关撰写的上下文并且基于该上下文确定最适合于该撰写的语言。例如,上下文可包括撰写的预期接收人,并且语言可包括用户过去已用来与预期接收人进行交流的语言。响应于确定临时语言,电子设备可通过加载对应于所确定的语言的键盘布局以及通过显示加载的键盘来将输入语言修改成所确定的语言。这样,用户可用期望的语言撰写消息,而无需识别当前活动语言并且然后手动地将活动语言修改成期望的语言。
在一些实施例中,电子设备可通过激活与语言相关联的各种功能来促进消息撰写。电子设备可确定有关撰写或消息的上下文并且基于该上下文来确定一种或多种语言。例如,上下文可包括消息内容,该消息内容包括与一种或多种语言(例如,英语、法语)相关联的词(例如,法式长棍面包)。响应于基于上下文来确定语言,电子设备可启用与一种或多种语言相关联的功能。例如,当识别法语和英语与手头的撰写相关联时,电子设备可启用使用法语和英语两者的自动校正和/或自动完成功能。这样,用户可使用多种语言来撰写消息,同时使与每种语言相关联的各种工具(例如,自动校正、语法检查、自动完成等)可用。
在一些实施例中,电子设备可通过准确地识别语言并且提供来自用户口述的文本显示来促进消息撰写。电子设备可从用户接收音频输入。在一些实施例中,电子设备可确定有关用户、电子设备和/或音频输入的上下文。电子设备可基于上下文来识别语言,并且提供使用所识别的语言进行的音频输入的文本表示。这样,因为电子设备智能地将音频输入转换成文本显示,所以用户可使用多种语言进行口述。
现将以图1开始,参考附图来更详细地讨论各种实施例。
图1示出了根据一些实施例的用于促进消息撰写的系统100的简化框图。如图1所示,系统100可包括多个子系统诸如键盘语言切换子系统105、功能启用子系统110、口述子系统115和渲染子系统120。可提供一个或多个通信路径以使得子系统中的一个或多个子系统能够彼此通信并且交换数据。图1中所描述的各种部件可在软件、硬件或两者的组合中实现。在一些实施例中,软件可存储在暂态或非暂态计算机可读存储介质上,并且可由一个或多个处理单元来执行。
应当理解,如图1所示的系统100可包括比图1中所示的那些部件更多或更少的部件,可结合两个或更多个部件,或可具有不同的部件配置或布置。在一些实施例中,系统100可以是电子设备诸如台式计算机或手持式计算设备的一部分。系统100中的各种部件可实现为独立应用程序或整合进另一个应用程序中(例如,电子邮件客户端、文本消息应用程序、文字处理应用程序、浏览器客户端或涉及任何类型的撰写的任何其它应用程序)。在一些实施例中,系统100中的各种部件可在操作系统内实现。
系统100中的各种部件可促进用户使用电子设备(诸如移动设备125)来撰写信息。在一些实施例中,系统100可动态地确定用于撰写的一种或多种语言并且基于一种或多种所确定的语言来执行一个或多个操作。在一个实例中,响应于确定所期望的语言,系统100将输入语言从一种语言修改成另一种语言。如图1所示出的,系统100可通过将对应于第一语言的键盘布局130修改成对应于不同于该第一语言的另一种语言的另一种键盘布局135来修改输入语言。
在一些实施例中,系统100中的键盘语言切换子系统105被配置为响应于语言确定来切换键盘布局或加载另一种键盘布局。当确定语言并且加载对应于该语言的键盘布局时,电子设备允许用户使用所确定的语言来撰写消息,而无需要求用户手动地切换键盘布局。例如,用户可能想要使用荷兰语来与配偶发短信,因为他们通常使用荷兰语进行交流。键盘语言切换子系统105可根据这对夫妻通常使用荷兰语进行交流的上下文(具体地在这种情况下,经由先前的使用)来确定,从而将荷兰语识别为用于进行交流的所期望的语言。响应于识别出荷兰语是所期望的语言,键盘语言切换子系统105可确定当前加载的键盘语言是否是荷兰语,并且如果当前加载的键盘语言不是荷兰语,则将键盘布局切换成对应于荷兰语的键盘布局,诸如此实例中所示的情况。如图所示,响应于识别出荷兰语是用户期望进行键入的语言,对应于英语的键盘布局130被切换成对应于荷兰语的键盘布局135。这样,用户然后可使用荷兰语键盘来撰写文本消息而无需手动地修改键盘布局。
在一些实施例中,功能启用子系统110被配置为响应于语言确定来启用与一种或多种语言相关联的功能。功能启用子系统110可基于有关消息撰写的一组上下文属性来识别与消息撰写有关的一种或多种语言。当识别出一种或多种语言时,功能启用子系统110可激活与一种或多种语言相关联的功能。例如,当检测出属于与一种或多种当前活动的语言不同的语言(例如,法语)的词(例如,法式长棍面包)时,电子设备可启用与该不同的语言相关联的功能。这样,电子设备可使用不同的语言对正在被撰写的消息执行自动校正、语法检查、自动完成等。在一些实施例中,当确定一种或多种语言时,电子设备可加载与该一种或多种语言相关联的词典,以便启用与该一种或多种语言相关联的功能。
在一些实施例中,口述子系统115被配置为响应于语言确定来提供音频输入的准确文本表示。口述子系统115可基于一组上下文属性来确定一种或多种语言。例如,语言可基于以下认知来确定:电子设备的用户具有浓重的法国口音;用户了解英语、法语和德语;用户大多数时间使用英语来与特定接收人进行交流等。这样,口述子系统110可基于有关消息撰写的一组上下文属性来识别出音频输入使用的是英语。口述子系统110可响应于确定语言来生成基于音频输入的准确文本表示。
在一些实施例中,渲染子系统120可使得系统100能够渲染图形用户界面和/或其它图形。例如,渲染子系统120可单独地或与系统100的其它子系统结合来进行操作,以便渲染由作为操作系统100的设备125所显示的用户界面中的一者或多者。这可包括例如与设备125进行通信、控制设备125和/或以其它方式使得设备125显示和/或更新触敏显示屏上的一个或多个图像。例如,渲染子系统120可基于语言确定来绘制和/或以其它方式生成键盘的一个或多个图像。在一些实施例中,渲染子系统120周期性地轮询系统100的其它子系统以获得更新的信息,以便更新由设备125所显示的一个或多个用户界面的内容。在另外或另选的实施例中,系统100的各种子系统可连续地向渲染子系统120提供更新的信息,以便更新由设备125所显示的一个或多个用户界面的内容。
图2示出了根据一些实施例的与图1中的键盘语言切换子系统105类似的键盘语言切换子系统205的更详细图示200的实例。在图2中,键盘语言切换子系统205可包括触发确定器210、上下文确定器215和键盘切换确定器220。如上所述,响应于确定一组上下文属性,键盘语言切换子系统205可确定用户想要用来撰写消息的适当的语言。在一些实施例中,键盘语言切换子系统205可加载对应于所确定的语言的键盘输入语言或键盘布局,并且允许用户使用所期望的语言来撰写消息。
在一些实施例中,触发确定器210可确定何时执行上下文分析。在一些实施例中,触发确定器210可检测触发动作或用户动作,从而使得上下文确定器215确定一组上下文属性。例如,当用户启动用户可撰写消息的应用程序时,诸如即时消息应用程序、备忘录起草应用程序、电子邮件应用程序等,触发确定器210可使得上下文确定器215能够确定有关该撰写的一组上下文属性。
在一些实施例中,当用户指示发起消息撰写时,触发确定器210可使得上下文确定器215能够执行确定。例如,当用户选择可用于文本输入的文本框时(从而使得闪烁光标被显示在文本框中),触发确定器210可使得上下文确定器215能够确定一组上下文属性。又如,在用户已执行文本输入(例如,所键入的一个或多个字符)之后,诸如在用户已输入接收人的电子邮件地址之后,触发确定器210可使得上下文确定器215能够执行确定。
在一些实施例中,上下文确定器215可确定有关消息撰写的一组上下文属性。在一些实施例中,上下文确定器215可确定:用户正用来进行消息撰写的应用程序的类型、用户偏好和历史(例如,包括由用户频繁使用的一组语言、用户的偏好或过往语言选择)、电子设备上的加载/活动的许多键盘语言、设备上活动的不同键盘布局、预期接收人和与预期接收人相关联的语言、位置、时间、正在键入的可在不同语言词典中识别的(和/或由用户频繁键入的)一个或多个词等。此处假定:如果用户已加载特定词典和/或语言键盘,如果预期接收人了解特定语言并且先前的交流指示用户已使用特定语言来与接收人进行交流,或如果用户当前正位于使用特定语言的国家等,则用户很可能想要使用该特定语言来撰写消息。然后一组上下文属性可由键盘切换确定器220使用来确定最可能是用于此撰写的所期望的语言的一种或多种语言。
在一些实施例中,由上下文确定器215确定的一组上下文属性可取决于由用户正用来撰写消息的特定应用程序。例如,如果用户正在即时消息应用程序中撰写消息,则上下文确定器215可识别接收人、用户和接收人之间共同所了解的语言(例如,通过识别由接收人所了解的语言,如用户的通讯簿中所指定的),和/或识别与接收人进行先前交流所使用的语言。然而,如果用户正在使用随堂记事应用程序,那么上下文确定器215可确定先前用于草写相同类别下的记事时所使用的语言,或确定用户将与之分享记事的听众以及听众所了解的语言。
在一些实施例中,键盘切换确定器220可基于一组上下文属性来确定一种或多种语言或候选语言。在一些实施例中,当确定最可能是手头的撰写中所使用的期望的语言的一种或多种语言时,键盘切换确定器220可执行启发式计算。键盘切换确定器220可在计算中使用一组上下文属性,并且为每种候选语言分配可能性分值。在一些实施例中,键盘切换确定器220可自动选择具有最高分值的语言,并且执行到对应于该语言的键盘布局的键盘布局切换。一些实施例提供警告并且允许用户在执行切换之前拒绝切换。在一些实施例中,所确定的语言可包括一组表情符号。
键盘切换确定器220还可从最高分值(即,最可能是所期望的语言)到最低分值地排列语言,并且以确定的次序来向用户呈现语言作为建议。键盘切换确定器220可呈现表示建议的一组可选用户界面项目。用户然后可从一组可选用户界面项目中选择所期望的语言。在一些实施例中,键盘切换确定器220可呈现排列前三的语言或键盘布局,并且允许用户从这些语言中进行选择。在一些实施例中,当允许用户进行选择时,键盘切换确定器220还可向用户呈现所具有的分值高于阈值(例如,85%)的语言或键盘布局。当接收选择时,键盘切换确定器220可使得渲染引擎225能够加载对应于所选择的语言的键盘。
如所提及的,响应于确定语言,键盘语言切换子系统205可使得渲染引擎225(类似于渲染引擎120)能够显示对应于所确定的语言的键盘。在一些实施例中,当将键盘的显示过渡到对应于所期望的语言的另一种键盘的显示时,渲染引擎225可显示动画效果。
另外,除了确定最可能是用于撰写的所期望的语言的语言之外,键盘语言切换子系统205还可确定最可能是所期望的输入方法的键盘布局。因为每种语言可具有可用于构建词、短语或句子的多种方法或多种类型的字母,所以键盘语言切换子系统205还可确定很可能的所期望的键盘布局或输入方法,并且当选择特定语言时加载对应键盘布局。在一些实施例中,很可能的所期望的键盘布局或输入方法可根据用户的使用该语言来撰写消息的先前使用来确定。
图3示出了根据一些实施例的用于加载对应于所期望的语言的键盘布局的示例性过程300。如所描述的,当电子设备确定用户想要用来撰写消息的适当的语言时,渲染引擎(例如,图1中的渲染引擎120)可加载与当前加载以用于显示在电子设备的用户界面上的键盘布局不同的键盘布局。过程300(或本文所述的任何其它过程或其变型和/或组合)中的一些或全部可在配置有可执行指令的一个或多个计算机系统的控制下执行,并且可被实现为在一个或多个处理器上由硬件或它们的组合来共同执行的代码(例如,可执行指令、一个或多个计算机程序或一个或多个应用程序)。该代码可存储在计算机可读存储介质上,例如呈将由一个或多个处理单元执行的计算机程序的形式,诸如浏览器应用程序。计算机可读存储介质可以是非暂态的。
在框305处,过程300可经由对应于第一语言的第一键盘布局来接收用户输入。在一些实施例中,电子设备的用户可选择将在电子设备上启动的应用程序,并且指示使用该应用程序开始消息撰写,例如通过选择用户可在其中输入文本的文本框。当接收到开始消息撰写的用户指示时,用户界面可显示对应于第一语言(例如,英语)的虚拟键盘(第一键盘布局)。通过第一键盘布局,用户可使用对应语言(第一语言)来输入字符。
在框310处,过程300可基于用户输入来确定一组上下文属性。如所提及的,电子设备可确定一组上下文属性,该一组上下文属性包括时间、位置、设备上的一个或多个活动键盘、正用于消息撰写的应用程序、消息的一个或多个预期接收人、由用户和/或接收人所讲的一种或多种语言、用户和接收人之间的先前交流、用户输入的内容等。在一些实施例中,由电子设备针对消息撰写所确定的一组上下文属性可由用户或管理员进行配置。
另外,在一些实施例中,上下文属性可包括由电子设备的用户使用特定语言来键入或使用该词的频率。例如,用户可频繁地键入在荷兰语中指“I(我)”的词“ick(我)”,但是该词在英语中可被视为乱语。虽然用户正在使用英语键盘来键入词“ick”,但是电子设备可确定“ick”是由用户频繁使用的词,并且因此将该词识别为有效词并且确定用户期望使用荷兰语进行键入。在一些实施例中,当认识到以下情况时,存储由用户跨不同语言频繁使用的词的数据库可促进消息撰写:不仅该词有效(即,并不是拼错的词或不存在的词),而且用户可能期望使用对应于语言或词典(在其中该词是有效的)的键盘来撰写剩下的消息。
在框315处,过程300可基于一组上下文属性来确定第二语言,其中第二语言不同于第一语言。在一些实施例中,启发式引擎(例如,包括在图2中的键盘切换确定器220中)可通过访问各种上下文属性来确定最可能是用户想要使用的语言的语言。启发式引擎可识别一种或多种语言,并且为该一种或多种语言中的每一种语言分配可能性分值。在一些实施例中,可能性分值由启发式引擎来计算,以便估计该语言是在当前上下文下用于消息撰写的所期望的语言的可能程度。
在一些实施例中,特定语言可在以下情况时被确定为第二语言:启发式引擎确定第二语言非常可能是所期望的语言(例如,如果启发式引擎计算出语言的可能性分值高于90%)。在一些实施例中,当确定可能性阈值低于阈值(例如,50%)时电子设备可允许用户确认进行切换,和/或呈现多种语言作为用户可从中选择所期望的键盘语言的可选选项。
在框320处,过程300可响应于确定第二语言来加载对应于第二语言的第二键盘布局。电子设备可加载对应于第二语言的第二键盘,以允许用户经由第二键盘来执行字符输入。虽然一些实施例中的电子设备当确定第二语言时自动加载第二键盘,但是一些实施例呈现一个选项,该选项允许用户确认该切换确实是期望的。
图4A-4D示出了根据一些实施例的用于基于上下文来切换电子设备上的语言输入模式的屏幕图像的示例性序列。如图4A所示,电子设备400显示初始屏幕,该初始屏幕可与电子设备400上的特定应用程序诸如电子邮件应用程序相关联。当用户使得电子设备400能够启动该应用程序时(例如,通过选择虚拟桌面上的电子邮件应用程序),初始屏幕可被显示在电子设备400上。
在一些实施例中,初始屏幕可包括消息撰写区域405和键盘布局区域410。消息撰写区域405允许用户撰写将要发送给一个或多个其他用户和/或设备的电子消息诸如电子邮件消息。消息撰写区域405可包括若干字段,用户可在该若干字段中输入文本以便撰写消息和/或以其它方式定义正在撰写的消息的各个方面。例如,消息撰写区域405可包括接收人字段415,用户可在接收人字段415中指定接收消息的一个或多个接收人和/或设备。此外,消息撰写区域405可包括发送人字段420,用户可在发送人字段420中指定应从其发送消息的账户或身份(例如,因为用户可能具有能够发送消息的多个账户或身份)。消息撰写区域405还可包括:主题字段425,用户可在主题字段425中指定消息的标题;以及正文字段430,用户可在正文字段430中撰写消息的正文。
在一些实施例中,当用户指示用户想要执行字符输入时,键盘布局440可显示在键盘布局区域410中。在图4A中,用户已选择输入文本字段(即,接收人字段415),如由指示用户想要输入文本的光标435所指示的。如图所示,当用户指示输入文本时,键盘布局440被显示在区域410中。在一些实施例中,当启动应用程序时,键盘布局440被显示。如在此实例中所示的,默认键盘语言为英语,并且因此键盘布局区域410中的键盘布局440对应于英语输入模式。在一些实施例中,默认语言可由用户(例如,经由偏好设置)和/或管理员进行配置。
在图4B中,用户已将接收人的电子邮件地址输入到接收人字段415中。响应于接收到用户输入,电子设备400可确定有关用户输入的一组上下文属性。例如,电子设备可识别对应于电子邮件地址的接收人(例如,经由通讯簿),并且识别与该接收人相关联的许多语言(例如,经由通讯簿、经由指示与该接收人相关联的语言的社交网络网站、经由数据库)。又如,电子设备可确定用户和接收人之间的在先前交流中所使用的一组语言。
在一些实施例中,一个或多个标签可与接收人相关联,其中标签可识别与接收人相关联的语言。可基于频率以及用户和接收人之间的在先前交流中所使用的语言等利用一种或多种语言来标记接收人。用于确定所期望的语言的一组上下文属性可包括与接收人相关联的语言标签。在一些实施例中,正如电子设备从过往行为中可学到的,与接收人相关联的标签可随时间变化。例如,虽然用户和接收人可能在最初几年里使用第一语言进行交流,但是当用户和接收人使用第二语言增强他们的交流时,与接收人相关联的标签可从第一语言变化成第二语言。
另外,可用于语言确定的上下文属性的另外的实例包括接收人的身份(例如,种族、国籍)和位置。一些实施例可当基于用户和接收人的身份识别出双方均大概了解的语言时执行语言确定。不同的实施例可提取不同组的上下文属性,并且基于该不同组的上下文属性以不同方式来执行语言确定。
在该实例中,电子设备400基于预期接收人的电子邮件以及许多其它上下文属性来执行语言确定。因为电子设备400已经确定接收人是日本人(例如,基于用户名“tomohiro”是常见的日文名、基于服务器的位置是在日本)并且用户先前已使用日语和英语的混合语言来与接收人进行交流,所以除英语之外,电子设备还可将日语识别为候选语言。
在图4C中,在用户界面元件445中提供用于将键盘语言从英语切换成日语的选项。在该实例中,用户有机会通过选择用户界面元件445中的两个用户可选用户界面项目中的一个用户可选用户界面项目来确认键盘布局切换或拒绝键盘语言切换。在一些实施例中,当确定语言非常可能(例如,可能性分值超过80%)是所期望的语言时,电子设备可自动将键盘布局440切换成对应于所确定的语言的键盘布局(从而跳过图4C中所显示的屏幕图像)。当已将多种语言识别为候选语言时,电子设备可提供用户可从中进行选择的多于一个的选项。
在图4D中,电子设备400中的屏幕图像在键盘布局区域410中显示另一种键盘布局450,其中该另一种键盘布局对应于所确定的语言。如图所示,响应于接收到执行键盘语言切换的用户确认,已加载并且向用户显示对应于日语的键盘布局450。另外,在一些实施例中,电子设备可将任何先前所键入的字符转换成所确定的语言。在该实例中,包括接收人的电子邮件地址的先前所键入的字符现在被转换成日语(例如,当直接转换时或当在用户的通讯簿中找到对应的日文名时)。
一些语言包括多种输入方法,并且因此具有多种对应的键盘布局。在一些实施例中,电子设备可确定用户过去在使用特定语言进行键入时已使用的最常用的输入方法。例如,用户可具有使用包括拼音方法、基于词根的方法和其它类型的输入方法的不同类型的键盘布局来键入汉语的选项。电子设备可基于用户的使用历史来选择输入方法并且显示对应的键盘布局。不同的实施例可以不同的方式执行语言的输入方法的确定。
图5A-5D示出了根据一些实施例的用于基于上下文来切换电子设备上的语言输入模式的屏幕图像的另一个示例性序列。如图5A所示,电子设备500上所显示的屏幕图像可与另一个应用程序诸如记事应用程序或备忘录撰写应用程序相关联。在一些实施例中,当启动应用程序时,屏幕图像可包括显示类别的列表525的初始页面,用户可在类别的列表525下创建新消息。
在该实例中,用户已创建包括历史课、西班牙语课、插花课、与工作相关的材料、我的日记、健身日志、物理课等的类别。用户可通过识别用户想要在其下撰写消息的类别中的一个类别并且然后选择可选用户项目530来在这些类别中的一个类别下创建新备忘录。在该实例中,用户已通过在识别插花课类别535(显示为被加亮)之后选择用户可选项目530来指示他想要在插花课类别535下添加新备忘录。不同的实施例可允许用户以不同的方式在特定类别下添加新备忘录。
在图5B中,屏幕图像显示备忘录撰写区域540,用户可在该备忘录撰写区域540中撰写电子记事。备忘录撰写区域540可包括其中用户可进行编辑的若干字段。例如,备忘录撰写区域540可包括用户可在其中撰写备忘录的正文的正文字段545以及用户可在其中将照片添加至备忘录的照片字段550。当用户指示他想要将文本输入到正文字段545中时,对应于语言(例如,默认语言)的虚拟键盘555可被显示在键盘布局区域560中。在一些实施例中,虚拟键盘555可使用动画效果诸如通过弹出来显现。
在一些实施例中,虚拟键盘555可对应于默认语言诸如英语,而在一些实施例中,虚拟键盘555可对应于在用户发起此新备忘录之前由用户最后一次使用的语言(例如,西班牙语)。在该实例中,用户正在使用英语来为他的历史课备忘录撰写备忘录,并且因此英语键盘被显示在键盘布局区域560中。如图所示,当选择键盘布局555内的虚拟键时,用户已发起撰写。
当接收用于撰写消息的用户指示时,电子设备500可确定有关此撰写的一组上下文属性。例如,电子设备可确定此类别下的先前备忘录是使用英语和日语的混合语言来撰写的。电子设备还可确定在插花课中的用户的同学的种族,因为该用户通常可能在课后向同学发送课堂记事,并且因此可能期望使用这些同学所共同了解的语言来撰写备忘录。电子设备还可识别用户的或设备的当前位置,因为用户可能期望使用与用户当前所居住的国家相容的语言来撰写消息。
在一些实施例中,当启发式引擎正在确定一组候选语言时,可为不同的上下文属性分配不同的权重。例如,在该实例中,与用户当前所居住的国家的语言相比,可给予在同一类别下创建的由备忘录所使用的语言较大的权重。在权衡各种上下文属性和它们的所分配的权重之后,启发式引擎可更准确地识别该组候选语言。
在图5C中,响应于确定一组候选语言,电子设备500可将该组候选语言作为可选选项来向用户进行显示(例如,在框565中)。在一些实施例中,电子设备可以一定的次序(例如,通过在列表的顶部处显示最可能是期望的语言的语言)来显示包括候选语言的列表。在图5C中,电子设备500已识别三种候选语言。向用户显示候选语言以允许用户选择要使用的所期望的语言键盘。如该实例中所示的,用户已选择表示法语的可选用户界面项目570。在图5D中,新键盘布局555得以加载并且被显示在键盘布局区域560中,其中新键盘布局555对应于法语输入语言。用户然后可使用法语来执行字符输入。如所提及的,一些实施例还可将已在正文字段545中的此新备忘录中所键入的字符和/或词转换成所期望的语言。
另外,在一些实施例中,用户可识别电子设备可访问的电子通讯簿中的具有跨不同语言的多个名字的接收人。在一些实施例中,电子设备可利用接收人与跨多种语言的多个名字相关联的事实来识别当与该接收人进行交流时要使用的语言。另外,虽然用户可使用一种语言来指定接收人的名字,但是电子设备能够识别该接收人,而不论用户使用哪个名字和哪种语言来识别该接收人。
图6示出了根据一些实施例的与图1中的功能启用子系统110类似的功能启用子系统605的更详细图示600的实例。在图6中,功能启用子系统605可包括触发确定器610、上下文确定器615和功能启用器620。不同的实施例可包括比此实例中所示出的那些部件更多或更少的部件。
功能启用子系统605可识别将启用其相关联的功能的一组语言。触发确定器610可确定何时识别将启用其相关联的功能的该组语言。在一些实施例中,响应于接收到字符输入(例如,键盘输入、语音输入、触摸屏输入),触发确定器610可使得上下文确定器615基于字符输入来确定一组上下文属性。
在一些实施例中,上下文确定器615可确定:用户当前正在使用以撰写消息的一种或多种语言、由用户撰写消息时频繁使用的一种或多种语言、用户的设备上的当前活动的键盘语言、由消息的接收人所了解的语言、正在撰写的消息的内容等。功能启用器620可基于一组上下文属性来确定一组语言。通过使用该组上下文属性计算一种或多种语言的可能性值,功能启用器620可确定将最可能用于消息撰写的语言。从而功能启用器620可启用与一种或多种语言相关联的功能。
在一些实施例中,当确定将最可能用于消息撰写的语言(例如,通过识别包括一种或多种语言的用户输入的内容)时,功能启用器620可启用与该一种或多种语言相关联的功能。例如,如果用户键入包括属于英语和法语词典的词和/或短语的句子,则功能启用器620可启用与英语和法语词典相关联的各种功能(例如,自动校正、自动完成、自动文本、语法检查功能)。
在一些实施例中,电子设备可一次激活与多于一种词典相关联的功能。这样,用户可启用与活动的多种语言的词典相关联的功能,从而当用户使用多种语言撰写消息时促进撰写。当用户撰写消息时,电子设备可提供跨多种语言的多种校正建议、替换建议、替换等。
图7示出了根据一些实施例的用于针对一种或多种语言来启用功能的示例性过程700。在框705处,过程700可经由对应于第一语言的键盘来接收用户输入。例如,用户可能正在经由意大利语键盘布局使用意大利语来键入字符。
在框710处,过程700可基于用户输入来确定一组上下文属性。在一些实施例中,该组上下文属性可包括用户输入的内容(例如,用户可能提到可能与另一种语言相关联的项目或短语)、用户的位置、消息的预期接收人等。在一个实例中,用户可能提到外国的当地餐厅、项目等,其中餐厅名称或项目在一种语言中将被显示为拼写错误,但在当地语言中将是正确拼写。
在框715处,过程700可基于一组上下文属性来确定一种或多种语言。在一些实施例中,可通过启用与一种或多种语言相关联的功能来促进消息撰写。基于一组上下文属性,可识别一种或多种语言,由此启用相关联的功能将是有用的。例如,当确定用户正在键入属于多于一种语言词典的词时,一些实施例可确定用户将可能继续键入可能属于那些词典的词。这样,一些实施例可启用与那些语言相关联的功能,以提供与语言相关联的有用建议。
在框720处,过程700可响应于确定一种或多种语言来启用与该一种或多种语言相关联的功能。在一些实施例中,与一种或多种语言相关联的功能可包括自动校正功能、自动完成功能、自动文本功能、语法检查功能、转换、拼写检查功能、辞典功能等。不同的实施例可针对所确定的语言来启用不同组的功能。另外,一个实施例可针对每种所确定的语言来启用不同组的功能。例如,虽然可启用与英语相关联的所有功能,但是电子设备可针对西班牙语仅启用拼写检查功能。
图8A-8D示出了根据一些实施例的用于启用与一种或多种语言相关联的功能的屏幕图像的示例性序列。如图8A所示,电子设备800显示可与电子设备上的应用程序诸如即时消息应用程序相关联的屏幕图像。在该实例中,屏幕图像包括会话交流区域850,用户发送和接收的消息可被显示在会话交流区域850中。屏幕图像还包括消息撰写区域855,用户可在消息撰写区域855中撰写要发送给接收人的消息。初始屏幕还包括显示由用户所指定的消息的一个或多个接收人的接收人字段860。
在图8A中,电子设备800上所显示的屏幕图像示出用户已在消息撰写区域855中输入句子。在一些实施例中,电子设备可响应于接收用户输入来确定一组上下文属性。此实例中的一组上下文属性包括用户输入的内容。具体地,该实例中的上下文属性包括对应于内容中的各个词和/或短语的词典或语言。电子设备然后可基于上下文属性来确定一种或多种语言。在该实例中,因为用户已使用汉语键盘810输入包括可在汉语词典中找到的词的句子,所以电子设备800识别这些语言中的一种语言是汉语。
在一些实施例中,电子设备800可通过分析消息的接收人来进一步确认汉语是这些语言中的一种语言。因为在该实例中Ted Lin是接收人并且Ted Lin很可能使用汉语进行交流(例如,根据先前的交流、根据用户的通讯簿、根据名字、根据接收人的国籍),所以电子设备800可为汉语分配相当高的可能性分值,可能性分值指示语言将用于撰写的可能程度。
另外,在一些实施例中,用户可识别通讯簿中使用两种或多种语言的每一个人。因为接收人可与不同语言的名字相关联,所以电子设备可识别与接收人相关联的其它名字以及其对应语言。例如,Ted Lin可能还有中文名,如在用户的通讯簿中所指示的。这样,电子设备800可向成为用于进行交流的所期望的语言的汉语添加另外的权重。
在图8B中,电子设备800上所显示的屏幕图像示出用户已将另外的词输入到消息撰写区域855中(例如,使用英语键盘布局815)。另外的词和/或短语包括另一种语言,在该实例中为英语。当用户在消息撰写区域855中输入另外的字符时,电子设备800可确定一组上下文属性,以便识别任何另外的语言。在该实例中,电子设备800可基于上下文属性来将英语识别为另外的语言,上下文属性包括句子的内容以及所使用的语言的类型。在一些情况下,电子设备可基于上下文属性(例如,提及了大概与法语相关的食物)进一步将法语识别为另外的语言。
在一些实施例中,当确定一种或多种语言时,电子设备启用与该一种或多种语言相关联的功能。例如,电子设备可使用该一种或多种语言来标记所识别的错误,和/或使用该一种或多种语言的词典来提供自动完成或自动文本建议。在该实例中,针对英语和汉语两者激活自动校正、自动转换和拼写检查功能。如图8C所示,当用户在消息撰写区域855中键入字符时,电子设备800为框860中的“McD”提供自动转换和自动校正建议,并且为框865中的“fires”提供自动校正和自动转换建议。在一些实施例中,在用户已选择“发送”按钮之前,替换建议可能不出现。
在一些实施例中,电子设备800可自动选择最可能的替换,并且在不向用户提供这些替换作为建议的情况下来替换词/短语。这里,因为激活了与英语和汉语相关联的功能,所以电子设备800可使用两种词典来执行各种检查以促进消息撰写。在图8D中,在用户已经选择替换之后,电子设备800在会话交流区域850中显示发送给接收人的消息。在一些实施例中,用户可再次选择“发送”以指示确实已经准备好传输消息。用户还可决定不选择任何建议,并且选择“发送”以指示当前消息的确认。
图9示出了根据一些实施例的与图1中的口述子系统115相同或类似的口述子系统905的更详细图示900的实例。在图9中,口述子系统905可包括语音捕获模块910、上下文确定器915、口述语言确定器920和功能启用器925。如所提及的,不同的实施例可包括比该实例中所列出的那些部件另外或更少的部件。
在一些实施例中,语音捕获模块910可以设定的间隔来捕获用户的语音。可捕获语音的速率可基于正在讲的语言的类型来确定。例如,与荷兰语相比,捕获西班牙语的速率可以是更快的速率。因为在会话之间人们暂停的时间量(即,单词和/或句子之间的间隔的持续时间)通常因讲不同语言的人而不同,语音捕获模块910可针对不同语言以指定的间隔摄取语音。在一些实施例中,捕获速率可被设定成对应于为设备设定的默认语言的默认速率。捕获速率可根据正在分析的语言的类型来进行调整。尽管在一些实施例中,语音捕获模块用于以设定的间隔来捕获来自用户的口述语言,而一些实施例允许实时捕获和分析用户的语音。
在一些实施例中,上下文确定器915可基于用户或用户的电子设备中的至少一者来确定一组上下文属性。例如,上下文确定器915可确定:由用户常讲的一组语言、由用户流利且地道地讲出的一种或多种语言、用户讲其它语言时具有的口音、用户出生的地理位置或区域(例如,用户是来自荷兰北部还是来自荷兰南部)以及相关联的讲话特征(例如,另外的口音、讲话间的间隙)、当前时间(因为用户的讲话特性在一天的不同时间可能变化)、当前位置(因为一些语言比其它语言在特定位置中更频繁地使用)、电子设备上活动的一组键盘语言、电子设备的系统语言、用户通常用来(例如,根据先前使用)在特定场景下(例如,当撰写消息给特定接收人时、当在特定类别下撰写消息时、当在特定时间撰写消息时等)撰写消息时进行口述的语言等。
在一些实施例中,口述语言确定器920可确定用户在口述消息时正使用的一种或多种语言。口述语言确定器920可确定由用户在撰写由语音捕获模块910所捕获的口述消息片段时很可能使用的一种或多种语言。基于包括由用户所讲的语言、用户所具有的口音等的用户的属性,口述语言确定器920可识别由用户很可能使用的一种或多种语言。当确定一组语言时,如果识别出多于一种语言,则口述语言确定器920可识别主要语言,并且使得语音捕获模块910调整捕获语音的对应于该主要语言的速率。
在一些实施例中,功能启用器925可启用与由口述语言确定器920所确定的语言相关联的各种功能。这样,电子设备可激活与语言相关联的词典,并且为由电子设备所标记的词或短语提供建议性替换(例如,针对拼写错误、自动文本或自动完成候选等)。功能启用器925可进一步提供建议性替换作为用户界面元件,并且允许用户选择是否利用一种或多种所建议的替换来替换词或短语。在一些实施例中,建议性替换可跨多种语言,包括由口述语言确定器920所确定的语言。在一些实施例中,当检测到错误时,电子设备可自动替换所识别的错误。
另外,在一些实施例中,口述子系统905可包括能够向用户生成音频输出的语音输出模块。语音输出模块可正确地对由用户所撰写的词和/或句子向用户进行发音和阅读。因为电子设备可基于词典(例如,在设备上进行加载,可经由服务器进行访问)准确地对每个词和/或短语进行发音,所以用户可发现此特征有帮助,例如当用户无法看到设备的屏幕以确定是否已正确地抄录用户的讲话时。
图10示出了根据一些实施例的用于抄录包括一种或多种语言的音频输入的示例性过程1000。在一些实施例中,当正确地识别出音频输入中所涉及的一种或多种语言时,音频输入可被正确地抄录。在框1005处,过程1000可从电子设备的用户接收音频输入。如所描述的,音频输入可包括一种或多种语言的混合语言。在一些实施例中,音频输入包括涉及消息诸如电子邮件消息、文本消息、备忘录等的内容的口述语言。在一些情况下,音频输入可包括语音命令,该语音命令指示电子设备开始针对特定接收人的新消息、对词和/或短语进行转换(例如,将第一个句子转换成法语、将第三个词变成德语)等。
在框1010处,过程1000可确定与用户或电子设备中的至少一者相关联的一组上下文属性。在一些实施例中,与用户相关联的一组上下文属性可包括:由用户所讲的语言、用户的母语、用户的讲话的特性(例如,声调、用户在讲不同语言时的口音、用户讲话的速度等)、用户过去用于口述消息的语言、以及可帮助电子设备识别用户正在讲的语言的与用户相关的其它属性。与电子设备相关联的一组上下文属性可包括:设备的位置、设备上活动的键盘语言等。另外,在一些实施例中,该组上下文属性可包括:消息的预期接收人、由预期接收人所讲的语言以及用户和接收人之间的先前交流等。
在框1015处,过程1000可基于一组上下文属性来识别语言。在一些实施例中,启发式引擎(例如,包括在图9中的口述语言确定器920中)可确定最可能是由用户在口述时所使用的语言的语言。当确定用户正在使用哪些语言时,启发式引擎可将一组上下文属性考虑在内。例如,启发式引擎可正确地将使用包括可识别的英语词的具有很重的法国口音并且具有讲法语的人常有的节奏和声调的语言所讲的句子识别为英语。当将设备当前位于美国或用户正在撰写消息给英国客户的事实考虑在内时,启发式引擎可更加确定。
在框1020处,过程1000可使用所识别的语言来提供音频输入的文本表示。响应于识别口述消息中所使用的一种或多种语言,电子设备可分析音频输入并且提供音频输入的抄录。因为一种或多种语言的确定是使用一组上下文属性来仔细执行的,所以文本表示可以是相当准确的。文本表示可包括跨多种语言的字符。
另外,在一些实施例中,因为用户通过口述来撰写消息,所以电子设备可启用与一种或多种所识别的语言相关联的功能。可以设定的间隔或当用户结束句子时,电子设备基于所启用的各种功能提供词/短语替换建议。例如,当用户结束句子时例如当可通过用户的声调进行识别时,电子设备可提供自动转换建议、自动完成建议等。电子设备可针对设定的时间量或针对对应于句子的长度的时间量来提供建议。这样,在用户已填充句子或段落等之后,用户可查看文本表示并且选择替换。
图11A-11B示出了根据一些实施例的用于从用户正在口述的消息抄录用户输入的屏幕图像的示例性序列。在图11A中,电子设备1100显示与电子设备上的电子邮件应用程序相关联的屏幕图像。在一些实施例中,屏幕图像可包括消息撰写区域1105和键盘布局区域1110。消息撰写区域1105允许用户撰写将要发送给一个或多个其他接收人的电子邮件消息。消息撰写区域1105还可包括:可在其中指定消息的接收人的若干字段、消息应从其发送的账户、以及消息的标题。消息撰写区域1105还包括正文字段1115,用户可在正文字段1115中撰写消息的正文。
在图11A中,当用户正在口述消息时,电子设备1100使用被确定为用户很可能正在使用的语言的语言来显示消息的抄录。在该实例中,用户使用日语和英语两者来口述消息。当电子设备1100从用户接收音频输入时,设备1100可基于一组上下文属性来识别正被使用的一种或多种语言。例如,当使用英语讲话时,用户可能具有浓重的日本口音。因此,虽然用户正在讲话的声调和速度与使用日语讲话相似,但是电子设备1100认识到:用户能够讲英语、由用户所使用的许多词/短语对应于英语词典、设备位于美国、英语是设备上活动的键盘语言中的一种语言、并且接收人可想象为白人。这样,电子设备1100可识别用户正在使用的语言包括英语和日语两者,而不是因声调或发音在一定程度上不准确而立即排除英语作为候选语言。
在一些实施例中,电子设备可响应于识别出语言而显示对应于所识别的语言的键盘。在已识别出多于一种语言的情况下,电子设备可显示对应于是消息口述中主要使用的语言的语言的键盘布局,使得替代口述消息,用户可切换成使用期望的语言进行键入。例如,当用户主要使用荷兰语来口述消息但是在句子中穿插着一些英语词时,电子设备可显示或切换成对应于荷兰语而不是英语的键盘。如该实例中所示的,电子设备1100可确定日语是口述此消息时所使用的主要语言。因此,电子设备1100可显示对应于日语的键盘布局1110,尽管在此实例中英语和日语两者均已被识别为候选语言。
在图11B中,在确定用户正在使用的一种或多种语言之后,电子设备1100可激活与所识别的语言相关联的一种或多种功能。在该实例中,已响应于语言被确定而针对日语和英语来激活自动转换功能。如图所示,向用户提供校正短语表达的建议1120以及术语的转换的建议1125和1130,其中用户可接受或拒绝。虽然在一些实施例中,电子设备1100可在识别句子的结尾时呈现这些建议,但是一些实施例在用户正在口述消息时实时呈现该建议。在一些实施例中,建议在它们出现之后或用户完成口述之后呈现预先确定的时间段。这允许用户具有足够的时间来检查抄录的句子连同建议并且选择期望的建议。
另外,一些实施例允许用户响应于用户对用户界面上的用户可选项目(未示出)的选择或当切换设备上的按钮时暂时将键盘切换成第二语言(在该实例中为英语)。然后,当用户释放用户可选项目或使所切换的按钮反向时,键盘可切换回对应于主要语言。如图11B所示,键盘布局1110已被修改成对应于英语的另一种键盘布局1135。这可响应于接收到暂时将键盘语言切换成其他活动语言(或切换成其它所识别的语言中的一种语言)的用户指示来执行。
另外,当电子设备1100确定建议时,电子设备1100还可考虑说话人的文化背景,并且提供可能是说话人正在尝试用于撰写消息的语言的等同物的建议。例如,虽然在日本炸薯条(French fries)从日语到英语的直接转换或发音将是炸土豆(fried potato),但是电子设备可将这种用法识别为在美国不常见,从而提供校正词的建议。在一些实施例中,当设备已经确定(例如,经由数据库)不同语言是由用户和/或接收人非常频繁地使用的一种语言时,电子设备还可用于将词和/或句子转换成该不同语言。
在一些实施例中,电子设备可识别来自用户的口头命令。用户可指示电子设备将所抄录的词和/或句子复述给用户,使得用户可识别出词和/或句子是否被正确地抄录。另外,电子设备可接收用于将撰写的消息中的词和/或句子转换成不同的语言的命令。
上述许多特征和应用程序可被实现为软件过程,这些软件过程被指定为在计算机可读存储介质上进行编码的程序指令集。当由一个或多个处理单元来执行这些程序指令时,这些程序指令使得一个或多个处理单元执行指令中所指示的动作。计算机可读存储介质的实例包括CD-ROM、闪存驱动器、RAM芯片、硬盘驱动器、EPROM等。计算机可读存储介质不包括载波和以无线方式或通过有线连接进行传递的电子信号。“软件”一般是指指令序列,该指令序列当由一个或多个处理单元执行时使得一个或多个计算机系统执行各种操作,从而定义执行和实现软件程序的操作的一个或多个特定机器具体实施。
图1中所示出的系统100可并入到各种系统和设备中。图12是计算机系统1200的简化框图,该计算机系统1200可包含根据一些实施例的系统100的部件。计算机系统1200可被实现为各种计算设备中的任一种计算设备,该计算设备包括例如台式计算机或膝上型计算机、平板电脑、智能电话、个人数字助理(PDA)或任何其它类型的计算设备,不限于任何特定的形状因数。如图12所示,计算机系统1200可包括经由总线子系统1204来与多个外围子系统进行通信的一个或多个处理单元1202。这些外围子系统可包括存储子系统1206(包括存储器子系统1208和文件存储子系统1210)、用户界面输入设备1212、用户界面输出设备1214和网络接口子系统1216。
总线子系统1204可包括可通信地连接电子设备1200的多个内部设备的各种系统、外围设备和芯片集总线。例如,总线1204可将一个或多个处理单元1202与存储子系统1206可通信耦接。总线1204还可连接至输入设备1212和用户界面输出设备1214中的显示器。总线子系统1204还经由网络接口1216来将电子设备1200耦接至网络。以此方式,电子设备1200可以是多个计算机系统的网络的一部分(例如,局域网(LAN)、广域网(WAN)、内联网、或多个网络中的一个网络诸如互联网)。电子设备1200的任何或所有部件均可与本发明一起使用。
可被实现为一个或多个集成电路(例如常规的微处理器或微控制器)的一个或多个处理单元1202可控制计算机系统1200的操作。在一些实施例中,一个或多个处理单元1202可包括通用主处理器以及一个或多个专用协处理器,诸如图形处理器、数字信号处理器等。在一些实施例中,一些或全部处理单元1202可使用定制电路诸如专用集成电路(ASIC)或现场可编程门阵列(FPGA)来实现。在一些实施例中,此类集成电路执行存储在电路自身上的指令。在其它实施例中,一个或多个处理单元1202可执行存储在存储子系统1206中的指令。在各种实施例中,处理器1202可响应于程序代码来执行多种程序,并且可维持多个同时执行的程序或过程。在任何给定时间,要被执行的程序的部分或全部可驻留在处理器1202中和/或存储子系统1206中。通过合适的编程,处理器1202可提供上述用于执行上下文和语言确定以及分析的各种功能。
网络接口子系统1216提供至其它计算机系统和网络的接口。网络接口子系统1216用作用于从其它系统接收数据并且从计算机系统1200向其它系统传输数据的接口。例如,网络接口子系统1216可使得计算机系统1200能够经由互联网来连接到客户端设备。在一些实施例中,网络接口1216可包括GPS接收器部件、用于访问无线语音和/或数据网络(例如使用蜂窝电话技术;高级数据网络技术诸如3G、4G或EDGE;WiFi(IEEE 802.11系列标准);或其它移动通信技术;或它们的任何组合)的射频(RF)收发器部件和/或其它部件。在一些实施例中,除了或代替无线接口,网络接口1216可提供有线网络连接性(例如以太网)。
用户界面输入设备1212可包括:键盘、指向设备诸如鼠标或轨迹球、并入到显示器中的触摸板或触摸屏、滚轮、点击式触摸转盘、刻度盘、按钮、开关、小键盘、音频输入设备诸如语音识别系统、麦克风、以及其它类型的输入设备。一般来讲,使用术语“输入设备”旨在包括用于向计算机系统1200输入信息的所有可能类型的设备和机构。例如,在智能电话中,用户输入设备1212可包括由智能电话、触摸屏等提供的一个或多个按钮。用户可使用输入设备1212中的一个或多个输入设备来提供与选择哪个语言用于转换或键盘语言切换有关的输入。用户还可使用输入设备1212中的一个或多个输入设备来输入各种文本或字符。
用户界面输出设备1214可包括显示子系统、指示灯,或非视觉显示器诸如音频输出设备等。显示子系统可为阴极射线管(CRT)、平板设备诸如液晶显示器(LCD)、投影设备、触摸屏等等。一般来讲,使用术语“输出设备”旨在包括用于从计算机系统1200输出信息的所有可能类型的设备和机构。例如,用于在撰写消息时选择语言或替换建议的菜单和其它选项可经由输出设备向用户进行显示。另外,可经由音频输出设备来输出语音。
在一些实施例中,显示子系统可提供图形用户界面,其中显示子系统的某些区域中的可见图像元件被定义成用户使用用户界面输入设备1212进行选择的活动元件或控制元件。例如,用户可操控用户输入设备来将屏幕上光标或指针定位在控制元件上,然后点击按钮以指示选择。可选地,用户可在触摸屏设备上触摸控制元件(例如,利用手指或触笔)。在一些实施例中,用户可讲出与控制元件相关联的一个或多个词(词可为例如元件上的标记或与该元件相关联的功能)。在一些实施例中,可识别触敏设备上的用户手势并将其解译为输入命令;这些手势可但不必与显示子系统中的任何特定阵列相关联。也可实现其它用户界面。
存储子系统1206提供用于存储基本编程和数据结构的计算机可读存储介质,该基本编程和数据结构提供一些实施例的功能。存储子系统1206可例如以任何组合的方式使用磁盘、闪存存储器或任何其它存储介质来实现,并且可根据需要包括易失性存储装置和/或非易失性存储装置。当由处理器执行时提供上述功能的软件(程序、代码模块、指令)可存储在存储子系统1206中。这些软件模块或指令可由一个或多个处理器1202来执行。存储子系统1206还可提供用于存储根据本发明所使用的数据的储存库。存储子系统1206可包括存储器子系统1208和文件/磁盘存储子系统1210。
存储器子系统1208可包括多个存储器,这些存储器包括用于在程序执行期间存储指令和数据的主随机存取存储器(RAM)1218和其中存储有固定指令的只读存储器(ROM)1220。文件存储子系统1210提供对程序和数据文件的永久性(非易失性)存储,并且可包括硬盘驱动器、软盘驱动器以及相关联的可移除介质、光盘只读存储器(CD-ROM)驱动器、光盘驱动器、可移除介质盒和其它类似的存储介质。
计算机系统1200可为各种类型,包括个人计算机、便携式设备(例如)、工作站、网络计算机、大型机、信息亭、服务器或任何其它数据处理系统。由于计算机和网络的不断变化的性质,对图12中示出的计算机系统1200的描述旨在仅仅作为具体实例。比图12中示出的系统具有更多或更少部件的许多其它配置是可能的。
上述各种实施例可使用专用部件和/或可编程处理器和/或其它可编程设备的任何组合来实现。各种实施例可仅在硬件中、仅在软件中、或使用它们的组合来实现。本文所述的各个过程可在相同处理器或不同处理器上以任何组合方式来实现。因此,在将部件描述为被配置为执行某些操作的情况下,这种配置可例如通过以下方式来实现:设计电子电路以执行操作、对可编程电子电路(如微处理器)进行编程以执行操作、或它们的任何组合。过程可使用各种技术包括但不限于用于进程间通信的常规技术来进行通信,并且不同对的过程可使用不同的技术,或相同对的过程可在不同的时间处使用不同的技术。尽管上述实施例可参考具体硬件和软件部件,但本领域的技术人员将会知道,也可使用硬件和/或软件部件的不同组合,并且被描述为在硬件中实现的特定操作也可能在软件中实现,或反之亦然。
图13示出了根据一些实施例的用于实现本发明的各种方面的分布式系统1300的简化图。在图13所示的实施例中,键盘语言切换子系统105、功能启用子系统110和口述子系统115被提供在经由网络1310与远程客户端设备1315通信耦接的服务器1305上。
网络1310可包括一个或多个通信网络,该通信网络可以是互联网、局域网(LAN)、广域网(WAN)、无线或有线网络、内联网、专用网络、公用网络、交换网络或任何其它合适的通信网络。网络1310可包括许多互连系统和通信链路,该通信链路包括但不限于硬件链路、光学链路、卫星或其它无线通信链路、波传播链路,或用于传送信息的任何其它方式。各种通信协议可用于促进经由网络1310来传送信息,该通信协议包括但不限于TCP/IP、HTTP协议、可扩展标记语言(XML)、无线应用协议(WAP)、行业标准组织正在开发的协议、特定于供应商的协议、自定义协议和其它协议。
在图13所示的配置中,客户端设备1315的用户可通过触摸显示键盘布局的触摸屏或经由语音来执行用户输入。当接收到用户输入时,设备1315可经由网络1310来与服务器1305进行通信以用于进行处理。位于服务器1305上的键盘语言切换子系统105、功能启用子系统110和口述子系统115然后可使得键盘布局得以提供在设备1315上、使得与各种语言相关联的功能得以启用、或使得设备1315上的用户界面显示用户输入的文本表示。除此之外或作为另外一种选择,这些子系统可使得各种替换建议得以提供和/或可使得键盘布局进行切换,或使得建议来替换初始文本表示,如以上所讨论的实例中所述的。
不同于图13中示出的分布式系统1300的各种不同的分布式系统配置是可能的。例如,在一些实施例中,各种子系统全部彼此远程定位。图13所示的实施例因此仅仅是可包含一些实施例的系统的一个实例并且并非旨在进行限制。
因此,尽管已相对于具体实施例描述了本发明,但应当理解,本发明旨在覆盖以下权利要求范围之内的所有修改形式和等同形式。例如,以上所识别的标准或上下文属性的列表并不意味着是穷尽的或具有限制性。在一些其它实施例中,可使用比上述更多或更少的标准。另外,使用各种标准的方式在实施例之间也可改变。例如,在一个实施例中,每个标准可独立于其它标准来使用以识别用于键盘语言切换或功能启用等的零个或多个可能的语言候选。在此类实施例中,可根据针对每个标准所执行的分析来识别一组零个或多个语言候选。在另一个实施例中,两个或更多个准则可结合来识别候选语言。基于标准的处理可并行地、以串行化方式或以它们的组合来执行。
各种实施例不限于某些具体数据处理环境中的操作,而是可自由地在多个数据处理环境中进行操作。各种修改形式和等同形式在以下权利要求书的范围内。

Claims (46)

1.一种方法,包括:
由电子设备经由对应于第一语言的第一键盘来接收用户输入;
由所述电子设备基于所述用户输入来确定一组上下文属性;
由所述电子设备基于所述一组上下文属性来确定第二语言,其中所述第二语言不同于所述第一语言;以及
响应于确定所述第二语言,加载对应于所述第二语言的第二键盘。
2.根据权利要求1所述的方法,其中所述用户输入包括下列中的至少一者:在应用程序中发起与接收人的交流或发起撰写。
3.根据权利要求1-2中任一项所述的方法,其中所述一组上下文属性是响应于经由对应于所述第一语言的所述第一键盘接收到所述用户输入来确定的。
4.根据权利要求1-3中任一项所述的方法,其中所述一组上下文属性包括以下中的至少一者:接收到所述用户输入的时间、所述电子设备的位置、在所述用户输入中识别的接收人、所述用户输入的内容、由所述电子设备的用户对语言的先前使用、或当前加载在所述电子设备上的对应于不同语言的键盘。
5.根据权利要求1-4中任一项所述的方法,还包括:
响应于确定所述第二语言来启用与所述第二语言的词典相关联的功能,其中所述功能包括自动校正功能或自动完成功能中的至少一者。
6.一种用程序指令编码的计算机可读存储介质,所述程序指令在被执行时使得电子设备中的处理器执行一种方法,所述方法包括:
经由对应于第一语言的第一键盘来接收用户输入;
基于所述用户输入来确定一组上下文属性;
基于所述一组上下文属性来确定第二语言,其中所述第二语言不同于所述第一语言;以及
响应于确定所述第二语言,加载对应于所述第二语言的第二键盘。
7.根据权利要求6所述的计算机可读存储介质,还包括:
接收对消息的预期接收人的指定,其中所述一组上下文属性包括在所述预期接收人和所述电子设备的用户之间频繁使用的特定语言,其中所述第二语言被确定为所述特定语言。
8.根据权利要求6-7中任一项所述的计算机可读存储介质,还包括:接收用于激活电子邮件应用程序的指示,其中所接收的用户输入包括对电子邮件消息的预期接收人的电子邮件地址的指定。
9.根据权利要求6-8中任一项所述的计算机可读存储介质,还包括:
接收用于激活备忘录应用程序的指示,其中所接收的用户输入包括对记事的类别的识别,所述记事针对所述类别被撰写,其中所述一组上下文属性包括所述类别,并且所述第二语言包括所述类别中的大多数记事被撰写所使用的语言。
10.根据权利要求6-9中任一项所述的计算机可读存储介质,其中加载所述第二键盘包括以动画方式显示虚拟键盘显示从所述第一语言到所述第二语言的过渡。
11.一种电子设备,包括:
处理器;以及
与所述处理器进行通信的显示器,其中所述处理器被配置为:
经由对应于第一语言的第一键盘来接收用户输入;
基于所述用户输入来确定一组上下文属性;
基于所述一组上下文属性来确定第二语言,其中所述第二语言不同于所述第一语言;以及
响应于确定所述第二语言,加载对应于所述第二语言的第二键盘。
12.根据权利要求11所述的电子设备,其中所述处理器被进一步配置为:
响应于确定所述第二语言,将所接收的使用所述第一语言的用户输入转变成所述第二语言。
13.根据权利要求11-12中任一项所述的电子设备,其中所述处理器被进一步配置为:
响应于接收到用户指示,重新加载对应于所述第一语言的所述第一键盘。
14.根据权利要求11-13中任一项所述的电子设备,其中所述用户输入包括对多个接收人的指定,其中所述一组上下文属性包括由所述多个接收人中的每个接收人所讲的语言,并且其中确定所述第二语言包括确定由所述多个接收人中的每个接收人通常所讲的特定语言。
15.根据权利要求11-14中任一项所述的电子设备,其中所述用户输入识别预期接收人,其中所述一组上下文属性包括在所述预期接收人和所述电子设备的用户的交流历史中用于在他们之间进行交流的语言,并且其中对所述第二语言进行确定是基于所述用户和所述预期接收人之间最频繁使用的语言。
16.一种方法,包括:
由电子设备经由对应于第一语言的第一键盘来接收用户输入;
由所述电子设备基于所述用户输入来确定一组上下文属性;
由所述电子设备基于所述一组上下文属性来确定第二语言,其中所述第二语言不同于所述第一语言;
以及响应于确定所述第二语言,启用与所述第二语言的词典相关联的功能。
17.根据权利要求16所述的方法,还包括提供用于将所述用户输入从所述第一语言转换成所述第二语言的建议。
18.根据权利要求16-17中任一项所述的方法,其中与所述词典相关联的所述功能包括下列中的至少一者:使用所述第二语言进行的自动校正功能或使用所述第二语言进行的自动完成功能。
19.根据权利要求16-18中任一项所述的方法,其中所述用户输入包括对预期接收人的识别,并且其中所述一组上下文属性包括与所述预期接收人相关联的一组语言。
20.根据权利要求19所述的方法,其中与所述预期接收人相关联的所述一组语言是经由所述电子设备的用户的通讯簿来确定的。
21.一种用程序指令编码的计算机可读存储介质,所述程序指令在被执行时使得电子设备中的处理器执行一种方法,所述方法包括:
经由对应于第一语言的键盘来接收用户输入;
基于所述用户输入来确定一组上下文属性;
基于所述一组上下文属性来确定第二语言,其中所述第二语言不同于所述第一语言;以及
响应于确定所述第二语言,启用与所述第一语言的词典和所述第二语言的词典相关联的自动完成功能或自动校正功能中的至少一者。
22.根据权利要求21所述的计算机可读存储介质,其中所述方法还包括:
在阈值时间段之后,禁用与所述第一语言的所述词典相关联的自动完成功能或自动校正功能中的至少一者。
23.根据权利要求21-22中任一项所述的计算机可读存储介质,其中所述方法还包括:
响应于确定所述第二语言,进一步启用与所述第一语言的词典和所述第二语言的词典相关联的拼写检查功能。
24.根据权利要求21-23中任一项所述的计算机可读存储介质,其中所述用户输入为第一用户输入并且其中所述键盘为第一键盘,其中所述方法还包括:
响应于经由对应于所述第二语言的第二键盘接收到第二用户输入来加载用于所述第二语言的词典。
25.根据权利要求21-24中任一项所述的计算机可读存储介质,其中所述第一语言为英语并且所述第二语言为普通话。
26.一种电子设备,包括:
处理器;以及
与所述处理器进行通信的显示器,其中所述处理器被配置为:
经由对应于第一语言的键盘来接收用户输入;
基于所述用户输入来确定一组上下文属性;
基于所述一组上下文属性来确定第二语言,其中所述第二语言不同于所述第一语言;以及
响应于确定所述第二语言,激活与所述第二语言的词典相关联的功能。
27.根据权利要求26所述的电子设备,其中所述处理器被进一步配置为:
提供将所述用户输入从所述第一语言转换成所述第二语言的建议。
28.根据权利要求26-27中任一项所述的电子设备,其中与所述第一语言的词典相关联的功能被同时激活。
29.根据权利要求26-28中任一项所述的电子设备,其中所述键盘为第一键盘,并且其中所述处理器被进一步配置为:
经由对应于所述第二语言的第二键盘来接收另一用户输入,其中所述一组上下文属性包括所述第二语言。
30.根据权利要求26-29中任一项所述的电子设备,其中在激活与所述第二语言的所述词典相关联的功能时,去激活与所述第一语言的词典相关联的功能。
31.一种方法,包括:
由电子设备从用户接收音频输入;
由所述电子设备确定与所述用户或所述电子设备中的至少一者相关联的一组上下文属性;
由所述电子设备基于所述一组上下文属性来识别语言;以及
由所述电子设备来提供使用所识别的语言进行的所述音频输入的文本表示。
32.根据权利要求31所述的方法,其中所述一组上下文属性包括以下中的至少一者:所述用户的地理位置、由所述用户所讲的一组语言、由所述用户所讲的主要语言、与所述用户相关联的口音、或所述电子设备上的活动的语言键盘。
33.根据权利要求31-32中任一项所述的方法,还包括:
以第一捕获速率来捕获所述音频输入;以及
响应于识别所述语言,以与所识别的语言相关联的第二捕获速率来捕获所述音频输入。
34.根据权利要求31-33中任一项所述的方法,其中以周期性间隔来接收所述音频输入。
35.根据权利要求31-34中任一项所述的方法,还包括:
由所述电子设备来提供将所述文本表示转换成与所述用户相关联的另一种语言的建议。
36.一种用程序指令编码的计算机可读存储介质,所述程序指令在被执行时使得电子设备中的处理器执行一种方法,所述方法包括:
从用户接收音频输入;
确定与所述用户或所述电子设备中的至少一者相关联的一组上下文属性;
基于所述一组上下文属性来识别与所述音频输入相关联的语言;以及
提供使用所识别的语言进行的所述音频输入的文本表示。
37.根据权利要求36所述的计算机可读存储介质,其中所述方法还包括:
在一定时间段内邻近所述文本表示中的一个或多个词来提供一组用户界面项目,所述一组用户界面项目表示一组建议。
38.根据权利要求37所述的计算机可读存储介质,其中所述一组建议包括用于校正所述文本表示中的一个或多个词的建议。
39.根据权利要求37-38中任一项所述的计算机可读存储介质,其中所述一组建议包括所述文本表示中的一个或多个词的转换建议,所述转换建议使用与所述用户相关联的语言。
40.根据权利要求37-39中任一项所述的计算机可读存储介质,其中所述一定时间段对应于所述文本表示的长度。
41.一种电子设备,包括:
处理器;以及
与所述处理器进行通信的显示器,其中所述处理器被配置为:
从用户接收音频输入;
确定与所述用户或所述电子设备中的至少一者相关联的一组上下文属性;
基于所述一组上下文属性来识别与所述音频输入相关联的语言;以及
提供使用所识别的语言进行的所述音频输入的文本表示。
42.根据权利要求41所述的电子设备,其中使用第一语言来接收所述音频输入,并且其中所提供的所述文本表示是所述音频输入从所述第一语言到所识别的语言的转换。
43.根据权利要求41-42中任一项所述的电子设备,其中所述音频输入包括语音命令。
44.根据权利要求43所述的电子设备,其中所述语音命令指示所述处理器来转换所述文本表示的一部分。
45.一种用程序指令编码的计算机可读存储介质,所述程序指令在被执行时使得电子设备中的处理器执行根据权利要求1-5、16-20和31-35所述方法中的任一方法。
46.一种电子设备,包括:
处理器;以及
与所述处理器进行通信的显示器,其中所述处理器被配置为执行根据权利要求1-5、16-20和31-35所述方法中的任一方法。
CN201380040776.XA 2012-08-01 2013-07-29 基于动态上下文的语言确定 Pending CN104509080A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261678441P 2012-08-01 2012-08-01
US61/678,441 2012-08-01
US13/886,959 US20140035823A1 (en) 2012-08-01 2013-05-03 Dynamic Context-Based Language Determination
US13/886,959 2013-05-03
PCT/US2013/052558 WO2014022306A2 (en) 2012-08-01 2013-07-29 Dynamic context-based language determination

Publications (1)

Publication Number Publication Date
CN104509080A true CN104509080A (zh) 2015-04-08

Family

ID=50024973

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380040776.XA Pending CN104509080A (zh) 2012-08-01 2013-07-29 基于动态上下文的语言确定

Country Status (6)

Country Link
US (1) US20140035823A1 (zh)
EP (1) EP2880845A2 (zh)
CN (1) CN104509080A (zh)
AU (1) AU2013296732A1 (zh)
HK (2) HK1208768A1 (zh)
WO (1) WO2014022306A2 (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106293035A (zh) * 2015-06-12 2017-01-04 联想(北京)有限公司 一种操作输入方法及电子设备
CN106326205A (zh) * 2015-06-19 2017-01-11 珠海金山办公软件有限公司 一种拼写检查方法及装置
CN109445886A (zh) * 2018-09-05 2019-03-08 百富计算机技术(深圳)有限公司 一种界面显示方法、系统及终端设备
CN110050303A (zh) * 2016-12-07 2019-07-23 谷歌有限责任公司 基于第三方代理内容的语音到文本转换
CN110442405A (zh) * 2018-05-02 2019-11-12 深圳Tcl数字技术有限公司 一种浏览器自动匹配软键盘的方法、存储介质及智能终端
CN112041791A (zh) * 2018-05-10 2020-12-04 华为技术有限公司 一种显示输入法虚拟键盘的方法及终端
CN112148132A (zh) * 2019-06-28 2020-12-29 北京搜狗科技发展有限公司 一种信息设置方法、装置和电子设备
CN112835661A (zh) * 2019-11-25 2021-05-25 奥迪股份公司 车载辅助系统、包括其的车辆及相应的方法和介质
CN116034371A (zh) * 2020-06-10 2023-04-28 奥兰治 用于以第一语言在终端上输入消息并从第二语言翻译段落的方法

Families Citing this family (188)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8074172B2 (en) 2007-01-05 2011-12-06 Apple Inc. Method, system, and graphical user interface for providing word recommendations
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US20120311585A1 (en) 2011-06-03 2012-12-06 Apple Inc. Organizing task items that represent tasks to perform
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US8928591B2 (en) * 2011-06-30 2015-01-06 Google Inc. Techniques for providing a user interface having bi-directional writing tools
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
KR101393794B1 (ko) 2012-08-17 2014-05-12 주식회사 팬택 입력기의 종류를 결정하는 단말기 및 방법
US9218333B2 (en) * 2012-08-31 2015-12-22 Microsoft Technology Licensing, Llc Context sensitive auto-correction
US20140145962A1 (en) * 2012-11-15 2014-05-29 Intel Corporation Recipient-aware keyboard language
US9880736B2 (en) * 2012-12-03 2018-01-30 Facebook, Inc. Systems and methods for determining a symbol input by a user from two sets of symbols on a multi-layer keyboard
US9411510B2 (en) * 2012-12-07 2016-08-09 Apple Inc. Techniques for preventing typographical errors on soft keyboards
DE212014000045U1 (de) 2013-02-07 2015-09-24 Apple Inc. Sprach-Trigger für einen digitalen Assistenten
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
KR102088909B1 (ko) * 2013-03-15 2020-04-14 엘지전자 주식회사 이동 단말기 및 그의 변형 키패드 운용방법
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US9158482B2 (en) * 2013-04-29 2015-10-13 Hewlett-Packard Development Company, L.P. Recommending and installing scheduled delivery print applications
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
DE112014002747T5 (de) 2013-06-09 2016-03-03 Apple Inc. Vorrichtung, Verfahren und grafische Benutzerschnittstelle zum Ermöglichen einer Konversationspersistenz über zwei oder mehr Instanzen eines digitalen Assistenten
US9465985B2 (en) 2013-06-09 2016-10-11 Apple Inc. Managing real-time handwriting recognition
US9110561B2 (en) * 2013-08-12 2015-08-18 Apple Inc. Context sensitive actions
KR20150026338A (ko) * 2013-09-02 2015-03-11 엘지전자 주식회사 이동 단말기
US10055103B1 (en) * 2013-10-21 2018-08-21 Google Llc Text entry based on persisting actions
US20150121282A1 (en) * 2013-10-30 2015-04-30 International Business Machines Corporation Dynamic virtual keyboard responsive to geographic location
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
KR20150067489A (ko) * 2013-12-10 2015-06-18 삼성전자주식회사 전자 장치에서 입력기 제공 방법 및 장치
US20150177847A1 (en) * 2013-12-23 2015-06-25 Google Inc. Techniques for resolving keyboard and input method ambiguity on computing devices
US20170060413A1 (en) * 2014-02-21 2017-03-02 Drnc Holdings, Inc. Methods, apparatus, systems, devices and computer program products for facilitating entry of user input into computing devices
CN103905590B (zh) * 2014-04-22 2018-03-06 锤子科技(北京)有限公司 移动设备及其拨号面板
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
EP3149728B1 (en) 2014-05-30 2019-01-16 Apple Inc. Multi-command single utterance input method
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9524293B2 (en) * 2014-08-15 2016-12-20 Google Inc. Techniques for automatically swapping languages and/or content for machine translation
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
JP6618246B2 (ja) * 2014-09-30 2019-12-11 キヤノン株式会社 情報処理装置、表示方法、及びコンピュータプログラム
KR20160046099A (ko) * 2014-10-20 2016-04-28 삼성전자주식회사 전자장치에서 표시 제어 방법 및 장치
CN106796586A (zh) * 2014-12-30 2017-05-31 哈曼国际工业有限公司 基于语音识别的拨号
US9727797B2 (en) * 2015-03-05 2017-08-08 International Business Machines Corporation Techniques for rotating language preferred orientation on a mobile device
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9791942B2 (en) * 2015-03-31 2017-10-17 International Business Machines Corporation Dynamic collaborative adjustable keyboard
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US20170031897A1 (en) * 2015-07-31 2017-02-02 Lenovo (Singapore) Pte. Ltd. Modification of input based on language content background
US9753915B2 (en) 2015-08-06 2017-09-05 Disney Enterprises, Inc. Linguistic analysis and correction
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
KR102420518B1 (ko) * 2015-09-09 2022-07-13 삼성전자주식회사 자연어 처리 시스템, 자연어 처리 장치, 자연어 처리 방법 및 컴퓨터 판독가능 기록매체
US9665567B2 (en) * 2015-09-21 2017-05-30 International Business Machines Corporation Suggesting emoji characters based on current contextual emotional state of user
US10235354B2 (en) * 2015-10-12 2019-03-19 Sugarcrm Inc. Context sensitive user dictionary utilization in text input field spell checking
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US9930168B2 (en) 2015-12-14 2018-03-27 International Business Machines Corporation System and method for context aware proper name spelling
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US20190004665A1 (en) * 2015-12-28 2019-01-03 Thomson Licensing Apparatus and method for altering a user interface based on user input errors
US20170293891A1 (en) * 2016-04-12 2017-10-12 Linkedin Corporation Graphical output of characteristics of person
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10592601B2 (en) * 2016-06-10 2020-03-17 Apple Inc. Multilingual word prediction
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179329B1 (en) 2016-06-12 2018-05-07 Apple Inc Handwriting keyboard for monitors
US20180032499A1 (en) * 2016-07-28 2018-02-01 Google Inc. Automatically Generating Spelling Suggestions and Corrections Based on User Context
US11016576B2 (en) * 2016-08-16 2021-05-25 Finetune Technologies Ltd. Reverse keyboard assembly
US11016661B2 (en) * 2016-08-16 2021-05-25 Finetune Technologies Ltd. Device and method for displaying changeable icons on a plurality of display zones of a reverse keyboard assembly
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10430042B2 (en) 2016-09-30 2019-10-01 Sony Interactive Entertainment Inc. Interaction context-based virtual reality
US10104221B2 (en) * 2016-09-30 2018-10-16 Sony Interactive Entertainment Inc. Language input presets for messaging
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
JP6594359B2 (ja) * 2017-01-31 2019-10-23 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
US10747427B2 (en) 2017-02-01 2020-08-18 Google Llc Keyboard automatic language identification and reconfiguration
WO2018176365A1 (en) 2017-03-31 2018-10-04 Orange Method for displaying a virtual keyboard on a mobile terminal screen
US11228549B2 (en) * 2017-04-14 2022-01-18 International Business Machines Corporation Mobile device sending format translation based on message receiver's environment
US10635298B2 (en) * 2017-04-18 2020-04-28 Xerox Corporation Systems and methods for localizing a user interface based on a pre-defined phrase
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10324537B2 (en) * 2017-05-31 2019-06-18 John Park Multi-language keyboard system
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US11263399B2 (en) 2017-07-31 2022-03-01 Apple Inc. Correcting input based on user context
WO2019028352A1 (en) * 2017-08-04 2019-02-07 Walmart Apollo, Llc LANGUAGE LOCALIZATION SYSTEM
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) * 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US10915183B2 (en) * 2018-03-30 2021-02-09 AVAST Software s.r.o. Automatic language selection in messaging application
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10860804B2 (en) 2018-05-16 2020-12-08 Microsoft Technology Licensing, Llc Quick text classification model
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US10867130B2 (en) * 2018-05-31 2020-12-15 Microsoft Technology Licensing, Llc Language classification system
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11386266B2 (en) * 2018-06-01 2022-07-12 Apple Inc. Text correction
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US11076039B2 (en) 2018-06-03 2021-07-27 Apple Inc. Accelerated task performance
KR102592044B1 (ko) * 2018-06-29 2023-10-23 삼성전자 주식회사 전자 장치에서 물리적 키보드의 레이아웃 설정 방법 및 장치
US11089147B2 (en) * 2018-06-29 2021-08-10 Google Llc Systems, devices, and methods for generating messages
US10885273B2 (en) 2018-08-06 2021-01-05 Samsung Electronics Co., Ltd. Method and system simplifying the input of symbols used as a pair within a user interface
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
WO2020113031A1 (en) * 2018-11-28 2020-06-04 Google Llc Training and/or using a language selection model for automatically determining language for speech recognition of spoken utterance
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11475884B2 (en) * 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11194467B2 (en) 2019-06-01 2021-12-07 Apple Inc. Keyboard management user interfaces
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11238221B2 (en) * 2019-06-19 2022-02-01 Microsoft Technology Licensing, Llc Language profiling service
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
CN114902641A (zh) * 2019-10-24 2022-08-12 黑莓有限公司 用于用户设备中的字符显示的方法和系统
CN113014986A (zh) * 2020-04-30 2021-06-22 北京字节跳动网络技术有限公司 互动信息处理方法、装置、设备及介质
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
WO2021232175A1 (en) * 2020-05-16 2021-11-25 Citrix Systems, Inc. Input method language determination
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
US11657817B2 (en) * 2020-10-16 2023-05-23 Google Llc Suggesting an alternative interface when environmental interference is expected to inhibit certain automated assistant interactions
US20220122613A1 (en) * 2020-10-20 2022-04-21 Toyota Motor Engineering & Manufacturing North America, Inc. Methods and systems for detecting passenger voice data
JP2022141344A (ja) * 2021-03-15 2022-09-29 株式会社リコー 表示装置、表示方法、プログラム
WO2022241640A1 (en) * 2021-05-18 2022-11-24 Citrix Systems, Inc. A split keyboard with different languages as input
US20230162721A1 (en) * 2021-11-19 2023-05-25 International Business Machines Corporation Dynamic language selection of an ai voice assistance system
EP4224358A1 (en) * 2022-02-08 2023-08-09 Koa Health B.V. Sucursal en España Method and system for a more accurate autocomplete mechanism
US11880511B1 (en) * 2023-01-30 2024-01-23 Kiloma Advanced Solutions Ltd Real-time automatic multilingual input correction

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1975715A (zh) * 2005-11-30 2007-06-06 国际商业机器公司 用于对消息应用中收到的文本消息编写回复的方法和系统
CN101105722A (zh) * 2006-07-14 2008-01-16 摩托罗拉公司 用于输入多种语言的文本的方法
US20080077393A1 (en) * 2006-09-01 2008-03-27 Yuqing Gao Virtual keyboard adaptation for multilingual input
CN102279652A (zh) * 2010-06-11 2011-12-14 宏达国际电子股份有限公司 电子装置与其输入方法
CN103959206A (zh) * 2011-12-08 2014-07-30 英特尔公司 用于动态适应虚拟键盘的方法和装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2395029A (en) * 2002-11-06 2004-05-12 Alan Wilkinson Translation of electronically transmitted messages
KR101405284B1 (ko) * 2006-12-20 2014-06-10 삼성전자 주식회사 화상형성장치 및 그 다국어 자판 표시방법
US20120068937A1 (en) * 2010-09-16 2012-03-22 Sony Ericsson Mobile Communications Ab Quick input language/virtual keyboard/ language dictionary change on a touch screen device
US20120304124A1 (en) * 2011-05-23 2012-11-29 Microsoft Corporation Context aware input engine
US9819786B2 (en) * 2012-12-05 2017-11-14 Facebook, Inc. Systems and methods for a symbol-adaptable keyboard

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1975715A (zh) * 2005-11-30 2007-06-06 国际商业机器公司 用于对消息应用中收到的文本消息编写回复的方法和系统
CN101105722A (zh) * 2006-07-14 2008-01-16 摩托罗拉公司 用于输入多种语言的文本的方法
US20080077393A1 (en) * 2006-09-01 2008-03-27 Yuqing Gao Virtual keyboard adaptation for multilingual input
CN102279652A (zh) * 2010-06-11 2011-12-14 宏达国际电子股份有限公司 电子装置与其输入方法
CN103959206A (zh) * 2011-12-08 2014-07-30 英特尔公司 用于动态适应虚拟键盘的方法和装置

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106293035A (zh) * 2015-06-12 2017-01-04 联想(北京)有限公司 一种操作输入方法及电子设备
CN106293035B (zh) * 2015-06-12 2019-03-29 联想(北京)有限公司 一种操作输入方法及电子设备
CN106326205B (zh) * 2015-06-19 2019-05-31 珠海金山办公软件有限公司 一种拼写检查方法及装置
CN106326205A (zh) * 2015-06-19 2017-01-11 珠海金山办公软件有限公司 一种拼写检查方法及装置
US11922945B2 (en) 2016-12-07 2024-03-05 Google Llc Voice to text conversion based on third-party agent content
CN110050303A (zh) * 2016-12-07 2019-07-23 谷歌有限责任公司 基于第三方代理内容的语音到文本转换
US11626115B2 (en) 2016-12-07 2023-04-11 Google Llc Voice to text conversion based on third-party agent content
CN110050303B (zh) * 2016-12-07 2023-08-22 谷歌有限责任公司 基于第三方代理内容的语音到文本转换
CN110442405A (zh) * 2018-05-02 2019-11-12 深圳Tcl数字技术有限公司 一种浏览器自动匹配软键盘的方法、存储介质及智能终端
CN112041791A (zh) * 2018-05-10 2020-12-04 华为技术有限公司 一种显示输入法虚拟键盘的方法及终端
US11681432B2 (en) 2018-05-10 2023-06-20 Honor Device Co., Ltd. Method and terminal for displaying input method virtual keyboard
CN112041791B (zh) * 2018-05-10 2022-05-27 荣耀终端有限公司 一种显示输入法虚拟键盘的方法及终端
CN109445886A (zh) * 2018-09-05 2019-03-08 百富计算机技术(深圳)有限公司 一种界面显示方法、系统及终端设备
CN112148132A (zh) * 2019-06-28 2020-12-29 北京搜狗科技发展有限公司 一种信息设置方法、装置和电子设备
CN112835661A (zh) * 2019-11-25 2021-05-25 奥迪股份公司 车载辅助系统、包括其的车辆及相应的方法和介质
CN116034371A (zh) * 2020-06-10 2023-04-28 奥兰治 用于以第一语言在终端上输入消息并从第二语言翻译段落的方法

Also Published As

Publication number Publication date
WO2014022306A3 (en) 2014-03-27
WO2014022306A2 (en) 2014-02-06
AU2013296732A1 (en) 2015-02-12
US20140035823A1 (en) 2014-02-06
HK1209252A1 (zh) 2016-03-24
EP2880845A2 (en) 2015-06-10
HK1208768A1 (zh) 2016-03-11

Similar Documents

Publication Publication Date Title
CN104509080A (zh) 基于动态上下文的语言确定
US11669752B2 (en) Automatic actions based on contextual replies
KR102610481B1 (ko) 전자 디바이스 상의 수기 입력
NL2017005B1 (en) Canned answers in messages
CN107491181B (zh) 语言输入的动态短语扩展
CN107636568B (zh) 个性化预测对即时消息的响应
KR101838811B1 (ko) 키보드 인터페이스 기능성을 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
US20140025371A1 (en) Method and apparatus for recommending texts
US20090225041A1 (en) Language input interface on a device
US20090225034A1 (en) Japanese-Language Virtual Keyboard
KR20160009054A (ko) 연속적인 제스쳐 입력을 위한 복수의 그래픽 키보드들
WO2017176513A1 (en) Generating and rendering inflected text
US11086410B2 (en) Apparatus for text entry and associated methods
CN113795819A (zh) 用于删除键手势以及在触敏键盘处提供连续路径手势的系统和方法
KR20130016867A (ko) 민감한 단어를 표시할 수 있는 사용자 단말,및 사용자 단말의 민감한 단어 표시 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1209252

Country of ref document: HK

C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20150408

REG Reference to a national code

Ref country code: HK

Ref legal event code: WD

Ref document number: 1209252

Country of ref document: HK