CN105580004A - 提供语言帮助的输入方法编辑器 - Google Patents

提供语言帮助的输入方法编辑器 Download PDF

Info

Publication number
CN105580004A
CN105580004A CN201380078787.7A CN201380078787A CN105580004A CN 105580004 A CN105580004 A CN 105580004A CN 201380078787 A CN201380078787 A CN 201380078787A CN 105580004 A CN105580004 A CN 105580004A
Authority
CN
China
Prior art keywords
suggestion
word
ime
user
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380078787.7A
Other languages
English (en)
Inventor
K·井
M·R·斯科特
W·刘
M·李
J·石
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN105580004A publication Critical patent/CN105580004A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • G06F9/453Help systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/12Use of codes for handling textual entities
    • G06F40/126Character encoding
    • G06F40/129Handling non-Latin characters, e.g. kana-to-kanji conversion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/232Orthographic correction, e.g. spell checking or vowelisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/274Converting codes to words; Guess-ahead of partial word inputs
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/04Speaking
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/06Foreign languages

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Artificial Intelligence (AREA)
  • Computational Linguistics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Human Computer Interaction (AREA)
  • Machine Translation (AREA)
  • Stored Programmes (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

公开了被配置为在多个应用当中提供语言帮助的输入方法编辑器(IME)。在一个示例中,IME适合于由英语作为非母语(ESL)的用户使用。在特定的示例中,可以通过首先检测向在应用内打字的用户提供建议的需要来提供语言帮助。检测可以基于当前字有差错的概率。如果检测到需要,则可以例如从云语言服务或如果网络连接很差,从本地词典和语言模型获得对字的建议。一旦被获得,建议就可以用非干扰方式由用户界面元素显示给用户。与用户的交互允许用户接受或拒绝建议,或执行其它功能,例如,重新安置显示器所利用的用户界面元素。

Description

提供语言帮助的输入方法编辑器
背景技术
现今,输入方法编辑器(IME)可以用于使用常规键盘将非拉丁字符(例如,汉字字符)输入到计算机程序中。IME是相当大一部分东亚用户的不可以缺少的工具。IME也可以提供英文模式,其中为创建英文语言文档的非本国用户提供帮助。在英文模式中,响应于有问题的用户打字,可以提供英文帮助,例如,字或拼写建议。帮助也可以包括自动拼写校正、多字选择建议和/或预期字建议等。不幸的是,已知的IME是干扰的,并且倾向于利用不需要的建议使用户心烦意乱。当建议被需要时开启和关闭这样的IME很麻烦。而且,已知IME的用户界面(UI)是灵活的,并且不允许用户最佳地控制IME的干扰。
发明内容
公开了提供语言帮助并且操作输入方法编辑器(IME)的技术。IME可以被配置为在多个应用当中提供语言帮助。在一个示例中,IME可以适合于由英语作为非母语(ESL)的用户使用。在特定的示例中,可以通过首先检测向在应用内打字的用户提供建议的需要来提供语言帮助。建议可以包括替代字、替代拼写或替代语法。检测可以基于当前字或字使用有差错的概率。如果对建议的需要被检测到,则可以获得对字的建议。建议可以基于来自云语言服务(CLS)的输入。如果网络连接是不可用的,则本地词典和/或语言模型可以用于获得建议。一旦被获得,建议就可以向用户进行显示。显示可以包括可调节的用户界面元素,其允许用户当不需要时使用户界面的干扰性最小化。IME可以提供与用户进行交互的机会。例如,交互可以允许用户接受或拒绝建议,或将建议复制到剪贴板以用于由多个应用使用。交互可以允许用户重新安置或使用户界面元素最小化。
提供本概述来以简化形式介绍下面在详细描述中进一步描述的一系列概念。该概述并不是要识别所要求保护的主题的关键特征或本质特征,也不是要用作帮助确定所要求保护的主题的范围。术语“技术”例如可以指如由上面的上下文和在整个文档中指示的设备、系统、方法和/或计算机可读指令。
附图说明
参考附图来描述详细描述。在附图中,附图标记的最左边数位标识该附图标记首次出现的附图。相同的数字在全部附图中用于引用相似的特征和部件。而且,附图是要示出一般概念,并且不指示所需和/或必要的元件。
图1是示出了具有示例输入方法编辑器(IME)的客户端设备的框图。
图2示出了在IME内的功能的示例划分。
图3示出了IME的示例用户界面。
图4示出了包括IME条的用户界面的另一示例。
图5是示出了IME的操作的示例方法的流程图,包括用于检测、建议、显示和交互的技术。
图6是示出了几种示例检测技术的流程图。
图7是示出了几种示例建议技术的流程图。
图8是示出了几种示例显示技术的流程图。
图9是示出了几种示例交互技术的流程图。
具体实施方式
概述
本公开描述了被配置为提供在多个应用当中的语言帮助的输入方法编辑器(IME)的操作的技术。在一个示例中,IME提供可调节的用户界面,其如果需要则可以变得不干扰,以减少用户的认知过载。IME可以适合于由英语作为非母语(ESL)的用户使用。在一个示例中,可以通过检测向在应用内打字的用户来建议替代字的需要来提供语言帮助。检测可以基于当前字有差错的概率或打字的用户的困难的观察(打字速度、退格等)。如果检测到对帮助的需要,则可以获得对字的建议。如果网络连接不好,建议可以从云语言服务或从本地词典和/或语言模型获得。一旦被获得,建议就可以通过用户界面显示给用户。用户界面的方面可以由用户可调节,并且可以向用户特别提供不使用户从集中于打字和输入分心的非干扰信息。在建议之后,与用户的交互允许用户接受或拒绝建议,并且执行其它功能,例如,重新安置由显示器利用的用户界面元件。
示例系统和技术
图1是示出了示例系统100的框图,输入方法编辑器(IME)可以在示例系统100内操作。在系统100的示例中,客户端设备102可以通过网络104(例如,内联网、广域网(WAN)、互联网等)与云语言服务106连接。云语言服务106被示为单个实体;然而,服务可以由多个实体、组织、公司等提供。
在一个示例中,客户端设备102可以包括与一个或多个存储器设备110通信的一个或多个处理器108。网络连接112可以提供网络104的接口。客户端设备102可以包括一个或多个外围设备和/或与一个或多个外围设备通信。外围设备的第一示例——显示器114——可以作为具有触摸屏的输入和输出外围设备或作为没有触摸屏的输出外围设备来操作。因此,可以提供显示器114以接收触摸输入并且显现视觉输出。在外围设备116的第二示例中,输入外围设备可以包括硬和/或软键盘、鼠标或其它指示设备、麦克风和/或手势输入设备,例如,一个或多个摄像机或其它手势传感器。在外围设备118的第三示例中,输出外围设备可以包括一个或多个扬声器、打印机、辅助监视器或其它输出设备。
应用120可以被定义在存储器110内并且被配置用于由处理器108操作和/或执行。可以为了包括字处理和/或基于文本的数据输入的各种各样的目的来配置应用120。因此,应用120可以包括字处理器、互联网浏览器、电子邮件客户端或其它应用,用户可以在其内打字或输入文本。
在图1的示例中,IME可以被配置为以分立的方式提供语言帮助以避免或最小化对主要牵涉文本输入的用户和对具有文本纠错的较小程度的认知过载。在图1的示例中,IME可以包括输入方法编辑器动态链接库,例如IMEDLL122、IME平台过程124和建议呈现器126。IME还可以提供用户界面,其可以由建议呈现器126进行呈现以用于根据图3和/或4的示例经由显示器114来进行显现。
IMEDLL122可以被定义为“在过程中”,即在应用120内。IMEDLL122可以被配置为接收输入,例如,键击,并且将它们传递到IME平台过程124和应用120。
在图1的示例中,IME平台过程124被配置为接收一串输入字,检测错误是否存在以及克服错误的建议是否被指示,以处理候选建议(可以从多个本地和远程源),并且将建议作为输出传送给用户以用于考虑。IME平台过程124可以被定义为“在过程之外”,即位于与应用120被定义的地址范围分离并且不同于应用120被定义的存储器地址范围内。在至少一个实施方式中,IME平台过程124从IMEDLL122接收键击。使用键击,IME平台过程124执行检测过程,拼写、字使用、语法和其它错误通过该检测过程被发现。在检测到错误或问题后,IME平台过程124可以确定将帮助用户的建议。IME平台过程124管理显示功能,其中建议通过用户界面的操作以非干扰方式提供给用户。IME平台过程124也可以与用户交互,例如,用于接收用户对建议的接受或拒绝、或用于调节用户界面位置或操作,等等。
建议呈现器126可以被配置为提供并且管理用户界面,例如,在图3和/或4的示例中看到的。通过建议呈现器126的操作,语言帮助的特定实例可以被提供给用户。例如,建议呈现器126可以呈现通知窗口、IME条或其它用户界面图标、微件或显示等的文本或图形。建议呈现器126可以在IME平台过程124的方向处操作,并且也可以从用户接收输入和/或方向。例如,用户可选择优选选项用于语言帮助的显示。选项可以允许用户将用户界面元素(例如,通知窗口)定位在优选位置上。选项可以允许用户例如通过使界面的全部或部分特别是在它不被用户需要的时间期间最小化而减少由用户界面引起的分心。
图2示出了说明在图1的IME平台过程124内的功能的一个可能的划分的示例系统200。示例功能划分仅为了示例的目的,并且因此代表在本文的讨论的范围内的技术(未示出)。
检测技术202可以检测或识别与由用户输入到应用(例如,图1的应用120,其可以是字处理器或其它使用文本的应用)内的输入相关的语言问题。检测技术202可以被配置为从所拦截的键击流提取字作为在检测由用户导致的错误中的步骤。可以通过将字符或键击流分割成单独的字来执行字的提取。在一个示例中,IME平台过程124确定字边界(例如,通过标注空格字符或其它定界符),并且提取字作为用户类型。可以通过使用空格字符来分离文本、通过使用其它标点符号和/或通过使用适当的基于规则的方法来执行这样的分割(或“字断开”)功能和潜在错误的检测。
检测技术202可以被配置为检测或识别何时应当搜寻建议以找到在拼写、字使用、语法中可能的错误或其它语言问题。在所示示例中,可以从建议技术204A、204B搜寻建议,如将在后面讨论的。在一个实现中,IME可以是操作系统(例如,或另一操作系统)的部分。根据示例,字符(例如,从用户操作键盘产生的键击)可以由IME动态链接库(例如,图1的IMEDLL122)拦截。IMEDLL122可以加载到由用户操作的主机应用(例如,应用120)内并且被配置为从用户接受键盘输入。在示例操作中,IMEDLL122可以将键击字符转发到IME平台过程124,其可以被配置为在客户端设备102上运行的过程。作为用户类型,IME平台过程124可以继续监控字符(键击)。
检测技术202可以将以前键入的字维持在存储器中,例如,在IME平台过程124内或其它位置。这样的以前键入的字可以用于(例如,由IME平台过程124)从拼写、使用的上下文、语法和其它语言考虑因素方面确定当前字的适当性。
检测技术202可以利用测试或检查来确定是否需要建议来代替由用户键入的字。这样的测试可以基于由用户键入的字的正确性的概率,并且通过IME平台过程124拦截和识别。概率可以基于多种因素和测试,其可以由本地检查(例如在客户端设备102上执行)和远程检查(例如由云语言服务106执行)中的一个或两个执行。在本地检查的示例中,所拦截的字可以对照词典(例如字典)以及它出现在以前写入的(可能相邻的)字附近的可能性被检查。因此,可以检查字的序列,并且确定每个字是否是正确的和/或替代的建议是否是需要的。该确定可以至少部分地基于统计语言模型(例如,单构词模型、N构词模型等)。
检测技术202可以包括一个或多个统计语言模型,其可以在IME平台过程124上、在云语言服务106上或两者上操作。网络连接和速度的考虑可以用于确定是否应利用本地或云统计模型。通常,如果足够的网络速度和带宽是可用的,则应利用在云语言服务106上的统计语言模型。基于云的模型可以具有更大的词典、处理字序列的更好能力和就整体来说检测在拼写、字使用和/或语法中的错误的更好能力。在任一位置上可操作的统计语言模型可以利用因素(例如,来自词典(字典、字列表、技术词汇等)的输入、打字速度和/或退格或由用户做出的其它校正)来检测错误。
因此,可以使用基于IME的技术来执行检测技术202。使用这样的技术,IMEDLL122可以加载到在能够拦截在应用内的所有键击并且能够考虑特定的输入范围(字、字序列和/或字使用等)的配置中的每个应用内。基于IME的技术也允许键击以各种方式被处理,包括将所有处理转发到运行的应用、本地服务或外部服务。
可以结合非基于IME的机制以及以前描述的基于IME的机制来利用检测技术202。例如,由客户端设备的操作系统提供的应用编程接口(API)可以直接用于通过轮询或订阅全球事件来监控键击。
可以利用建议技术204A和204B来提供对具有高错误可能性的由检测技术202指示的字的建议或可选形式。建议技术可以包括基于远程的或云实现的建议技术204A和基于本地的建议技术204B。根据实现,可以用可选的、并行和/或补偿方式来操作建议技术204A和204B。在一个示例中,可以在云语言服务106内被基于的远程建议技术204A可以是建议的主要源。只有当网络连接不允许基于云的建议技术204A的使用时,才可以利用本地建议技术204B。在一些实施方式中,在云语言服务106中可获得的建议技术204A可以提供比从在IME平台过程124上操作的建议技术204B可获得的更大的容量和性能。特别是,由于在IME平台过程124上的云的计算优点,基于特定技术的建议技术在由基于云的建议技术204A提供时可能更有效。示例技术可以包括至少部分地基于单构词模型技术、N构词模型技术等的语言模型。基于云的字建议-产生资源可以被配置为用杠杆作用影响云的计算能力,包括更快的执行、大词典和在计算上复杂的算法,其实现可能在IME平台过程124上是不可能的。在额外的示例中,云语言服务106可以在多个基于云的服务或资源之间仲裁以收集候选建议来代替字错误。可以通过基于建议提供者的设计模式的比较、提供者使用的技术和那些模式如何与建议过程比较来执行仲裁。
在一个示例中,云语言服务106可以将待建议的候选项的有序列表返回给用户以代替由用户键入的字。从基于云的源获得的在列表上的建议可以从基于全球的统计语言模型获得并且按照它们的各自置信度分数来排列。IME平台过程124也可以从本地确定的建议候选项收集有序列表。基于本地的建议技术204B可以至少部分地基于在应用120(见图1中)内的用户特定个性化、以前的字使用、本地词典(其可以与应用120相关)和编辑距离算法的使用。
在其它示例中,代替字错误的候选建议可以是完全基于本地的或完全基于云的。在基于云的建议产生的一个示例中,建议可以从多个基于云的服务中查询并且被聚集在客户端上。在示例中,多个数据源(例如,基于云的统计语言模型、词典等)可以根据系统所需的速度而改变。在对照的示例中,单个云语言服务可以用作IME平台124的输入点。通常,通过减少数据源的数量,可以更快地获得错误字的候选建议。
示例用户界面
图3示出了包括具有字处理应用302的示例操作的示例用户界面300。在所示示例中,系统包括可以是客户端设备(例如,图1的客户端设备102)的部分的视觉显示器114。在图3的示例中,应用(例如,字处理器302)在视觉显示器114内提供用户界面窗口。用户能够使用键盘或其它输入外围设备将文本输入到字处理器302内。
由示例用户界面300所示的各种显示技术可以由建议呈现器126(如在图1中看到的)执行。显示技术可以包括接收和显示通过在IME平台过程124和/或云语言服务106上操作的建议技术的操作而获得的一个或多个候选建议。显示技术可以包括管理建议如何和何时可以被显示给用户的逻辑和规则。
用户可能拼错字、违反语法规则或否则输入指示用户将受益于帮助的文本。在图3的示例中,用户键入“fizix”——字“physics”的误拼的字。作为响应,通知窗口304例如通过图1的建议呈现器126的操作而打开。通知窗口304可以类似于“话语泡泡”或“气球”,并且可以包括可以用于指示与IME条308的相关性的尾部306。示例通知窗口304被配置为允许用户避免不想要的分心,并且可以提供关闭框310以当示例通知窗口304变成分心的事物时,允许用户移除用户界面的通知窗口304的部分。
在一个示例中,只显示用于代替检测到的错误字的单个最优选的建议。如果置信度分数大于建议是正确的门限值(例如,90%),则提供优选建议。此外,如果用户键入被认为错误的字之后,优选建议可以在时间的门限时间段内获得,提供该优选建议。
通知窗口304可以提供对拼错的字、误用的字或语法错误等的建议312。三个示例表示建议可以由用户利用的方式。在第一示例中,用户可以点击命令314,以从而用建议312代替错误地键入的文本。在第二示例中,用户可以点击命令316以将所建议的改变复制到剪贴板。一旦在剪贴板上,就可以在任何应用中使用所建议的文本,并且如果选择了命令314则可以与未能正确地执行的应用一起使用。在第三示例中,用户可以通过将文本键入任何应用内来简单地复制在建议312处看见的文本。此外,用户可以通过命令318的操作来关闭英文帮助。
图4示出了由IME(例如图1的IME平台过程124)提供的用户界面的另一示例。用户界面可以包括适合于与在客户端设备上运行的多个不同的应用一起使用的IME条308。在所示示例中,通过英文指示器400和事件指示器402的添加来增强IME条308。英文指示器400向用户提供IME在“英文”模式中的提示。在英文模式内,用户可以用英文打字并且用英文创建文档。相应地,键入的字符简单地“穿过”IME(并且进入应用内)而没有由IME进行的行动,除非检测到潜在的错误。由IME进行的操作的可选模式可以由作为英文指示器402的可选形式的指示器(未示出)指示。在IME操作的可选模式的一个示例中,输入由键入“罗马”字母的用户提供,并且输出以不同语言(例如汉字字符)的符号被提供。
事件指示器402可以被配置为出现和/或在外观(例如颜色)上改变以指示事件。在一个示例中,事件指示器可以是感叹号或一般指示忧虑和/或紧急的其它符号。由事件指示器402指示的事件或问题可以包括在拼写、字使用、语法或由IME检查的其它方面的中的错误或潜在错误的检测。为了继续该示例,当事件指示器402出现(或在外观上改变)时,用户可以“鼠标移上”或否则选择事件指示器以从IME接收建议。建议可以由通知窗口304的出现或其它用户界面元素提供。因此,事件指示器402的选择可以导致通知窗口304的出现或内容中的变化。
示例方法
图5是示出了IME的操作的示例方法500的流程图。在一个示例中,IME操作在关于涉及文本的用户输入的应用的过程外。当用户输入文本时,键击由过程中IMEDLL传递到应用和IME平台过程。检测过程可以使用一种或多种技术来确定是否应针对由用户键入的字来搜寻所建议的替换。如果是,则建议过程可以使用一种或多种技术来选择和/或获得所建议的字以代替由用户键入的字。显示过程可以使用一种或多种技术来向用户显示所建议的字(例如,在具有不干扰的外观的用户界面中)。交互过程可以使用一种或多种技术来接收用户输入,例如,用于利用所建议的字或调节用户界面的外观。
在操作502,检测到建议一个字来代替由用户键入的字的需要。在一些实例中,检测响应于用户所键入的字被拼错的识别。可选地,检测可以从该字以语法上不正确的方式被使用或否则被误用的识别而产生。在图1和/或2的示例中,在IME平台过程124上操作的检测技术202可以执行检测功能。
在操作504,例如响应于对建议的需要的检测而获得对字的建议。可以通过网络和从基于云的资源(图1和2的云语言服务106)获得建议。可选地,可以在本地例如通过在客户端设备102和/或IME平台过程124上操作的建议技术204B的操作而获得建议。在一个示例中,建议可以是正确拼写的字,对于其,存在与用户的预期含义相对应的高置信度水平。
在操作506,例如通过用户界面的操作来向用户显示建议。在一个示例中,IME平台过程124可以提供数据,并且连同建议呈现器126一起可以来显现建议。用户界面可以是不干扰的和/或可以由用户调节以控制它干扰在客户端设备上的应用的用户操作的程度。图3和图4示出了可以用于显示用于由用户考虑的建议的用户界面。
在操作508,用户可以与用户界面进行交互。在几个示例中,用户可以提供关于下列项的输入:检测过程,由此,发现建议是必要的;建议过程,通过其,获得替换字;显示过程,通过其,将替换字显现给用户;或如由IME提供和/或支持的反馈。在图3和图4的示例中,用户可以通过事件指示器402的点击或翻滚、对由通知窗口304提供的命令或选项的选择等与用户界面进行交互。
图6是示出了可以用于配置IME平台过程以检测对代替由用户键入的字的建议的需要的几种示例检测技术600的流程图。相应地,检测技术600中的一种或多种可以可选地用于执行图5的检测操作502的全部或部分。在操作602,可以记录应用例如从用户打字接收的字。可选地,可以从语音识别技术或另一文本输入方法获得所接收到的字。相应地,当检测到可能不正确地被拼写和/或使用的字时,可以在以前键入的字的上下文中进行该检测。在图2的示例中,检测技术202可以在IME平台过程124内记录字。所记录的字可用于语法、字上下文和使用等的目的。在操作604,可以计算由用户键入的字的正确性的概率。所计算的概率可以至少部分地基于以前记录的字。正确性的概率可以基于在客户端上的本地检查或在云中执行并且在客户端处接收的服务器侧检查。检查可以包括在本地词典或基于云的词典中对字的检查。概率可以基于远程或本地资源(例如云语言服务)的操作。资源可以包括统计语言模型的操作。在操作606,可以检查由用户键入的所记录的字的序列以提供由用户键入的当前字的上下文。检查可以在本地由IME平台过程124执行或在云中由一个或多个云语言服务106执行。在操作608,统计语言模型可以用于检测对建议的需要。这样的模型可以存在于IME平台过程124上,但是更大和更全面的模型可以存在于云语言服务106内。
在另一示例中,在操作610,在应用内通过过程中IME动态链接库(DLL)的操作来检测键击。在图1的示例中,IMEDLL122检测被传递到应用120的键击。在操作612,键击被转发到过程外IME平台过程。在图1的示例中,由IMEDLL122检测的键击也被传递到IME平台过程124。在操作614,打字速度、打字速度变化、退格字符的多次打字、重新打字和/或打字的停止可以由IME平台过程检测。当试图检测建议字代替由用户键入的字的需要时,这样的打字特征可以由在IME平台过程124上的检测技术202考虑。
在操作616,可以对一个或多个所接收的字执行基于本地和/或服务器的测试。可以使用基于本地和/或云的词典、统计语言模型和/或基于云的语言服务来执行测试。本地测试可以由IME平台过程124执行,并且基于云的测试可以由云语言服务106执行。可以在IME平台过程协调测试,和/或接收测试的结果。
图7是示出了可以用于配置IME平台过程以获得在代替由用户键入的字时使用的建议的几种示例建议技术的流程图。相应地,建议技术700的一种或多种可以可选地用于执行图5的操作504的全部或部分,其中建议是从基于IME的资源或基于云的资源获得的。在操作702的示例中,从在一个或多个基于云的服务之间仲裁的云语言服务(CLS)获得建议。相应地,可以使用多于一个服务,并且从结果当中做出选择。在操作704的示例中,从本地词典和/或本地或远程统计语言模型获得建议。建议可以至少部分地基于以前键入的字。在操作706的示例中,置信度分数可以用于确定是否显现所获得的建议。
在操作708的示例中,可以查询多个基于云的服务以找到校正候选项和所聚集的结果。结果可以由IME平台过程124(图1和图2)聚集。在一个示例中,可以查询基于云的服务以找到校正候选项和概率。概率中的每个可以形成为相关校正候选项是正确的置信度分数。
在操作710的示例中,IME可以确定由本地和远程(例如基于服务器或云的)资源使用来建议字替换的技术是否是类似的。在操作712,如果技术是类似的,则远程资源被利用。在一个示例中,IME平台和基于云的语言服务可以使用类似的统计语言模型,并且可以使用远程语言模型。云的计算能力可以使这个选择变得更可取。
在操作714的示例中,可以从被配置为收集对代替由用户键入的字的建议的候选项的云语言服务(CLS)获得建议。如果网络连接是足够的,则可以获得这样的建议。可选地,在操作716,如果网络连接不是足够的,则可以从本地词典和/或语言模型获得建议。
图8是示出了可以在用户界面内使用以显示如果通过建议技术获得的建议的几种示例显示技术800的流程图。相应地,显示技术800中的一种或多种可以可选地用于执行显示建议的图5的操作506的全部或部分。在操作802的示例中,作为对代替由用户键入的字的建议而获得的字可以通过使用用户界面技术(例如,通知气泡)显示建议而提供给用户。图3的通知气泡304是这样的显现的一个示例,但其它技术也在操作的范围内。在操作804的示例中,通知气泡可以显示在至少部分地基于IME条的位置的位置处。图3示出了通知气泡304可以通过尾部306附加到IME条308。IME条308或通知气泡304的移动可以导致这两者的移动,这取决于选定的配置、设置或设计。
在操作806的示例中,用户可以由IME监控以确定用户何时停止打字。如果用户停止打字,那可以是指示或权衡在用户的关于用户键入的一个或多个字的准确度的部分上的不确定性的因素。指示可能的用户混淆的其它因素可以包括减慢的打字、退格和/或删除、重新打字以及其它。在操作808,在用户停止打字之后,用户界面(例如,图3的通知气泡304)可以显示建议。通过等待直到用户停止或减慢打字过程,执行一个或多个退格和/或重新打字,用户界面较不可能用不必要的建议来干扰用户的想法。
在操作810的示例中,可以通过将通知气泡304绑定、固定或移动到由用户选择的位置来防止对用户的不需要的干扰。在操作812,字建议(例如通知气泡)的显示可以位于与IME条的相邻处。因此,用户可以将通知气泡和/或IME条移动到由于任何原因较不干扰和/或优选的、在显示器(例如视频显示屏、移动设备的显示器等)上的位置。在一些示例中,通知气泡304和IME条308一起移动(例如,由尾部306连接),并且在其它示例中它们是单独可移动的。
在操作814的示例中,可以响应于字建议是可用的指示器而将建议提供给用户。在图4的示例中,事件指示器402可以出现和/或以粗体、以彩色或在可识别的“活动”模式中出现。用户可以点击或鼠标移上事件指示器402,从而触发用户界面设备的出现,例如,通知气泡304。
在操作816的示例中,如果在建议中的置信度大于门限值,则可以显示对在字替换中使用的建议。在示例中,门限可以被设置在不干扰用户的水平处,除非用户错误的置信度水平相当高。
图9是示出了如果显示建议可以用于与用户交互的几种示例交互技术900的流程图。相应地,交互技术900中的一种或多种可以可选地用于执行图5的操作508的全部或部分,其中IME与用户进行交互。在操作902的示例中,可以从用户接收输入以利用所显示的建议。因此,用户指示所建议的字事实上应代替由用户键入的有问题的字。在图3的示例中,用户可选择命令314以用IME所建议的字代替由用户键入的有问题的字。
在操作904的示例中,IME可以对用户输入做出响应以移动IME条和/或通知气泡。在图3的示例中,通知气泡304和IME条308显示在视觉显示器114的下部分中。然而,如果用户期望,这些可以例如通过借助于触摸屏、鼠标或定点设备来进行手动操纵而移动到不同的位置。在操作906的示例中,用户界面元素的位置可以在用户的计算设备重启或重新引导时持续。在图1的示例中,IME平台过程124可以在客户端设备102的重新引导或重启时维持由图3和/或图4显示的用户界面元素的位置。在操作908的示例中,用户界面元素的位置可以是“漫游的(roamed)”或由用户所使用的其它机器利用。在特定的示例中,如果用户有具有类似的显示屏尺寸和/或分辨率的两个不同的客户端设备,则对一个设备的用户界面的任何变化也可以传输到其它设备和由其它设备利用。如果显示屏稍微不同,则对一个设备的变化可以用近似在其它设备的用户界面上的显现的方式映射到其它设备。
在操作910的示例中,IME可以从用户接受由IME做出的代替由用户键入的字的建议的拒绝。在操作912,响应于该拒绝,IME可以减小在未来在类似的情况下显现任何建议的可能性。在操作914,如果建议将在未来在类似的情况下被显现,IME可以减小显现被拒绝的建议的可能性。
如在本文使用的,“计算机可读介质”包括计算机存储介质和通信介质。计算机存储介质包括在用于存储信息的任何方法或技术中实现的易失性和非易失性、可移动和不可移动介质,例如,计算机可读指令、数据结构、程序模块或其它数据的。计算机存储介质包括但不限于随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程ROM(EEPROM)、闪速存储器或其它存储器技术、光盘ROM(CD-ROM)、数字通用盘(DVD)或其它光学存储装置、盒式磁带、磁带、磁盘存储器或其它磁性存储设备或可以用于存储由计算设备访问的信息的任何其它介质。相反,通信介质可以体现计算机可读指令、数据结构、程序模块或调制数据信号中的其它数据,例如,载波。如在本文定义的,计算机存储介质不包括通信介质。
结论
虽然用结构特征和/或方法行动特有的语言描述了主题,但是应理解,在所附权利要求中定义的主题不一定限于所描述的特定特征或行动。更确切地,特定的特征和行动被公开为实现权利要求的示例性形式。

Claims (20)

1.存储计算机可执行指令的一个或多个计算机可读介质,当被执行时,所述计算机可执行指令使一个或多个处理器执行行动,所述行动包括:
检测对用于帮助将字输入到应用内的建议的需要,所述检测包括:
访问被输入到所述应用内并且被记录的字;以及
至少部分地基于记录的字来计算所述字输入的正确性的概率;
如果由计算的概率指示,则获得对代替所述字的建议,所述获得包括:
从云语言服务(CLS)获得所述建议;
如果用于与所述CLS进行通信的网络容量被限制或是不存在的,则至少部分地基于以前输入到所述应用内的所述记录的字从本地词典或统计语言模型获得建议;以及
利用获得的建议的置信度分数来确定是否显现所述获得的建议;
如果由所述置信度分数指示,则提供所述获得的建议用于显示,所述提供包括:
在通知气泡内提供所述获得的建议以用于显示;以及
至少部分地基于输入方法编辑器(IME)条的位置来在一位置处提供所述通知气泡以用于显示;以及
响应于表示移动的输入而移动所述IME条和/或所述通知气泡。
2.如权利要求1所述的一个或多个计算机可读介质,其中,检测对所述建议的需要还包括:
检测打字速度、检测打字停止、检测多个退格、或检测由所述用户进行的重新打字。
3.如权利要求1所述的一个或多个计算机可读介质,其中,检测对所述建议的需要还包括:
通过过程内IME动态链接库(DLL)的操作来检测在应用内的键击;以及
将所述键击转发到过程外IME平台过程。
4.如权利要求1所述的一个或多个计算机可读介质,其中,计算所述字的正确性的概率是基于多个因素中的至少一个的,包括:
在客户端上的本地检查或在所述客户端处接收的服务器侧检查,所述检查包括分别在所述本地词典或基于云的词典中对所述字的检查;或
对用于提供所述字的上下文的所述记录的字的序列的细查。
5.如权利要求1所述的一个或多个计算机可读介质,其中,获得所述建议包括:
查询一个或多个基于云的服务以找到校正候选项和相关联的概率,每个相关联的概率表示相关联的校正候选项包括正确建议的置信度分数;
其中,所述CLS被配置为在多个基于云的服务之间仲裁以收集建议的候选项。
6.如权利要求1所述的一个或多个计算机可读介质,其中:
检测对所述建议的所述需要包括监控以确定文本输入何时停止;以及
提供所述建议以用于显示包括在文本输入停止之后提供所述建议以用于显示。
7.如权利要求1所述的一个或多个计算机可读介质,还包括:
在重启时使所述通知气泡的所述位置持续;以及
使所述通知气泡的所述位置漫游。
8.一种输入方法编辑器(IME),包括:
IME平台过程,其被配置为:
检测对用于改正被输入到在计算设备上操作的应用内的字的建议的需要;
通过在所述计算设备上的网络连接从云语言服务(CLS)获得所述建议;以及
如果用于与所述CLS通信的网络容量被限制或是不存在的,则从本地词典或语言模型获得所述建议;以及
建议呈现器,其在所述计算设备上操作并且被配置为使所述建议准备用于显示,使所述建议准备用于显示包括:
使所述建议在通知气泡内显示;以及
根据所接收的输入来绑定所述通知气泡。
9.如权利要求8所述的输入方法编辑器,其中,所述IME平台过程还被配置为:
接收用于使用显示的建议的指令;以及
对输入做出响应以移动所述通知气泡。
10.如权利要求8所述的输入方法编辑器,还包括:
在过程中被配置的并且被配置为将键击传递到所述IME平台的动态链接库(DLL)。
11.如权利要求8所述的输入方法编辑器,其中,所述IME平台过程和所述建议呈现器是在过程外被配置的。
12.一种方法,包括:
通过配置有可执行指令的一个或多个处理器的操作来检测对在被输入到应用内的文本中的错误的建议的需要,所述检测包括基于字的正确性的概率来测试建议是否是需要的,其中,所述概率基于多个因素,包括在客户端上的本地检查或在所述客户端处接收的由服务器进行的检查;
通过配置有所述可执行指令的所述一个或多个处理器的操作来获得对所述字的替换的建议,所述获得包括对服务进行查询以找到校正候选项和所述校正能够相信的置信度分数形式的概率:
如果在所述建议中的置信度大于门限,则使所述建议被显示,所述显示包括:
响应于对建议是能够使用的指示器的选择而提供所述建议;以及
使所述建议的显示位于与输入方法编辑器(IME)条相邻;以及
操作用户界面,所述操作包括:
接收用于使用显示的建议的指令;以及
对输入做出响应以将所述显示的建议移动到优选的屏幕位置。
13.如权利要求12所述的方法,其中,检测对所述建议的所述需要还包括:
检测文本输入减慢或停止。
14.如权利要求12所述的方法,其中,检测对所述建议的所述需要还包括:
通过过程中IME动态链接库(DLL)的操作来检测在应用内的输入的文本;以及
将所述输入的文本转发到过程外IME平台过程。
15.如权利要求12所述的方法,其中,检测对所述建议的所述需要还包括:
细查字的序列以提供所述字的上下文;以及
使用具有包括所述字的序列的输入的统计语言模型。
16.如权利要求12所述的方法,其中,获得对所述替换的所述建议还包括:
如果网络容量允许,则从云语言服务(CLS)获得所述建议;以及
如果网络容量不提供与所述CLS的连接,则从本地词典或语言模型获得所述建议。
17.如权利要求12所述的方法,其中,获得对所述替换的所述建议还包括:
查询多个基于云的服务;以及
聚集来自所述多个服务的结果。
18.如权利要求12所述的方法,其中,使所述建议被显示包括:
监控以确定文本输入何时停止;以及
在所述文本输入停止之后显示所述建议。
19.如权利要求12所述的方法,其中,操作所述用户界面包括:
接收对用于代替所述字的所述建议的拒绝;
减小用于在未来代替所述字的所述建议的可能性;以及
减小所述字将在未来被考虑为有问题的可能性。
20.如权利要求12所述的方法,其中,获得所述建议包括:
确定用于建议所述替换的本地功能的技术是否类似于用来建议所述替换的远程功能的技术;以及
如果所述技术是类似的,则使用所述远程功能。
CN201380078787.7A 2013-08-09 2013-08-09 提供语言帮助的输入方法编辑器 Pending CN105580004A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2013/081156 WO2015018055A1 (en) 2013-08-09 2013-08-09 Input method editor providing language assistance

Publications (1)

Publication Number Publication Date
CN105580004A true CN105580004A (zh) 2016-05-11

Family

ID=52460549

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380078787.7A Pending CN105580004A (zh) 2013-08-09 2013-08-09 提供语言帮助的输入方法编辑器

Country Status (4)

Country Link
US (1) US10656957B2 (zh)
EP (1) EP3030982A4 (zh)
CN (1) CN105580004A (zh)
WO (1) WO2015018055A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109313667A (zh) * 2016-06-17 2019-02-05 微软技术许可有限责任公司 构建特定于状态的多轮上下文语言理解系统的系统和方法

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9378290B2 (en) 2011-12-20 2016-06-28 Microsoft Technology Licensing, Llc Scenario-adaptive input method editor
EP2864856A4 (en) 2012-06-25 2015-10-14 Microsoft Technology Licensing Llc SEIZURE METHOD EDITOR APPLICATION PLATFORM
EP2891078A4 (en) 2012-08-30 2016-03-23 Microsoft Technology Licensing Llc CHOICE OF CANDIDATE BASED ON CHARACTERISTICS
JP2014211701A (ja) * 2013-04-17 2014-11-13 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US10289678B2 (en) * 2013-12-16 2019-05-14 Fairwords, Inc. Semantic analyzer for training a policy engine
US11501068B2 (en) * 2013-12-16 2022-11-15 Fairwords, Inc. Message sentiment analyzer and feedback
CN106326204A (zh) * 2015-06-15 2017-01-11 微软技术许可有限责任公司 消息中错误的基于内容的检测和处理
CN105824795A (zh) * 2016-04-19 2016-08-03 智者四海(北京)技术有限公司 文本中的错误信息的显示方法及装置
US20180074998A1 (en) * 2016-09-13 2018-03-15 Microsoft Technology Licensing, Llc Visual feedback for broken text selection
US10650621B1 (en) 2016-09-13 2020-05-12 Iocurrents, Inc. Interfacing with a vehicular controller area network
US10102196B2 (en) * 2016-11-08 2018-10-16 Motorola Solutions, Inc. Expanding a selected area of text, associating a data label with the expanded area of text, and storing the expanded area of text and data label in a clipboard
CN107122061A (zh) * 2017-03-15 2017-09-01 韦柳志 一种为输入法中编码串指定固化值的方法
US11263399B2 (en) * 2017-07-31 2022-03-01 Apple Inc. Correcting input based on user context

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1387650A (zh) * 1999-11-05 2002-12-25 微软公司 对拼写、打字和转换错误具有容错能力的将一种文本形式转换为另一种文本形式的语言输入体系结构
CN101276245A (zh) * 2008-04-16 2008-10-01 北京搜狗科技发展有限公司 一种输入过程中编码纠错的提示方法和系统
US20100138210A1 (en) * 2008-12-02 2010-06-03 Electronics And Telecommunications Research Institute Post-editing apparatus and method for correcting translation errors
CN102141889A (zh) * 2010-02-12 2011-08-03 微软公司 用于编辑的打字辅助
US20120297294A1 (en) * 2011-05-17 2012-11-22 Microsoft Corporation Network search for writing assistance

Family Cites Families (204)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU7529981A (en) 1980-09-19 1982-03-25 Hitachi Limited Language analysis by pattern recognition
US6236964B1 (en) 1990-02-01 2001-05-22 Canon Kabushiki Kaisha Speech recognition apparatus and method for matching inputted speech and a word generated from stored referenced phoneme data
JPH07160827A (ja) 1993-12-09 1995-06-23 Matsushita Electric Ind Co Ltd 手書きストローク編集装置及び方法
US5873107A (en) 1996-03-29 1999-02-16 Apple Computer, Inc. System for automatically retrieving information relevant to text being authored
US6014638A (en) 1996-05-29 2000-01-11 America Online, Inc. System for customizing computer displays in accordance with user preferences
US5995928A (en) 1996-10-02 1999-11-30 Speechworks International, Inc. Method and apparatus for continuous spelling speech recognition with early identification
US6092044A (en) 1997-03-28 2000-07-18 Dragon Systems, Inc. Pronunciation generation in speech recognition
EP0972254A1 (en) 1997-04-01 2000-01-19 Yeong Kuang Oon Didactic and content oriented word processing method with incrementally changed belief system
US6076056A (en) 1997-09-19 2000-06-13 Microsoft Corporation Speech recognition system for recognizing continuous and isolated speech
US6377965B1 (en) 1997-11-07 2002-04-23 Microsoft Corporation Automatic word completion system for partially entered data
US6185534B1 (en) 1998-03-23 2001-02-06 Microsoft Corporation Modeling emotion and personality in a computer user interface
US6247043B1 (en) 1998-06-11 2001-06-12 International Business Machines Corporation Apparatus, program products and methods utilizing intelligent contact management
US6085160A (en) 1998-07-10 2000-07-04 Lernout & Hauspie Speech Products N.V. Language independent speech recognition
US6527715B2 (en) 1998-10-30 2003-03-04 The United States Of America As Represented By The Secretary Of The Army System and method for predicting human cognitive performance using data from an actigraph
JP2000148748A (ja) 1998-11-13 2000-05-30 Nec Corp 仮名漢字変換及び画像検索表示システム
US6460015B1 (en) 1998-12-15 2002-10-01 International Business Machines Corporation Method, system and computer program product for automatic character transliteration in a text string object
US7099876B1 (en) 1998-12-15 2006-08-29 International Business Machines Corporation Method, system and computer program product for storing transliteration and/or phonetic spelling information in a text string class
US6363342B2 (en) 1998-12-18 2002-03-26 Matsushita Electric Industrial Co., Ltd. System for developing word-pronunciation pairs
JP2000221990A (ja) 1999-01-28 2000-08-11 Ricoh Co Ltd 音声認識装置
ATE320650T1 (de) 1999-06-30 2006-04-15 Ibm Verfahren zur erweiterung des wortschatzes eines spracherkennungssystems
US6578022B1 (en) 2000-04-18 2003-06-10 Icplanet Corporation Interactive intelligent searching with executable suggestions
US6963841B2 (en) 2000-04-21 2005-11-08 Lessac Technology, Inc. Speech training method with alternative proper pronunciation database
US7107204B1 (en) 2000-04-24 2006-09-12 Microsoft Corporation Computer-aided writing system and method with cross-language writing wizard
US7089504B1 (en) 2000-05-02 2006-08-08 Walt Froloff System and method for embedment of emotive content in modern text processing, publishing and communication
US7277732B2 (en) 2000-10-13 2007-10-02 Microsoft Corporation Language input system for mobile devices
US6731307B1 (en) 2000-10-30 2004-05-04 Koninklije Philips Electronics N.V. User interface/entertainment device that simulates personal interaction and responds to user's mental state and/or personality
JP2002258894A (ja) 2001-03-02 2002-09-11 Fujitsu Ltd 音声データ圧縮・解凍装置及び方法
US7308439B2 (en) 2001-06-06 2007-12-11 Hyperthink Llc Methods and systems for user activated automated searching
CN1391180A (zh) 2001-06-11 2003-01-15 国际商业机器公司 外语写作辅助方法和辅助工具
US7353247B2 (en) 2001-10-19 2008-04-01 Microsoft Corporation Querying applications using online messenger service
US7283992B2 (en) 2001-11-30 2007-10-16 Microsoft Corporation Media agent to suggest contextually related media content
US20030160830A1 (en) 2002-02-22 2003-08-28 Degross Lee M. Pop-up edictionary
US20030179229A1 (en) 2002-03-25 2003-09-25 Julian Van Erlach Biometrically-determined device interface and content
US20030220917A1 (en) 2002-04-03 2003-11-27 Max Copperman Contextual search
US7194538B1 (en) 2002-06-04 2007-03-20 Veritas Operating Corporation Storage area network (SAN) management system for discovering SAN components using a SAN management server
US7047193B1 (en) 2002-09-13 2006-05-16 Apple Computer, Inc. Unsupervised data-driven pronunciation modeling
US7293015B2 (en) 2002-09-19 2007-11-06 Microsoft Corporation Method and system for detecting user intentions in retrieval of hint sentences
US7552051B2 (en) 2002-12-13 2009-06-23 Xerox Corporation Method and apparatus for mapping multiword expressions to identifiers using finite-state networks
US7360151B1 (en) 2003-05-27 2008-04-15 Walt Froloff System and method for creating custom specific text and emotive content message response templates for textual communications
US20040243415A1 (en) 2003-06-02 2004-12-02 International Business Machines Corporation Architecture for a speech input method editor for handheld portable devices
US7881934B2 (en) 2003-09-12 2011-02-01 Toyota Infotechnology Center Co., Ltd. Method and system for adjusting the voice prompt of an interactive system based upon the user's state
US7389223B2 (en) 2003-09-18 2008-06-17 International Business Machines Corporation Method and apparatus for testing a software program using mock translation input method editor
US7447627B2 (en) 2003-10-23 2008-11-04 Microsoft Corporation Compound word breaker and spell checker
US7634720B2 (en) 2003-10-24 2009-12-15 Microsoft Corporation System and method for providing context to an input method
US7412385B2 (en) 2003-11-12 2008-08-12 Microsoft Corporation System for identifying paraphrases using machine translation
US7689412B2 (en) 2003-12-05 2010-03-30 Microsoft Corporation Synonymous collocation extraction using translation information
US20070089125A1 (en) 2003-12-22 2007-04-19 Koninklijke Philips Electronic, N.V. Content-processing system, method, and computer program product for monitoring the viewer's mood
CN100495392C (zh) 2003-12-29 2009-06-03 西安迪戈科技有限责任公司 一种智能搜索方法
US7590533B2 (en) 2004-03-10 2009-09-15 Microsoft Corporation New-word pronunciation learning using a pronunciation graph
US20050216253A1 (en) 2004-03-25 2005-09-29 Microsoft Corporation System and method for reverse transliteration using statistical alignment
WO2005101192A2 (en) 2004-04-19 2005-10-27 Exbiblio B.V. Processing techniques for visual capture data from a rendered document
US7451152B2 (en) 2004-07-29 2008-11-11 Yahoo! Inc. Systems and methods for contextual transaction proposals
WO2006011819A1 (en) 2004-07-30 2006-02-02 Eurekster, Inc. Adaptive search engine
US7725318B2 (en) 2004-07-30 2010-05-25 Nice Systems Inc. System and method for improving the accuracy of audio searching
US7505954B2 (en) 2004-08-18 2009-03-17 International Business Machines Corporation Search bar with intelligent parametric search statement generation
US7490033B2 (en) 2005-01-13 2009-02-10 International Business Machines Corporation System for compiling word usage frequencies
US7599915B2 (en) 2005-01-24 2009-10-06 At&T Intellectual Property I, L.P. Portal linking tool
US8694317B2 (en) 2005-02-05 2014-04-08 Aurix Limited Methods and apparatus relating to searching of spoken audio data
US9165280B2 (en) 2005-02-22 2015-10-20 International Business Machines Corporation Predictive user modeling in user interface design
US7555713B2 (en) 2005-02-22 2009-06-30 George Liang Yang Writing and reading aid system
GB2424091A (en) 2005-03-11 2006-09-13 Alamy Ltd Ranking of images in the results of a search
US7970812B2 (en) 2005-03-17 2011-06-28 Microsoft Corporation Redistribution of space between text segments
US7512904B2 (en) 2005-03-22 2009-03-31 Microsoft Corporation Operating system launch menu program listing
US7543244B2 (en) * 2005-03-22 2009-06-02 Microsoft Corporation Determining and displaying a list of most commonly used items
US20060224046A1 (en) 2005-04-01 2006-10-05 Motorola, Inc. Method and system for enhancing a user experience using a user's physiological state
CN1851617A (zh) 2005-04-22 2006-10-25 英华达(上海)电子有限公司 移动设备上便于ocr并输入到现有编辑器的转换装置及其方法
US7401073B2 (en) 2005-04-28 2008-07-15 International Business Machines Corporation Term-statistics modification for category-based search
US7277029B2 (en) 2005-06-23 2007-10-02 Microsoft Corporation Using language models to expand wildcards
JP2007024960A (ja) 2005-07-12 2007-02-01 Internatl Business Mach Corp <Ibm> システム、プログラムおよび制御方法
WO2007016370A2 (en) 2005-07-29 2007-02-08 Eazypaper Inc. Computer method and apparatus using embedded message window for displaying messages in a functional bar
CN1908863A (zh) 2005-08-07 2007-02-07 黄金富 双语混合输入方法及具有字典功能的手机
US7844599B2 (en) 2005-08-24 2010-11-30 Yahoo! Inc. Biasing queries to determine suggested queries
US20070052868A1 (en) 2005-09-02 2007-03-08 Charisma Communications, Inc. Multimedia accessible universal input device
US7676517B2 (en) * 2005-10-14 2010-03-09 Microsoft Corporation Search results injected into client applications
US7565157B1 (en) 2005-11-18 2009-07-21 A9.Com, Inc. System and method for providing search results based on location
GB0524354D0 (en) 2005-11-30 2006-01-04 Ibm Method, system and computer program product for composing a reply to a text message received in a messaging application
US20070150279A1 (en) 2005-12-27 2007-06-28 Oracle International Corporation Word matching with context sensitive character to sound correlating
JP4816409B2 (ja) 2006-01-10 2011-11-16 日産自動車株式会社 認識辞書システムおよびその更新方法
US20070192710A1 (en) 2006-02-15 2007-08-16 Frank Platz Lean context driven user interface
US7953730B1 (en) 2006-03-02 2011-05-31 A9.Com, Inc. System and method for presenting a search history
US7983910B2 (en) 2006-03-03 2011-07-19 International Business Machines Corporation Communicating across voice and text channels with emotion preservation
US7676460B2 (en) 2006-03-03 2010-03-09 International Business Machines Corporation Techniques for providing suggestions for creating a search query
US7831911B2 (en) 2006-03-08 2010-11-09 Microsoft Corporation Spell checking system including a phonetic speller
US7593927B2 (en) 2006-03-10 2009-09-22 Microsoft Corporation Unstructured data in a mining model language
US8725729B2 (en) 2006-04-03 2014-05-13 Steven G. Lisa System, methods and applications for embedded internet searching and result display
US20070255567A1 (en) 2006-04-27 2007-11-01 At&T Corp. System and method for generating a pronunciation dictionary
US7849115B2 (en) 2006-06-05 2010-12-07 Bruce Reiner Method and apparatus for adapting computer-based systems to end-user profiles
US7818332B2 (en) 2006-08-16 2010-10-19 Microsoft Corporation Query speller
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US7647351B2 (en) 2006-09-14 2010-01-12 Stragent, Llc Web scrape template generation
WO2008040585A1 (en) 2006-10-02 2008-04-10 International Business Machines Corporation Method and system of automatically adapting a user interface
US8511565B2 (en) 2006-10-17 2013-08-20 Silverbrook Research Pty Ltd Method of providing information via context searching of a printed graphic image
JP4888071B2 (ja) 2006-11-15 2012-02-29 富士通株式会社 プログラム、コピーアンドペースト処理方法、装置及び記録媒体
US7957955B2 (en) 2007-01-05 2011-06-07 Apple Inc. Method and system for providing word recommendations for text input
US7742774B2 (en) 2007-01-11 2010-06-22 Virgin Mobile Usa, L.P. Location-based text messaging
US7912700B2 (en) * 2007-02-08 2011-03-22 Microsoft Corporation Context based word prediction
US8677281B2 (en) 2007-02-09 2014-03-18 Intel-Ge Care Innovations Llc System, apparatus and method for emotional experience time sampling via a mobile graphical user interface
US7991609B2 (en) 2007-02-28 2011-08-02 Microsoft Corporation Web-based proofing and usage guidance
EP2135231A4 (en) 2007-03-01 2014-10-15 Adapx Inc SYSTEM AND METHOD FOR DYNAMIC LEARNING
US8285745B2 (en) 2007-03-01 2012-10-09 Microsoft Corporation User query mining for advertising matching
CN101286154B (zh) * 2007-04-09 2016-08-10 谷歌股份有限公司 输入法编辑器用户档案
CN105589571A (zh) 2007-04-09 2016-05-18 谷歌股份有限公司 客户端输入方法以及输入法编辑器服务器
CN101286094A (zh) 2007-04-10 2008-10-15 谷歌股份有限公司 多模式输入法编辑器
CN104866469B (zh) 2007-04-11 2018-10-02 谷歌有限责任公司 具有第二语言模式的输入法编辑器
CN105204617B (zh) 2007-04-11 2018-12-14 谷歌有限责任公司 用于输入法编辑器集成的方法和系统
US7930676B1 (en) 2007-04-27 2011-04-19 Intuit Inc. System and method for adapting software elements based on mood state profiling
US8799307B2 (en) 2007-05-16 2014-08-05 Google Inc. Cross-language information retrieval
US20080294982A1 (en) 2007-05-21 2008-11-27 Microsoft Corporation Providing relevant text auto-completions
KR20100029221A (ko) 2007-06-01 2010-03-16 구글 인코포레이티드 명칭 엔터티와 신규 단어를 검출하는 것
WO2008151465A1 (en) 2007-06-14 2008-12-18 Google Inc. Dictionary word and phrase determination
CN101779200B (zh) 2007-06-14 2013-03-20 谷歌股份有限公司 词典词和短语确定方法和设备
JP2010531492A (ja) * 2007-06-25 2010-09-24 グーグル・インコーポレーテッド ワード確率決定
US20090002178A1 (en) 2007-06-29 2009-01-01 Microsoft Corporation Dynamic mood sensing
US20090043584A1 (en) 2007-08-06 2009-02-12 Lawrence Brooke Frank Philips System and method for phonetic representation
US20090043741A1 (en) 2007-08-09 2009-02-12 Dohyung Kim Autocompletion and Automatic Input Method Correction for Partially Entered Search Query
US7917355B2 (en) 2007-08-23 2011-03-29 Google Inc. Word detection
US8661340B2 (en) 2007-09-13 2014-02-25 Apple Inc. Input methods for device having multi-language environment
US8694483B2 (en) 2007-10-19 2014-04-08 Xerox Corporation Real-time query suggestion in a troubleshooting context
US20090128567A1 (en) 2007-11-15 2009-05-21 Brian Mark Shuster Multi-instance, multi-user animation with coordinated chat
US7728735B2 (en) 2007-12-04 2010-06-01 At&T Intellectual Property I, L.P. Methods, apparatus, and computer program products for estimating a mood of a user, using a mood of a user for network/service control, and presenting suggestions for interacting with a user based on the user's mood
US8478787B2 (en) 2007-12-06 2013-07-02 Google Inc. Name detection
US7953692B2 (en) * 2007-12-07 2011-05-31 Microsoft Corporation Predicting candidates using information sources
US8165406B2 (en) 2007-12-12 2012-04-24 Microsoft Corp. Interactive concept learning in image search
US20090177976A1 (en) 2008-01-09 2009-07-09 Bokor Brian R Managing and presenting avatar mood effects in a virtual world
US7984004B2 (en) 2008-01-17 2011-07-19 Microsoft Corporation Query suggestion generation
US8196042B2 (en) 2008-01-21 2012-06-05 Microsoft Corporation Self-revelation aids for interfaces
US8473276B2 (en) * 2008-02-19 2013-06-25 Google Inc. Universal language input
US8010465B2 (en) * 2008-02-26 2011-08-30 Microsoft Corporation Predicting candidates using input scopes
US7917488B2 (en) 2008-03-03 2011-03-29 Microsoft Corporation Cross-lingual search re-ranking
US7472061B1 (en) 2008-03-31 2008-12-30 International Business Machines Corporation Systems and methods for building a native language phoneme lexicon having native pronunciations of non-native words derived from non-native pronunciations
US20090249198A1 (en) * 2008-04-01 2009-10-01 Yahoo! Inc. Techniques for input recogniton and completion
CN106598266B (zh) 2008-05-19 2019-07-02 上海触乐信息科技有限公司 多语言混合输入的方法和系统
US8677251B2 (en) 2008-05-30 2014-03-18 Microsoft Corporation Creation and suggestion of contact distribution lists
US20090313239A1 (en) 2008-06-16 2009-12-17 Microsoft Corporation Adaptive Visual Similarity for Text-Based Image Search Results Re-ranking
US8745051B2 (en) 2008-07-03 2014-06-03 Google Inc. Resource locator suggestions from input character sequence
EP4083968A1 (en) 2008-07-28 2022-11-02 Breakthrough Performancetech, LLC Systems and methods for computerized interactive skill training
CN101661476A (zh) 2008-08-26 2010-03-03 华为技术有限公司 一种搜索方法和系统
US20110107265A1 (en) 2008-10-16 2011-05-05 Bank Of America Corporation Customizable graphical user interface
US8584031B2 (en) 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
CN102292722B (zh) 2009-01-21 2014-09-03 瑞典爱立信有限公司 基于多模元数据和结构化语义描述符来产生注释标签
US8539359B2 (en) 2009-02-11 2013-09-17 Jeffrey A. Rapaport Social network driven indexing system for instantly clustering people with concurrent focus on same topic into on-topic chat rooms and/or for generating on-topic search results tailored to user preferences regarding topic
US8564541B2 (en) 2009-03-16 2013-10-22 Apple Inc. Zhuyin input interface on a device
WO2010105440A1 (en) 2009-03-20 2010-09-23 Google Inc. Interaction with ime computing device
CN101848272B (zh) 2009-03-25 2013-08-28 鸿富锦精密工业(深圳)有限公司 手机的输入法切换方法
US11076189B2 (en) 2009-03-30 2021-07-27 Time Warner Cable Enterprises Llc Personal media channel apparatus and methods
US8230336B2 (en) 2009-04-22 2012-07-24 Microsoft Corporation Efficient discovery, display, and autocompletion of links to wiki resources
CN101901235B (zh) 2009-05-27 2013-03-27 国际商业机器公司 文档处理方法和系统
US9104244B2 (en) 2009-06-05 2015-08-11 Yahoo! Inc. All-in-one Chinese character input method
US20100315266A1 (en) * 2009-06-15 2010-12-16 Microsoft Corporation Predictive interfaces with usability constraints
US20110014952A1 (en) 2009-07-15 2011-01-20 Sony Ericsson Mobile Communications Ab Audio recognition during voice sessions to provide enhanced user interface functionality
US8479094B2 (en) 2009-09-08 2013-07-02 Kenneth Peyton Fouts Interactive writing aid to assist a user in finding information and incorporating information correctly into a written work
US20110066431A1 (en) 2009-09-15 2011-03-17 Mediatek Inc. Hand-held input apparatus and input method for inputting data to a remote receiving device
TW201113870A (en) 2009-10-09 2011-04-16 Inst Information Industry Method for analyzing sentence emotion, sentence emotion analyzing system, computer readable and writable recording medium and multimedia device
KR101743122B1 (ko) 2009-11-27 2017-06-15 구글 인코포레이티드 클라이언트-서버 입력 방법 편집기 구조
US8612206B2 (en) 2009-12-08 2013-12-17 Microsoft Corporation Transliterating semitic languages including diacritics
EP3091535B1 (en) 2009-12-23 2023-10-11 Google LLC Multi-modal input on an electronic device
US8631004B2 (en) * 2009-12-28 2014-01-14 Yahoo! Inc. Search suggestion clustering and presentation
US20110178981A1 (en) 2010-01-21 2011-07-21 International Business Machines Corporation Collecting community feedback for collaborative document development
US20110184723A1 (en) 2010-01-25 2011-07-28 Microsoft Corporation Phonetic suggestion engine
US20110191321A1 (en) 2010-02-01 2011-08-04 Microsoft Corporation Contextual display advertisements for a webpage
KR101220709B1 (ko) 2010-02-03 2013-01-10 삼성전자주식회사 한글 및 한자가 혼용된 문서에 대한 전자 사전 검색 장치 및 방법
WO2011098343A1 (en) 2010-02-12 2011-08-18 Xelion B.V. Type and select data input field
US20110219299A1 (en) 2010-03-07 2011-09-08 DSNR Labs Ltd. Method and system of providing completion suggestion to a partial linguistic element
CN102193643B (zh) 2010-03-15 2014-07-02 北京搜狗科技发展有限公司 一种文字输入方法和具有翻译功能的输入法系统
KR101681281B1 (ko) 2010-04-12 2016-12-12 구글 인코포레이티드 입력 방법 에디터에 대한 확장 프레임워크
US20110258535A1 (en) 2010-04-20 2011-10-20 Scribd, Inc. Integrated document viewer with automatic sharing of reading-related activities across external social networks
US8161073B2 (en) 2010-05-05 2012-04-17 Holovisions, LLC Context-driven search
US20110289105A1 (en) 2010-05-18 2011-11-24 Tabulaw, Inc. Framework for conducting legal research and writing based on accumulated legal knowledge
US8694899B2 (en) 2010-06-01 2014-04-08 Apple Inc. Avatars reflecting user states
JP5455232B2 (ja) 2010-06-25 2014-03-26 Kddi株式会社 画像選定装置、方法及びプログラム
CN102314441A (zh) 2010-06-30 2012-01-11 百度在线网络技术(北京)有限公司 用于供用户进行个性化素材输入的方法、设备和系统
CN102314461B (zh) 2010-06-30 2015-03-11 北京搜狗科技发展有限公司 一种导航提示方法及系统
US8463592B2 (en) 2010-07-27 2013-06-11 International Business Machines Corporation Mode supporting multiple language input for entering text
US20120036468A1 (en) 2010-08-03 2012-02-09 Nokia Corporation User input remapping
US8473289B2 (en) 2010-08-06 2013-06-25 Google Inc. Disambiguating input based on context
US20120060113A1 (en) 2010-09-08 2012-03-08 Nuance Communications, Inc. Methods and apparatus for displaying content
US8594997B2 (en) 2010-09-27 2013-11-26 Sap Ag Context-aware conversational user interface
US9141285B2 (en) 2010-11-05 2015-09-22 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
CN102012748B (zh) 2010-11-30 2012-06-27 哈尔滨工业大学 语句级中英文混合输入方法
US8712989B2 (en) 2010-12-03 2014-04-29 Microsoft Corporation Wild card auto completion
WO2012092709A1 (en) 2011-01-05 2012-07-12 Google Inc. Method and system for facilitating text input
US8738356B2 (en) * 2011-05-18 2014-05-27 Microsoft Corp. Universal text input
WO2012159249A1 (en) 2011-05-20 2012-11-29 Microsoft Corporation Advaced prediction
US8446432B2 (en) 2011-07-12 2013-05-21 Sony Corporation Context aware user interface system
US8762356B1 (en) 2011-07-15 2014-06-24 Google Inc. Detecting change in rate of input reception
US8564684B2 (en) 2011-08-17 2013-10-22 Digimarc Corporation Emotional illumination, and related arrangements
US20130054617A1 (en) 2011-08-30 2013-02-28 Alison Williams Colman Linking Browser Content to Social Network Data
US20130091409A1 (en) 2011-10-07 2013-04-11 Agile Insights, Llc Method and system for dynamic assembly of multimedia presentation threads
US10264102B2 (en) 2011-11-03 2019-04-16 Aaron Nahumi System, methods and computer readable medium for augmented personalized social network
US8612414B2 (en) 2011-11-21 2013-12-17 Google Inc. Grouped search query refinements
US20150370833A1 (en) 2011-11-28 2015-12-24 Google Inc. Visual refinements in image search
US8566340B2 (en) * 2011-12-07 2013-10-22 Microsoft Corporation Provision of query suggestions independent of query logs
US9378290B2 (en) 2011-12-20 2016-06-28 Microsoft Technology Licensing, Llc Scenario-adaptive input method editor
US8996356B1 (en) * 2012-04-10 2015-03-31 Google Inc. Techniques for predictive input method editors
US20150127748A1 (en) 2012-04-13 2015-05-07 Google Inc. Recommendations for enhanced content in social posts
US20130282624A1 (en) * 2012-04-20 2013-10-24 Glenn Schackmuth Restaurant Equipment Monitoring and Control System and Method
US20150088927A1 (en) 2012-04-27 2015-03-26 Blackberry Limited Systems and Methods for Establishing and Using a Personal Linking Graph
EP2842090A4 (en) 2012-04-27 2015-12-09 Blackberry Ltd SYSTEMS AND METHODS FOR PROVIDING FILES IN RELATION TO A CALENDAR EVENT
EP2864856A4 (en) 2012-06-25 2015-10-14 Microsoft Technology Licensing Llc SEIZURE METHOD EDITOR APPLICATION PLATFORM
EP2867749A4 (en) 2012-06-29 2015-12-16 Microsoft Technology Licensing Llc INTERLINGUISTIC INPUT METHOD EDITOR
WO2014000251A1 (en) 2012-06-29 2014-01-03 Microsoft Corporation Input method editor
US8959109B2 (en) 2012-08-06 2015-02-17 Microsoft Corporation Business intelligent in-document suggestions
EP2891078A4 (en) 2012-08-30 2016-03-23 Microsoft Technology Licensing Llc CHOICE OF CANDIDATE BASED ON CHARACTERISTICS
US8498864B1 (en) 2012-09-27 2013-07-30 Google Inc. Methods and systems for predicting a text

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1387650A (zh) * 1999-11-05 2002-12-25 微软公司 对拼写、打字和转换错误具有容错能力的将一种文本形式转换为另一种文本形式的语言输入体系结构
CN101276245A (zh) * 2008-04-16 2008-10-01 北京搜狗科技发展有限公司 一种输入过程中编码纠错的提示方法和系统
US20100138210A1 (en) * 2008-12-02 2010-06-03 Electronics And Telecommunications Research Institute Post-editing apparatus and method for correcting translation errors
CN102141889A (zh) * 2010-02-12 2011-08-03 微软公司 用于编辑的打字辅助
US20120297294A1 (en) * 2011-05-17 2012-11-22 Microsoft Corporation Network search for writing assistance

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109313667A (zh) * 2016-06-17 2019-02-05 微软技术许可有限责任公司 构建特定于状态的多轮上下文语言理解系统的系统和方法
CN109313667B (zh) * 2016-06-17 2023-06-06 微软技术许可有限责任公司 构建特定于状态的多轮上下文语言理解系统的系统和方法

Also Published As

Publication number Publication date
EP3030982A4 (en) 2016-08-03
US20160196150A1 (en) 2016-07-07
EP3030982A1 (en) 2016-06-15
WO2015018055A1 (en) 2015-02-12
US10656957B2 (en) 2020-05-19

Similar Documents

Publication Publication Date Title
CN105580004A (zh) 提供语言帮助的输入方法编辑器
US11748232B2 (en) System for discovering semantic relationships in computer programs
US10915701B2 (en) Caption association techniques
US11126794B2 (en) Targeted rewrites
US10977155B1 (en) System for providing autonomous discovery of field or navigation constraints
CN105308551A (zh) 用于连续手势输入的多图形键盘
WO2022132427A1 (en) System for analyzing and prescribing content changes to achieve target readability level
US10810021B2 (en) Methods and system for storage retreival
KR20210080224A (ko) 정보 처리 장치 및 정보 처리 방법
CN107148624A (zh) 预处理文本的方法以及用于执行该方法的预处理系统
JP2019212115A (ja) 検査装置、検査方法、プログラム及び学習装置
US11989964B2 (en) Techniques for graph data structure augmentation
US20180018315A1 (en) Information processing device, program, and information processing method
WO2020180869A1 (en) Method and system for assisting a developer in improving an accuracy of a classifier
US20230274096A1 (en) Multilingual support for natural language processing applications
CN108536576B (zh) 用于对应用程序的测试脚本进行优化的方法和装置
WO2022235394A1 (en) Intelligent identification and modification of references in content
KR101582155B1 (ko) 문자 수정이 용이한 문자 입력 방법과 시스템, 그리고 기록 매체 및 파일 배포 시스템
US10379882B2 (en) Systems and methods for localizing a user interface based on a personal device of a user
CN114241471B (zh) 视频文本识别方法、装置、电子设备及可读存储介质
US20230259718A1 (en) Generating synthetic code-switched data for training language models
US20210034946A1 (en) Recognizing problems in productivity flow for productivity applications
JP2018185601A (ja) 情報処理装置及び情報処理プログラム
WO2022199784A1 (en) Electronic communications device, and methods of the electronic communications device for updating a previously sent text message
WO2013032617A1 (en) Server-based spell checking

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160511

RJ01 Rejection of invention patent application after publication