CN102439544A - 与输入法编辑器计算设备的交互 - Google Patents

与输入法编辑器计算设备的交互 Download PDF

Info

Publication number
CN102439544A
CN102439544A CN2009801594150A CN200980159415A CN102439544A CN 102439544 A CN102439544 A CN 102439544A CN 2009801594150 A CN2009801594150 A CN 2009801594150A CN 200980159415 A CN200980159415 A CN 200980159415A CN 102439544 A CN102439544 A CN 102439544A
Authority
CN
China
Prior art keywords
user
candidate
keyboard
painting canvas
candidate region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2009801594150A
Other languages
English (en)
Inventor
吴根清
段小涛
黃泰一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN102439544A publication Critical patent/CN102439544A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0237—Character input methods using prediction or retrieval techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/018—Input/output arrangements for oriental characters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0236—Character input methods using selection techniques to select from displayed items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Input From Keyboards Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开一种计算机实现的用户界面方法，包括：将由第一字符集定义的键盘显示在计算设备的触摸屏上；将电子画布显示在触摸屏上，随着用户选择键盘上的键而在该电子画布上显示与键盘上的键相应的信息，所述信息以不同于第一字符集的第二字符集出现；在画布的前表面上生成候选区域；以及随着信息被添加到画布而自动控制候选区域的位置，以便将所述候选区域移开以免覆盖所述画布上的位置，所述画布上的位置当前是信息将被添加到所述画布的位置或者靠近信息将被添加到所述画布的位置。

Description

与输入法编辑器计算设备的交互
技术领域
本文件涉及与将字符输入到输入法编辑器(input method editor，IME)系统中——诸如通过输入将被转换为日文或中文字符的罗马字符——的用户交互的系统和技术。
背景技术
计算设备在不断地变得越来越强大，同时它们的尺寸越来越小。诸如智能电话这样的便携式设备现在可以执行许多以前仅由台式计算机执行的计算功能。这些设备的处理能力和图形能力也都显著提高。而且，现代数据网络允许这些移动设备执行需要到因特网的几乎保持不变的、高带宽连接的功能。
在移动设备中心上执行的许多功能都围绕通信。例如，用户可以发送和接收文本消息或电子邮件。典型地，用户还可以发送查询到搜索引擎以便检索包括本地搜索结果的搜索结果，诸如用户周围的区域中某一风格的餐馆的识别。移动设备上的文字录入可能比较困难，因为设备的小尺寸妨碍设备提供全功能和全尺寸的键盘。这些问题在经由这样的语言来进行通信时会放大：其符号不被具有罗马(例如，英文)字符集的典型键盘完全支持。例如，可以使用输入法编辑器(IME)执行中文录入，其使用诸如拼音(Pinyin)这样的替换表示来接收罗马字符。当用户输入的特殊罗马表示是含糊不定的——因其在目标字符集中具有多个解释——时，这些信息的录入可能是困难的。结果，IME可以连同罗马键盘(其可以是触摸屏设备上的一个虚拟键盘)一起提供候选框，并且该候选框可以为用户提供针对用户已经做出的录入的可能解决方案。然后用户可以将合适录入从候选框中选出。
发明内容
本文件描述了可以用于与像移动电话这样具有触摸屏用户界面的计算设备的用户交互的系统和技术。本文件描述了可以用于与像移动电话这样具有触摸屏用户界面的计算设备的用户交互的系统和技术。通常，所述技术可以作为IME应用——其对用户输入的一个字符集中的字符做出反应以便生成另一字符集中的字符——的部分来执行。在一个例子中，允许用于IME应用的候选框“浮动”在文本录入应用上，以使得可以将它从软键盘或虚拟键盘脱离出来，并且因此可以为文本录入应用的画布上留出更多空间。(“画布”是由设备的用户输入在其中的数据表现为用户输入和接受该数据的区域，诸如文字处理应用的“纸”、记事本应用的笔记、或者正在撰写的电子邮件的正文。)
还提供了其它节省空间的解决方案。例如，可以同时在键盘——其太大以至于不配合设备的屏幕——上提供添加的键和功能。用户可以在键盘上执行横向挥动动作以从键盘的一部分移动到另一部分。类似地，候选框或窗口可以比配合设备的单个屏幕提供更多候选。用户可以用他或她的手指或者其它指示器来执行横向挥动动作，以便使附加候选滑动为视图。
键盘上的特定键，具体来说，在键盘的扩展部分中的键，可以是依赖于上下文的。例如，特定键可以示出一个情绪图标(emoticon)，并且该情绪图标可以是已经由用户分配给键的图像，或者具体来说，可以是已经由系统确定为一个流行情绪图标的情绪图标。例如，系统可以分析独立于设备的用户的、多个不同用户的文本录入项，以便确定他们经常使用什么情绪图标。这些分析的一个例子可以在已提交的搜索查询上、或者在测试消息或者电子邮件消息(具有适当的隐私限制)上传导。
此外，对流行使用的监控可以用于生成可以向设备的用户建议的词、短语或者更长的句子。例如，如果搜索系统的用户突然开始在搜索查询中输入一个特殊短语，诸如因为该短语的主题近来在新闻中风靡起来，那么可以将该短语提升为IME应用中由系统更为经常或者更为显著地向其它用户建议的短语。这些候选中的某些可以使用″流行趋势″应用，在该应用中从早先的流行趋势数据中在这些候选循环出现的年份的特定时间期间提升候选的重要性。例如，某些关于体育运动的短语或者术语在出现这些体育运动联赛时变得比较常用。可以相对于与季节气候相关的事件以及节假日——其是循环的，进行相似观察。用这样的方式，系统甚至可以在某一周期期间在候选在其它用户中风靡起来之前就开始提供这些候选。
在某些实施方式中，这些系统和技术可以提供一个或多个好处。例如，计算设备的用户可以更加容易且准确地以这样的语言输入信息：其字符集不直接由计算设备上的键盘支持。而且，用户可以接收能够提高它们在设备上的文本录入项的候选，以使得他们可以更加有效且高效地与其它用户或者使用他们设备的各种主机服务通信。
在一个实施方式中，公开了一种计算机实现的用户界面方法。所述方法包括：在计算设备的触摸屏上显示通过第一字符集定义的键盘，以及在所述触摸屏上显示电子画布，随着用户选择键盘上的键而在该电子画布上显示与键盘上的键相应的信息，所述信息以不同于第一字符集的第二字符集出现。所述方法还包括：在画布的前表面上生成候选区域，以及随着信息被添加到画布而自动控制候选区域的位置，以便将所述候选区域移开以免覆盖所述画布上的位置，所述画布上的位置当前是或者接近信息将被添加到所述画布的位置。所述方法还可以包括：接收用于使所述候选区域停驻在所述键盘的用户输入，并且随后保持所述候选区域停驻在所述键盘直到随后用于使所述候选区域从所述键盘脱离的用户输入。
在一些方面，第一字符集包括基于罗马字符的字符集，第二字符集包括符号字符集。所述方法还可以包括：接收用户在所述候选区域中的候选选择，将所选择的候选添加到所述画布，并且如果所述候选窗口使得所述画布上的下一个数据录入区域基本上不清楚的话就移动所述候选窗口。此外，所述方法可以包括：改变候选区域的高宽比以及横向移动所述候选区域靠近所述显示器的一侧。此外，所述方法可以包括：接收所述键盘上的横向挥动输入，以及沿横向挥动输入的方向挪动所述键盘。而且，所述方法可以包括：接收所述候选区域上的横向挥动动作，以及响应于所述横向挥动动作，挪动在所述候选区域中的多个候选录入。
在另一实施方式中，公开了一种包括存储程序代码的计算机可读数据存储介质的物品，所述程序代码可操作用于使得一个或多个机器执行操作。所述操作包括：将由第一字符集定义的键盘显示在计算设备的触摸屏上；将电子画布显示在触摸屏上，随着用户选择键盘上的键而在该电子画布上显示与键盘上的键相应的信息，所述信息以不同于第一字符集的第二字符集出现；在画布的前表面上生成候选区域；以及随着信息被添加到画布而自动控制候选区域的位置，以便将所述候选区域移开以免覆盖所述画布上的位置，所述画布上的位置当前是信息将被添加到所述画布的位置或者靠近信息将被添加到所述画布的位置。所述程序代码还可操作用于执行以下操作，包括：接收用于使所述候选区域停驻在所述键盘的用户输入，并且随后保持所述候选区域停驻在所述键盘直到随后用于使所述候选区域从所述键盘脱离的用户输入。
在一些方面，第一字符集包括基于罗马字符的字符集，第二字符集包括符号字符集。而且，所述程序代码可操作用于执行以下操作，包括：接收用户在所述候选区域中的候选选择，将所选择的候选添加到所述画布，并且如果所述候选窗口使得所述画布上的下一个数据录入区域基本上不清楚的话就移动所述候选窗口。所述程序代码还可操作用于执行以下操作，包括：改变所述候选区域的高宽比以及横向移动所述候选区域靠近所述显示器的一侧。
在又一实施方式中，公开了一种计算机实现的用户界面系统，并且包括图形显示系统，用于呈现输入法编辑器和文本录入应用，该文本录入应用具有用于显示用户输入的信息的画布区域以及用于呈现将添加到所述画布区域的符号的候选区域。所述系统还包括触摸屏用户输入机构，用于依照输入法编辑器的显示接收用户选择；以及输入法接口管理器模块，其可与输入法编辑器一起操作，用于随着信息被添加到所述画布而自动控制候选区域的位置，以便将所述候选区域移开以免覆盖所述画布上的位置，所述画布上的位置当前是信息将被添加到所述画布的位置或者靠近信息将被添加到所述画布的位置。所述输入法编辑器可操作用于接收第一字符集中的输入以及生成不同于第一字符集的第二字符集中的输出，所述第一字符集不与所述触摸屏用户输入机构上的键相应。而且，所述输入法编辑器接口管理器模块还可操作用于接收用户在所述候选区域中的候选选择，提供所选择的候选以添加到所述画布，并且如果所述候选窗口使得所述画布上的下一个数据录入区域基本上不清楚的话就移动所述候选窗口。
在某些方面，所述输入法编辑器接口管理器模块还可操作用于自动改变所述候选区域的高宽比以及横向移动所述候选区域靠近所述显示器的一侧。而且，所述触摸屏用户输入机构可操作用于接收所述图形显示器上显示的键盘上的横向挥动输入，以及所述图形显示系统可操作用于响应于所述横向挥动输入沿横向挥动输入的方向挪动所述键盘。所述触摸屏用户输入机构可操作用于接收所述候选区域上的横向挥动输入，以及所述图形显示系统可操作用于响应于所述横向挥动动作挪动所述候选区域中的候选录入。
在另一实施方式中，公开了一种计算机实现的用户界面系统。所述系统包括图形显示器，用于呈现输入法编辑器以及文本录入应用，该文本录入应用具有用于显示用户输入的信息的画布区域；触摸屏用户输入机构，用于依照输入法编辑器的显示接收用户选择；以及用于在画布的一部分上生成浮动候选窗口的装置。
在附图以及下面的说明中阐述了本发明的一个或多个实施例的细节。本发明的其他特征和优点将从说明书和附图以及从权利要求中变得明显。
附图说明
图1示出具有浮动候选窗口的移动触摸屏设备的一系列屏幕截图。
图2A示出具有扩大的可滚动键盘的移动触摸屏设备的一系列屏幕截图。
图2B示出可定制键盘的一系列屏幕截图。
图3示出具有可滚动候选框的移动触摸屏设备的一系列屏幕截图。
图4是响应于对于IME系统的触摸屏输入提供用户交互的系统的示意图。
图5A是用于提供自动移动候选框的示范性处理过程的流程图。
图5B是对到IME系统的用户输入的反应的示范性处理过程的流程图。
图5C是提供热门术语作为移动设备上的候选的示范性处理过程的流程图。
图5D是在软键盘上提供热门情绪图标或者其它符号的示范性处理过程的流程图。
图6A是为移动设备的用户提供当前候选的示范性处理过程的泳道示意图。
图6B是为计算设备提供流行情绪图标的示范性处理过程的泳道示意图。
图7示出可用于实现这里描述的技术的计算机设备和移动计算机设备的例子。
在各种附图中同样的参考标记表示同样的元素。
具体实施方式
本文件描述了移动设备可以利用其与这些设备的用户交互的系统和技术。例如，用户可以输入第一字符集中的字符并且能够将输出以第二字符集呈现在画布上。以第二字符集呈现针对在第一字符集中输入的数据的可能解的候选框可以通过画布示出，并且候选框可以改变其相对于画布的位置以使得它在正在被添加到或者即将被添加到画布的文本的路径之外移动。候选框可以采用各种形式，并且其自动运动可以允许更多的画布可见——比通过永久停驻的候选框将可能允许的要多。
而且，某些文本录入机构(mechanism)可以不适合键盘的单个屏幕，或者某些建议的候选可以不配合候选框的单个屏幕。在这种情况下，可以允许用户分别横向在键盘或者候选框上挥动他们的手指，以便沿他们挥动的方向将键盘或者候选框向左或右挪。这种附加或者辅助键盘上的键也可以手动或者自动可编程，以便表示第二字符集中的字符、词、短语、句子或者情绪图标。对于键的自动编程来说，可以给键分配已经被确定是流行词、短语或者句子的那些。可以通过从各种用户接收信息——诸如以搜索请求或者电子通信(例如，文本消息或者电子邮件)的形式——的中央服务确定流行度。然后，这些流行词、短语或者句子可以自动提供给键盘上的键，因此设备的用户能够仅仅通过按压相关键来将它们迅速地输入设备。
也能够按照候选框中被推荐给用户来提升流行术语的重要性。可以通过向用户的设备提供词典数据来发生这些提升，其中设备依赖于词典，所述词典表示词的相对重要性以便帮助设备对候选框中所示的建议进行评级。系统可以以“原子”词典的形式保存多个词典，其中每个词典可以导向某一特定目的。例如，体育运动词典可以包含对于某些运动员的姓名的第二字符集的表示，并且可以将词典提供给常去某些与体育运动相关的网站的用户、完成表示他们是体育运动粉丝的简档的用户或者专门问与体育运动相关的原子词典的用户。
除了特定话题之外或者取代特定话题，也可以将原子词典或者其它词典束缚在特定位置。例如，可以提供这些信息以帮助用户完成搜索术语的录入以便建议基于当地的术语，并且还帮助保证用户无误差地输入术语。可以根据从设备接收到的位置指示符——诸如IP地址、蜂窝三角塔(cell towertriangulation)或者GPS坐标——向用户的设备提供特定当地信息。当地信息可以包括例如当地观光点、当地餐馆、当地城市以及其它信息。例如，可以向在北京的用户——不论是否是在旅行——提供像街道、餐馆等等之类的重要POI(感兴趣的点，Points of Interests)的重要名称或者甚至是部分方言词语的原子词典。类似地，可以给在上海的人提供上海版本。
具体来说，这些词典可以帮助用户与地图应用交互，诸如当输入北京的特定街道名称“五道口”——正常情况下它应当不在主系统词典中——时。通常，用户必须输入三个音节“wu”、“dao”和“kou”，并且逐个选择正确的字符，但是如果给他或者她提供了当地原子词典，那么他或者她就可以仅输入“wdk”(每个音节的第一个罗马字母)来得到候选。举一个帮助用户输入适当的字符的基于位置的原子词典作为例子，考虑一个在北京的旅客，其在地图中输入“五到口”并且正常情况下将不会得到任何结果，因为正确的词是“五道口”(这两个字串发音相同)。通过当地原子词典，他或者她将更有可能输入正确的那个。用这样的方式，用户的设备可以加载多个词典——它们在IME的候选窗口中一起提供建议。词典中的一个是基本词典，同时其它可以是以用户的当前状况(例如，位置)或者用户的已知兴趣为目标的特定状况词典或者特定用户词典。
图1示出具有浮动候选窗口的移动触摸屏设备的一系列屏幕截图。一般而言，在示出设备的不同状态的三个例子102-106中示出设备，其中，用户正在输入由设备上的IME应用处理的文本。
在由字母(a)标记的第一个例子102中，设备被示为显示划线的画布区域，其中用户正在使用IME输入中文字符。呈现画布的应用是一个″笔记″应用，并且依赖IME响应于用户使用罗马文(亦称拉丁文)字符的拼音录入向它提供中文字符。IME应用向用户呈现罗马键盘和候选窗口(其也可被称作候选框，但是它的形状不需要是矩形的)。用户已经输入一行文本到笔记应用，并且正在输入另一个“wo men”的过程中。该录入项在候选窗口示出，伴随着许多可能匹配该录入项的、用于该录入项的候选中文字符。用户将选择一个用于将突出显示的候选添加到画布中的键，或者可以触摸其中一个候选或者触摸并向上拖拽候选以对其完成相同动作。
本例中的候选窗口不停驻(dock)在键盘，而是一个浮动窗口，其可以出现在画布上方的不同区域。用这样的方式，设备可以为画布分配更多屏幕区域，并且用户可以获得更宽的、他或她将输入设备的文本环境。例如，用户能够看到一行或两行额外的画布，并且能够更自由地操作那些额外行——比他们示出较少他们文本的情况下要更自由。
在以字母(b)标记的例子102中，用户不是输入他们在例子102中准备输入的(“wo men”的中文字符)，而是输入了一个关于体育运动的短语。现在设备准备接收画布的第三行上的录入项。然而，候选框先前(在例子102中)覆盖了画布的第三行。结果，在例子104中，候选框向下移动并且自动停驻在键盘上以便在画布上为第三行创建空间。如果画布上已经有较多空间可用，那么该框可以仅仅向下移动而无需停驻，如果较小空间可用，那么候选框可以与键盘稍微重叠(包括通过覆盖键盘最顶行的数字键)。而且，当键盘被部分地覆盖或者大小缩减时，可以利用动作或者声音执行键盘的某些功能，诸如通过使设备猛地向上抽的运动代表大写锁定(caps lock)，向下摇晃代表回车键，向右摇晃代表后跟一个或两个空格的句号(period punctuation)。
在由字母(c)表示的例子106中，用户已经输入了不同短语，并且现在正在试图在画布的下一行输入他或者她的初始术语“wo men”。在这种情况下，录入项已经低到没有候选框的空间了。在这样的情况下，可以向上滚动画布以便不覆盖画布上新的行——数据录入项可以在其上继续。然而，取而代之的是，如例子106中所示，候选窗口已经自动从软键盘脱离(undock)并且已经向上移动到显示器上的一些其它行顶部。用户还可以通过在候选框上按压和滑动来将其移动到更加方便的位置。因此，典型地，如果候选框所示的最初候选是准确的，那么用户可以将该框向设备的显示器的右侧滑动，以使得较低等级的候选甚至不在显示器上示出，并且候选框可以采取比这里所示的高宽比窄的高宽比。而且，用户可以选择将候选框从例子104向下滑回它的位置，这将导致窗口变为停驻在键盘并且一直停驻到用户再次脱离候选框(也即，一旦用户手动停驻了候选框，在一个会话中将不会发生自动脱离，直到用户手动脱离候选框)。
也可以以其它方式改变候选框或者窗口的高宽比，就好像框的位置改变一样。例如，如果框在画布的较低行上并且用户打算添加文本，那么框就可以从基本横向——如图1中所示——改变为基本纵向，此处多个候选堆叠在彼此之上。而且，候选框可以对于在画布中做出的且与框重叠的选择不受影响。例如，如果选择文本进行剪切-粘贴操作，此处选择框与候选框重叠，那么可以选择该框下面的文本，并且可以实质上忽略该框。
用这样的方式，候选框或者窗口可以实质上浮动在IME系统中的画布上。框可以随着文本被添加到画布而自动移动，以使得大量画布可以显示给用户——相比如果框停驻在一个或多个画布边缘周围可能显示的要多。这样的方法可以允许用户看到更多画布，或者至少是更加重要的画布部分——相比不这样做他们将看到的来说。
图2A示出具有扩大的可滚动键盘的移动触摸屏设备的一系列屏幕截图。总的来说，图中示出用于IME应用的键盘的大量例子202-206，其中键盘太大而不能配合单个显示器。
在用字母(a)指定的第一个例子202中，示出一个标准QWERTY键盘，但是除了罗马字母表的字母和阿拉伯数字之外几乎没有其它键的空间。还是在例子202中，示出用户的手，用户的食指按压在键盘的一个区域(在此情况下，″T″和″Y″键之间)上并且向左滑动。该动作由设备中的处理器解释为用于将键盘滑向左的用户命令。
如用(b)指明的例子204中所示，键盘已经响应于用户向左滑的输入滑动。现在，先前在显示器右边截止的一部分键盘被示出。该部分键盘包括在草图中先前在显示器的右边截止的附加键。这些键可以代表字符集中的其它字符，或者在本例中，它们代表用户可以通过按压适当的键容易地输入的情绪图标。如图所示，初始显示的中间部分仍然被示出，并且这些数字已经在顶部但是以不同次序重复(但是，仅仅在键盘移动时滑动最上面的行，并且因此可以保持其初始方向和布局)。
由用户完成的滑动也可以与用户滑动他或她的手指的距离成正比(例如，如果用户几乎没有滑动的话，就只移动一个键或者两个键)，但是一旦用户已经滑动得足够远，则可能导致跳到或者锁定到最右的位置。其中，全键盘是显示器的宽度的两倍，当用户在初始键盘上挥动时初始键盘可以被整体移出显示器(但是诸如数字行这样的一些部分可以挪开)。可替换地，1/2(one-half)显示宽度的键盘可以位于初始键盘的两端，以使得用户可以从主键盘的两个方向之一来移动(如例子204中所示)。键盘的“额外”部分可以实现不同功能或者甚至可以包含相同字符，以使得用户在一个方向上而非其它方向上挥动的决定仅仅控制在键盘的补充部分上的键的相对位置，并且该1/2的初始键盘将被示出。
也可以利用相似的挥动动作使这些键更宽或者更窄(或者更矮或者更高)。例如，为了使键更窄，并且因此配合在单个显示器上更多键，用户可以按第一个手指在显示器上，然后按第二个手指并且向第一个手指滑动第二个手指。这样的动作可以导致先前在显示器边缘截止的、最靠近第二个手指的键被带到显示器上。将手指彼此远离地滑动可以使键变宽。变窄或变宽可以存在，就好像用户执行滑动时的现场动画一样，以使得用户能够立即看到他或者她的动作的效果。因此，手指瘦或者尖的用户可以选择看到更加广阔但具有较小的键的键盘，因为考虑到他们仍然能够通过这样的键盘接收准确的输入。如果用户从使用他们的大拇指进行文本录入改变为使用他们的指尖录入，那么他们也可以以相似方式改变键盘的相对宽度。
除了正常键盘之外的、键上的特定符号可以手动设置或者自动设置。例如，用户可以从画布选择文本，并且然后可以长按键盘上的其中一个键以便将所选择的文本分配给特定键。可能不能够用这样的方式分配某些键，诸如键盘中央部分的键。然而，通过那些键并且通过其它键，用户可以选择某些文本，然后长按某一键并同时保持控制键或者功能键按下。然后，可以将文本分配给任一稍后的、控制键或者功能键与字母键组合的按压。这样的将字母手动分配给键可以提供容易且直观的方式，用户能够通过这样的方式创建快捷键。
将字符或者术语自动分配(与手动分配相反)给某一个键可以经由用于将流行词或者短语分配给某一个键的、基于服务器的处理过程来发生。可以基于其它用户使用某一术语来判定这些流行度，并且可以假定特定设备的用户将更有可能使用该术语——因为那些其它用户相对频繁地使用它，所以该设备的用户将会喜欢分配给它的“热键”。例如，搜索引擎系统可以确定其用户经常使用的术语或者字符，并且可以识别那些术语和字符以使得它们可以被下载到移动设备并且分配给扩展键盘上的键。在术语太大而不能配合键(例如，因为它是一个长短语或者长句子)的情况下，可以显示一部分术语或者占位符，整个术语可以在用户将其手指放在该键上时从该键上弹出。而且，单个键可以用作每当用户想要寻找流行短语时就能够访问的″流行短语″键，并且他们选择该键可以导致显示多个流行短语的弹出窗口，以使得用户能够通过以下方式来选择特定短语：将他们的手指从该键上滑到弹出窗口中的其中一个短语，并且将他们的手指从触摸屏显示器释放以使得释放点下的术语被选择。
例子206显示了可以从用户第二次向左挥动他们的手指或者在例子202中在第一次挥动中使他们的手指挥动较长距离和/或以较高速度挥动他们的手指得到的显示。如这里所示，所有初始键盘都被显示情绪图标的键所替换。
图2B示出用户可定制键盘的一系列屏幕截图。总的来说，在每个实例中，已经使用户能够选择对达到他们的目的最佳的键盘，然后能够进一步定制键盘。在以字母(a)表示的第一个例子208中，用户显示基本QWERTY键盘在移动设备上。在以字母(b)表示的第二个例子210中，用户已经切换到″压缩″键盘，其中键各个都较大，但是每个键都被分配了多个字母。而且，在本例中，键上的字母按字母顺序排序而非根据QWERTY标准。在以字母(c)表示的第三个例子212中，以又一种不同方式分配字母。正如通过第二个例子210那样，多个字符被分配给各个键，但是承载字符的键现在在数量上变得较多以使得只有两个字符被分配给各个键。结果，由键盘一次只能显示较少的功能，但是各个键按下产生的不明确将变少，并且用于辨识用户想要的意思的程序可以更好地运行了。
这样的键盘可以通过正常的英文录入来使用并且也作为IME应用的部分。当用户触摸诸如“k1 k2 k3”之类的一系列键(其中k1、k2和k3分别表示一个软键)时，IME将在其词典(不论单个的还是作为原子词典的组合分组的一部分)中搜索全部项目(或者项目组合——例如，如果用户打出一长串键，则中文IME可以给出句子级候选)，以搜索哪些字母分别匹配k1、k2和k3，并且可以根据它们的得分将这些候选排序。可以使用代表各个词并且具有相对频率——词或者短语以该相对频率被使用——的指示的词典生成得分。通过这样的方式，最佳匹配候选将自动建议给用户。例如，如果用户在第二个例子210中打出“43556”，则将自动建议“hello”。
如所述，词典可以被自动且连续地定制到用户或者用户的状况。例如，如果用户对特定字段或者主题表示出兴趣，那么该字段或者主词中的词或者短语就可以被自动下载到用户的设备中作为原子词典的部分。同样地，如果发现用户在特定位置或者接近特定位置，诸如某一特定城市，那么原子词典(例如，包含特有街道名称或者餐馆名称)可以从网络上一个远端服务器添加到用户的设备中。
也可以提供用于允许用户自由地更换他或她的键盘的布局的应用。例如，用户可以通过选择可以建议给用户的若干“基本”键盘中的一个来开始这样的应用。然后，用户可以按下各个键上的字母数字字符并且将该字符滑到其它键，诸如滑到相邻键，以便放置更多或更少字符在特定键上。字符到键的映射可以存储在设备上的存储器中某一简单的表中，以使得当用户按特定键时，分配给该键的字符或多个字符被传递到跟踪用户动作的应用。甚至用户尚未定制的″标准″键盘也可以使用这样的映射接口——其可以提供到在设备上运行的各种应用的API，并且当用户选择在键之间移动字符时，表中的映射可以仅仅变为使用户提供的变化匹配键盘布局。
图3示出具有可滚动候选框的移动触摸屏设备的一系列屏幕截图。总的来说，候选框可以包括比单个显示器上能够配合的要多出许多的候选。尽管最高得分的候选可以首先显示(也即，在最左边位置)，但是这样的候选可能不是期望候选，也可能不是一开始显示的——诸如在以字母(a)代表的例子300中的——任一其它候选。因此，如例子300和例子302中所示，用户能够按下并且沿着候选挥动他们的手指以便沿特定方向(不论向左还是向右)挪动或者滚动候选窗口。
因此，在例子302中，第一个候选已经被推出屏幕的左手边缘并且第六个候选已经出现在屏幕的右边缘，所有其它候选向左移动一个切口(notch)。通过相似的方式，在例子304中候选已经全部向左移动到另一索引位置。可以设置这样的挪动(panning)候选，因为对于每个用户输入只挪开一个候选槽(candidate slot)。可替换地，挪动可以是成比例的，因为对于更快或更长的手指挥动来说挪动的等级可以较大。而且，挪动可以是离散的或连续的。例如，显示可以跳至每个位置或可以在用户输入了挪动输入之后“快速跳”到某一位置，以使得各种候选沿着显示横向地出现在可重复位置上。可替换地，显示可以是连续的或类似的，因为候选位置完全依赖于用户输入的等级，并且不停在特定位置或快速跳到特定位置。
图4是响应于对于IME系统的触摸屏输入提供用户交互的系统的示意图。系统400可以使用诸如设备402这样的移动设备实现。设备402包括各种输入和输出机构，诸如触摸屏显示器404和滚动球406。设备402内的大量组件可以被配置为提供在显示器404上的各种选择功能，诸如在IME应用中选择并且录入信息。
一个这样的组件是显示器管理器412，其可以负责呈现用于呈现在显示器404上的内容。显示器管理器412可以从大量源接受与图形相关的内容并且可以确定这些内容将如何提供给用户。例如，可能需要显示用于设备404上各种应用410的大量不同窗口，并且显示器管理器412可以确定哪些显示、哪些隐藏以及当各种图形对象之间存在重叠显示或隐藏什么。
显示器管理器412可以包括用于提供与所显示的组件交互的特定功能的各种组件——它们可能在多个应用之间共享，并且例如，可以由设备402的操作系统提供。例如，这样的功能可以由输入法编辑器应用(IME)415提供，输入法编辑器应用415可以负责从用户接收输入以及将信息变换为具有不同字符集的形式。在本例中，罗马键盘405显示在显示器404上，并且可以类似于在上面屏幕截图中显示的键盘。具体来说，键盘405可以与来自其它应用的特征组合提供，其中键盘405用作其它应用的输入机构以及从一个字符集到另一字符集的变换器。
键盘405以及其它IME功能可以由在设备上运行的IME 415提供。IME415可以是设备操作系统的一部分或者可以是一个独立的应用，并且可以提供到其它应用的API以使得它们可以从其接收输入。而且，在本例中，设备具有规则的“硬”键盘，并且当设备的屏幕滑动得在硬键盘以外的路径之外足够远时，输入控制可以从硬键盘传递到软键盘以使得可以可靠地使用其。
操作系统和显示器管理器412可以协作以便显示叠加在其它应用上的IME特征。IME 415的这些呈现可以由IME接口管理器417操控，其可以负责IME 415呈现给用户的方式。例如，IME接口管理器417可以通过上面和下面讨论的那些方式类似的方式，用图形呈现键盘和候选框。IME翻译器419负责生成用于IME 415的内容。例如，IME翻译器419负责接收由用户输入的罗马字符并且将那些字符变换为一个或多个候选。单个应用410能够依照API通过显示器管理器412来自行登记，以便指示它们可能需要的显示元素的排序。
输入管理器414可以负责翻译由设备402的用户提供的命令。例如，这样的命令可以来自键盘、来自触摸屏显示器404、来自轨迹球406或者来自其它这样的源，包括专用按钮或者软按钮(例如，其功能可以随时间改变的按钮、以及其功能可以显示在与特定按钮邻接的、显示器404的区域上的按钮)。例如，输入管理器414可以确定正在显示器的什么区域中接收命令，并且由此这些命令将要供给显示器上正在显示的什么应用中。此外，可以将触摸屏404上的输入动作解析为公用格式并且将那些经解析的动作(例如，短按、长按、轻击以及直线拖拽)传递给适当的应用。输入管理器414还可以将这些输入报告给事件管理器(未显示)，事件管理器接着将它们报告给适当的模块或者应用。当IME功能针对某一设备被激活时，输入管理器可以将软键盘的区域中的输入传递给IME 415。
各种应用410——通常在公用微处理器上——可以在设备402上运行。应用410可以是各种形式，诸如地图应用、电子邮件以及其它消息应用、浏览器应用、音乐和视频播放器以及各种在浏览器内运行或者浏览器的扩展内运行的各种应用。应用410可以包括接收某一字符集中的输入——诸如中文或者日文字符——的应用，IME 415可以用作来自用户的罗马字符的输入与这些应用410之间的翻译层。
无线接口408管理与无线网络的通信，无线网络可以是还承载话音通信的数据网络。无线接口可以以熟悉的方式运行，诸如根据下面讨论的例子，并且可以提供用于设备402与诸如文本消息、电子邮件和电话语音邮件消息之类的消息业务的通信。此外，无线接口408可以支持通过无线网络进行内容和计算机代码的下载和上传。
可以提供各种形式的永久存储，诸如使用硬盘和/或固态存储器件。这里示出两个例子。首先，词典416包括输入字符与它们可能表示的其它字符之间的关系，其中输入字符表示某些其它字符的可能性以这样的方式保存：以可能性降序次序提供对某一文本录入的解的建议或者候选。词典416可以用于帮助完成不完整录入，以便消除在将多个字符分配给各个键的键盘上存在的录入歧义，或者用于将在第一字符集录入的数据变换为第二字符集中的输出的IME应用。词典416可以包括一个整体词典(monolithic dictionary)，或者多个如上所讨论的原子词典。
其它存储器包括用户默认418，其可以是存储在相同媒介上作为词典416的用户的简档信息。用户默认418包括关于设备402的用户的各种参数。在与这里相关的例子中，用户简档可以包括定义用户倾向于使键盘以此方式显示在设备上的方式、用户倾向于以该语言操作(在一些环境下，以便使得当用户启动一个采用原文输入的应用时自动提供给用户的IME接口)的语言的数据。
使用这些图形组件以及为了简要起见而在这里省略的其它组件，设备402可以响应于用户输入提供特定动作。具体地说，设备402可以通过建议不同字符集中的候选来响应用户的输入。而且，某些输入可以使得在键盘中以及候选框或者窗口中发生变化。
图5A是用于提供自动移动候选框的示范性处理过程的流程图。总的来说，处理过程包括通过在其中输入文本的画布区域来显示候选区域，以及随着文本被输入到画布区域上而移动候选区域以便保持候选区域在将被输入的文本的路径之外。用这样的方式，画布区域可以较大——比如果将候选区域设置在一个位置上(诸如通过将其停驻在键盘最上方)的情况要大。
处理过程从框402开始，其中键盘被显示为示出第一字符集。例如，字符集可以是罗马字符集或者拉丁字符集，并且键盘可以是标准IME实施方式的部分。键盘可以是软键盘，以使得用户在屏幕最上方打字以输入信息到键盘，并且使得诸如当设备从肖像模式移动到风景模式时可以移动或者改变键盘上的信息。
在框504处，画布被显示为具有叠加的建议或者候选框。画布可以根据用户当前输入数据到其的特定应用采取各种形式。例如，应用可以是文字处理应用、文本消息应用或者电子邮件应用，并且画布可以表示用户针对这些应用写在其上的页。数据可以随着用户输入数据而显示在画布上。然而，在IME的场景中，用户经常输入第一字符集的数据，并且第二字符集的结果直到用户从所提供的候选当中选择了特定结果才被显示。因此候选窗口可以是用于响应于来自用户的信息录入而显示多个结果的机构。
在框506处，接收部分用户输入并且用针对该部分用户输入的候选解填充建议或者候选框。例如，用户可以输入有限数量的、可以映射到多个字符或者目标字符集中的字符集合的字符。在框508处，用户已经选择了特定候选，并且针对该候选的第二字符集中的文本被添加到画布。这样的添加通常可以包括显示可能与基于字母的字符(像罗马字母表中的那些)有所区别的符号字符，诸如中文中的那些字符。
通过添加到画布的新文本，针对生成画布的应用的文本录入点可以移动到新的位置，诸如通过在画布上向下移动一行。在这样的状况下，其中建议或者候选框位于画布底部，概念上来说下一个输入可以正常存在于建议或者候选框之下。在这样的状况下，画布可以向上滚动以使得在建议或者候选框上方可以看到新添加的文本。可替换地，在已经输入文本在其中的画布的区域上，可以诸如通过移动接近画布顶部的候选框来向上移动候选框。
而且，如果用户通常仅采用画布的最左边部分输入文本，那么候选框的高宽比可以从水平方向相对较长且垂直方向相对较短变为垂直方向较长而水平方向相对较窄。例如，可以将候选框移动到屏幕的右手边缘，在此处它位于可能已经由用户输入的大多数文本的路径之外。在该处理过程的结束处，处理过程返回到框506上方的区域，并且等待从某一用户或者多个用户接收到另外的输入。
图5B是对到IME系统的用户输入的反应的示范性处理过程的流程图。该处理过程通常示出EVE应用能够对来自用户的清楚的功能输入做出反应的方式。
处理过程从框512开始，其中显示了具有第一字符集的部分键盘。这里引用键盘为部分键盘，因为它包括另外的键：这些键一开始没有显示在键盘上但是能够对用户输入做出反应而显示以替换键盘上的某些其它键。在框514处，设备以正常方式接收输入。例如，用户可以打罗马字符到IME的文字录入区域中，IME系统可以显示匹配用户输入的信息的、第二字符集中的一个或多个候选。用户可以持续输入这样的字符达不确定的时间。
最后，用户可能想要停止输入文本，并且可能想要改变(affect)接收该文本录入的IME应用或者基础应用的外观或者感觉。结果，设备可以接收与正常字符录入不同的用户输入(框516)到这样的系统中。在本例中，表示了四个这样的清楚用户输入。例如，在框518处，用户输入一个轻拍输入到IME的键盘上。键盘上这样的轻拍可以解释为要添加基本罗马字符到解中的意图，并且因此，可以更新建议或者候选以反映最新输入的数据。
在框522处，系统对用户的向上挥动动作做出反应。处理过程可以将这样的输入解析为表示用户想要以特定方式改变第一字符集中的文本录入。例如，这样的动作可以解析为改变键盘上各个键的响应：诸如通过将每个键变为大写字母，或者变为功能键组合、变为情绪符号，或者变为另一形式的键盘(在初始向上挥动之后向下挥动可以将键盘返回到其初始状态)。
其它用户输入可以包括在键盘本身上的侧挥动作。这样的输入可以导致软键盘沿特定方向滑动，以使得可以显示通常使用(但不是主要的一开始显示的键盘那样通常)键盘的部分，诸如情绪图标或者其它经常使用的一个或多个键按下组合。如框524中所示，挥动动作可能导致设备确定在用户挥动的方向是否存在另外的键盘。如果存在，那么设备就能够在其显示器上生成键盘的新视图。
这样的视图可以既包括静态键又包括动态键。静态键是一个一般在设备上不发生变化的键，诸如字母表的字母。动态键是打算改变其内容的键。例如，可以预留某些键以使得流行字符或者短语能够被容易地添加到设备上的键盘，甚至从中央服务器推出到设备上。
第四用户选项包括将横向挥动引导到建议或者候选框上。这样的挥动首先导致系统确定在屏幕边缘是否存在另外的候选(框528)，然后导致挪动表示候选的色带，如上面所述。
图5C是提供热门术语作为移动设备上的候选的示范性处理过程的流程图。总的来说，处理过程包括在服务器系统上识别已经在各种用户中流行或者正在变得流行的多个术语。用这样的方式，可以在假定用户可能正在写关于在其它用户流行的术语或者搜索这些术语的条件下建议这些术语给用户。
处理过程在框534处开始，其中一开始就启动IME。IME可以包括候选窗口，并且因此可能需要对有关用户正在尝试输入什么到系统中做出有依据的论据。在框536处，下载“热门”列表，并且包括最近流行的术语或者诸如情绪图标之类的其它项目的列表。热门列表可以添加到用于IME的词典以使得流行术语或者短语在给设备的用户的建议候选的最上方。例如，热门列表中的术语可以添加到术语词典中并且可以给予其(至少临时地)相对于词典中其它较为静态的术语来说较高的评级得分。可以通过将术语集成到基本词典中，或者通过添加大量原子词典到系统，然后通过查看已经加载到设备上的每个这样的词典来对可能解进行等级排序，来运行添加到词典。
在框538处，用户提供一个或多个罗马字符到他们的设备。在框540处，部分录入被应用于词典或者将为用户生成第二字符集中的解的其它结构。如所述的那样，词典或者其它结构可以存储反映这些术语以相似方式被使用的相对流行度的数据(例如，当用户采用IME写电子邮件时电子邮件的匹配使用)。在框542处，词典引擎或者其它模块可以返回能够匹配已经输入的文本的候选的结果，并且可以通过它们准确反映用户的预期行为的等级对结果进行排序。因此，在框544处，处理过程显示根据它们的重要性——依照至少部分地利用在基于服务器的大型系统中匹配建议或者候选的流行度所判定的——排序的匹配建议或者候选。
图5D是在软键盘上提供热门情绪图标或者其它符号的示范性处理过程的流程图。总的来说，处理过程包括在IME应用的场景中加载以及呈现热门情绪图标。
处理过程在框550处开始，其中启动IME应用。如同先前的处理过程那样，然后，IME过程可以从服务器系统下载一个或多个″热门″情绪图标。然而，不是添加这些情绪图标到设备上的词典，或者除了添加这些情绪图标到设备上的词典之外，情绪图标还可以直接应用于设备的辅助键盘部分上的键，如上面的图中所示。
为键盘选择情绪图标可以慢速进行以便降低键盘上情绪图标的“搅动(churn)”，“搅动”是用户不知道具有特定情绪图标的键盘，然后一旦该情绪图标变得不流行就使其突然从他们的键盘消失。因此，例如，可以创建某些延迟以便放慢提供情绪图标给客户端键盘的出现和消失。而且，可以跟踪用户选择特定情绪图标的次数，并且考虑到用户经常采用被使用多于阈值次数的情绪图标并且应当不想要它们发生变化，可以将它们保存以免被删除或者替换。
在框554处，可以使用情绪图标，好像由用户在键盘上挥动激起的那样(框554)。例如，情绪图标可以设置在虚拟键盘的辅助部分或者补充部分的键上，通常虚拟键盘不是可见的。如果用户将诸如横向挥动这样的挥动输入应用在触摸屏上软键盘的表面上，那么就可以显示这些补充部分(框556)。然后，键盘的另外部分，包括情绪图标，可以对用户输入开放，并且用户可以按键盘的补充部分上的键来做出这样的输入(框558)。
图6A是为移动设备的用户提供当前候选的示范性处理过程的泳道示意图。总的来说，处理过程示出客户端设备与服务器系统之间的示范性交互——可以借此为设备动态地更新词典，以使得使用这些信息将不明确的录入溶入到候选或者实际选择中。
处理过程在框602处开始，其中服务器系统识别当前流行术语或者短语。例如，系统可以分析搜索引擎查询的日志以便确定可能已经被某一变为流行媒介焦点的特定话题触发的公共查询。可以随着用户输入不明确的输入而由服务器系统或者由用户的设备来执行这些数据的供应。在后一实例中，如虚线框604所示，服务器系统将关于这些流行术语和短语的数据格式化对于插入到用户设备上的词典中(604)。
在框606处，设备被投入使用并且设备将自己识别到服务器系统(框608)，该服务器系统将在这些数据将要被设备自己使用时发送词典数据到设备。在稍后(框612)，用户能够提供部分输入到设备，因此输入是不明确的。在词典数据已经被发送到设备的情况下，设备能够自己检查匹配和得分并且将它们进行等级排序(框614)。可替换地，随着用户输入字符，字符可以被提交给服务器系统(框616)，其可以自己识别候选，包括通过集成框602中所确定的候选。服务器系统还能够从这些信息中生成建议或者候选并且通过网络提供这些建议给设备。
在框620处，客户端设备显示针对用户输入的建议或者候选给用户，包括通过使用有关“热门话题”的信息。用户在框622处选择候选中的一个，并且服务器系统能够登记用户选择的特定术语。通过这样的方式，假定该词相对流行并且可能被其它用户使用，那么服务器系统就可以自动增加用户选择的术语在词典中的得分。在用户选择了候选或者建议之后，它就被提供给控制在设备上的画布的相关应用。然后，处理过程结束并且可以重复另外的录入。
图6B是为计算设备提供流行情绪图标的示范性处理过程的泳道示意图。总的来说，处理过程示出特定客户端在受到其它客户端与服务器系统的交互影响下与服务器系统的交互。处理过程通常包括提供可能重要或者流行的情绪图标给移动设备，以使得用户可以通过他们设备上的键盘有简单的接触以便将情绪图标添加到他们设备上他们的消息中的一个。
处理过程在框630处开始，其中各种用户提交消息给服务器系统，诸如电子邮件消息或者搜索查询，服务器系统接着又识别消息中的情绪图标或者其它对象(框632)。然后，服务器系统根据目标数据集中特定情绪图标的出现频率对它们进行等级排序。这样的数据集可以是恒定不变的，也可以是动态的，因为它可以对较短时段上的流行度做出反应，诸如在假日或者假期。
稍后，用户启动IME应用(框636)，其使得应用联络服务器系统。然后，服务器系统通过发送情绪图标信息到客户端设备来应答(框638)，以该信息可以被容易地部署并且由客户端设备使用的方式对其格式化。然后，在框640处，客户端设备存储从服务器系统接收到的词典数据，其中它可以用于影响键盘的外观，诸如设备上键盘的补充区域。
因此，在框642处，用户提供命令到客户端设备用于从标准字母数字键盘改变为补充键盘，该补充键盘的键表示诸如情绪图标之类的各种另外项目。在框644处，显示补充键盘，并且在键盘的补充部分上的区域中显示最流行的情绪图标。某些其它情绪图标可以较为持久，而非仅仅基于通常的公共流行度。例如，用户可以看到它们喜欢的情绪图标并且可以输入用于“冻结”他们键盘上特定情绪图标的命令(例如，通过长按该键并且从作为长按的结果弹出的菜单中选择“冻结”命令)。可替换地，设备可以跟踪特定键被使用的次数并且可以防止经常使用的键被更新。这样的键可以视为将被“冻结”，并且可以在框646处识别，以使得当其余键与流行情绪图标叠加(框644)时它们不被重写。
用这样的方式，可以至少部分地使用从多个不同第三方接收到的信息来填充键盘的键，以使得这些键表示已经被确定为在那些第三方中流行的信息。
图7示出可以通过这里描述的技术使用的通用计算机设备700和通用移动计算机设备750的例子。计算设备700是用来表示各种形式的数字计算机，诸如膝上型计算机、台式计算机、工作站、个人数字助理、服务器、刀片服务器、主机以及其它合适的计算机。计算设备750是用来表示各种形式的移动设备，诸如个人数字助理、蜂窝电话、智能手机以及其它类似计算设备。这里示出的组件、它们的连接和关系以及它们的功能仅仅意在示范性的，并且不意在限制本文件中描述和/或主张的本发明的实施方式。
计算设备700包括处理器702、存储器704、存储设备706、连接到存储器704和高速扩展端口710的高速接口708以及连接到低速总线714和存储设备706的低速接口712。组件702、704、706、708、710和712中的每一个都使用各种总线互连，并且可以安装在公共母板上或者根据情况以其它方式安装。处理器702可以处理用于在计算设备700内运行的指令，包括存储在存储器704中或者存储设备706上用于将GUI的图形信息显示在外部输入-输出设备上的指令，外部输入-输出设备诸如耦接到高速接口708的显示器716。在其它实施方式中，可以根据情况连同多个存储器和多种类型的存储器一起使用多个处理器和/或多个总线。而且，可以连接多个计算设备700，每个设备提供必要操作的部分(例如，作为服务器库、刀片服务器组或者多处理器系统)。
存储器704存储计算设备700内的信息。在一个实施方式中，存储器704是一个易失性存储单元或者多个易失性存储单元。在另一实施方式中，存储器704是一个非易失性存储单元或者多个非易失性存储单元。存储器704还可以是其它形式的计算机可读媒介，诸如磁盘或者光盘。存储设备706能够提供用于计算设备700的大容量存储空间。在一个实施方式中，存储设备706可以是计算机可读媒介或者包含计算机可读媒介，诸如软盘设备、硬盘设备、光盘设备或者磁带设备、闪存或者其它类似固态存储设备，或者设备阵列，包括存储区域网络或者其它构造中的设备。计算机程序产品可以被有形地具体实现在信息载体中。计算机程序产品还可以包含当被运行时执行诸如上面所描述的那些一个或多个方法的指令。信息载体是计算机或者机器可读媒介，诸如存储器704、存储设备706、处理器702上的存储器或者传播信号。
高速控制器708管理计算设备700的带宽密集型(bandwidth intensive)操作，低速控制器712管理较低的带宽密集型操作。这些功能分配仅是示范性的。在一个实施方式中，高速控制器708耦接到存储器704、显示器716(例如，通过图形处理器或者加速器)以及耦接到可以接受各种扩展卡(未示出)的高速扩展端口710。在该实施方式中，低速控制器712耦接到存储设备706和低速扩展端口714。可以包括各种通信端口(例如，USB、蓝牙、以太网、无线以太网)的低速扩展端口可以耦接到一个或多个输入-输出设备，诸如键盘、定点设备、扫描仪或者诸如通过网络适配器的交换机或者路由器这样的网络设备。
计算设备700可以以大量不同形式实现，如图中所示。例如，它可以实现为标准服务器720或者许多倍这样的服务器组。它还可以实现为架式(rack)服务器系统724。此外，可以实现在诸如膝上型计算机722这样的个人计算机中。可替换地，来自计算设备700的组件可以与诸如设备750的移动设备(未示出)中的其它组件组合。这些设备中的每一个可以包含一个或多个计算设备700、750，并且整个系统可以组成相互通信的多个计算设备700、750。
计算设备750除了其它组件之外还包括处理器752、存储器764、诸如显示器754这样的输入-输出设备、通信接口766和收发器768。设备750还可以提供为具有用于提供额外存储的存储设备，诸如微驱动器或者其它设备。组件750、752、764、754、766和768中的每一个使用各种总线互连，组件中的若干个可以安装在公共母板上或者根据情况以其它方式安装。处理器752可以运行计算设备750内的指令，包括存储在存储器764中的指令。处理器可以实现为包括单独的多个模拟和数字处理器的芯片的芯片集。例如，处理器可以提供设备750的其它组件的协作，诸如用户界面的控制、设备750运行的应用以及通过设备750的无线通信。
处理器752可以通过控制接口758以及耦接到显示器754的显示器接口756与用户通信。例如，显示器754可以是TFT LCD(薄膜晶体管液晶显示器)或者OLED(有机发光二极管)显示器或者其它合适的显示技术。显示器接口756可以包括用于驱动显示器754呈现图形信息以及其它信息给用户的合适电路。控制接口758可以从用户接收命令并且将它们进行变换以提交给处理器752。此外，可以提供外部接口762与处理器752通信，以便使得设备750能够与其它设备的邻近区域通信。例如，外部接口762可以提供用于在一些实施方式中的有线通信，或者用于在其它实施方式中的无线通信，并且还可以使用多个接口。
存储器764存储计算设备750内的信息。存储器764可以实现为一个或多个计算机可读媒介或者媒质、一个易失性存储单元或者多个易失性存储单元或者一个非易失性存储单元或者多个非易失性存储单元。还可以提供扩展存储器774并且通过扩展接口772连接至设备750，扩展接口772可以包括例如SIMM(Single In Line Memory Module，单在线存储模块)卡接口。这些扩展存储器774可以提供用于设备750的额外的存储空间，或者还可以存储用于设备750的应用或者其它信息。具体地说，扩展存储器774可以包括用于实行或者补充上面描述的处理过程的指令，并且还可以包括安全信息。因此，例如，扩展存储器774可以提供为用于设备750的安全模块，并且可以利用允许设备750的安全使用的指令对其进行编程。此外，安全应用可以连同附加信息一起经由SIMM卡提供，诸如将有关SIMM卡的识别信息以不可黑客的方式设置。
存储器可以包括例如闪存和/或NVRAM存储器，如下面所讨论的那样。在一个实施方式中，计算机程序产品可以被有形地具体实现在信息载体中。计算机程序产品可以包含当被运行时执行诸如上面所描述的那些一个或多个方法的指令。信息载体是计算机或者机器可读媒介，诸如存储器764、扩展存储器774、处理器752上的存储器或者可以例如通过收发器768或者外部接口762接收的传播信号。
设备750可以通过通信接口766无线地进行通信，通信接口766必要时可以包括数字信号处理电路。通信接口766可以提供用于在各种模式或者协议下进行通信，诸如GSM语音呼叫、SMS、EMS或者MMS消息、CDMA、TDMA、PDC、WCDMA、CDMA2000或者GPRS等等。这些通信可以例如通过无线频率收发器768存在。此外，短范围通信可以存在，诸如使用蓝牙、WiFi或者其它这样的收发器(未示出)。此外，GPS(全球定位系统)接收机模块770可以提供另外的导航与涉及位置的无线数据给设备750，其可以根据情况由设备750上运行的应用使用。
设备750还可以使用音频编解码器760进行可听通信，音频编解码器可以从用户接收说话信息并且将其变换为可用的数字信息。音频编解码器760可以同样地为用户生成可听声音，诸如通过扬声器，例如设备750中的耳机。这些声音可以包括来自语音电话呼叫的声音，可以包括已记录声音(例如，语音消息、音乐文件等等)并且还可以包括通过设备750上运行的应用生成的声音。
计算设备750可以以大量不同形式实现，如图中所示。例如，它可以实现为蜂窝电话780。它还可以实现为智能电话782、个人数字助理或者其它类似移动设备的部分。
设备750还可以包括能够感测动作的一个或多个不同设备。示例包括但是不局限于加速计和罗盘。加速计和罗盘或者能够检测动作或者位置的其它设备可从任意数量的卖主得到，并且可以以各种方式感测动作。例如，加速计可以检测加速度的改变，而罗盘可以检测分别在磁极北极或者南极方向上的改变。这些动作上的改变可以由设备750检测到并且用于根据这里描述的处理过程和技术更新各个设备750的显示。
这里描述的系统和技术的各种实施方式可以在数字电子线路、集成电路、专门设计的ASIC(专用集成电路)、计算机硬件、固件、软件和/或其组合中实现。这些各种实施方式可以包括可编程系统上可执行和/或可解释的一个或多个计算机程序中的实施方式，可编程系统包括：耦接用于从存储系统接收数据和指令以及发送数据和指令到存储系统的、可以是专用或者通用的至少一个可编程处理器；存储系统；至少一个输入设备和至少一个输出设备。
这些计算机程序(亦称程序、软件、软件应用或者代码)包括用于可编程处理器的机器指令，并且可以以高级程序语言和/或面向对象的编程语言和/或汇编/机器语言来实现。如这里所使用的那样，术语″机器可读媒介″、″计算机可读媒介″指的是用于提供机器指令和/或数据给可编程处理器的任意计算机程序产品、装置和/或设备(例如，磁盘、光盘、存储器、可编程逻辑器件(PLD))，包括接收机器指令作为机器可读信号的机器可读媒介。术语“机器可读信号”指的是用于提供机器指令和/或数据给可编程处理器的任意信号。
为了提供与用户的交互，这里描述的系统和技术可以在具有用于显示信息给用户的显示设备(例如，CRT(阴极射线管)或者LCD(液晶显示器)监视器)以及用户可以通过其向计算机提供输入的键盘和定点设备(例如，鼠标或者轨迹球)的计算机上实现。其它种类的设备也可用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如(视觉反馈、听觉反馈或者触觉反馈)；以及可以以任何形式接收来自用户的输入，包括声音、语音或者触觉输入。
这里描述的系统和技术可以在计算系统中实现，计算系统包括后端组件(例如，作为数据服务器)、或者包括中间件组件(例如，应用服务器)或者包括前端组件(例如，具有图形用户界面或者浏览器——用户通过它们可以与这里描述的系统和技术的实施方式进行交互——的客户端计算机)或者这些后端、中间件或者前端组件的任意组合。系统的组件可以通过任意形式或者数字数据通信媒介(例如，通信网络)互连。通信网络的例子包括局域网(″LAN″)、广域网(″WAN″)和因特网。
计算系统可以包括客户端和服务器。客户端和服务器通常相互远离并且一般通过通信网络交互。客户端与服务器的关系由于在各个计算机上运行并且相互之间具有客户端-服务器关系的计算机程序而引起。
已经描述了许多实施例。然而，应当理解，在不脱离本发明的精神和范围的条件下可以进行各种修改。例如，已经相对于消息应用和地图应用描述了本文件的大部分，但是也可以处理其它形式的图形应用，诸如交互程序向导、网页导航和缩放以及其它这样的应用。
此外，图中描绘的逻辑流不要求示出的特定次序或者顺序次序来实现期望的结果。此外，可以提供其它步骤，或者从所描述的流程中去掉一些步骤，并且可以添加其它组件到所描述的系统或者从其中去除。因此，其它实施例在后附权利要求的范围内。

Claims (21)

1.一种计算机实现的用户界面方法，包括：
将由第一字符集定义的键盘显示在计算设备的触摸屏上；
将电子画布显示在触摸屏上，随着用户选择键盘上的键而在该电子画布上显示与键盘上的键相应的信息，所述信息以不同于第一字符集的第二字符集出现；
在画布的前表面上生成候选区域；以及
随着信息被添加到画布而自动控制候选区域的位置，以便将所述候选区域移开以免覆盖所述画布上的位置，所述画布上的位置当前是信息将被添加到所述画布的位置或者靠近信息将被添加到所述画布的位置。
2.如权利要求1所述的方法，还包括：接收用于使所述候选区域停驻在所述键盘的用户输入，并且随后保持所述候选区域停驻在所述键盘直到随后用于使所述候选区域从所述键盘脱离的用户输入为止。
3.如权利要求2所述的方法，其中，第一字符集包括基于罗马字符的字符集，第二字符集包括符号字符集。
4.如权利要求1所述的方法，还包括：接收用户在所述候选区域中的候选选择，将所选择的候选添加到所述画布，并且如果所述候选窗口使得所述画布上的下一个数据录入区域基本上不清楚的话就移动所述候选窗口。
5.如权利要求1所述的方法，还包括：改变所述候选区域的高宽比以及横向移动所述候选区域靠近所述显示器的一侧。
6.如权利要求1所述的方法，还包括：接收所述键盘上的横向挥动输入，以及沿所述横向挥动输入的方向挪动所述键盘。
7.如权利要求1所述的方法，还包括：接收所述候选区域上的横向挥动动作，以及响应于所述横向挥动动作，挪动在所述候选区域中的多个候选录入。
8.一种包括存储程序代码的计算机可读数据存储介质的物品，所述程序代码可操作用于使得一个或多个机器执行操作，所述操作包括：
将由第一字符集定义的键盘显示在计算设备的触摸屏上；
将电子画布显示在触摸屏上，随着用户选择键盘上的键而在该电子画布上显示与键盘上的键相应的信息，所述信息以不同于第一字符集的第二字符集出现；
在画布的前表面上生成候选区域；以及
随着信息被添加到画布而自动控制候选区域的位置，以便将所述候选区域移开以免覆盖所述画布上的位置，所述画布上的位置当前是信息将被添加到所述画布的位置或者靠近信息将被添加到所述画布的位置。
9.如权利要求9所述的物品，其中，所述程序代码可操作用于执行以下操作，包括：接收用于使所述候选区域停驻在所述键盘的用户输入，并且随后保持所述候选区域停驻在所述键盘直到随后用于使所述候选区域从所述键盘脱离的用户输入为止。
10.如权利要求9所述的物品，其中，第一字符集包括基于罗马字符的字符集，第二字符集包括符号字符集。
11.如权利要求8所述的物品，其中，所述程序代码可操作用于执行以下操作，包括：接收用户在所述候选区域中的候选选择，将所选择的候选添加到所述画布，并且如果所述候选窗口使得所述画布上的下一个数据录入区域基本上不清楚的话就移动所述候选窗口。
12.如权利要求8所述的物品，其中，所述程序代码可操作用于执行以下操作，包括：改变所述候选区域的高宽比以及横向移动所述候选区域靠近所述显示器的一侧。
13.如权利要求8所述的物品，其中，所述程序代码可操作用于执行以下操作，包括：接收所述键盘上的横向挥动输入，以及沿所述横向挥动输入的方向挪动所述键盘。
14.如权利要求8所述的物品，其中，所述程序代码可操作用于执行以下操作，包括：接收所述候选窗口上的横向挥动动作，以及响应于所述横向挥动动作，挪动所述候选区域中的多个候选录入。
15.一种计算机实现的用户界面系统，包括：
图形显示系统，用于呈现输入法编辑器和文本录入应用，该文本录入应用具有用于显示用户输入的信息的画布区域以及用于呈现将添加到所述画布区域的符号的候选区域；
触摸屏用户输入机构，用于依照图像法编辑器的显示接收用户选择；以及
输入法接口管理器模块，其可与图像法编辑器一起操作，用于随着信息被添加到所述画布而自动控制候选区域的位置，以便将所述候选区域移开以免覆盖所述画布上的位置，所述画布上的位置当前是信息将被添加到所述画布的位置或者靠近信息将被添加到所述画布的位置。
16.如权利要求15所述的系统，所述图像法编辑器可操作用于接收第一字符集中的输入以及生成不同于第一字符集的第二字符集中的输出，所述第一字符集不与所述触摸屏用户输入机构上的键相应。
17.如权利要求15所述的系统，其中，所述图像法编辑器接口管理器模块还可操作用于接收用户在所述候选区域中的候选选择，提供所选择的候选以添加到所述画布，并且如果所述候选窗口使得所述画布上的下一个数据录入区域基本上不清楚的话就移动所述候选窗口。
18.如权利要求15所述的方法，其中，所述图像法编辑器接口管理器模块还可操作用于自动改变所述候选区域的高宽比以及横向移动所述候选区域靠近所述显示器的一侧。
19.如权利要求1所述的方法，其中，所述触摸屏用户输入机构可操作用于接收所述图形显示器上显示的键盘上的横向挥动输入，以及所述图形显示系统可操作用于响应于所述横向挥动输入沿横向挥动输入的方向挪动所述键盘。
20.如权利要求1所述的方法，其中，所述触摸屏用户输入机构可操作用于接收所述候选区域上的横向挥动输入，以及所述图形显示系统可操作用于响应于所述横向挥动动作，挪动所述候选区域中的多个候选录入。
21.一种计算机实现的用户界面系统，包括：
图形显示器，用于呈现输入法编辑器以及文本录入应用，该文本录入应用具有用于显示用户输入的信息的画布区域；
触摸屏用户输入机构，用于依照输入法编辑器的显示接收用户选择；以及
用于在画布的一部分上生成浮动候选窗口的装置。
CN2009801594150A 2009-03-20 2009-03-20 与输入法编辑器计算设备的交互 Pending CN102439544A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2009/070927 WO2010105440A1 (en) 2009-03-20 2009-03-20 Interaction with ime computing device

Publications (1)

Publication Number Publication Date
CN102439544A true CN102439544A (zh) 2012-05-02

Family

ID=42739141

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009801594150A Pending CN102439544A (zh) 2009-03-20 2009-03-20 与输入法编辑器计算设备的交互

Country Status (4)

Country Link
US (2) US20120113011A1 (zh)
KR (1) KR20120016060A (zh)
CN (1) CN102439544A (zh)
WO (1) WO2010105440A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103383629A (zh) * 2013-06-27 2013-11-06 广州市动景计算机科技有限公司 一种基于html5的输入方法及装置
CN104750473A (zh) * 2013-12-31 2015-07-01 鸿合科技有限公司 基于安卓系统的叠加书写方法
CN105892928A (zh) * 2016-04-26 2016-08-24 北京小鸟看看科技有限公司 一种3d沉浸式环境下的虚拟键盘及其设计方法
CN109313534A (zh) * 2016-06-13 2019-02-05 微软技术许可有限责任公司 智能虚拟键盘
CN111294632A (zh) * 2019-12-03 2020-06-16 海信视像科技股份有限公司 显示设备
CN111669459A (zh) * 2020-04-23 2020-09-15 华为技术有限公司 键盘显示方法、电子设备和计算机可读存储介质
CN112799578A (zh) * 2021-01-26 2021-05-14 挂号网（杭州）科技有限公司 键盘绘制方法、装置、电子设备和存储介质

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8239201B2 (en) 2008-09-13 2012-08-07 At&T Intellectual Property I, L.P. System and method for audibly presenting selected text
US8782556B2 (en) 2010-02-12 2014-07-15 Microsoft Corporation User-centric soft keyboard predictive technologies
KR101044320B1 (ko) * 2010-10-14 2011-06-29 주식회사 네오패드 가상 키입력수단의 배경화면 컨텐츠 제공 방법 및 시스템
US8775431B2 (en) * 2011-04-25 2014-07-08 Disney Enterprises, Inc. Systems and methods for hot topic identification and metadata
GB2493709A (en) * 2011-08-12 2013-02-20 Siine Ltd Faster input of text in graphical user interfaces
US9191713B2 (en) * 2011-09-02 2015-11-17 William R. Burnett Method for generating and using a video-based icon in a multimedia message
RU2631164C2 (ru) * 2011-12-08 2017-09-19 Общество с ограниченной ответственностью "Базелевс-Инновации" Способ анимации sms-сообщений
US9348479B2 (en) 2011-12-08 2016-05-24 Microsoft Technology Licensing, Llc Sentiment aware user interface customization
KR101892208B1 (ko) 2011-12-12 2018-08-27 구글 엘엘씨 다중 문자 복합 자음 또는 모음의 입력과 터치 컴퓨팅 디바이스를 사용한 다른 언어로의 음역에 관한 기술
US9378290B2 (en) 2011-12-20 2016-06-28 Microsoft Technology Licensing, Llc Scenario-adaptive input method editor
KR20130080891A (ko) * 2012-01-06 2013-07-16 삼성전자주식회사 디스플레이장치 및 그 제어방법
EP2624101A1 (en) 2012-01-31 2013-08-07 Research In Motion Limited Electronic device including touch-sensitive display and method of facilitating input at the electronic device
US8947380B2 (en) 2012-01-31 2015-02-03 Blackberry Limited Electronic device including touch-sensitive display and method of facilitating input at the electronic device
US8954314B2 (en) 2012-03-01 2015-02-10 Google Inc. Providing translation alternatives on mobile devices by usage of mechanic signals
US20130293483A1 (en) * 2012-05-04 2013-11-07 Roberto Speranza Selectable object display method and apparatus
US20130307779A1 (en) * 2012-05-17 2013-11-21 Bad Donkey Social, LLC Systems, methods, and devices for electronic communication
EP2864856A4 (en) 2012-06-25 2015-10-14 Microsoft Technology Licensing Llc SEIZURE METHOD EDITOR APPLICATION PLATFORM
US9959340B2 (en) * 2012-06-29 2018-05-01 Microsoft Technology Licensing, Llc Semantic lexicon-based input method editor
US8959109B2 (en) 2012-08-06 2015-02-17 Microsoft Corporation Business intelligent in-document suggestions
EP2891078A4 (en) 2012-08-30 2016-03-23 Microsoft Technology Licensing Llc CHOICE OF CANDIDATE BASED ON CHARACTERISTICS
US10824297B2 (en) * 2012-11-26 2020-11-03 Google Llc System for and method of accessing and selecting emoticons, content, and mood messages during chat sessions
CN104007832B (zh) 2013-02-25 2017-09-01 上海触乐信息科技有限公司 连续滑行输入文本的方法、系统及设备
US9063636B2 (en) 2013-06-10 2015-06-23 International Business Machines Corporation Management of input methods
KR101511995B1 (ko) * 2013-06-10 2015-04-14 네이버 주식회사 제스처 정보를 이용하여 서비스에 대한 사용자간 관계를 설정하는 방법 및 시스템
JP6153007B2 (ja) * 2013-07-19 2017-06-28 株式会社コナミデジタルエンタテインメント 操作システム、操作制御方法、操作制御プログラム
WO2015018055A1 (en) 2013-08-09 2015-02-12 Microsoft Corporation Input method editor providing language assistance
USD771082S1 (en) 2013-09-10 2016-11-08 Apple Inc. Display screen or portion thereof with graphical user interface
KR102187255B1 (ko) 2013-09-30 2020-12-04 삼성전자주식회사 전자 장치의 디스플레이 방법 및 그 전자 장치
USD872119S1 (en) 2014-06-01 2020-01-07 Apple Inc. Display screen or portion thereof with animated graphical user interface
CN106716308B (zh) 2014-06-17 2020-02-11 谷歌有限责任公司 用于输入地理位置名称的输入法编辑器
USD771646S1 (en) 2014-09-30 2016-11-15 Apple Inc. Display screen or portion thereof with graphical user interface
US10503398B2 (en) * 2014-11-26 2019-12-10 Blackberry Limited Portable electronic device and method of controlling display of selectable elements
US9721024B2 (en) * 2014-12-19 2017-08-01 Facebook, Inc. Searching for ideograms in an online social network
US10095403B2 (en) 2015-05-05 2018-10-09 International Business Machines Corporation Text input on devices with touch screen displays
KR101718626B1 (ko) * 2015-09-21 2017-03-22 맹기환 휴대용 단말기의 메시지 송수신 방법
US10671272B2 (en) 2015-11-06 2020-06-02 International Business Machines Corporation Touchscreen oriented input integrated with enhanced four-corner indexing
US20180074661A1 (en) * 2016-09-14 2018-03-15 GM Global Technology Operations LLC Preferred emoji identification and generation
USD829223S1 (en) 2017-06-04 2018-09-25 Apple Inc. Display screen or portion thereof with graphical user interface
JP6699630B2 (ja) * 2017-06-30 2020-05-27 京セラドキュメントソリューションズ株式会社 入力装置および入力方法
USD957448S1 (en) 2017-09-10 2022-07-12 Apple Inc. Electronic device with graphical user interface
CN107885422A (zh) * 2017-10-24 2018-04-06 南京粤讯电子科技有限公司 移动终端的显示内容设置方法、移动终端以及存储装置
USD839901S1 (en) * 2017-11-22 2019-02-05 Chien-Yi Kuo Computer display panel with graphical user interface for Chinese characters
KR102456601B1 (ko) 2018-02-23 2022-10-19 삼성전자주식회사 키보드 레이아웃과 관련된 기능을 제공하기 위한 장치 및 방법
US11715042B1 (en) 2018-04-20 2023-08-01 Meta Platforms Technologies, Llc Interpretability of deep reinforcement learning models in assistant systems
US11886473B2 (en) 2018-04-20 2024-01-30 Meta Platforms, Inc. Intent identification for agent matching by assistant systems
US11010436B1 (en) 2018-04-20 2021-05-18 Facebook, Inc. Engaging users by personalized composing-content recommendation
US11676220B2 (en) 2018-04-20 2023-06-13 Meta Platforms, Inc. Processing multimodal user input for assistant systems
CN112068762B (zh) * 2020-09-09 2023-09-12 腾讯科技（深圳）有限公司 应用程序的界面显示方法、装置、设备及介质
CN115129225A (zh) * 2021-03-26 2022-09-30 北京小米移动软件有限公司 键盘工具栏显示方法、键盘工具栏显示装置及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060282575A1 (en) * 2005-04-22 2006-12-14 Microsoft Corporation Auto-suggest lists and handwritten input
US20070074131A1 (en) * 2005-05-18 2007-03-29 Assadollahi Ramin O Device incorporating improved text input mechanism
CN101004738A (zh) * 2006-01-16 2007-07-25 夏普株式会社 文字输入装置、具备该文字输入装置及文字输入方法
US20070216658A1 (en) * 2006-03-17 2007-09-20 Nokia Corporation Mobile communication terminal
CN101122840A (zh) * 2007-09-21 2008-02-13 黄晓凤 快速输入相关词的方法
US20080068346A1 (en) * 2006-09-15 2008-03-20 Canon Kabushiki Kaisha Information processing apparatus and method of controlling same

Family Cites Families (69)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USRE34476E (en) * 1990-05-14 1993-12-14 Norwood Donald D Hybrid information management system for handwriting and text
US6154758A (en) * 1994-05-13 2000-11-28 Apple Computer, Inc. Text conversion method for computer systems
US5819055A (en) * 1994-12-13 1998-10-06 Microsoft Corporation Method and apparatus for docking re-sizeable interface boxes
US6295372B1 (en) * 1995-03-03 2001-09-25 Palm, Inc. Method and apparatus for handwriting input on a pen based palmtop computing device
EP0782064B1 (en) * 1995-12-28 2003-04-02 King Jim Co., Ltd. Character input apparatus
US5870091A (en) * 1996-11-07 1999-02-09 Adobe Systems Incorporated Combining palettes on a computer display
US6054941A (en) * 1997-05-27 2000-04-25 Motorola, Inc. Apparatus and method for inputting ideographic characters
US20060033724A1 (en) * 2004-07-30 2006-02-16 Apple Computer, Inc. Virtual input device placement on a touch screen user interface
US7257528B1 (en) * 1998-02-13 2007-08-14 Zi Corporation Of Canada, Inc. Method and apparatus for Chinese character text input
US6473102B1 (en) * 1998-05-11 2002-10-29 Apple Computer, Inc. Method and system for automatically resizing and repositioning windows in response to changes in display
US6169538B1 (en) * 1998-08-13 2001-01-02 Motorola, Inc. Method and apparatus for implementing a graphical user interface keyboard and a text buffer on electronic devices
US7030863B2 (en) * 2000-05-26 2006-04-18 America Online, Incorporated Virtual keyboard system with automatic correction
DE60043008D1 (de) * 1999-05-27 2009-11-05 Tegic Comm Inc Tastatursystem mit automatischer korrektur
US6760048B1 (en) * 1999-06-15 2004-07-06 International Business Machines Corporation Display of occluded display elements on a computer display
US7165019B1 (en) * 1999-11-05 2007-01-16 Microsoft Corporation Language input architecture for converting one text form to another text form with modeless entry
US6848080B1 (en) * 1999-11-05 2005-01-25 Microsoft Corporation Language input architecture for converting one text form to another text form with tolerance to spelling, typographical, and conversion errors
US7403888B1 (en) * 1999-11-05 2008-07-22 Microsoft Corporation Language input user interface
US7107204B1 (en) * 2000-04-24 2006-09-12 Microsoft Corporation Computer-aided writing system and method with cross-language writing wizard
US6809725B1 (en) * 2000-05-25 2004-10-26 Jishan Zhang On screen chinese keyboard
JP3705735B2 (ja) * 2000-08-29 2005-10-12 シャープ株式会社 オンデマンド・インタフェース装置とそのウィンドウ表示装置
CA2323856A1 (en) * 2000-10-18 2002-04-18 602531 British Columbia Ltd. Method, system and media for entering data in a personal computing device
US7013258B1 (en) * 2001-03-07 2006-03-14 Lenovo (Singapore) Pte. Ltd. System and method for accelerating Chinese text input
US7478338B2 (en) * 2001-07-12 2009-01-13 Autodesk, Inc. Palette-based graphical user interface
CA2385224C (en) * 2002-05-07 2012-10-02 Corel Corporation Dockable drop-down dialogs
US7194697B2 (en) * 2002-09-24 2007-03-20 Microsoft Corporation Magnification engine
US7081887B2 (en) * 2002-12-19 2006-07-25 Intel Corporation Method and apparatus for positioning a software keyboard
US7098896B2 (en) * 2003-01-16 2006-08-29 Forword Input Inc. System and method for continuous stroke word-based text input
US7382358B2 (en) * 2003-01-16 2008-06-03 Forword Input, Inc. System and method for continuous stroke word-based text input
US7256769B2 (en) * 2003-02-24 2007-08-14 Zi Corporation Of Canada, Inc. System and method for text entry on a reduced keyboard
EP1639441A1 (en) * 2003-07-01 2006-03-29 Nokia Corporation Method and device for operating a user-input area on an electronic display device
US20050057512A1 (en) * 2003-07-17 2005-03-17 Min-Wen Du Browsing based Chinese input method
US7406662B2 (en) * 2003-11-10 2008-07-29 Microsoft Corporation Data input panel character conversion
US20050125742A1 (en) * 2003-12-09 2005-06-09 International Business Machines Corporation Non-overlapping graphical user interface workspace
CN1704882A (zh) * 2004-05-26 2005-12-07 微软公司 使用键盘的亚洲语言输入
US8046712B2 (en) * 2004-06-29 2011-10-25 Acd Systems International Inc. Management of multiple window panels with a graphical user interface
US20060064652A1 (en) * 2004-09-20 2006-03-23 Nokia Corporation Input of punctuation marks
US9298474B2 (en) * 2004-10-06 2016-03-29 International Business Machines Corporation System and method for managing a floating window
GB0505941D0 (en) * 2005-03-23 2005-04-27 Patel Sanjay Human-to-mobile interfaces
US8374846B2 (en) * 2005-05-18 2013-02-12 Neuer Wall Treuhand Gmbh Text input device and method
US8036878B2 (en) * 2005-05-18 2011-10-11 Never Wall Treuhand GmbH Device incorporating improved text input mechanism
US8010523B2 (en) * 2005-12-30 2011-08-30 Google Inc. Dynamic search box for web browser
US7793231B2 (en) * 2006-01-19 2010-09-07 International Business Machines Corporation Method and system for providing a primary window overlay
US7774722B2 (en) * 2006-01-31 2010-08-10 Microsoft Corporation Creation and manipulation of canvases based on ink strokes
US8930834B2 (en) * 2006-03-20 2015-01-06 Microsoft Corporation Variable orientation user interface
US8683362B2 (en) * 2008-05-23 2014-03-25 Qualcomm Incorporated Card metaphor for activities in a computing device
US8077974B2 (en) * 2006-07-28 2011-12-13 Hewlett-Packard Development Company, L.P. Compact stylus-based input technique for indic scripts
US8106856B2 (en) * 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US8736557B2 (en) * 2006-09-11 2014-05-27 Apple Inc. Electronic device with image based browsers
US8564543B2 (en) * 2006-09-11 2013-10-22 Apple Inc. Media player with imaged based browsing
US7957955B2 (en) * 2007-01-05 2011-06-07 Apple Inc. Method and system for providing word recommendations for text input
US8074172B2 (en) * 2007-01-05 2011-12-06 Apple Inc. Method, system, and graphical user interface for providing word recommendations
KR100881952B1 (ko) * 2007-01-20 2009-02-06 엘지전자 주식회사 터치스크린을 구비하는 이동통신 단말기 및 그 동작제어방법
JP4899991B2 (ja) * 2007-03-30 2012-03-21 富士ゼロックス株式会社 表示装置及びプログラム
US8457946B2 (en) * 2007-04-26 2013-06-04 Microsoft Corporation Recognition architecture for generating Asian characters
US8059101B2 (en) * 2007-06-22 2011-11-15 Apple Inc. Swipe gestures for touch screen keyboards
US8661340B2 (en) * 2007-09-13 2014-02-25 Apple Inc. Input methods for device having multi-language environment
US8881049B2 (en) * 2007-12-14 2014-11-04 Apple Inc. Scrolling displayed objects using a 3D remote controller in a media system
US8610671B2 (en) * 2007-12-27 2013-12-17 Apple Inc. Insertion marker placement on touch sensitive display
US8650507B2 (en) * 2008-03-04 2014-02-11 Apple Inc. Selecting of text using gestures
US8289283B2 (en) * 2008-03-04 2012-10-16 Apple Inc. Language input interface on a device
US20090235281A1 (en) * 2008-03-12 2009-09-17 Inventec Corporation Handheld electronic device, input device and method thereof, and display device and method thereof
US9503562B2 (en) * 2008-03-19 2016-11-22 Universal Electronics Inc. System and method for appliance control via a personal communication or entertainment device
US20090265644A1 (en) * 2008-04-16 2009-10-22 Brandon David Tweed Automatic Repositioning of Widgets on Touch Screen User Interface
US20100020033A1 (en) * 2008-07-23 2010-01-28 Obinna Ihenacho Alozie Nwosu System, method and computer program product for a virtual keyboard
US8584031B2 (en) * 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
US20100131447A1 (en) * 2008-11-26 2010-05-27 Nokia Corporation Method, Apparatus and Computer Program Product for Providing an Adaptive Word Completion Mechanism
CN102326136A (zh) * 2009-02-23 2012-01-18 捷讯研究有限公司 触摸敏感显示器及其控制方法
US8479106B2 (en) * 2009-02-27 2013-07-02 Research In Motion Limited Method and device to simplify message composition
US20110093278A1 (en) * 2009-10-16 2011-04-21 Golden Hour Data Systems, Inc System And Method Of Using A Portable Touch Screen Device

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060282575A1 (en) * 2005-04-22 2006-12-14 Microsoft Corporation Auto-suggest lists and handwritten input
US20070074131A1 (en) * 2005-05-18 2007-03-29 Assadollahi Ramin O Device incorporating improved text input mechanism
CN101004738A (zh) * 2006-01-16 2007-07-25 夏普株式会社 文字输入装置、具备该文字输入装置及文字输入方法
US20070216658A1 (en) * 2006-03-17 2007-09-20 Nokia Corporation Mobile communication terminal
US20080068346A1 (en) * 2006-09-15 2008-03-20 Canon Kabushiki Kaisha Information processing apparatus and method of controlling same
CN101122840A (zh) * 2007-09-21 2008-02-13 黄晓凤 快速输入相关词的方法

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103383629A (zh) * 2013-06-27 2013-11-06 广州市动景计算机科技有限公司 一种基于html5的输入方法及装置
CN103383629B (zh) * 2013-06-27 2017-05-31 广州爱九游信息技术有限公司 一种基于html5的输入方法及装置
CN104750473A (zh) * 2013-12-31 2015-07-01 鸿合科技有限公司 基于安卓系统的叠加书写方法
CN105892928A (zh) * 2016-04-26 2016-08-24 北京小鸟看看科技有限公司 一种3d沉浸式环境下的虚拟键盘及其设计方法
CN109313534A (zh) * 2016-06-13 2019-02-05 微软技术许可有限责任公司 智能虚拟键盘
CN111294632A (zh) * 2019-12-03 2020-06-16 海信视像科技股份有限公司 显示设备
CN111669459A (zh) * 2020-04-23 2020-09-15 华为技术有限公司 键盘显示方法、电子设备和计算机可读存储介质
CN111669459B (zh) * 2020-04-23 2022-08-26 华为技术有限公司 键盘显示方法、电子设备和计算机可读存储介质
CN112799578A (zh) * 2021-01-26 2021-05-14 挂号网（杭州）科技有限公司 键盘绘制方法、装置、电子设备和存储介质
CN112799578B (zh) * 2021-01-26 2022-06-17 挂号网（杭州）科技有限公司 键盘绘制方法、装置、电子设备和存储介质

Also Published As

Publication number Publication date
KR20120016060A (ko) 2012-02-22
US20120019446A1 (en) 2012-01-26
US20120113011A1 (en) 2012-05-10
WO2010105440A1 (en) 2010-09-23

Similar Documents

Publication Publication Date Title
CN102439544A (zh) 与输入法编辑器计算设备的交互
CN106663109B (zh) 针对移动屏上内容提供自动动作
US8060841B2 (en) Method and device for touchless media searching
CN102460362B (zh) 在计算设备上的字形输入
US9412363B2 (en) Model based approach for on-screen item selection and disambiguation
CN102439540B (zh) 输入法编辑器
US8605039B2 (en) Text input
CN103403659B (zh) 用于导览识别符列表的装置、方法和图形用户接口
US11640503B2 (en) Input method, input device and apparatus for input
US8775165B1 (en) Personalized transliteration interface
US20110131521A1 (en) Method and apparatus for providing user interface
US20130002553A1 (en) Character entry apparatus and associated methods
CN102422245B (zh) 输入法编辑器
US20110173172A1 (en) Input method editor integration
CN102033710A (zh) 用于管理文件夹的方法和相关设备
US20140164981A1 (en) Text entry
WO2010000208A1 (en) Resource locator suggestions from input character sequence
KR101882293B1 (ko) 문자 입력 및 컨텐츠 추천을 위한 통합 키보드
US9996522B2 (en) Dictionary device for determining a search method based on a type of a detected touch operation
US20130307781A1 (en) Data entry systems
US20210271364A1 (en) Data entry systems
JP5674140B2 (ja) テキスト入力装置、テキスト入力受付方法及びプログラム
CN112334870A (zh) 用于配置触摸屏键盘的方法和电子设备
US10380247B2 (en) Language-based acronym generation for strings
KR101982771B1 (ko) 문자 입력 및 컨텐츠 추천을 위한 통합 키보드

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120502