CN115917469A - 用于将语标输入电子设备的装置和方法 - Google Patents

用于将语标输入电子设备的装置和方法 Download PDF

Info

Publication number
CN115917469A
CN115917469A CN202280005133.0A CN202280005133A CN115917469A CN 115917469 A CN115917469 A CN 115917469A CN 202280005133 A CN202280005133 A CN 202280005133A CN 115917469 A CN115917469 A CN 115917469A
Authority
CN
China
Prior art keywords
contact
user
gesture
character
stroke
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280005133.0A
Other languages
English (en)
Inventor
骆瀚宁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Luo Hanning
Original Assignee
Silk Disk Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Silk Disk Technology Co ltd filed Critical Silk Disk Technology Co ltd
Publication of CN115917469A publication Critical patent/CN115917469A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1662Details related to the integrated keyboard
    • G06F1/1671Special purpose buttons or auxiliary keyboards, e.g. retractable mini keypads, keypads or buttons that remain accessible at closed laptop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233Character input methods
    • G06F3/0234Character input methods using switches operable in different directions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/0202Constructional details or processes of manufacture of the input device
    • G06F3/0219Special purpose keyboards
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233Character input methods
    • G06F3/0235Character input methods using chord techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233Character input methods
    • G06F3/0237Character input methods using prediction or retrieval techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1601Constructional details related to the housing of computer displays, e.g. of CRT monitors, of flat displays
    • G06F1/1607Arrangements to support accessories mechanically attached to the display housing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/033Indexing scheme relating to G06F3/033
    • G06F2203/0331Finger worn pointing device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/033Indexing scheme relating to G06F3/033
    • G06F2203/0339Touch strips, e.g. orthogonal touch strips to control cursor movement or scrolling; single touch strip to adjust parameter or to implement a row of soft keys
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04809Textured surface identifying touch areas, e.g. overlay structure for a virtual keyboard
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Input From Keyboards Or The Like (AREA)

Abstract

一种用于在诸如智能电话的电子设备上输入语标字符集的字符的文本输入装置,包括:具有多个离散虚拟或实际弦的用户界面,这些弦构成多个接触区域,这些接触区域可以按行排列,该界面用于,每当用户用至少一个手指或拇指接触各接触区域时,生成中间信号,该中间信号的值取决于手指或拇指在接触区域上进行的接触的类型;处理电路,该处理电路用于接收中间信号的时间序列,并根据该序列中的中间信号的值生成相应的基本笔画的时间序列,其中,每个中间信号的每个值被映射到基本笔画,每个基本笔画是语标字符集的字符的一部分。用户可以通过非常自然和容易学习的方式与该装置交互,类似于演奏传统的弦乐器。

Description

用于将语标输入电子设备的装置和方法
本发明涉及一种用于将标识性书写体系(logographic writing system)的语标(logogram)输入电子设备的装置和方法,具体地但不排他地,用于将中文语标输入到计算机或智能手机中。
语标是代表字或语素的书写符号。汉语是一种广泛使用的语言,写下来就是一系列的语标。语标不同于字母字符,因为单独的字母字符通常并不代表一个字。并不是用字母字符的不同序列来代表一个字,而是使用单个语标来代表一个字。
大多数语标字符集可以使用相对较小的一组基本笔画或笔画类型来书写。通过将笔画放在一个字符的不同位置,可以构建许多不同的整体形状。由基本笔画或笔画类型组成的每个形状都是一个语标。
字符集中的笔画类型通常属于笔画类型的有限集合。如果用户可以书写每一个基本笔画,那么通过将它们写在相对于其他基本笔画的正确位置,就可以写出字符集的任何语标字符。虽然一个集合中可能有数千个字符,但基本笔画却少得多。这些包括点、横和竖等。
因为每个字被写成字符集中的单个唯一字符,所以标识性书写体系将包括成百上千个唯一的语标。当需要在电子设备上输入这些字符时,就会带来一个独特的问题。尽管通过为每个字符使用一个键,可以实现基于字母表的书写系统,使得输入变得毫不困难,但是为较大字符集的每个语标字符使用一个键,就会变得不切实际。例如,在中文中,需要几千个键。计算机设备可以保存成千上万个字符的中文字符集,每个字符可以被分配给跨多个平台识别的编码系统中的唯一代码。最广泛使用的编码系统之一是Unicode系统,其中分配的Unicode告诉计算机哪个字符将显示在屏幕上,让计算机根据屏幕分辨率等来呈现适当的语标。Unicode为字符提供了一个通用的编码系统,允许书写内容在可能使用不同软件的不同计算机设备上重现。另一种通用编码系统是CJK(中文、日文、韩文)编码系统。
多年来,已经进行了许多尝试来提供在计算机设备上用诸如中文的语言书写的方法。各有各的缺点。有几种方法在使用中,语音输入是常用的。这种方法依赖于用户输入“拼音”,即字符的语音罗马化,并从选项列表中选择正确的字符。例如,要得到‘你好’,可以键入“Ni Hao”,并从带有该发音的可能字符列表中进行选择。这是低效的,因为汉语具有有限的语音库存和大量同音音节。许多说流利汉语的人正在忘记如何书写,因为基于拼音的输入使他们能够在不知道如何书写的情况下输入字符。
除了基于拼音的输入系统,其他主流中文文本输入系统包括仓颉(键盘输入,使用一个字符的“根”标识)和五笔(键盘输入,基于形状)和手写识别(最慢)。拼音最容易学,但是效率低,不准确。仓颉略准确,五笔是最有效和准确的,但学习曲线最陡。仓颉和五笔都需要更多关于系统使用的知识,这样用户在使用任一键盘时,都无法直观地知道如何使用。
最近,已经提出了语音识别,但是这并不适用于所有的人或情况。在嘈杂的环境中移动时,语音听写很困难,并且在输入生僻字时非常慢。
这些系统都没有帮助用户学习或保持书写语标的正确书写知识的能力,这正成为许多学者的担忧,他们担心新一代计算机用户可能会失去手写的能力。
根据第一方面,本发明提供了一种用于将语标字符集的字符输入电子设备的文本输入装置,该装置包括:
具有多个离散接触区域的用户界面,用于每当用户用至少一个手指或拇指接触接触区域时生成中间信号,中间信号的值取决于手指或拇指在接触区域上进行的接触的类型;处理电路,用于接收中间信号的时间序列,并根据序列中的中间信号的值,生成相应的基本笔画的时间序列,其中每个中间信号的每个值被映射到基本笔画,每个基本笔画是语标字符集的字符的一部分。
字符的一部分指的是笔画不足以形成完整语标字符,不过,从一个手势或同时做出的一串手势生成完整的语标字符也在本发明的范围内。
该方法还可以包括,在用户输入结束命令时,将输入的基本笔画集映射到语标字符,并输出在字符编码系统中的相应代码。
该界面可以为以下一种或多种手势的中间信号分配不同的值:
穿过接触区域的上下手势;
在接触区域沿着垂直于上下方向的左右手势;
穿过接触区域的对角手势;
施加到接触区域的压力;
接触的时长,和
穿过或沿着接触区域的接触动作的速度。
本发明的系统使用户能够通过使用特定手势类型接触界面的适当接触区域,来输入构成语标的基本笔画的序列。这类似于用户可以在键盘上,按适当的按键序列,使用固定按压手势来输入字母字符序列以键入字。与在键盘上按下按键不同,接触各接触区域也可以是使用各种不同的手势类型,类似于演奏弦乐器,这样,一个接触区域可以有多种方式使用。
在一个优选布置中,界面可以包括多个接触区域,这些接触区域按行分组,每一行提供细长的“虚拟弦”,与按下键盘上有限的一组键相比,用户可以用更多的方式与“虚拟弦”交互。显而易见,这使得用户能够在给定的形状因子下进行更多数量的独特输入。上下手势可以类比于拨动琴弦,左右手势类比于沿着琴弦滑动等。
除按行排列之外,接触区域也可以按列排列。为了方便起见,本文剩余部分中,凡提到“行”的,都应该理解为也指具有列的布置,两者可互换,并且在任何情况下都取决于用户界面相对于用户的朝向如何。
每行接触区域中的接触区域可以是细长的。每行可以包括从该行的一端延伸到另一端的单个细长接触区域。可选地,每一行可以包括两个或更多个接触区域,这些接触区域抵接该行中的相邻区域,从而使得一组接触区域整体形成连续的细长元件,该元件响应于手指在沿其长度的任何位置拖动。该连续元件可以具有比其厚度大得多的长度,以定义类似于乐器弦的虚拟弦。每个区域的长轴可以与相应的行的长轴对齐。
在其他布置中,每行可以包含至少两个接触区域,这两个接触区域彼此重叠,或者其中一个完全包含在另一个的边界内。
接触区域的行可以平行布置,每行的一端沿着垂直于行的长轴的方向与所有其他行的一端对齐。
每行可以沿着该行的长轴具有与其他行相同的长度,使得这些行的第二端也可以沿着与其他行的长轴正交的方向排列。
可以有至少2行,优选4行或5行,但是可以是更多或更少。平行的行将使界面看起来像弦乐器。
每行可以包括至少两个接触区域,或者至少3个,或者多达8个或9个,或者可能多于10个接触区域。这些接触区域可以是连续的,不过,可以在一行中的相邻接触区域之间或相邻行之间设置间距。
这些行可以位于输入设备的基底部分的上表面。最优选地,这包括大致矩形的基底部分,该基底部分在平行于行的长轴的方向上具有第一尺寸,其尺寸允许使用者双手的手指和拇指沿着细长元件并排放置。当然,不同的人,手的大小是不同的,这样,优选宽度在20厘米到30厘米之间。这允许用户使用他们的任何手指或拇指来接触弦的区域,或者使用他们双手的手指和拇指一次接触多达10个区域,或者,如果一个手指或拇指同时接触细长元件的两个相邻区域,则可接触更多。
平行时,行之间的间距可以小到2mm,大可到10mm或更高。该间距应该允许用户独立于其他区域接触一行中的一个区域,但也应该允许通过以一个手势在多行上拖动,来快速生成中间信号的时间序列。
该间距可以大于每行区域的厚度。
每行接触区域可以采取多种形式。例如,在一种布置中,每个接触区域可以包括从基底部分的上表面凸出的或者被支撑在基底部分的上表面上方的凸起,或者与该凸起对齐,这样,在元件的一个区域上拖动手指时,手指将在该区域上拨动。凸起能够让用户容易地感觉到与该区域的接触。
凸起可以包括细长的挡边,挡边的长轴与每行感测区域的长轴对齐。它可以具有高于基底上表面1毫米至3毫米的高度,但是其他高度也是可能的。
凸起可以是刚性的或者可以是柔性的,或者可以相对于基底部分铰接。
作为多个凸出的凸起的替代,每个接触区域可以与基底部分的上表面齐平,例如在触摸屏上。通过具有与周围基底不同的颜色或色调的标记或者通过使用感觉不同的材料,每个元件可以在基底部分上被识别,使得用户知道在哪里做出手势。也可以设置其他标记,例如文本或箭头,类似于键盘上印有的字母和符号。
在另一替代方案中,每个接触区域可以包括设置在基底部分表面中的凹槽,或者每个接触区域可以与该凹槽对齐。在这种情况下,当用户用手指扫过该区域时,他们会感觉到凹槽的边缘。该凹槽可以与该行区域的长轴对齐。
凸起的尖端或凹槽的底部可以着色,以使其从底部可见。各接触区域可以使用合适的背光照亮。
标记或凸起或凹槽可以沿着每行接触区域的中心线延伸,从而向用户提供这些区域的位置的指示。它们可以代表穿过接触区域中心的虚拟“弦”。
标记或凸起可以是细长的,并且沿着每行接触区域的全长延伸。细长标记的宽度可以对应于接触区域的边界,这样,在标记或凸起上任何地方的接触将被检测为接触区域的接触。可选地,标记或凸起可以更细,并且可以,例如,指示每一行细长的接触区域的中心轴。
接触区域本身对于用户来说可能是不可见的,并且与标记或凸起分开。
文本输入装置可以包括触敏显示器,并且各行接触区域可以各自从显示器的一侧基本上延伸到另一侧。
为了检测用户何时在接触区域上拖动手指,每个区域必须能够检测进行接触的时间,并且提供用于生成与接触区域相关联的中间信号的触发或输出。
在最优选的布置中,每个接触区域包括一个或多个触敏区域,并且同样可以包括检测手指接触和手指运动的传感器。用于这种触敏区域的几种合适的技术在本领域中是已知的,并且它们被广泛用于形成电子设备的触敏显示器,包括移动电话、平板电脑和笔记本电脑。
触敏区域可以包括触敏显示器的多个区域,例如,智能手机或平板电脑或监视器的触摸屏。这是一种方便的布置,因为显示器可以用于以图形方式、以风格化的形式示出行的位置,并且能够检测用户做出的手势。
每个接触区域可以包括单个触敏区域,该触敏区域可以输出对接触和接触类型进行编码的中间信号,例如,移动的方向和持续时间,以及当用户在接触区域上划动手指时的压力。
或者,接触区域可以包括一组子区域,每个子区域都是触敏的,每个子区域输出数据信号,通过处理从形成该组的信号中检测到的数据信号来生成中间信号。
在用于生成中间信号的界面中,可以有多种处理形式。在一个可以实施的优选方法中,提供了触敏表面,例如触摸屏,可以进行手势的向量分析。在这种情况下,用户界面可以执行以下步骤:
1.触敏表面的划动被记录为向量,然后可以对其进行归一化,使得该向量的幅度为1。每一次划动开始,则单独处理一次划动,至于下一次划动的开始,则定为划动之间的时间间隔超过阈值时,或者检测到的接触的位置发生跳跃时和。
2.用点积确定上述向量最接近多个划动“方向”中的哪一个(上、下、左、右、对角线左上、对角线右上、对角线左下、对角线右下)。从本质上来说,上述向量被分为这8类之一。
3.接触区域的特征和划动的方向给出了笔画的特征。
构成接触区域的触敏区域的子集可用于触敏感子区域的规则网格,例如,N*N网格,其中,N大于1,或者N*M网格,其中,N和M可以相同或不同,并且每个都大于1。这种布置使得触摸屏设计领域的技术人员执行向量分析非常简单,并且通常用在例如智能手机应用的游戏引擎中。
处理设备可以考虑输出生成的顺序,从网格中每个子区域的输出的组合中生成每个中间信号。例如,对于子区域网格中向上或向下的手势,顺序将相反。
在每行包括具有不同尺寸的两个重叠接触区域的情况下,第一接触区域可以包括第一触敏区域子集,其定义了在中心轴每一侧的较宽区域上触摸敏感的接触区域,并且第二接触区域可以包括第二触敏区域子集,其定义了在中心轴每一侧的较窄区域上触摸敏感的接触区域,第一和第二接触区域的中心轴是相同的或基本相同的,这样,窄行置于宽行内。
宽行和窄行的布置将导致相邻宽行之间的死区相对较小或没有死区,而窄行之间的死区较大。所谓死区是指当接触时不会生成任何信号(该信号有助于生成中间信号)的区域。
对于每一行,宽接触区域和窄接触区域可以对齐,使得沿着该行的中心轴的开始和结束的位置相同。
在每行由完全重叠的窄行和宽行组成的情况下,上述步骤1至3可以扩展为以下一组步骤:
1.划动被记录为向量,然后被归一化,因此向量的大小为1。(每次划动都单独处理)。因为两个接触区域重叠,所以在大多数情况下将产生两个向量,除了边缘情况,在边缘情况下,即,做出“左”或“右”手势,该手势离该行的中心轴足够远,以至于错过窄的接触区域,但是落入更宽的接触区域。在这种情况下,较宽的接触区域将产生一个向量,而较窄的接触区域什么也没有。
2.用点积确定向量最接近多个“方向”(上、下、左、右、对角线左上、对角线右上、对角线左下、对角线右下)中的哪一个。基本上,向量被归入多个类别中的一个。
3.如果向量被分类为“左”或“右”,那么较宽接触区域的向量被用作中间信号的基础。
4.否则,使用较窄接触区域的向量来确定中间信号。
5.接触区域的特征和划动的方向给出笔画的特征。
通过提供定义较宽和较窄形式的接触区域的行,有助于允许用户相对于弦更自由地做出手势。理想情况下,用户是准确地沿着或穿过指定的弦做手势。但在实践中,用户可能会错过弦,尤其是当作出平行于行的水平手势时。如果使用的是较窄的接触区域,并且它们之间具有宽的空间,那么手势可能完全错过较窄的接触区域,也就不会生成向量。通过使用较宽的区域,处理电路将识别出向量。它将只在一个较宽的区域中,因为用户将只在一个弦上或接近一个弦。另一方面,如果用户在一个弦上做出手势,则可以很容易延伸到两个较宽区域,导致每个区域都生成一个向量,给出的输出也就存在歧义,或者被误读为在两个弦上同时做出手势。当使用较窄接触区域时,将仅识别一个向量和接触区域,因为起点或终点将在较窄区域之间的死区中。
无论接触区域是凸起的、齐平的还是凹陷的区域,或者与凸起的、齐平的或凹陷的区域对齐,或者是这些类型的区域的组合,用户输入设备可以包括向用户提供触觉反馈的致动器阵列,这样,用户可以感觉到他们在细长元件的区域上拖动他们的手指。因此,用户输入设备可以在感测区域被接触时产生感测区域的振动。替代地或附加地,该装置可以包括扬声器,并且处理器可以将信号馈送到扬声器,该扬声器产生适当的听觉确认,确认哪个区域已经被接触。在进一步的替代方案中,可以提供视觉反馈。
在一种布置中,输入设备可以包括触摸屏,并且各行感测区域可以由触摸屏上的标记来表示。这些标记可以是永久的、覆盖在触摸屏上的或由触摸屏显示的,或者可以是临时的。例如,标记可以仅在需要时呈现在触摸屏上。
在另一种布置中,该装置包括智能手机或平板电脑或其他具有触摸屏的设备,其中,触摸屏的区域定义接触区域。可以使用如今典型的智能手机触摸屏,因为可以检测移动和接触。还有技术允许用户在触摸屏上同时接触多个区域,从而允许同时生成多个中间信号。如下文将解释的,这种多点触摸能力可以被用作中间信号到形成语标的一部分的基本笔画或基本笔画组(包括偏旁)的映射的一部分。
这些行可以从触摸屏的一侧延伸到另一侧,或者几乎从一侧延伸到另一侧。触摸屏可以从智能手机或平板电脑的一侧延伸到另一侧。触摸屏可以基本上占据平板电脑或智能手机的整个正面,围绕触摸屏可能有相对较窄的边框。这种布置允许用户用双手或单手握持电话,并且使用一个拇指、两个拇指或一个或多个手指沿着一行的任何地方进行扫动,以输入基本笔画。这比任何键盘类型的界面提供了更大的通用性,因为在键盘类型的界面中,必须接触智能手机的非常小的特定区域来进行输入。它还使得左手和右手用户能够以相同的灵巧度进行输入。
在另一个替代方案中,可以设置摄像头系统,其捕获用户手指在一行接触区域上的移动,摄像头确定用户何时接触了一个区域,并导致生成适当的中间信号。摄像头系统可以包括至少一个摄像头,该摄像头在摄像头的视场内具有接触区域。可以提供两个摄像头,从不同的视角观察接触区域。
在又一种布置中,该界面可以包括附着在手上的多个传感器,可能是附着在用户的每个手指和拇指上的一个或多个传感器,其跟踪手指和拇指相对于一组被动接触区域的运动。在这种情况下,传感器将被用于当用户接触接触区域时生成中间信号。该界面可以采取一只或多只手套的形式。
在又一种布置中,用户界面可以包括在基底部分上保持张紧的实际弦,每个弦定义接触区域,该界面包括感测设备,该感测设备从每个弦的振动的结果频率和振幅检测用户做出的不同类型的手势。
感测设备可以包括拾音器,该拾音器包括与每个弦相关联的至少一个线圈绕组。任何熟悉电子弦乐器的技术人员都知道合适的拾取器的设计和构造。
作为拾音器的替代,感测装置可以包括麦克风,该麦克风可以响应于由弦发出的声音而生成信号。
该界面可以被设置成生成中间信号,该中间信号对手指在接触区域上的移动的至少一个属性进行编码。中间信号可以唯一地识别接触区域和移动的性质。不过,在本发明的范围内,也可包括两个或多个区域输出相同的中间信号,例如,每行具有两个重叠区域,一个宽区域,一个窄区域。这类似于同一音符可以在同一件乐器的不同弦上演奏的方式,为用户提供了多种方式来输入相同的基本笔画或笔画组。因此,中间信号可以识别接触区域所在的行以及接触该区域的用户所做的移动的性质。
编码属性可以包括手指在接触元件上正交移动的方向。例如,在用户输入设备放置在用户前面并且接触元件的行水平延伸的情况下,用户可以朝向远离他们身体的方向在元件上拖动他们的手指或拇指,这可以被编码为向上的笔画。另一方面,在输入设备处于相同方向的情况下,用户可以朝向他们身体的方向在元件上拖动他们的手指或拇指,这可以被编码为向下的笔画。
该属性还可以包括手指在与包含接触区域的行的长轴对齐的方向上沿着接触元件移动的方向。
该属性还可以包括手指施加到接触区域的压力,这样,轻压手势将被编码为具有与重压手势不同的值。压力指的是用户在做手势过程中在元件区域下压的力度。
该属性还可以包括做手势的长度,指的是手指或拇指或定点设备(指示笔)从开始到结束做出单个手势花费了多长时间。
该属性还可以包括做手势的速度,指的是用户在细长元件上移动手指的速度。
该界面可以针对每个接触区域向处理电路输出中间信号,该中间信号具有许多不同值中的相应一个(根据所做手势的类型)。例如,在方向(上/下移动、左/右移动、对角线上左/右移动、对角线下左/右移动)、压力(高/低)、长度(长/短)和速度(快/慢)的八个属性均取二进制值的情况下,每个手势可为细长元件的每个区域生成多达64个不同的输出值。如果接触元件的每一行由10个区域组成,那么每行总共有640个可能的输出值,对于5行总共有3200个可能的输出值。
处理电路可用于将基本笔画映射到时间序列中每个中间信号的属性或属性的组合。
此外,处理电路可用于将字符组合映射到每行的接触区域,或者映射到用户输入设备的特定接触区域。这样,不管用户接触一行中的哪个接触区域,都可以生成相同的基本笔画。例如,在移动电话的屏幕上呈现行的情况下,能够沿着行的任何地方进行交互,允许惯用左手和惯用右手的人以简单的方式使用该设备,因为他们可以从屏幕的任一边缘进入。
在一个替代方案中,处理电路可以将字符组合映射到时间序列中每个中间信号的属性或属性组合,并将基本笔画映射到每行的接触区域,或者映射到用户输入设备的特定接触区域。
在一个不同的布置中,处理电路可以将一组基本笔画映射到序列中同时生成的中间信号的组合。如果用户同时或基本上同时做出两个或更多个手势,将生成同时的中间信号。与一个接触区域的接触可以使界面同时生成多个信号,或者它们可以从与多个接触区域的接触中生成。这种中间信号的和弦可以被映射到编码字符组合的快捷手势,该字符组合可以由用户在做出表示单个基本笔画或一组基本笔画的单独或同时手势之前输入。
用户输入设备可以被配置成使得接触接触区域的用户将生成中间信号,该中间信号优选地唯一地标识该区域以及所使用的手势的一个或多个属性。中间值的时间序列中的中间信号的值可以包括一串二进制数字。
例如,每个接触区域可以被分配一个唯一的四位数代码,当有与该弦的接触时,该界面包括该代码作为中间信号的第一部分。第一接触区域可以被分配代码0001,第二接触区域被分配代码0010,第三接触区域被分配代码0011,等等。当接触第一接触区域时,可以生成“ID/手势属性1/手势属性2/手势属性3/手势属性4/.../手势属性N”形式的中间信号。在这个例子中,中间信号将以0001作为ID开始,并且可以跟随有四个二进制数字,以指示手势是向上的(1表示向上,0表示向下)并且具有高压力(末位1表示高,0表示低)。时间序列将包括这些中间值的序列,例如二进制数据的序列。在这种编码方案中,四个二进制数字允许对五个可能的手势属性中的四个进行编码。如果所有五个手势都要被编码,或者如果需要更多的手势属性,可以使用更多的二进制数字。
在一种方便的布置中,该装置可以被配置成使得笔画类型或基本笔画被分组为集合,每行一个集合,每个集合中的特定基本笔画由用户做出接触一行中的任何接触区域的手势来生成。给定接触区域上的不同手势可以生成不同的关联基本笔画。总之,通过这种映射,接触区域的行的特征被映射到一个基本笔画的集合,并且手势的类型被映射到该集合内的基本笔画。
在一个替代方案中,如果需要,可将相应行内的接触区域的特征映射到该集合内进一步的笔画子组。
在一个替代方案中,该装置可以被配置成:当用户接触接触区域时,基本笔画被分配给所使用的不同手势的唯一属性或组合,并且用被接触的接触区域的特征,对字符的组合类型进行编码。总之,通过这种映射,接触区域的特征独立于笔画类型。接触区域特征被映射到组合类型。
处理电路可用于生成与中间信号的时间序列中存在的任何和弦相对应的唯一基本笔画组,和弦包括时间上重合的两个或更多中间信号。这将在用户同时接触两个或更多区域时生成。
虽然本发明主要实现了每当用户用手指或拇指或点击触控设备扫过接触区域时,通过一个或一组基本笔画来输入语标,但是处理器也可用于响应于中间信号的单个和弦或和弦序列,输出整个语标,或输出由一组基本笔画组成的并形成语标的一部分的偏旁部首。这可能便于输入常用字符。
该装置可以包括存储在存储器中的查找表,该查找表将这些手势的和弦映射到笔画组。
该装置可以包括存储在存储器中的查找表,该查找表将单个手势或手势组映射到每个接触区域。处理电路可以访问该表,以从中间信号序列生成笔画序列。
该装置可以包括存储在存储器中的查找表,该查找表将序列中的笔画映射到偏旁部首或完整语标。
该装置可以包括存储在存储器中的查找表,该查找表将完整的语标字符映射到编码系统的代码,例如Unicode。
处理电路可用于使用存储的查找表来生成所需的笔画序列和完整的语标字符,并且可选地,从编码系统生成相关联的代码。
该装置可以包括显示器,该显示器用于按时间顺序呈现每个基本笔画的视觉表示,以构建语标。
显示器可以包括移动电话、笔记本电脑、平板设备或个人计算机的显示器。
在接触区域被呈现在触摸屏上的情况下,该触摸屏的不同区域可用于呈现基本笔画。
处理电路可用于,一旦生成了相应的一组基本笔画,自动完成字符集中的一个字符。
为了执行自动完成,处理电路可用于从数据库中连续搜索和检索与基本笔画序列匹配的字符,以及可选的,字符组合。每个被识别的字符可以由处理器显示在显示器上,并且一旦正确的字符被显示,用户可以输入结束信号,该信号被处理电路接收以“结束”该字符并继续下一个字符。
一旦处理电路已经识别了完整的语标字符,并且可选地,一旦被用户确认为正确,则处理电路可用于从存储器中检索与该基本笔画输入序列对应的语标的字符编码系统的代码,例如Unicode或CJK系统或其他系统。
单个基本笔画或一组基本笔画可以包括形成完整中文语标字符的笔画。可选地,字符可以包括形成韩语或日语完整语标字符的笔画。在一些布置中,本发明不限于这些特定的语言,而是可以应用于任何语标书写系统。
该装置可以在电子存储器中存储响应于接触区域上的手势序列而生成的完整语标字符编码序列,以便以后在显示器上呈现为书面文本。
该装置可以包括显示器,并且可以被布置成随着笔画序列的形成,在显示器上实时显示序列中的每个语标。
用户输入设备、处理电路和显示器可以组合成单个单元,例如,以智能手机或平板电脑的形式。这将要求显示器是触敏显示器,或者具有单独的显示器和用户输入设备。
处理器可以远离用户输入设备,例如,处理器可以形成个人计算机的处理电路的一部分,并且用户输入设备可以通过有线或无线连接将中间信号传输到远程处理器,作为标准QWERTY键盘或鼠标或触摸板的替代或补充。
在一个替代方案中,用户输入设备和处理器可以组合成一个不包括显示器的单元,使得该单元将输出单个笔画或笔画序列,用于在远程显示器上呈现。例如,接触区域可以与处理器物理组合为一个单元。在这种情况下,需要进一步的处理电路来将基本笔画映射到书写语标,例如,体现为在接收基本笔画输出序列的个人计算机上运行的计算机程序。
在另一种布置中,处理电路(其从用户与界面的接触序列以及所得到的基本笔画序列中生成语标)可以与用户输入设备组合成一个单元,使得该单元的输出是诸如CJK或Unicode的合适编码系统的代码序列。在这种情况下,该单元的界面可以包括显示器,该显示器允许用户在输入基本笔画或笔画组时,跟踪它们相对于其他笔画的位置。该单元可以将编码字符序列直接馈送到电子设备,例如笔记本电脑或个人计算机。
该单元可以包括存储字符序列的存储器,但是,本发明的范围也包括在提供的单元中,并不将序列存储在存储器中,而是简单地输出实时生成的字符。
根据第二方面,本发明提供了一种将语标字符集的字符输入到电子设备中的方法,其特征在于下列步骤:
使用手指或拇指或指点设备,在用户界面的接触区域上接触并做出手势:
该界面具有多个离散接触区域,
每当用户用至少一个手指或拇指或指点设备接触接触区域时,生成中间信号,中间信号的值取决于用户在接触区域上做出的接触手势的类型,
接收中间信号的时间序列,并根据该序列中中间信号的值,生成相应的基本笔画时间序列,其中,每个中间信号的每个值被映射到一个基本笔画或一组笔画,每个基本笔画或笔画组是语标字符集的字符的一部分。
字符的一部分,是指笔画不足以形成完整语标字符,不过,根据一个手势或同时做出的一串手势生成完整的语标字符也在本发明的范围内。
该方法还可以包括,在用户输入结束命令时,将作为基本笔画输入集合的输入映射到语标字符,并输出其在字符编码系统中对应的代码。
该方法还可以在输入了相应的笔画时自动完成字符。
自动完成(字符检索)可以持续运行,直到用户通过界面输入特定的结束信号。
然而,可以提供适当的逻辑或机器学习/AI来自动确定正确的字符(例如,在常用短语的末尾)。在这种情况下,该装置可以发送结束信号,无需用户输入。
根据第三方面,本发明提供了一种计算机程序,其包括一组指令,当该组指令在计算机设备上执行时,使得该设备执行本发明第二方面的方法或者提供第一方面的装置。
计算设备可以指以下非穷尽列表中的任何设备:个人计算机、笔记本电脑、平板电脑和智能手机。
该程序可以存储在计算设备的存储器区域中。
接触区域可以作为结合到设备中的触摸屏的区域来提供。大多数当前的智能手机已经具有触摸屏,可以在屏幕上显示接触区域,并检测用户何时以及如何接触屏幕的该区域。该屏幕也可用于显示输入的字符。
现在将参考附图,并如附图所示,通过示例的方式描述本发明的几个实施例,其中:
图1是根据本发明一个方面的完整文本输入装置的示意图;
图2是用户界面的第一布置的平面图,被设计为提供像弦乐器的整观感;
图3是对应于图2的平面图,示出了用户界面的每个细长弦如何定义单个接触区域;
图4a是用户界面的替代实现方式的平面图,其中,使用多行离散的接触区域形成虚拟弦;
图4b是用户界面的另一替代实现方式的平面图,其中,虚拟弦是标记,并且与接触区域分离,这样,每行由两个完全重叠的接触区域组成;
图5是用户界面的截面图,示出了接触区域是如何凸起高于基底;
图6是对应于图5的图,示出了接触区域如何形成为基底上表面中的凹槽;
图7a示出了基本笔画a-j的集合,可用于写出汉语和其他类似语标语言的语标字符;
图7b示出了可选基本笔画a-k的集合,可用于写出汉语和其他类似语标语言的语标字符;
图8示出了如何通过不同的字符组成类型对语标进行分类,这些字符组成类型指导笔画在字符中的书写位置;
图9a是示例性符号,用于在本文档中标识用户可以与接触区域进行接触的不同方式,即,不同的手势;
图9b示出了如何表示多个接触区域中的每一个以及可在每个区域上使用的手势;
图10a是第二示例性符号,可用于标识用户可以与包括对角手势识别的区域进行接触的不同方式;
图10b是示出对于图10a中的第二示例性符号,如何表示多个接触区域中的每一个以及可以在每个区域上使用的手势的图示;
图11示出了将图7a中用于形成汉字的基本笔画分组为四组,每组分配给输入设备的四行或四弦中的一个,该分组形成笔画到手势的第一示例性映射方法的基础;
图12是示出了使用用户可以做出的全部手势的集合的图9a的符号,以通过使用图11的映射形成中文字符“汉”;
图13是前三个基本笔画的表示,用户将使用图11的第一映射连续或同时输入基本笔画的前三个以形成字符“汉”的左侧;
图14是后三种基本笔画的表示,用户将使用图11的第一映射连续或同时输入基本笔画的后三个以形成字符“汉”的右侧;
图15示出了基本笔画到手势及其在界面上的位置的第二种可选映射,其中,不管接触哪个接触区域,每个笔画被分配给一个唯一的手势,然后,接触区域被映射到图8中的字符组合;
图16示出了使用用户可以做出的全部手势的集合的图9a的符号,以通过使用图15的映射形成中文字符“汉”;
图17是用户使用图15的映射以形成字符“汉”的左侧而会连续或同时输入的基本笔画的前三个的示意图;
图18是用户使用图15的映射以形成字符“汉”的右侧而会连续或同时输入的基本笔画的后三个的示意图;
图19是被配置为属于本发明的第一方面的范围内的装置的智能手机设备的平面图;
图20是根据本发明第一方面的装置的实施例的示意图,其中,界面具有相对较少的处理电路,并且一些处理电路由连接的电子设备提供;
图21是用户界面的示意图,与图20的界面相比,该用户界面具有增强的处理电路,可以输出编码文本,例如Unicode;
图22是示出一体化设备的关键功能组件的示意图,例如图19所示类型的智能手机,其用于执行本发明第二方面的方法;
图23是示出了由前述附图中描述的示例性装置使用的方法的流程图,该方法根据经由界面输入的用户手势来生成语标;
图24(i)和图24(ii)示出了用户界面的另外两个可选示例;
图25a示出了本发明在显示两行接触区域的移动电话设备上的实现;
图25b示出了笔画到手势以及显示为两行弦的接触区域的另一示例性映射方法;
图26a示出了接触区域的两个集合,其定义了较窄和较宽的行,并且根据手势的方向被触发;
图26b示出了与图26a所示的接触区域的两个集合交互的示例性手势;
图27a、27b和27c是示例性“手势快捷方式”的表格,使用图25b中的映射,示例性“手势快捷方式”可用于输入偏旁部首、常用笔画组合或常用语标;
图28是示出了图25至图29中描述的示例性装置所使用的方法的流程图,以根据经由界面输入的用户手势来生成语标;
图29a至图29d示出了图7a和图25b中映射的示例,其中,使用两个单独的笔画来输入字符‘你’;
图30a至图30f示出了图7b和图25b中映射的示例,其中,用户在输入字符的中途删除输入历史中的一个笔画;
图31a至图31f示出了图7b和图25b中的映射的示例,以及图27a中手势快捷方式1b的使用。
图1示出了用于将语标字符输入电子设备的完整的示例性系统100。在这个示例中,书写字符形成了一个中文字符集,但是这不应该被看作是对本发明的限制。该系统基于古琴,一种古老的中国弦乐器,琴弦垂直于演奏者,用手拨动。
系统100包括:用户界面110,用户可以通过做手势与用户界面110进行物理交互;处理电路120;和可选的显示器130。处理电路120执行存储在存储器150中的可执行代码140。存储器还存储两组映射,一组将手势和接触区域特征映射到基本笔画和/或基本笔画组,另一组将基本笔画序列和/或基本笔画组映射到语标字符集合。
用户界面110可以代替用于向个人计算机输入字母字符的标准键盘。如下文将解释的,处理电路120可以使用个人计算机的处理器和存储器,或者可以提供专用处理电路和存储器,用于进行映射和序列生成。
系统100还包括显示器130,在这个例子中,显示器130是连接到个人计算机的标准监视器。可以使用其他显示器,并且该显示器可以是用户界面的专用显示器。
图20至图22示出了可以实现的这些部件的不同布置。图20使用简单的界面200,该界面200不执行任何映射,而是向用户想要输入文本的设备输出中间信号序列,其中,该文本包括处理电路。在图21的系统中,界面210具有的处理电路更多,并且进行中间信号到基本笔画和/或笔画组的映射以及它们到语标字符的映射。这作为编码字符序列输出到用户想要输入文本的另一个设备。最后,图22示出了整个系统220是如何在诸如智能手机的单个设备上实现的。
如图2至图6所示,通用用户界面110的一种布置包括相对较浅的基底部分20,该基底部分20具有矩形且大致平坦的上表面21。当然,不必是矩形的,只是一种用于放置在使用者面前的桌子上的方便的形状因素。多个接触区域22被限定在上表面上,其可以被认为是弦。这些可以采取许多不同的形式,并且可以有许多不同的接触区域的组合。图2至图6中示出了一些示例性的格式。在图5中,接触区域50是凸起的脊的形式,而在图6中,接触区域60包括凹槽。
接触区域可以排列成行,这样,每一行通常连续地横向延伸穿过基底部分的上表面。图3示出了如何提供五个平行的行。每行如何由一个单独的细长接触区域形成,图4a示出了一种替代方案,其中,每行由多个接触区域形成。在图4a的示例中,每行包括四个接触区域,共16个。图4b示出了另一种替代方案,其中,每行由多个重叠的接触区域形成,例如,宽区域23和窄区域24,共给出两个接触区域的集合。
每个接触区域对用户手指、拇指或指点设备的接触和移动敏感,或者具有相关联的传感器,该传感器对接触敏感,或者可以检测接触(例如,基于摄像机的系统)并生成中间输出信号。来自每个接触区域的输出信号包括二进制数字串,可选地,对接触区域的唯一ID和/或对用户在接触区域中做出的手势的四个属性的集合进行编码。在这个示例中,这些属性是压力(重或轻)、上/下分量、左/右分量和短/长分量。这些可以用弦的四个二进制数字编码,并为每个区域提供32个可能的输出值,如图9a所示:
a.短、重压、向上且快的手势
短,重压、向上且慢的手势
短,重压、向下且快的手势
短、重压、向下且慢的手势
b.短、轻压、向上且快的手势
短、轻压、向上且慢的手势
短、轻压、向下且快的手势
短、轻压、向下且慢的手势
c.长、重压、向上且快的手势
长、重压、向上且慢的手势
长、重压、向下且快的手势
长、重压、向下且慢的手势
d.长、轻压、向上且快的手势
长、轻压、向上且慢的手势
长、轻压、向下且快速手势
长、轻压、向下且慢的手势
e.短、重压、向左且快速手势
短、重压、向左且慢的手势
短、重压、向右且快的手势
短、重压、向右且慢的手势
f.短、轻压、向左且快的手势
短、轻压、向左且慢的手势
短、轻压、向右且快的手势
短、轻压、向右且慢的手势
g.长、重压、向左且快的手势
长、重压、向左且慢的手势
长、重压、向右且快的手势
长、重压、向右且慢的手势
h.长、轻压、向左且快的手势
长、轻压、向左且慢的手势
长、轻压、向右且快的手势
长、轻压、向右且慢的手势
图9a列出了基于所做手势的类型来表示手势类型a至h的不同手势的术语。
在一个替代方案中,该系统还可以将对角线手势识别为输入,并且还可以将对弦的点击识别为输入。图10a列出了包括这些附加对角线手势的系统的术语。在这种布置中,总共有66种可能的输出:
a.点击、轻压
b.点击、重压
c.长、轻压、向上且快的手势
长、轻压、向上且慢的手势
长、轻压、向下且快的手势
长、轻压、向下且慢的手势
长、轻压、向左且快的手势
长、轻压、向左且慢的手势
长、轻压、向右且快的手势
长、轻压、向右且慢的手势
长、轻压、向对角线右上且快的手势
长、轻压、向对角线右上且慢的手势
长、轻压、向对角线左上且快的手势
长、轻压、向对角线左上且慢的手势
长、轻压、向对角线右下且快的手势
长、轻压、向对角线右下且慢的手势
长、轻压、向对角线左下且快的手势
长、轻压、向对角线左下且慢的手势
d.长、重压、向上且快的手势
长、重压、向上且慢的手势
长、重压、向下且快的手势
长、重压、向下且慢的手势
长、重压,向左且快的手势
长、重压、向左且慢的手势
长、重压、向右且快的手势
长、重压、向右且慢的手势
长、重压、向对角线右上且快的手势
长、重压、向对角线右上且慢的手势
长、重压、向对角线左上且快的手势
长、重压、向对角线左上且慢的手势
长、重压、向对角线右下且快的手势
长、重压、向对角线右下且慢的手势
长、重压、向对角线左下且快的手势
长、重压、向对角线左下且慢的手势
e.短、轻压、向上且快的手势
短、轻压、向上且慢的手势
短、轻压、向下且快的手势
短、轻压、向下且慢的手势
短、轻压、向左且快的手势
短、轻压、向左且慢的手势
短、轻压、向右且快的手势
短、轻压、向右且慢的手势
短、轻压、向对角线右上且快的手势
短、轻压、向对角线右上且慢的手势
短、轻压、向对角线左上且快的手势
短、轻压、向对角线左上且慢的手势
短、轻压、向对角线右下且快的手势
短、轻压、向对角线右下且慢的手势
短、轻压、向对角线左下且快的手势
短、轻压、向对角线左下且慢的手势
f.短、重压、向上且快的手势
短、重压、向上且慢的手势
短、重压、向下且快的手势
短、重压、向下且慢的手势
短、重压、向左且快的手势
短、重压、向左且慢的手势
短、重压、向右且快的手势
短、重压、向右且慢的手势
短、重压、向对角线右上且快的手势
短、重压、向对角线右上且慢的手势
短、重压、向对角线左上且快的手势
短、重压、向对角线左上且慢的手势
短、重压、向对角线右下且快的手势
短、重压、向对角线右下且慢的手势
短、重压、向对角线左下且快的手势
短、重压、向对角线左下且慢的手势
在使用中,如图23所示,用户可以按顺序接触这些区域,从这些区域生成中间信号的时间序列。处理电路将中间信号的弦值映射到基本笔画和/或笔画组。首先确定是否在给定时间输入了一个中间信号,如果是,则使用映射生成一个相关的基本笔画。然后显示在显示器上,并且系统返回等待下一个中间信号。如果存在输入的手势的和弦,意味着同时有两个或更多个手势,则可以映射到一组笔画或一个完整的字符。然后显示映射组,系统返回等待下一个中间信号。在每种情况下,在返回之前,系统执行自动完成检查,以确定到目前为止输入的所有笔画是否对应于语标字符,如果是,则将其作为来自诸如Unicode或CJK的编码集的相关编码输出。
映射可以用几种方式完成,但是在第一个例子中,在字符集是汉字集的情况下,遵守下列关于汉字笔画的规则,可以非常有效地执行映射。当输入笔画时,该装置将它们显示在屏幕上,这样,用户可以检查它们是否正确,并且一旦显示了对应于整个目标完成语标的序列,用户可以通过界面输入结束命令,然后从语标数据库中识别该语标。
首先,笔画可以根据类型进行分组,如图7a所示:
a.“丶”点
b.“丿”撇
c.
Figure BDA0004008881090000143
d.“丨”竖
e.“亅”竖钩
f.“一”横
g.“乛”横钩
h.
Figure BDA0004008881090000141
i.
Figure BDA0004008881090000144
j.
Figure BDA0004008881090000142
也可以存在其他笔画分组,例如图7b所示的替代方案,其具有11个笔画,而不是上述第一分组的10个笔画:
a.
Figure BDA0004008881090000145
b.“一”横
c.“乛”横钩
d.“丶”竖点
e.“丨”竖
f.“亅”竖钩
g.“丿”左撇
h.
Figure BDA0004008881090000153
右捺
i.
Figure BDA0004008881090000151
左弯钩
j.
Figure BDA0004008881090000152
右斜钩
k.“乚”竖弯钩
接下来,可以将每个字符的形式分配给图8所示的以下组:
a.上下结构
b.上中下结构
c.左右结构
d.左中右结构
e.全包围结构
f.上三包围
g.左三包围
h.下三包围
i.左上包围
j.右上包围
k.左下包围
l.包围结构
图11示出了可以由处理电路使用的第一示例性映射方法。图12至图14示出了利用该映射使用该装置输入中文字符的方法。
图12示出了使用图11的映射和具有四个弦的图3所示类型的界面,可以在接触区域上书写汉字“汉”的的整个手势序列。
图13示出了如何使用图3的用户输入设备对“汉”字符左侧的3个笔画进行第一“和弦”组合输入。图14示出了如何使用相同的映射对“汉”字符右侧的3个笔画进行第二“和弦”组合输入。
图15示出了可与第一示例性映射方法分开使用或结合使用的第二示例性映射方法,其中,基本笔画被分配给与弦或位置无关的手势的唯一属性或属性组合。此外,在其上做出手势的特定接触区域的特征被用于识别字符组成。
图16示出了使用第二种映射方法书写字符“汉”的总笔画顺序。字符构成为左右结构(见图8)。
图17示出了使用第二映射方法对“汉”字符左侧的3个笔画的第一“和弦”组合输入。图18示出了使用第二映射方法对“汉”字符右侧的3个笔画的第二“和弦”组合输入。
本领域技术人员将会理解,在本发明以及用户界面和处理电路的配置的范围内,可以提供许多可选的用户输入设备。
图11至图14的第一映射和图15至图18的第二映射可以通过界面组合到同一个输入实例中。该系统可以变得直观,因为输入属性与书写笔画的物理动作相关联。例如,向上的接触手势等于向上的物理笔画。3个短拨弦等于3个点部首(中文称为三点水)等。
图24(i)和图24(ii)示出了用户界面240和241的另外两个可选示例,其中,接触区域包括连续的弦242,这些弦以吉他或其他乐器的弦的方式在基底部分250上张紧,用户接触弦,产生弦的独特振动。在图24(i)中,界面包括检测振动并输出中间信号的拾音器260,该中间信号具有编码接触位置和接触方式的值。在图24(ii)的界面中,麦克风270拾取琴弦振动时发出的声音,这些声音被转换成中间值。有麦克风则不再需要拾音器。
弦242可以由尼龙或钢制成,并且可以是标准的吉他琴弦,这些琴弦可广泛获得并且容易被张紧固定。
通过提供弦242,双手输入方法可以容易地实现,用户使用一只手(可能是他们的非惯用手)将弦保持在基底部分的上表面,另一只手拨动琴弦。按住琴弦,拨弦的长度会变化,从而改变频率。该频率和频率随时间的变化可以映射到多种笔画类型。
音符可用于识别字符组成,并且该音符的弹奏方式(重压或轻压,上弯或下弯)可表示笔画类型。或者也可以反过来。例如,当中C音作为短音符演奏时,可以被分配给一种笔画类型,而如果作为长音符演奏,则被分配给不同的笔画。如果音符是通过推弦出的压音,或者手指沿着琴弦划动,这将产生其他音,这些音可以被分配给中C音的其他中间信号值,对于可能演奏的其他音符,也可以这样做。这样,每个音符将提供接触区域的功能。
界面也可以不识别音符,而是简单地确定哪个弦正在被演奏,以及音符被演奏的方式,以生出中间信号和那些信号的值。
这样可以使用户熟悉并能够生成一组预定义的音符的任何弦乐器能够与麦克风一起作为界面使用。
系统的移动电话实施例
图25a示出了根据本发明的系统,该系统将智能手机的功能用于硬件组件,该电话配备有存储在电话存储器中的定制应用,该定制应用使得智能电话的处理电路实现所需的功能,通过该功能,用户可以输入字符并且将字符显示在设备的屏幕上。
电话的屏幕是触敏的,由此用户可以触摸屏幕的任何部分,并且处理电路接收指示用户触摸的位置、方向、时间和压力的数据信号。触摸屏技术在智能手机行业中是众所周知的,并且分析用户与屏幕的交互以检测何时进行接触也是众所周知的。
如表1所述,屏幕被分成几个区域,如图25a所示。
Figure BDA0004008881090000161
Figure BDA0004008881090000171
表1
用户可以使用以下方法的任意组合,通过图25a所示的界面向移动电话输入语标字符:
a.通过按相应的集合和方向(上、下、左、右、对角线左上、对角线右上、对角线左下、对角线右下),敲击或移动手指穿过相应的接触区域来输入单个基本笔画。
b.通过按相应的集合和方向,移动一个或多个手指穿过两个或多个相应的接触区域,输入在语标字符的笔画顺序中相邻的两个或多个基本笔画的笔画组合。
c.通过按相同的相应集合和方向,移动一个或多个手指穿过相同的相应接触区域,输入在语标字符的笔画顺序中相邻的相同基本笔画的两个或多个实例的笔画组合。
d.使用“手势快捷方式”输入偏旁部首、常用笔画组合或常用语标字符。当手指移动方向发生变化、手指在任何一组接触区域内的2个或更多个接触区域上移动、或者接触时间超过特定阈值时,触发手势快捷方式的检测。“保持”功能为条目生成另一个偏旁部首建议列表。这里,在手势的最终位置与手势输入区域的长时间接触,则在手指位置触发建议弹出列表(340)。通过手指拖动到所需条目上并释放,选择列表中的条目。
移动电话的处理电路除了将用户在屏幕上的扫动或点击映射到基本笔画之外,还包括一个程序来分析笔画序列,并使用该信息来查询存储在设备存储器中的语标字符的数据库。
用于查询数据库的过程可包括以下内容:
1.接收基本笔画、笔画组合和/或偏旁的序列。
2.将输入序列中的任何笔画组合或部首转换为基本笔画列表,这样,输入历史仅由基本笔画组成。
3.使用输入历史查询数据库,并生成目前为止笔画顺序最像输入历史的语标字符列表(字符建议列表320)。
4.每次在输入历史中添加或删除新条目时都会查询数据库,并且字符建议列表320会持续更新和显示。
5.对于输入历史330中显示的最后一个条目,用户可以使用“退格”按钮手动删除。
6.当用户从建议列表中选择一个字符,或者当用户已经删除了输入历史中的所有条目时,输入历史330被清除。
申请人已经意识到,当用户快速书写并画出水平笔画时,提供非常窄的接触区域可能存在困难。这可能稍微偏离触敏子区域,并且不会被记录。
如图26a所示,为了改善这种情况,每个接触区域可以由子区域23和24的两个集合组成,每个子区域是屏幕上的触敏像素。
如图26b所示,当手势不是水平的时,使用更窄的接触区域集合来更清楚地识别哪个“弦”被击中是有益的。如果对所有手势都使用相同的传感器集合,那么任何距另一弦太近的非水平手势都将被识别为同时命中两个弦(在左边的场景中指示)。更窄的传感器的集合允许用户有更多的垂直空间来“划过”一个弦,而不接触其他弦(如右边的场景所示)。
一旦确定了正确的区域子集,则处理的进行方式就与系统中只定义了一个子区域集合时的方式相同。
现在将描述图25a所示的移动电话设备中每行有窄触敏区域和宽触敏区域的这种布置的实现。
图26a示出了接触区域的两个集合,它们根据手势的方向被触发。每个包括一行,该行在屏幕上被一条像弦的线覆盖。两个弦垂直偏移。每行接触区域中的每个接触区域包括两个不同的触敏子区域子集,其中,第一集合包括的触敏区域子集定义的一行接触区域在中心轴每一侧的较宽区域23上是触敏的;第二集合包的括触敏区域子集定义的一行接触区域在中心轴每侧的较窄区域24上是触摸敏感的,第一集合和第二集合的中心轴线相同或基本相同,使得较窄的行安装在较宽的行内。
如果手势是水平方向的,则使用较宽的接触区域23的集合来映射笔画。对于所有其他手势方向,较窄的接触区域24的集合用于映射笔画。在任一接触区域集合中,当手势改变方向,包括在末端的保持手势,或触摸另一接触区域,则手势快捷模式被启用。
图27a、图27b和图27c一起形成了可用于输入偏旁部首、常用笔画组合或常用语标的“手势快捷方式”的表格(表2)。水平线充当用户的视觉参考,并且它们为不同手势的位置和形状提供引导。
图28是示出在系统中使用“输入历史”列表的流程图,其中,用户可以手动删除最后一个条目。
图29a至图29d示出了图7b和图25b中映射的例子,其中,使用两个单独的笔画来输入字符‘你’。在图29a和图29b中,用户先输入两个笔画,再从图29c的建议列表中进行选择。然后,所选择的字符显示在图29d中。
图30a至图30f示出了图7b和图25b中映射的例子,其中,用户在输入字符的中途删除输入历史中的一个笔画。用户在图30b的笔画输入中出错。然后,从图30c的输入历史中删除该笔画,并用图30d中输入的不同笔画替换。字符建议列表在图30e中相应地更新,用户选择正确的字符。所选字符‘后’显示在图30f中。
图31a至图31f示出了图7b和图25b中的映射示例,以及图27a中手势快捷方式1b的使用。用户在图31a中做出手势快捷方式,并在图31b中向下按压手指,以触发弹出的偏旁部首建议菜单。然后,用户在31c中的所选部首上划动并释放他们的手指,以选择要输入的部首。所选偏旁包括在图31d的输入历史中,并且字符建议列表相应地更新。然后,用户在图31e中选择正确的字符‘很’。最后,字符显示如图31f所示。
总之,图25a至图31f所示的基于智能手机的系统可被视为定义了以下核心特性和功能:
a.成行布置的多个接触区域。每一行接触区域与两个触敏子区域集合相关联,因此该行可以被解释为宽行或窄行,两者共享公共轴。本发明也可以应用于接触区域仅与窄区域或宽区域的集合相关联的行,但是两个集合提供了一些好处。
b.虚拟“弦”,用线直观地表示,穿过每行接触区域的中心。
c.对来自定义宽行和窄行的子集的输出进行向量分析,并且由此仅保留两个接触区域中的一个用于进一步分析和生成中间信号,而丢弃另一个,这主要取决于所做手势的方向;
d.根据对未被丢弃的接触区域的向量分析来生成中间信号,包括接触的类型(轻敲与轻扫)、与手指或指点设备在接触区域上的移动相关联的方向、接触的持续时间以及手指与之交互的接触区域或整行的特征。
e.数据库用于将基本笔画、笔画组合、部首或完整语标映射到按时间顺序生成的每个中间信号。
f.数据库用于将基本笔画、笔画组合或部首映射到字符集合或诸如Unicode的字符编码系统。
g.提供了一种显示器(输入历史),其用于呈现用户输入的以构建语标的每个基本笔画、笔画组合或部首的视觉表示。
h.提供了一种显示器,其用于在每个输入实例之后呈现完整字符或建议字符列表的视觉表示。
术语表
语标(logogram):代表一个词或语素的书写或象形符号。
语标字符(logographic character):通常是指书写系统(包括但不限于中文)中使用的语标。在计算机中,它们也可以是可以在计算机上显示的字符的一部分(如偏旁部首或CJK笔画)。在诸如Unicode(最常见的编码系统)的编码系统中,它们被分配有唯一的代码。
基本笔画(fundamental stroke):语标的最小组成部分。连续接触书写表面的单向运动,产生语标的给定部分。虽然对于基本笔画的单一列表尚无共识,但是为了本发明的目的和优化,识别了一个10个笔画的集合和一个11个笔画的集合。
笔画组合(stroke combination):用于书写语标字符的任何笔画序列。
笔画顺序(stroke order):书写一个语标字符所需的笔画序列的总和。
偏旁部首(radical):形成语标的象形部分的笔画组合,通常是含义或发音的指示符。虽然有些语标在视觉上可以分解出不止一个偏旁部首,但在中文词典中,还是会被正式归在一个偏旁部首之下。例如,语标‘汉’可以分解成两个偏旁部首‘氵’和‘又’,但是在字典里被归在偏旁‘氵’下。不过,本文的算法以同样的方式分解偏旁部首和笔画组合,因此可以简单地根据象形部分来输入语标。
书法知识(calligraphic knowledge):手写一个语标所需的笔画类型和笔画顺序的知识。
拼音(pinyin):使用罗马字母的中文语标的注音符号,在中国大陆和使用简体中文语标的人群中普遍使用。
注音(zhuyin):中文语标的注音符号,通常在中国台湾使用繁体中文语标的群体当中使用。
罗马化(romanization):使用罗马字母表示非罗马书写系统的表示法。

Claims (19)

1.一种用于在电子设备上输入语标字符集的字符的文本输入装置,所述装置包括:
具有多个离散接触区域的用户界面,所述界面用于:每当用户用至少一个手指或拇指或指点设备接触接触区域时,生成中间信号,所述中间信号的值取决于在所述接触区域上进行的接触的类型,并且
处理电路,用于接收中间信号的时间序列,并根据所述序列中的中间信号的值,生成相应的基本笔画的时间序列,其中,每个中间信号的每个值被映射到基本笔画,每个笔画定义所述语标字符集的字符的视觉部分。
2.根据权利要求1所述的文本输入装置,其中,所述界面包括多个接触区域,所述接触区域被分组为两行或多行细长的接触区域,每个行提供用户可以与之交互的细长的“虚拟弦”。
3.根据前述权利要求中任一项所述的文本输入装置,其中,所述用户界面包括触敏表面。
4.根据权利要求3所述的文本输入装置,其中,所述显示器包括智能手机或平板电脑或其他设备的显示器,并且其中,所述行彼此偏移,并且从所述装置的用户界面的一侧延伸到另一侧。
5.根据权利要求2、3或4所述的文本输入装置,其中,每一行感测区域中存在有多个接触区域,所述接触区域抵接所述行中的相邻区域,从而整体形成一个连续的细长元件,所述元件响应于手指在沿其长度的任何位置拖动。
6.根据权利要求2至4中任一项所述的文本输入装置,其中,每一行包括从所述行的一端延伸到另一端的单个细长接触区域。
7.根据权利要求2至4中任一项所述的文本输入装置,其中,每行包括两个不同大小的接触区域:第一接触区域包括触敏区域的第一子集,所述触敏区域定义了在所述行的中心轴的每一侧的较宽区域上触敏的接触区域;第二接触区域包括触敏区域的第二子集,所述触敏区域定义了在中心轴每侧的较窄区域上触敏的接触区域,所述第一接触区域和所述第二接触区域的中心轴相同或基本相同,使得较窄的行置于较宽的行之内。
8.根据权利要求2至6中任一项所述的文本输入装置,其中,当用户输入基本笔画时,可以在一行的任何地方进行交互。
9.根据前述权利要求中任一项所述的文本输入装置,其中,所述行的位置通过被显示在或物理结合到所述用户界面中的细长标记对用户可见,所述标记与一行接触区域对齐。
10.根据前述权利要求中任一项所述的文本输入装置,其中,所述处理电路被配置为使得用户接触所述接触区域会生成中间信号,所述中间信号标识,并且优选地唯一地标识,所述接触区域以及所使用的手势的一个或多个属性。
11.根据前述权利要求中任一项所述的文本输入装置,其中,所述界面为一个或多个以下类型的手势的中间信号分配不同的值:
穿过所述接触区域的上下手势;
在所述接触区域沿着垂直于上下方向的左右手势;
穿过所述接触区域的对角手势;
施加到所述接触区域的压力;
接触的时长,和
穿过或沿着所述接触区域的接触动作的速度。
12.根据前述权利要求中任一项所述的文本输入装置,其中,所述界面用于生成中间信号,所述中间信号对手指穿过所述接触区域进行的移动的至少一个属性进行编码,其中,所述中间信号唯一地标识所述接触区域和所述移动类型,或者其中,所述中间信号唯一地标识一行接触区域和所述移动类型。
13.根据前述权利要求中任一项所述的文本输入装置,其中,所述处理电路用于将一组基本笔画映射到序列中同时生成的中间信号的组合。
14.根据前述权利要求中任一项所述的文本输入装置,其中,所述处理电路用于将单个基本笔画映射到由所述时间序列中的中间信号表示的每个手势的属性或属性组合。
15.根据前述权利要求中任一项所述的文本输入装置,其中,所述处理电路用于将字符组合映射到一行或一列接触区域,或者映射到所述用户输入设备的特定接触区域。
16.根据前述权利要求中任一项所述的文本输入装置,还包括显示器,所述显示器用于呈现所述时间序列中每个基本笔画的视觉表示,以构建语标。
17.一种用于在电子设备上输入语标字符集的字符的文本输入方法,其特征在于,包括以下步骤:
使用手指或拇指或指点设备,在用户界面的接触区域上做出手势,所述界面具有多个离散接触区域,
每当用户用至少一个手指或拇指或指点设备接触所述接触区域时,生成中间信号,所述中间信号的值取决于所述手指或拇指在所述接触区域上进行的接触的类型,
接收中间信号的时间序列,并根据所述序列中的所述中间信号的值,生成相应的基本笔画或基本笔画组的时间序列,其中,每个中间信号的每个值被映射到基本笔画,每个基本笔画是所述语标字符集的字符的一部分。
18.根据权利要求16所述的方法,还包括:在用户输入结束命令时,将已输入的作为基本笔画集,映射到语标字符,并输出字符编码系统中相应的代码。
19.一种计算机程序,包括指令的集合,当所述指令的集合在计算机设备上执行时,使得所述设备执行根据权利要求16或17所述的方法,或者提供根据权利要求1至15中任一项所述的装置。
CN202280005133.0A 2021-01-27 2022-01-26 用于将语标输入电子设备的装置和方法 Pending CN115917469A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GBGB2101124.2A GB202101124D0 (en) 2021-01-27 2021-01-27 Apparatus and method for entering logograms into an electronic device
GB2101124.2 2021-01-27
PCT/GB2022/050201 WO2022162356A1 (en) 2021-01-27 2022-01-26 Apparatus and method for entering logograms into an electronic device

Publications (1)

Publication Number Publication Date
CN115917469A true CN115917469A (zh) 2023-04-04

Family

ID=74859062

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280005133.0A Pending CN115917469A (zh) 2021-01-27 2022-01-26 用于将语标输入电子设备的装置和方法

Country Status (6)

Country Link
US (1) US20230315217A1 (zh)
EP (1) EP4139771B1 (zh)
CN (1) CN115917469A (zh)
GB (1) GB202101124D0 (zh)
TW (1) TW202230093A (zh)
WO (1) WO2022162356A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230418464A1 (en) * 2022-06-24 2023-12-28 Zeerak Ahmed Enhanced Shape-Based Keyboard

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2335607C (en) * 1998-06-25 2006-10-10 Spice Technologies, Inc. Ohai technology user interface
US8471689B2 (en) * 2007-05-11 2013-06-25 Philippe Stanislas Zaborowski Touch-sensitive motion device
US9189156B2 (en) * 2009-07-14 2015-11-17 Howard Gutowitz Keyboard comprising swipe-switches performing keyboard actions
US9104306B2 (en) * 2010-10-29 2015-08-11 Avago Technologies General Ip (Singapore) Pte. Ltd. Translation of directional input to gesture
US10671272B2 (en) * 2015-11-06 2020-06-02 International Business Machines Corporation Touchscreen oriented input integrated with enhanced four-corner indexing

Also Published As

Publication number Publication date
WO2022162356A1 (en) 2022-08-04
EP4139771C0 (en) 2024-05-08
TW202230093A (zh) 2022-08-01
EP4139771B1 (en) 2024-05-08
US20230315217A1 (en) 2023-10-05
GB202101124D0 (en) 2021-03-10
EP4139771A1 (en) 2023-03-01

Similar Documents

Publication Publication Date Title
US8059101B2 (en) Swipe gestures for touch screen keyboards
US7170496B2 (en) Zero-front-footprint compact input system
US9304602B2 (en) System for capturing event provided from edge of touch screen
US6970599B2 (en) Chinese character handwriting recognition system
CN101111817B (zh) 电脑鼠标周边装置
EP1435561B1 (en) Method and apparatus for recognizing and associating handwritten information in various languages
US20090249258A1 (en) Simple Motion Based Input System
US20110291940A1 (en) Data entry system
US20150100911A1 (en) Gesture responsive keyboard and interface
US20060119588A1 (en) Apparatus and method of processing information input using a touchpad
US9529448B2 (en) Data entry systems and methods
WO2007121673A1 (fr) Procédé et dispositif d'amélioration de la vitesse de saisie de caractères chinois
US20220129126A9 (en) System for capturing event provided from edge of touch screen
JP6740389B2 (ja) ハンドヘルド電子デバイスのための適応的ユーザ・インターフェース
Lee et al. From seen to unseen: Designing keyboard-less interfaces for text entry on the constrained screen real estate of Augmented Reality headsets
CN102741784A (zh) 一种数据输入系统的特征
EP4139771B1 (en) Apparatus and method for entering logograms into an electronic device
KR101053411B1 (ko) 문자 입력 방법 및 그 단말기
KR20090111943A (ko) 터치스크린을 이용한 악기 연주 시뮬레이션 장치 및 방법
KR20110048754A (ko) 터치스크린 패널을 이용한 정보입력방법
WO2014072734A1 (en) Gesture input method and apparatus
Banubakode et al. Survey of eye-free text entry techniques of touch screen mobile devices designed for visually impaired users
KR101066263B1 (ko) 이동통신 단말기의 문자입력방법 및 이를 적용한 이동통신 단말기

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20230717

Address after: London

Applicant after: Luo Hanning

Address before: Welsh

Applicant before: Silk Disk Technology Co.,Ltd.

SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination