CN101901051A - 基于区别的输入对象的数据输入方法及装置 - Google Patents
基于区别的输入对象的数据输入方法及装置 Download PDFInfo
- Publication number
- CN101901051A CN101901051A CN2010101833550A CN201010183355A CN101901051A CN 101901051 A CN101901051 A CN 101901051A CN 2010101833550 A CN2010101833550 A CN 2010101833550A CN 201010183355 A CN201010183355 A CN 201010183355A CN 101901051 A CN101901051 A CN 101901051A
- Authority
- CN
- China
- Prior art keywords
- input
- change
- equipment
- supplemental characteristic
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
- G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
- G06F3/0317—Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
- G06F3/0421—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
- G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
- G06F3/0426—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected tracking fingers with respect to a virtual keyboard projected or printed on the surface
Abstract
本发明提供用于在能区别输入对象的设备中促进虚拟输入的方法和装置。本发明描述了自动地配置这种设备的组件设置和特征的各种方法。该设备的组件设置的改变和触发该改变的设备的相应操作特性可以被集合成配置文件,并且由用户选择。该组件设置可以包括有用的辅助特征,例如由LED所提供的额外的照明,以及由激光或LED投射的虚拟输入接口的被照亮的视觉引导。可以根据参照物对象的状态的改变而动态地更改这种辅助特征的特性。
Description
相关美国申请的数据
本申请声明收益于序号为No.61/216993、申请日为2009年5月26日,和序号为No.61/217649、申请日为2009年6月3日的美国临时专利申请,上述申请在此以援引的方式全部并入。
技术领域
本发明总体上涉及数据输入领域,特别地,涉及用于用户在虚拟设备中进行输入的方法及装置。
背景技术
公开在Ling Su等人的序号为No.11/361,858的美国专利申请中的敲击手指识别(TFI)技术,能够通过从一组候选的输入对象中区分一个输入对象,使一种新型的数据输入方案成为可能。例如,支持TFI的键盘确定用户输入不仅基于哪个按键被按下,而且也基于用户的哪个手指被用来按下该按键,因为每个按键都能够选择多个符号或功能。当具有虚拟接口时,支持TFI的系统允许用户在工作表面上的无形设备上或甚至是“在空中”,进行触摸打字或执行多触摸输入。
尽管在讨论中经常使用手指作为一个帮助理解的显而易见的例子,但值得注意的是,也可以使用其他类型的输入对象。
发明内容
本发明旨在解决上述现有技术中存在的问题,具体来说,本发明提供一种配置具有输入区域的虚拟输入设备的组件设置的方法,包括:提供输入模块,并且用所述输入模块对所述输入区域执行远程数据采集;提供处理器,并且用所述处理器根据所述数据采集确定由至少一个输入对象对所述输入区域的致动以及从一组输入对象中确定所述输入对象的身份;提供输入辅助模块,并且用所述输入辅助模块提供输入辅助特征;提供配置模块,并且用所述配置模块:确定所述设备的操作特性的改变;以及响应于确定改变的步骤,改变一个或多个所述组件设置;以及提供输出模块,并且用所述输出模块输出分配给所述输入对象的符号或功能。
可选地,所述操作特性包括系统的多个环境操作条件。
可选地,所述设备的操作特性的改变包括对设备的至少一个组件设置的用户发起的配置,所述用户发起的配置包括:(a)启用输入软件应用,(b)用至少一个输入对象在输入区域内做出特定的姿势,和(c)选择包括所述设备的特定操作特性和特定组件设置的组合的配置文件。
可选地,所述系统的特性的改变包括对耦合到系统作为输入模块的旋转视频捕获设备的用户发起的配置,所述用户发起的配置包括:(a)旋转所述视频捕获设备,(b)调整所述视频捕获设备的焦距,(c)调整所述视频捕获设备的视角,和(d)调整所述视频捕获设备的指向。
可选地,设备的所述组件设置包括以下项中的一个或多个:(a)耦合到设备作为输入模块的视频捕获设备的焦距,(b)耦合到设备作为输入模块的视频捕获设备的视角,(c)耦合到设备作为输入模块的视频捕获设备的指向,和(d)耦合到设备的输入模块的激活。
可选地,设备的所述组件设置包括输入辅助模块的至少一个输入辅助特征。
可选地,所述确定设备的操作特性的改变的步骤包括根据所述数据采集确定由至少一个输入对象做出的、用以激活或去激活所述输入辅助特征的姿势。
可选地,所述输入辅助特征包括由设备的光源提供的对输入区域的照明。
可选地,所述确定设备的操作特性的改变的步骤包括确定在操作过程中环境照明条件的改变,并且其中改变一个或多个组件设置的步骤包括激活或去激活系统的所述光源。
可选地,所述输入辅助特征包括从输入辅助模块投射被照亮的视觉引导。
可选地,所述视觉引导包括以下项中的一个:(a)在输入区域内的被照亮的点,用来指示虚拟输入接口的中心,(b)在输入区域内的被照亮的线,用来指示虚拟输入接口的中间行,和(c)在输入区域内的被照亮的轮廓,用来指示虚拟输入接口的边界。
可选地,所述视觉引导包括虚拟键盘接口,并且其中所述虚拟键盘接口被划分为多个部分,进一步地,其中改变一个或多个组件设置的步骤包括响应于至少一个参照物对象的状态的改变而动态地更改虚拟键盘接口的单独的部分的特性。
可选地,其中,所述动态地更改虚拟键盘接口的所述单独部分的特性的步骤包括响应于用户的参照物手掌或指关节的位置的改变而动态地更改键盘部分的位置。
可选地,其中,所述动态地更改虚拟键盘接口的所述单独的部分的特性的步骤包括响应于用户的参照物手掌或指关节的方向的改变而动态地更改键盘部分的方向。
可选地,所述动态地更改虚拟键盘接口的所述单独部分的特性的步骤包括:响应于以下项中的一个或多个的改变:用户的参照物手指的展开;用户的参照物手的尺寸的改变;以及用户的参照物手指的尺寸的改变,而动态地改变以下项中的一个或多个:在键盘部分中的多个按键区域之间的间隔;键盘部分的尺寸。
本发明还提供一种在具有输入区域的虚拟输入设备中提供辅助特征的方法,包括:提供输入模块,并且用所述输入模块对所述输入区域执行远程数据采集;提供处理器,并且用所述处理器根据数据采集确定由输入对象对所述输入区域的致动;提供输入辅助模块,并且用所述输入辅助模块提供输入辅助特征;提供配置模块,并且用所述配置模块响应于参照物状态的改变,更改所述输入辅助特征的一个或多个特性;以及提供输出模块,并且用所述输出模块响应于确定输入区域致动的步骤,输出符号或功能。
可选地,所述输入辅助特征包括被照亮的虚拟键盘接口,并且进一步地,其中更改一个或多个特性的步骤包括响应于用户的参照物手掌或指关节的位置的改变而动态地更改所述键盘接口的位置。
可选地,所述输入辅助特征包括被照亮的虚拟键盘接口,并且进一步地,其中更改一个或多个特性的步骤包括响应于用户的参照物手掌或指关节的方向的改变而动态地更改所述键盘接口的方向。
可选地,所述输入辅助特征包括被照亮的虚拟键盘接口,并且进一步地,其中改变特性的步骤包括:响应于以下项中的一个或多个的改变:用户的参照物手指的展开;用户的参照物手的尺寸的改变;以及用户的参照物手指的尺寸的改变,而动态地更改以下项中的一个或多个:在键盘接口中的多个按键区域之间的间隔;键盘接口的尺寸。
可选地,所述更改特性的步骤包括以下项中的一个或多个:(a)经过一段时间之后自动禁止至少一个辅助特征;(b)通过在输入区域内检测输入对象做出的特定姿势,启动和/或禁止至少一个辅助特征;(c)当输入对象在输入区域内被检测到时,自动启动至少一个辅助特征;和(d)当输入对象在输入区域不再被检测到时,自动启动至少一个辅助特征一小段时间。
可选地,所述辅助特征包括以下项中的至少一个:(a)设备的光源提供的对输入区域的照明,和(b)用于投射在输入区域中的虚拟输入接口的被照亮的视觉引导。
相应地,本发明还提供一种配置虚拟输入设备的组件设置的装置,包括:存储器单元,用来存储将输入符号或功能与设备的输入区域相关联的信息,其中所述输入符号或功能被单独地分配给一组输入对象中相应的输入对象;输入模块,用来对所述输入区域执行远程数据采集;处理器,用来根据数据采集确定由至少一个输入对象对输入区域的致动,以及从一组输入对象中确定对输入对象的身份;输入辅助模块,用来提供输入辅助特征;配置模块,用来确定设备的操作特性的改变,以及响应于所确定的改变,改变一个或多个组件设置;以及输出模块,用来输出分配给所述输入对象的符号或功能。
可选地,所述操作特性包括系统的环境操作条件。
可选地,所述设备的操作特征的改变包括对设备的至少一个组件设置的用户发起的配置,所述用户发起的配置包括:(a)启用输入软件应用,(b)用至少一个输入对象在输入区域内做出特定的姿势,和(c)选择包含所述设备的特定操作特性和特定组件设置的组合的配置文件。
可选地,所述系统的特性的改变包括对耦合到虚拟输入设备作为输入模块的旋转视频捕获设备的用户发起的配置,所述用户发起的配置包括:(a)旋转所述视频捕获设备,(b)调整所述视频捕获设备的焦距,(c)调整所述视频捕获设备的视角,和(d)调整所述视频捕获设备的指向。
可选地,设备的所述组件设置包括以下项中的一个或多个:(a)耦合到设备作为输入模块的视频捕获设备的焦距,(b)耦合到设备作为输入模块的视频捕获设备的视角,(c)耦合到设备作为输入模块的视频捕获设备的指向,和(d)耦合到设备的输入模块的激活。
可选地,设备的所述组件设置包括输入辅助模块的至少一个输入辅助特征。
可选地,所述配置模块被用来通过根据数据采集确定由至少一个输入对象做出的、用以激活或去激活所述输入辅助特征的姿势来确定操作特性的改变。
可选地,所述输入辅助特征包括设备的光源提供的对输入区域的照明。
可选地,所述配置模块被用来确定操作特性的改变,并且通过确定在操作过程中环境照明条件的改变,以及作为应答,响应激活或去激活系统的所述光源,来改变一个或多个组件设置。
可选地,所述输入辅助特征包括从输入辅助模块投射被照亮的视觉引导。
可选地,所述视觉引导包括以下项中的一种:(a)在输入区域内的被照亮的点,用来指示虚拟输入接口的中心,(b)在输入区域内的被照亮的线,用来指示虚拟输入接口的中间行,和(c)在输入区域内的照明被照亮的轮廓,用来指示虚拟输入接口的边界。
可选地,所述视觉引导包括虚拟键盘接口,并且其中所述虚拟键盘接口被分成多个部分,进一步地,其中配置模块用于通过响应于至少一个参考参照物对象的状态的改变动态地更改虚拟键盘接口的单独部分的特性,来改变一个或多个组件设置。
可选地,所述配置模块用于通过响应于用户的参照物手掌或指关节的位置的改变动态地更改键盘部分的位置,来动态地更改虚拟键盘接口的单独部分的特性。
可选地,所述配置模块用于通过响应于用户的参照物手掌或指关节的方向的改变动态地更改键盘部分的方向,来动态地更改虚拟键盘接口的单独部分的特性。
可选地,所述配置模块用于:通过响应于以下项中的一个或多个:用户的参照物手指的展开;用户的参照物手的尺寸的改变;以及用户的参照物手指的尺寸的改变,动态地更改以下项中的一个或多个:在键盘部分中的多个按键区域之间的间隔;键盘部分的尺寸,来动态地更改虚拟键盘接口的单独部分的特性。
本发明还提供一种在虚拟输入设备中提供辅助特征的装置,包括:存储器单元,用来存储将输入符号或功能与设备的输入区域相关联的信息;输入模块,用来对所述输入区域执行远程数据采集;处理器,用来根据数据采集确定输入对象对所述输入区域的致动;输入辅助模块,用来提供输入辅助特征;配置模块,用来响应于参照物状态的改变,更改输入辅助特征的一个或多个特性;以及输出模块,用来响应于所述输入区域的致动,输出符号或功能。
可选地,所述输入辅助特征包括照明被照亮的虚拟键盘接口,并且进一步地,其中配置模块用于通过响应于用户的参照物手掌或指关节的位置的改变,动态地改变更改所述键盘接口的位置,来改变更改输入辅助特征的一个或多个特性。
可选地,所述输入辅助特征包括被照亮的虚拟键盘接口,并且进一步地,其中配置模块用于通过响应于用户的参照物手掌或指关节的方向的改变动态地更改所述键盘接口的方向,来更改输入辅助特征的一个或多个特性。
可选地,所述输入辅助特征包括被照亮的虚拟键盘接口,并且进一步地,其中配置模块用于:通过响应于以下项中的一个或多个:用户的参照物手指的展开;用户的参照物手的尺寸的改变;以及用户的参照物手指的尺寸的改变,动态地更改以下项中的一个或多个:在键盘部分中的多个按键区域之间的间隔;键盘部分的尺寸,来动态地更改输入辅助特征的特性。
可选地,所述配置模块用来通过以下项中的一个或多个来更改输入辅助特征的特性:(a)经过一段时间之后自动禁止至少一个辅助特征;(b)通过检测在输入区域内的输入对象做出的特定姿势,启动和/或禁止至少一个辅助特征;(c)当输入对象在输入区域内被检测到时,自动启动至少一个辅助特征;和(d)当输入对象不再在输入区域内被检测到时,自动启动至少一个辅助特征一小段时间。
可选地,所述辅助特征包括以下项中的至少一个:(a)设备的光源提供的对输入区域的照明,和(b)用于投射在输入区域的虚拟输入接口的被照亮的视觉引导。
附图说明
在附图中,类似的参考标记在全部的单独附图中指代相同或者功能类似的元件,所述附图与下面的详细描述一起属于并形成说明书的一部分,它们用来进一步示例各种实施方式并根据本发明来解释各种原理和优点。
图1示出了一个由能区分输入对象的数据输入设备提供的用于键盘和鼠标输入的虚拟接口。
图2示出了一个装配有旋转摄像头的移动设备。
图3示出了一个可以被提供在屏幕上给用户作为在输入过程中引导的仿真键盘。
图4示出了一个图3所示的仿真键盘的简化的描绘。
图5示出了一个虚拟鼠标接口。
图6示出了一个用于确定虚拟输入设备的输入符号或功能的过程。
图7示出了一个具有与计算机实现的虚拟输入设备的一个实施方式的有关的组件的框图。
图8示出了动态地改变其相对于参照物的位置的虚拟键盘的一部分。
具体实施方式
基于区别的输入对象(例如打字时用户的手指)的数据输入,如Ling Su等人的序号为No.11/361,858的美国专利申请中所公开的,发现有许多应用,包括虚拟键盘、虚拟多触摸输入、游戏等等。在此提供使系统和应用能够并入这种数据输入方法的方法及装置。
图7是一个示出了与一个计算机实现的虚拟输入设备700的一个实施方式的部分有关的组件的功能框图,在用户根据图6中所示的过程600进行输入的过程中,所述虚拟输入设备700并入致动对象识别技术来区别输入对象。所述虚拟输入设备700具有处理器模块702、相关联的存储器模块704、输入模块706、输入辅助模块708、输出模块710和配置模块712。这些模块可以被直接或间接(例如通过一个数据总线)地耦合在一起。
处理器模块702响应于通过输入模块706接收的虚拟用户输入,执行存储于存储器模块704中的程序指令,所述程序指令包括与设备700的基础控制软件有关的指令。这种虚拟用户输入在此定义为与设备700相关联的远程输入区域的任何致动,其导致所述设备解释有效的输入。输入区域只是在二维或三维空间内指定给用户输入的预先确定的范围。输入区域的位置典型地相对于某个参照物点或参照物对象(例如工作表面、脸、手、计算设备等等)是固定的。输入区域致动的一些例子包括但不限于:在输入区域上敲击手指来表示一次击键或鼠标点击、在输入区域内滑动手指来表示鼠标光标的移动、手指在输入区域内做特定的姿势(例如,伸出食指和中指做“V”的姿势)来表示特定的命令。这样,不需要触觉传感机制(例如机械按键或触摸敏感表面)的虚拟接口提供于输入区域内用来接受用户输入。一些虚拟接口的例子包括虚拟键盘、虚拟电话键区、虚拟触摸板、虚拟写字板等等。应该理解到,所述虚拟设备通常是无形的,虽然所述设备的图像可以呈现在输入区域内来辅助用户。例如,利用激光器或发光二极管(LED),图像可以被投射在输入区域上。可选地,一张承载印刷图像的纸张可以被放置在输入区域上。
在设备700的一个优选的配置中,在过程600的步骤608中,输入模块706对输入区域执行远程数据采集,并且将捕获到的数据发送给处理器模块702来处理。这种远程数据采集可以例如利用一个或多个视频捕获设备(例如摄像机)来实现。当在步骤610中从输入区域远程确定用户输入后,在步骤614中,处理器模块702可以将结果发送到输出模块710,来将处理的结果呈现给用户。所述处理的结果会以例如文本、图像、音频、视频的形式,或者以其他反馈或动作的形式呈现给用户,例如设备700与另一个设备进行通信。
在过程600的步骤612中,输入辅助模块708在虚拟输入过程中提供输入辅助特征。这种输入辅助特征的例子包括但不限于:以投射到输入区域上的被照亮的引导(illuminated guides)的形式的用于虚拟接口的视觉辅助(例如由激光或LED产生的)、对输入区域的照明——用来补偿不佳的照明条件(由设备的光源提供的)、输出显示器上的视觉提示和听觉提示(例如为警告用户的各种哔哔声)。
配置模块712促进配置在虚拟输入设备700中组件或模块的各种设置。这种模块可以在软件、硬件或两者的结合中实现。在软件中,配置模块712可以简单地由一组程序指令组成。在硬件中,配置模块712可以实现为专用集成电路(ASIC)。可选地,配置模块712可以是设备700中专用于促进配置设备组件设置目的的通用处理器。例如,配置模块712可以通过执行存储于存储器模块704中的程序指令,执行过程600中的步骤602和604。在步骤602中,配置模块712确定设备700的一个或多个操作特性的改变是否已经发生。在确定发生了所述改变后,在步骤604中,配置模块自动改变设备的一个或多个相应的组件设置。如果在步骤606中过程继续,那么重复过程600来确定额外的输入或功能。否则,操作可以被终止。此处的所述操作特性涉及设备的参数、模式和操作条件中任一项。环境操作条件的改变,例如在用户输入过程中外部照明的改变,构成一个这样的例子。相应地,配置模块712可以自动地改变例如输入辅助模块708的设置用来提供充足的照明。
值得注意的是,输入模块706、输出模块710和输入辅助模块708除一个单个物理元件以外可以作为多个单独的实体被提供给设备700。需要注意到,此处所描述的装置组件在附图中均用传统的符号代表,只显示相关的特殊细节,为的是不以如下细节搞混公开,所述细节对能从这里的描述获益的本领域普通技术人员来说是很容易明白。应该理解到,数据输入设备700可以提供于许多不同的例子中,例如个人计算机、个人数字助理(PDA)、电话、无线电话、遥控器、电子乐器、工程或医疗设备的控制台等,或者任何其他设备(其中通过该设备接收以供处理)。
在本发明的一个示例的形式中,为区别输入对象,运用包含致动对象识别技术的虚拟输入设备700可以用来处理虚拟鼠标输入,如图5所示。输入模块706可以利用一个或多个视频数据捕获设备(例如图5中的摄像头500)来捕获输入对象(例如用户手指502)在摄像头500的视角内的表面上的输入区域504中的动作信息。捕获到的数据随后被设备的处理器模块702处理,来确定相应的鼠标输入。例如,如图5所示,以左手食指作出的滑行动作的形式的输入区域504的致动可以代表相应的鼠标光标的移动,而左手中指作出的同样的动作可以代表用于在菜单中选择项目的“下一项”功能。作为另一个例子,鼠标点击可以在输入的过程中通过在输入区域504中敲击一个或多个特定的手指来实现。敲击左手食指一次可以相当于在传统的鼠标上单击左键,敲击同样的手指两次可以相当于双击同一个键。然而,敲击另一个手指,例如左手的中指,或可能一起敲击食指和中指,可以相当于在传统的鼠标上点击右键,因为在输入过程中输入对象是有区别的。
执行致动对象识别的程序指令的处理器模块702可以通过某些特征区分输入对象。例如,尺寸、形状、边缘、静脉图案、指甲颜色、皮肤肌理和肤色只是其中一些可以被用来识别和区分用户的敲击的手指的特征,正如Ling Su等人的序号为No.11/361,858的美国专利申请中所公开的那样。这份专利申请也描述了为捕获和处理输入对象动作以及确定敲击事件和位置的方法及装置。
在本发明的另一个示例的形式中,为区分输入对象并入致动对象识别技术的虚拟输入设备700可以被用来处理虚拟键盘输入,如图1所示。输入模块706可以利用一个或多个视频数据捕获设备(例如图1中的摄像头100)来捕获输入对象(例如用户手指102)在摄像机100的视角内的表面上的输入区域104中的动作信息。捕获到的数据随后被处理器模块702处理,来确定相应的键盘输入。
图3示出了适合在前述数据输入设备中进行触摸打字输入的虚拟QWERTY键盘接口300。换言之,在输入区域104中可以提供键盘接口300来接受来自用户的触摸打字输入。为使示例清晰,键盘接口300中只显示了字母符号。应该理解到,在可选的操作模式中,键盘接口300可以提供其他符号和功能,例如数字符号。和传统的QWERTY键盘相比,键盘接口的按键区域(例如302)通常更长和更大,因为与同一个手的手指输入的符号或功能相关联的按键可以整合到单个按键上。在击键过程中输入的整合的按键上的特定符号或功能取决于哪一个手指被处理器模块702识别为相应的敲击的手指,所述处理器模块702执行致动对象识别程序指令。这样,例如,如果图4中的用户的左手404的无名指被识别为正在敲击具有符号“Z”、“X”、“C”和“V”的按键区域402(在图3中其相应地示出为302),随后相应的输入符号被确定为“X”,因为其是在按键区域402中根据在QWERTY键盘上的传统触摸打字方法被分配给左手无名指的符号。按键区域402内被敲击的精确位置无关紧要,因为是输入对象来确定按键区域内的相应的输入符号。
随着移动计算变得无所不在,虚拟输入可以在移动空间找到无数实际应用。因为现今的许多移动设备装配有摄像头,如前所述,这些设备可以用来使虚拟输入成为可能。
对一些具有内置摄像头的移动设备来说,例如那些利用3G网络的移动设备,其摄像头可以旋转。当用户与远程一方进行视频会话时,这使摄像头能对准电话用户。其他电话实际上可以装配两个摄像头,通常对准相反的方向。其中的一个摄像头可以用来拍照片,而另一个可以专门用于视频会话操作。这些移动设备可以很容易地用来基于区别的对象执行虚拟输入。
在前述移动设备上实现的虚拟输入设备可以由图7所描述的组件组成。这些组件的适当的配置对设备的操作、输入的准确性和可用性是至关重要的。作为一个例子,移动设备的旋转摄像头在能够启动输入前可能需要被旋转至对准输入区域。受到设备的操作特征的这一改变影响的组件设置可以包括:摄像头焦距、视角、捕获速度、曝光等等。
尽管通过设备的软件和/或硬件接口,用户可以手动地配置上述组件的很多设置(例如,在特定条件下打开或关闭一个特征),但他们仍将期望基于普通使用情境的许多组件和特征的自动调整的方便,这样,设备的操作特性中的一些改变将相应地触发其他组件和设置中的改变。所述触发可以由用户在更改设备的一些操作特性(例如激活虚拟输入模块)时手动地发起,或者通过配置模块检测到环境或使用的改变而自动地产生。对其他设置的最终改变可以基于用户的在前的选择、用户行为或两者的结合来确定。例如,用户可以旋转或弹出摄像头到输入位置(对准输入区域),这样,触发设备的其他特征的自动调整来准备输入会话。可以为输入设置摄像头的焦距范围和视角。将发起支持区别的对象输入的致动对象识别软件,并且将基于现存的照明条件为输入应用设置摄像捕获速度、曝光度和辅助照明。还将基于用户为输入应用的设置自动地打开或关闭视觉和听觉提示。
在很多情况下,默认的或可定制的配置文件(profile)可以被用来定义触发事件或条件,以及对其他特征作出的相关联的改变和设置。换言之,所述设备的特定操作特性和特定组件设置的结合可以被集合起来作为配置文件。通过一个软件或硬件的用户接口,用户可以手动地选择配置文件。在输入过程中,根据使用条件或环境条件,所述配置文件也可以通过软件自动选择。
图2所示是一个移动设备例如智能电话200,装配有旋转摄像头202。在如图2所描述的虚拟输入过程中,摄像头202必须对准打字的手204以使它们在摄像头的视野206内。在本发明的一个优选的形式中,摄像头202调整到对准打字的手204可以是自动化的。这可以通过例如检测输入设备200的配置(例如笔记本应用、文本消息传送应用、电子数据表应用的启用等等)来完成。其他的可能性从简单如选择一个指定用于输入的功能/选择(例如按下按钮/按键)到更高级的例如在摄像头的视角内做一个特定的姿势(例如,用右手食指和中指做一个“V”的姿势)。除了将摄像头旋转到位以外,能实现致动对象识别和区分的软件模块可以被自动地发起,其他跟数据输入操作相关的与摄像头相关联的组件设置也可以被自动地设置。如前所述,这些可以包括捕获设置,例如摄像头焦距、视角、曝光和辅助特征例如按所需打开LED灯源提供额外的照明,或在工作平面上投射被照亮的键盘接口,以及如果“图书馆”配置文件正被选择的话,静默听觉提示。相反地,用于数据输入设置的摄像头202的手动配置可以触发设备200通过例如启用一个输入应用(例如文本消息传送)并调整前述跟输入有关联的设置,自动地切换成输入模式。摄像头202的这种手动的配置可以包括任何调整,例如:摄像头焦距、视角、曝光和指向的方向。为使将摄像头切换到输入位置的动作被容易地检测到并被用于触发相应组件设置的调整,可以在摄像头中嵌入一个开关或传感器。
如前所指出的,一些设备可以设置有两个指向相反方向的摄像头,而不是一个单独的旋转摄像头。在这样的例子中,可以类似地应用如图2所示的用于虚拟输入的自动摄像头和设备配置的方法。举例而言,这种输入设备的配置,例如文本消息传送应用的启用或按压特定的按钮,可以自动地切换其中一个摄像头来捕获输入(即数据输入)到操作中,也设置相关联的摄像头参数及配置,例如用于数据输入的摄像头焦距、视角和最佳曝光度。类似地,对被设定用于将输入捕获到操作的摄像头的手动切换可以触发设备例如通过启用一个输入应用(例如文本消息传送)以及配置与前述相似的那些与输入相关联的设置,而自动地配置用于数据输入。用户也可以通过屏幕上的软键或硬件快捷按钮来手动地触发输入功能和相关联的设置。
前述的辅助视觉提示可以通过许多方式来提供。一个详细的或简化的键盘(或仅为按键位置的指示器)可以被显示、投射或绘制在输入区域上。用特定的输入手指做的某个姿势或者激活硬件或屏幕上的按键可以被用来在键盘接口的不同的输入模式之间进行切换。类似地,同样也可以用来激活或去激活输入辅助特征,例如由输入辅助模块708所提供的那些输入辅助特征。这种输入辅助特征的例子包括:以投射在输入区域上的被照亮的引导的形式用于虚拟接口的视觉辅助(例如,通过激光或LED产生)、对输入区域的照明——用来补偿不佳的照明条件(例如,通过设备的光源所提供的)、输出显示器上的视觉提示和听觉提示(例如为警告用户的各种哔哔声)。
由于在一些数据输入环境中照明可能不够充足,在这些情况下例如通过使用LED或由输入辅助模块708提供的其他光源来提供照明可能是有用的。这种光源可以被配置为根据确定输入操作中照明条件不够而自动地激活,由配置模块712来实施。这可以通过监视由用于捕获输入对象信息的视频捕获设备(例如图1中的摄像头100或图2中的202)或一个或多个用于此目的的专用传感器(例如一个光传感器)采集的远程数据来实现。
在虚拟输入过程中,对输入对象例如用户的手指来说,在捕获关于对象的输入信息的视频摄像头的视角内是很重要的,所述对象的输入信息例如手指移动和敲击的位置。视觉辅助或提示可以被提供来帮助用户定位摄像头的视野区域和/或虚拟接口。在本发明的一个优选的形式中,所述视觉引导可以以激光或LED光源产生的投射的形式被提供。以“圆点”的形式在打字表面的激光或LED的投射可以用来指示例如虚拟键盘的中心,所述中心可以设置为在传统QWERTY键盘的“G”和“H”键的当中,或者在电话键区上的按键“5”上。投射的“圆点”或点也可以用来指示用于鼠标输入的虚拟触摸板的中心。在本发明的另一个优选的形式中,视觉引导可以是在所述打字表面上的投射线,其代表例如在QWERTY类型键盘上的中间行的字母按键(即,包含“A”、“S”、“D”等按键的行)。这是当没有击键发生时触摸打字员典型地放置他们的手的位置,这样,所述位置作为QWERTY类型键盘的参考位置。电话键区上的按键“5”类似地可以作为键区上其他按键的参考位置。
对能区分输入对象的虚拟输入设备来说,指示键盘接口的中间行的一个圆点或一条线可以足够来允许有效的触摸打字。从图4可以明白在用于支持输入对象区分的虚拟输入的键盘接口上只有三行用于字母输入的按键。这样,用户的手的打字的手指只需要向前伸出并按下来获得顶部行中的符号或功能,原地按下来获得中间行的符号或功能,或者收回并按下来获得底部行中的符号或功能。获得例如在中间列的“T”、“Y”、“G”等的符号进一步需要食指也轻微地向左或向右伸出。因此,允许手来建立按键的中间行作为初始位置的圆点或线,允许所有的输入符号或功能就像触摸打字一样被输入。然而,在本发明的又一个优选的形式中,视觉引导可以更加详细,例如以QWERTY类型键盘的按键区域的被照亮的轮廓的形式,如图4所示。
为保存能量,这对移动设备来说是尤其重要的,上述的视觉提示或暗示不需要在整个数据输入操作的持续过程中被显示。例如,视觉引导可以简短地只在输入会话的开始被自动地显示,来帮助用户定位他的输入手指。当输入对象在输入区域内被检测到时,视觉提示也可以自动地显示。然而,当输入对象在输入区域内不再被检测到时,简短地显示视觉引导是有用的。这可以用来警告用户他们的输入手指或手偏移到了输入区域外。此外,所述视觉提示可以例如由用户通过按下按钮、使用一个特定的姿势来手动地激活,或者所述视觉提示也可以例如通过输入设备在确定检测输入会话已经诸如通过文本消息传送应用的启用而发起后自动地激活。用户也可以用其他方式来激活引导的显示,例如,如前面所提到的,在输入区域内用右手食指和中指做“V”的姿势。此外,视觉引导和听觉提示可以根据用户的设置被自动地禁用或转换到一个简化了的形式(例如,在某个时间间隔只投射一个圆点,而不是投射整个键盘接口)。用户可以选择在本次输入会话开始后多长时间,或在输入的手或动作没有被检测到之后多长时间(空闲时间),设备会触发那些改变。此外,如前所述,用户可以总是通过输入姿势或软件或硬件的快捷键,来再激活特定的视觉提示。
在虚拟输入过程中,例如在QWERTY类型键盘接口上的触摸打字的过程中,随着时间的过去,用户的手会漂移,这是因为其下没有物理按键来限制手的位置。在这种情况下,再一次地、或者简短地或者长期地,显示视觉引导是有用的,来向用户提示在哪里放置他的手。这可以例如,当输入设备的配置模块712从视频摄像头捕获到的对象信息中确定用户手的某部分在摄像头的视野或(输入区域)之外时使用警告特征来自动地执行。
除了有一个固定的位置,在输入区域内的虚拟键盘接口的位置可以动态地调整,以与用户的打字的手成固定的关系。更特别地,手的手掌或指关节的位置可以设置为相对键盘的参照物。这将允许在打字过程中有更大的精确性和舒适度,因为用户的手在虚拟键盘上打字时会漂移。为了更好的人类工程学,QWERTY类型键盘可以进一步分成多个部分,例如左半部分和右半部分,其中每个部分的位置可以动态地调整,以与相应的用户的手的手掌或指关节成固定的关系。这示出在了图8中。为使示例清晰,只有右手801和在字母输入模式下的虚拟QWERTY类型键盘的右半部分802显示在了输入区域803内。应该理解到,所述键盘部分这里涉及包含一个或多个按键或按键区域(即,键盘的最小功能单元)的键盘的一部分。
当虚拟键盘接口的位置相对于某个参照物(例如用户手的手掌或指关节)动态地改变时,任何作为辅助特征的投射在输入区域的键盘接口的本照亮的引导必须也相对于同样的参照物动态地改变其位置。这使得用户能真切(literally)地“看见”虚拟键盘接口,例如图8中的802,以及在打字时它如何相对于参照物手掌或指关节一致地移动。
除了位置,虚拟键盘接口的其他特性可以响应于其参照物对象的状态的改变被更改。例如,旋转用户的手可以引起虚拟键盘接口的方向相应地旋转。虚拟键盘接口的其他可以被参照物对象(例如用户的手)的状态的改变而影响的特性包括:按键区域的尺寸、按键区域的间隔、按键区域的方向、键盘布局(例如QWERTY键盘、电话等)和键盘尺寸。作为另一个例子,当正在打字的手的手指展开的时候,键盘上的按键区域可以被分得更开。在此情况下,手指的指关节可以当作按键区域位置的参照物。此外,当更大的手或手指在输入区域内被检测到时,按键区域可以变得更大。同样地,键盘接口本身也可以变得更大。相反地,当更小的手或手指被检测到时,会提供一个更小的键盘接口,其上有更小的按键区域。
当提供视觉辅助特征(例如键盘接口的激光或LED投射)时,投射的相应特性也会根据接口的参照物对象的状态的改变而改变。例如,旋转用户的手可以引起键盘接口的投射的视觉引导的方向相应地旋转。作为另一个例子,当正在打字的手的手指展开时,投射的键盘接口中的按键区域也会分得更开。此外,手指的指关节可以作为按键区域位置的参照物。此外,当检测到更大的手时,投射的按键区域会变得更大。当两只手都在输入区域的打字位置时,QWERTY类型键盘接口的投射可以被提供用来辅助输入,而当只有用户的一个手在摆姿势打字时,电话键区的按键布局的投射可以被提供。
虽然前述的包括投射的视觉引导的辅助特征的优势从前面的区分多个输入对象的虚拟输入设备的上下文的讨论来看很明显,但是本领域的普通技术人员将认识到同样的优势也适用于不区分多个输入对象的传统的虚拟输入设备。
本发明依据附图以特定的例子和实施方式描述如上,应该理解到,本发明并不意在局限或限制公开在此的那些精确的实施方式。相反,本发明意在覆盖各种结构和修改。应该清楚理解到,此处所教导的基础的发明理念的很多改变和/或修改对本领域的技术人员来说仍然属于本发明的精神和范围之内。所有这些改变和修改意在包括在本发明的范围之内。
Claims (42)
1.一种配置具有输入区域的虚拟输入设备的组件设置的方法,包括:
提供输入模块,并且用所述输入模块对所述输入区域执行远程数据采集;
提供处理器,并且用所述处理器根据所述数据采集确定由至少一个输入对象对所述输入区域的致动以及从一组输入对象中确定所述输入对象的身份;
提供输入辅助模块,并且用所述输入辅助模块提供输入辅助特征;
提供配置模块,并且用所述配置模块:
确定所述设备的操作特性的改变;以及
响应于确定改变的步骤,改变一个或多个所述组件设置;以及
提供输出模块,并且用所述输出模块输出分配给所述输入对象的符号或功能。
2.根据权利要求1所述的方法,其中,所述操作特性包括系统的多个环境操作条件。
3.根据权利要求1所述的方法,其中,所述设备的操作特性的改变包括对设备的至少一个组件设置的用户发起的配置,所述用户发起的配置包括:(a)启用输入软件应用,(b)用至少一个输入对象在输入区域内做出特定的姿势,和(c)选择包括所述设备的特定操作特性和特定组件设置的组合的配置文件。
4.根据权利要求1所述的方法,其中,所述系统的特性的改变包括对耦合到系统作为输入模块的旋转视频捕获设备的用户发起的配置,所述用户发起的配置包括:(a)旋转所述视频捕获设备,(b)调整所述视频捕获设备的焦距,(c)调整所述视频捕获设备的视角,和(d)调整所述视频捕获设备的指向。
5.根据权利要求1所述的方法,其中,设备的所述组件设置包括以下项中的一个或多个:(a)耦合到设备作为输入模块的视频捕获设备的焦距,(b)耦合到设备作为输入模块的视频捕获设备的视角,(c)耦合到设备作为输入模块的视频捕获设备的指向,和(d)耦合到设备的输入模块的激活。
6.根据权利要求1所述的方法,其中,设备的所述组件设置包括输入辅助模块的至少一个输入辅助特征。
7.根据权利要求6所述的方法,其中,所述确定设备的操作特性的改变的步骤包括根据所述数据采集确定由至少一个输入对象做出的、用以激活或去激活所述输入辅助特征的姿势。
8.根据权利要求6所述的方法,其中,所述输入辅助特征包括由设备的光源提供的对输入区域的照明。
9.根据权利要求8所述的方法,其中,所述确定设备的操作特性的改变的步骤包括确定在操作过程中环境照明条件的改变,并且其中改变一个或多个组件设置的步骤包括激活或去激活系统的所述光源。
10.根据权利要求1所述的方法,其中,所述输入辅助特征包括从输入辅助模块投射被照亮的视觉引导。
11.根据权利要求10所述的方法,其中,所述视觉引导包括以下项中的一个:(a)在输入区域内的被照亮的点,用来指示虚拟输入接口的中心,(b)在输入区域内的被照亮的线,用来指示虚拟输入接口的中间行,和(c)在输入区域内的被照亮的轮廓,用来指示虚拟输入接口的边界。
12.根据权利要求10所述的方法,其中,所述视觉引导包括虚拟键盘接口,并且其中所述虚拟键盘接口被划分为多个部分,进一步地,其中改变一个或多个组件设置的步骤包括响应于至少一个参照物对象的状态的改变而动态地更改虚拟键盘接口的单独的部分的特性。
13.根据权利要求12所述的方法,其中,所述动态地更改虚拟键盘接口的所述单独部分的特性的步骤包括响应于用户的参照物手掌或指关节的位置的改变而动态地更改键盘部分的位置。
14.根据权利要求12所述的方法,其中,所述动态地更改虚拟键盘接口的所述单独的部分的特性的步骤包括响应于用户的参照物手掌或指关节的方向的改变而动态地更改键盘部分的方向。
15.根据权利要求12所述的方法,其中,所述动态地更改虚拟键盘接口的所述单独部分的特性的步骤包括:
响应于以下项中的一个或多个的改变:
用户的参照物手指的展开;
用户的参照物手的尺寸的改变;以及
用户的参照物手指的尺寸的改变,而
动态地改变以下项中的一个或多个:
在键盘部分中的多个按键区域之间的间隔;
键盘部分的尺寸。
16.一种在具有输入区域的虚拟输入设备中提供辅助特征的方法,包括:
提供输入模块,并且用所述输入模块对所述输入区域执行远程数据采集;
提供处理器,并且用所述处理器根据数据采集确定由输入对象对所述输入区域的致动;
提供输入辅助模块,并且用所述输入辅助模块提供输入辅助特征;
提供配置模块,并且用所述配置模块响应于参照物状态的改变,更改所述输入辅助特征的一个或多个特性;以及
提供输出模块,并且用所述输出模块响应于确定输入区域致动的步骤,输出符号或功能。
17.根据权利要求16所述的方法,其中,所述输入辅助特征包括被照亮的虚拟键盘接口,并且进一步地,其中更改一个或多个特性的步骤包括响应于用户的参照物手掌或指关节的位置的改变而动态地更改所述键盘接口的位置。
18.根据权利要求16所述的方法,其中,所述输入辅助特征包括被照亮的虚拟键盘接口,并且进一步地,其中更改一个或多个特性的步骤包括响应于用户的参照物手掌或指关节的方向的改变而动态地更改所述键盘接口的方向。
19.根据权利要求16所述的方法,其中,所述输入辅助特征包括被照亮的虚拟键盘接口,并且进一步地,其中改变特性的步骤包括:
响应于以下项中的一个或多个的改变:
用户的参照物手指的展开;
用户的参照物手的尺寸的改变;以及
用户的参照物手指的尺寸的改变,而
动态地更改以下项中的一个或多个:
在键盘接口中的多个按键区域之间的间隔;
键盘接口的尺寸。
20.根据权利要求16所述的方法,其中,所述更改特性的步骤包括以下项中的一个或多个:(a)经过一段时间之后自动禁止至少一个辅助特征;(b)通过在输入区域内检测输入对象做出的特定姿势,启动和/或禁止至少一个辅助特征;(c)当输入对象在输入区域内被检测到时,自动启动至少一个辅助特征;和(d)当输入对象在输入区域不再被检测到时,自动启动至少一个辅助特征一小段时间。
21.根据权利要求20所述的方法,其中,所述辅助特征包括以下项中的至少一个:(a)设备的光源提供的对输入区域的照明,和(b)用于投射在输入区域中的虚拟输入接口的被照亮的视觉引导。
22.一种配置虚拟输入设备的组件设置的装置,包括:
存储器单元,用来存储将输入符号或功能与设备的输入区域相关联的信息,其中所述输入符号或功能被单独地分配给一组输入对象中相应的输入对象;
输入模块,用来对所述输入区域执行远程数据采集;
处理器,用来根据数据采集确定由至少一个输入对象对输入区域的致动,以及从一组输入对象中确定对输入对象的身份;
输入辅助模块,用来提供输入辅助特征;
配置模块,用来确定设备的操作特性的改变,以及响应于所确定的改变,改变一个或多个组件设置;以及
输出模块,用来输出分配给所述输入对象的符号或功能。
23.根据权利要求22所述的装置,其中,所述操作特性包括系统的环境操作条件。
24.根据权利要求22所述的装置,其中,所述设备的操作特征的改变包括对设备的至少一个组件设置的用户发起的配置,所述用户发起的配置包括:(a)启用输入软件应用,(b)用至少一个输入对象在输入区域内做出特定的姿势,和(c)选择包含所述设备的特定操作特性和特定组件设置的组合的配置文件。
25.根据权利要求22所述的装置,其中,所述系统的特性的改变包括对耦合到虚拟输入设备作为输入模块的旋转视频捕获设备的用户发起的配置,所述用户发起的配置包括:(a)旋转所述视频捕获设备,(b)调整所述视频捕获设备的焦距,(c)调整所述视频捕获设备的视角,和(d)调整所述视频捕获设备的指向。
26.根据权利要求22所述的装置,其中,设备的所述组件设置包括以下项中的一个或多个:(a)耦合到设备作为输入模块的视频捕获设备的焦距,(b)耦合到设备作为输入模块的视频捕获设备的视角,(c)耦合到设备作为输入模块的视频捕获设备的指向,和(d)耦合到设备的输入模块的激活。
27.根据权利要求22所述的装置,其中,设备的所述组件设置包括输入辅助模块的至少一个输入辅助特征。
28.根据权利要求27所述的装置,其中,所述配置模块被用来通过根据数据采集确定由至少一个输入对象做出的、用以激活或去激活所述输入辅助特征的姿势来确定操作特性的改变。
29.根据权利要求27所述的装置,其中,所述输入辅助特征包括设备的光源提供的对输入区域的照明。
30.根据权利要求29所述的装置,其中,所述配置模块被用来确定操作特性的改变,并且通过确定在操作过程中环境照明条件的改变,以及作为应答,响应激活或去激活系统的所述光源,来改变一个或多个组件设置。
31.根据权利要求22所述的装置,其中,所述输入辅助特征包括从输入辅助模块投射被照亮的视觉引导。
32.根据权利要求31所述的装置,其中,所述视觉引导包括以下项中的一种:(a)在输入区域内的被照亮的点,用来指示虚拟输入接口的中心,(b)在输入区域内的被照亮的线,用来指示虚拟输入接口的中间行,和(c)在输入区域内的照明被照亮的轮廓,用来指示虚拟输入接口的边界。
33.根据权利要求31所述的装置,其中,所述视觉引导包括虚拟键盘接口,并且其中所述虚拟键盘接口被分成多个部分,进一步地,其中配置模块用于通过响应于至少一个参考参照物对象的状态的改变动态地更改虚拟键盘接口的单独部分的特性,来改变一个或多个组件设置。
34.根据权利要求33所述的装置,其中,所述配置模块用于通过响应于用户的参照物手掌或指关节的位置的改变动态地更改键盘部分的位置,来动态地更改虚拟键盘接口的单独部分的特性。
35.根据权利要求33所述的装置,其中,所述配置模块用于通过响应于用户的参照物手掌或指关节的方向的改变动态地更改键盘部分的方向,来动态地更改虚拟键盘接口的单独部分的特性。
36.根据权利要求33所述的装置,其中,所述配置模块用于:
通过响应于以下项中的一个或多个:
用户的参照物手指的展开;
用户的参照物手的尺寸的改变;以及
用户的参照物手指的尺寸的改变,
动态地更改以下项中的一个或多个,:
在键盘部分中的多个按键区域之间的间隔;
键盘部分的尺寸,
来动态地更改虚拟键盘接口的单独部分的特性。
37.一种在虚拟输入设备中提供辅助特征的装置,包括:
存储器单元,用来存储将输入符号或功能与设备的输入区域相关联的信息;
输入模块,用来对所述输入区域执行远程数据采集;
处理器,用来根据数据采集确定输入对象对所述输入区域的致动;
输入辅助模块,用来提供输入辅助特征;
配置模块,用来响应于参照物状态的改变,更改输入辅助特征的一个或多个特性;以及
输出模块,用来响应于所述输入区域的致动,输出符号或功能。
38.根据权利要求37所述的装置,其中,所述输入辅助特征包括照明被照亮的虚拟键盘接口,并且进一步地,其中配置模块用于通过响应于用户的参照物手掌或指关节的位置的改变,动态地改变更改所述键盘接口的位置,来改变更改输入辅助特征的一个或多个特性。
39.根据权利要求37所述的装置,其中,所述输入辅助特征包括被照亮的虚拟键盘接口,并且进一步地,其中配置模块用于通过响应于用户的参照物手掌或指关节的方向的改变动态地更改所述键盘接口的方向,来更改输入辅助特征的一个或多个特性。
40.根据权利要求37所述的装置,其中,所述输入辅助特征包括被照亮的虚拟键盘接口,并且进一步地,其中配置模块用于:
通过响应于以下项中的一个或多个:
用户的参照物手指的展开;
用户的参照物手的尺寸的改变;以及
用户的参照物手指的尺寸的改变,
动态地更改以下项中的一个或多个,:
在键盘部分中的多个按键区域之间的间隔;
键盘部分的尺寸,
来动态地更改输入辅助特征的特性。
41.根据权利要求37所述的装置,其中,所述配置模块用来通过以下项中的一个或多个来更改输入辅助特征的特性:(a)经过一段时间之后自动禁止至少一个辅助特征;(b)通过检测在输入区域内的输入对象做出的特定姿势,启动和/或禁止至少一个辅助特征;(c)当输入对象在输入区域内被检测到时,自动启动至少一个辅助特征;和(d)当输入对象不再在输入区域内被检测到时,自动启动至少一个辅助特征一小段时间。
42.根据权利要求41所述的装置,其中,所述辅助特征包括以下项中的至少一个:(a)设备的光源提供的对输入区域的照明,和(b)用于投射在输入区域的虚拟输入接口的被照亮的视觉引导。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510126046.2A CN104808821A (zh) | 2009-05-26 | 2010-05-26 | 数据输入方法及装置 |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US21699309P | 2009-05-26 | 2009-05-26 | |
US61/216,993 | 2009-05-26 | ||
US21764909P | 2009-06-03 | 2009-06-03 | |
US61/217,649 | 2009-06-03 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510126046.2A Division CN104808821A (zh) | 2009-05-26 | 2010-05-26 | 数据输入方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101901051A true CN101901051A (zh) | 2010-12-01 |
Family
ID=42371005
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2010101833620A Pending CN101901106A (zh) | 2009-05-26 | 2010-05-26 | 用于数据输入的方法及装置 |
CN201510209706.3A Active CN104898879B (zh) | 2009-05-26 | 2010-05-26 | 用于数据输入的方法及装置 |
CN201510126046.2A Pending CN104808821A (zh) | 2009-05-26 | 2010-05-26 | 数据输入方法及装置 |
CN2010101833550A Pending CN101901051A (zh) | 2009-05-26 | 2010-05-26 | 基于区别的输入对象的数据输入方法及装置 |
Family Applications Before (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2010101833620A Pending CN101901106A (zh) | 2009-05-26 | 2010-05-26 | 用于数据输入的方法及装置 |
CN201510209706.3A Active CN104898879B (zh) | 2009-05-26 | 2010-05-26 | 用于数据输入的方法及装置 |
CN201510126046.2A Pending CN104808821A (zh) | 2009-05-26 | 2010-05-26 | 数据输入方法及装置 |
Country Status (3)
Country | Link |
---|---|
US (2) | US20100302165A1 (zh) |
CN (4) | CN101901106A (zh) |
GB (2) | GB2470653B (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103279225A (zh) * | 2013-05-30 | 2013-09-04 | 清华大学 | 投影式人机交互系统及触控识别方法 |
CN103365400A (zh) * | 2012-03-26 | 2013-10-23 | 联想(北京)有限公司 | 一种手势识别操作的反馈方法、装置 |
CN103558914A (zh) * | 2013-10-31 | 2014-02-05 | 中山大学 | 基于几何校正优化的单摄像头虚拟键盘 |
CN103713733A (zh) * | 2012-10-08 | 2014-04-09 | 冠捷投资有限公司 | 利用指掌纹辨识的输入方法 |
CN103793061A (zh) * | 2014-03-03 | 2014-05-14 | 联想(北京)有限公司 | 一种控制方法及电子设备 |
CN104216653A (zh) * | 2013-05-31 | 2014-12-17 | Lg电子株式会社 | 电子设备及其控制方法 |
CN104272218A (zh) * | 2012-06-30 | 2015-01-07 | 惠普发展公司,有限责任合伙企业 | 基于联合数据的虚拟手 |
CN104298355A (zh) * | 2014-10-16 | 2015-01-21 | 广东科学技术职业学院 | 一种移动终端设备快速输入系统及方法 |
CN105807914A (zh) * | 2015-01-16 | 2016-07-27 | 三星电子株式会社 | 虚拟输入设备和用于使用其来接收用户输入的方法 |
WO2017005207A1 (zh) * | 2015-07-09 | 2017-01-12 | 北京搜狗科技发展有限公司 | 一种输入方法、输入装置、服务器和输入系统 |
CN107229380A (zh) * | 2016-03-24 | 2017-10-03 | 卡西欧计算机株式会社 | 信息处理装置以及信息处理方法 |
CN108319375A (zh) * | 2018-01-18 | 2018-07-24 | 安徽三弟电子科技有限责任公司 | 一种旋转式的激光虚拟键盘系统 |
Families Citing this family (40)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8959013B2 (en) * | 2010-09-27 | 2015-02-17 | Apple Inc. | Virtual keyboard for a non-tactile three dimensional user interface |
US20120095575A1 (en) * | 2010-10-14 | 2012-04-19 | Cedes Safety & Automation Ag | Time of flight (tof) human machine interface (hmi) |
US20120144337A1 (en) * | 2010-12-01 | 2012-06-07 | Verizon Patent And Licensing Inc. | Adjustable touch screen keyboard |
US8928589B2 (en) * | 2011-04-20 | 2015-01-06 | Qualcomm Incorporated | Virtual keyboards and methods of providing the same |
US9445392B1 (en) * | 2011-10-07 | 2016-09-13 | BlueStack Systems, Inc. | Method of providing non-native notifications and system thereof |
EP2802975B1 (en) * | 2012-01-09 | 2018-05-16 | Google LLC | Intelligent touchscreen keyboard with finger differentiation |
US20130204408A1 (en) * | 2012-02-06 | 2013-08-08 | Honeywell International Inc. | System for controlling home automation system using body movements |
KR20130115750A (ko) * | 2012-04-13 | 2013-10-22 | 포항공과대학교 산학협력단 | 가상 키보드 상의 키 입력을 인식하는 방법 및 그 장치 |
US9747306B2 (en) * | 2012-05-25 | 2017-08-29 | Atheer, Inc. | Method and apparatus for identifying input features for later recognition |
US20130335377A1 (en) * | 2012-06-15 | 2013-12-19 | Tzyy-Pyng Lin | Notebook touch input device |
CN102854981A (zh) * | 2012-07-30 | 2013-01-02 | 成都西可科技有限公司 | 基于体感技术的虚拟键盘文字输入方法 |
KR101947034B1 (ko) * | 2012-08-21 | 2019-04-25 | 삼성전자 주식회사 | 휴대 기기의 입력 장치 및 방법 |
CN102880304A (zh) * | 2012-09-06 | 2013-01-16 | 天津大学 | 用于便携设备的字符输入方法及装置 |
JP2014109876A (ja) * | 2012-11-30 | 2014-06-12 | Toshiba Corp | 情報処理装置、情報処理方法及びプログラム |
CN107608508B (zh) * | 2012-12-19 | 2021-07-16 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
US20140184511A1 (en) * | 2012-12-28 | 2014-07-03 | Ismo Puustinen | Accurate data entry into a mobile computing device |
USD735155S1 (en) * | 2013-05-22 | 2015-07-28 | Lg Electronics Inc. | Television receiver |
USD735156S1 (en) * | 2013-05-22 | 2015-07-28 | Lg Electronics Inc. | Television receiver |
US9092407B2 (en) * | 2013-08-30 | 2015-07-28 | Verizon Patent And Licensing Inc. | Virtual interface adjustment methods and systems |
US20150205360A1 (en) * | 2014-01-20 | 2015-07-23 | Lenovo (Singapore) Pte. Ltd. | Table top gestures for mimicking mouse control |
US10067670B2 (en) * | 2015-05-19 | 2018-09-04 | Google Llc | Multi-switch option scanning |
TWI547831B (zh) * | 2015-07-06 | 2016-09-01 | Dexin Corp | An input device with a Bluetooth module and a method of operating the same |
US10691214B2 (en) | 2015-10-12 | 2020-06-23 | Honeywell International Inc. | Gesture control of building automation system components during installation and/or maintenance |
US20200249835A1 (en) * | 2015-11-11 | 2020-08-06 | Sharp Kabushiki Kaisha | Information processing device, control device, control method, and control program |
US10963159B2 (en) * | 2016-01-26 | 2021-03-30 | Lenovo (Singapore) Pte. Ltd. | Virtual interface offset |
US10627948B2 (en) * | 2016-05-25 | 2020-04-21 | Microsoft Technology Licensing, Llc | Sequential two-handed touch typing on a mobile device |
CN106095127B (zh) * | 2016-06-13 | 2019-01-15 | 联想(北京)有限公司 | 一种书写状态提示方法及电子设备 |
CN106383652A (zh) * | 2016-08-31 | 2017-02-08 | 北京极维客科技有限公司 | 一种虚拟输入方法及系统装置 |
CN106933347A (zh) * | 2017-01-20 | 2017-07-07 | 深圳奥比中光科技有限公司 | 三维操控空间的建立方法及设备 |
CN106802717A (zh) * | 2017-01-20 | 2017-06-06 | 深圳奥比中光科技有限公司 | 空间手势遥控方法及电子设备 |
CN106875465B (zh) * | 2017-01-20 | 2021-06-11 | 奥比中光科技集团股份有限公司 | 基于rgbd图像的三维操控空间的建立方法及设备 |
US10719173B2 (en) * | 2018-04-04 | 2020-07-21 | Facebook Technologies, Llc | Transcribing augmented reality keyboard input based on hand poses for improved typing accuracy |
AU2019100594B4 (en) * | 2018-06-03 | 2020-01-30 | Apple Inc. | Systems and methods for activating and using a trackpad at an electronic device with a touch sensitive display and no force sensors |
US11669243B2 (en) | 2018-06-03 | 2023-06-06 | Apple Inc. | Systems and methods for activating and using a trackpad at an electronic device with a touch-sensitive display and no force sensors |
US10776006B2 (en) | 2018-06-03 | 2020-09-15 | Apple Inc. | Systems and methods for activating and using a trackpad at an electronic device with a touch-sensitive display and no force sensors |
CN109144332B (zh) * | 2018-10-12 | 2024-02-06 | 中国计量大学 | 移动电子设备及其便携式键盘和智能感知输入法 |
US10901495B2 (en) * | 2019-01-10 | 2021-01-26 | Microsofttechnology Licensing, Llc | Techniques for multi-finger typing in mixed-reality |
CN112286339B (zh) * | 2019-07-23 | 2022-12-16 | 哈尔滨拓博科技有限公司 | 一种多维手势识别装置、方法、电子设备和存储介质 |
WO2021262178A1 (en) * | 2020-06-25 | 2021-12-30 | Hewlett-Packard Development Company, L.P. | Computing devices with lighting rings |
US11914789B2 (en) * | 2022-01-20 | 2024-02-27 | Htc Corporation | Method for inputting letters, host, and computer readable storage medium |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7016711B2 (en) * | 2001-11-14 | 2006-03-21 | Nec Corporation | Multi-function portable data-processing device |
CN101142617A (zh) * | 2005-02-23 | 2008-03-12 | 杰龙公司 | 数据输入方法和装置 |
Family Cites Families (79)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5245559A (en) * | 1983-01-21 | 1993-09-14 | The Laitram Corporation | Portable computer with large screen display |
US4988981B1 (en) | 1987-03-17 | 1999-05-18 | Vpl Newco Inc | Computer data entry and manipulation apparatus and method |
US5025705A (en) * | 1989-01-06 | 1991-06-25 | Jef Raskin | Method and apparatus for controlling a keyboard operated device |
CA1336418C (en) | 1989-08-29 | 1995-07-25 | Edgar Matias | One-handed keyboard |
US5168531A (en) * | 1991-06-27 | 1992-12-01 | Digital Equipment Corporation | Real-time recognition of pointing information from video |
EP0554492B1 (en) * | 1992-02-07 | 1995-08-09 | International Business Machines Corporation | Method and device for optical input of commands or data |
US5973621A (en) * | 1993-06-03 | 1999-10-26 | Levy; David | Compact keyed input device |
US5982302A (en) * | 1994-03-07 | 1999-11-09 | Ure; Michael J. | Touch-sensitive keyboard/mouse |
US5581484A (en) | 1994-06-27 | 1996-12-03 | Prince; Kevin R. | Finger mounted computer input device |
AU2977295A (en) | 1994-07-19 | 1996-02-16 | Georg Strom | Keyboard for one hand typing |
BR9609807A (pt) | 1995-07-26 | 1999-12-21 | Martin T King | Sistema para anulação de ambiguidade com teclado reduzido |
US5790103A (en) | 1995-10-04 | 1998-08-04 | Willner; Michael A. | Ergonomic keyboard entry system |
US6232960B1 (en) * | 1995-12-21 | 2001-05-15 | Alfred Goldman | Data input device |
US5825352A (en) * | 1996-01-04 | 1998-10-20 | Logitech, Inc. | Multiple fingers contact sensing method for emulating mouse buttons and mouse operations on a touch sensor pad |
US6356258B1 (en) | 1997-01-24 | 2002-03-12 | Misawa Homes Co., Ltd. | Keypad |
US5841374A (en) * | 1997-01-28 | 1998-11-24 | Abraham; Joseph N. | Micro word-pad with tactile multifunctional keys |
JP3624070B2 (ja) | 1997-03-07 | 2005-02-23 | キヤノン株式会社 | 座標入力装置及びその制御方法 |
US5793312A (en) | 1997-04-09 | 1998-08-11 | Tsubai; Ryozo | Data entry system |
US6087577A (en) | 1997-07-01 | 2000-07-11 | Casio Computer Co., Ltd. | Music navigator with visual image presentation of fingering motion |
DE69818427D1 (de) * | 1998-05-11 | 2003-10-30 | Ericsson Telefon Ab L M | Mit einer einzelnen Hand zu betätigende Tastatur |
US6407679B1 (en) * | 1998-07-31 | 2002-06-18 | The Research Foundation Of The State University Of New York | System and method for entering text in a virtual environment |
USRE43082E1 (en) | 1998-12-10 | 2012-01-10 | Eatoni Ergonomics, Inc. | Touch-typable devices based on ambiguous codes and methods to design such devices |
JP2000250690A (ja) * | 1999-02-26 | 2000-09-14 | Nec Shizuoka Ltd | 仮想キーボードシステム |
US6204848B1 (en) | 1999-04-14 | 2001-03-20 | Motorola, Inc. | Data entry apparatus having a limited number of character keys and method |
US6614422B1 (en) * | 1999-11-04 | 2003-09-02 | Canesta, Inc. | Method and apparatus for entering data using a virtual input device |
US6512838B1 (en) * | 1999-09-22 | 2003-01-28 | Canesta, Inc. | Methods for enhancing performance and data acquired from three-dimensional image systems |
US6542091B1 (en) | 1999-10-01 | 2003-04-01 | Wayne Allen Rasanen | Method for encoding key assignments for a data input device |
CN100391103C (zh) * | 1999-10-27 | 2008-05-28 | 菲罗兹·加萨比安 | 集成袖珍键盘系统 |
US6654484B2 (en) | 1999-10-28 | 2003-11-25 | Catherine Topping | Secure control data entry system |
US20030174125A1 (en) * | 1999-11-04 | 2003-09-18 | Ilhami Torunoglu | Multiple input modes in overlapping physical space |
US20030132921A1 (en) | 1999-11-04 | 2003-07-17 | Torunoglu Ilhami Hasan | Portable sensory input device |
US6690618B2 (en) * | 2001-04-03 | 2004-02-10 | Canesta, Inc. | Method and apparatus for approximating a source position of a sound-causing event for determining an input used in operating an electronic device |
US6710770B2 (en) * | 2000-02-11 | 2004-03-23 | Canesta, Inc. | Quasi-three-dimensional method and apparatus to detect and localize interaction of user-object and virtual transfer device |
US20030132950A1 (en) | 2001-11-27 | 2003-07-17 | Fahri Surucu | Detecting, classifying, and interpreting input events based on stimuli in multiple sensory domains |
KR100325381B1 (ko) | 2000-02-11 | 2002-03-06 | 안준영 | 지문입력기를 이용한 터치패드 구현방법 및지문입력기능을 하는 터치패드 장치 |
US6611252B1 (en) * | 2000-05-17 | 2003-08-26 | Dufaux Douglas P. | Virtual data input device |
GB0018812D0 (en) | 2000-08-02 | 2000-09-20 | Koninkl Philips Electronics Nv | Text entry on portable device |
US6348878B1 (en) | 2000-08-10 | 2002-02-19 | Kenzo Tsubai | Data entry keyboard |
US6593914B1 (en) | 2000-10-31 | 2003-07-15 | Nokia Mobile Phones Ltd. | Keypads for electrical devices |
CN1701351A (zh) * | 2000-09-07 | 2005-11-23 | 卡尼斯塔公司 | 检测和定位用户-对象与虚拟传送设备的交互作用的准三维方法和装置 |
US6611253B1 (en) * | 2000-09-19 | 2003-08-26 | Harel Cohen | Virtual input environment |
US6607549B2 (en) * | 2000-12-12 | 2003-08-19 | Pro David Inc. | Oral rehabilitation device |
US7439957B2 (en) | 2001-01-25 | 2008-10-21 | International Business Machines Corporation | Compact universal keyboard |
US6670894B2 (en) * | 2001-02-05 | 2003-12-30 | Carsten Mehring | System and method for keyboard independent touch typing |
US6603462B2 (en) | 2001-03-21 | 2003-08-05 | Multidigit, Inc. | System and method for selecting functions based on a finger feature such as a fingerprint |
CN1164983C (zh) | 2001-03-29 | 2004-09-01 | 国际商业机器公司 | 通过手指击键进行识别的键盘 |
US20050024338A1 (en) * | 2001-03-29 | 2005-02-03 | International Business Machines Corporation | Finger-identifying keyboard |
GB2374266A (en) * | 2001-04-04 | 2002-10-09 | Matsushita Comm Ind Uk Ltd | Virtual user interface device |
JP4084582B2 (ja) | 2001-04-27 | 2008-04-30 | 俊司 加藤 | タッチ式キー入力装置 |
EP1271900A1 (en) * | 2001-06-01 | 2003-01-02 | Siemens Aktiengesellschaft | Keypad system |
KR101128724B1 (ko) * | 2001-07-12 | 2012-06-12 | 벤자민 피루쯔 가사빈 | 데이터 입력 방법 |
WO2003017244A1 (en) | 2001-08-17 | 2003-02-27 | Multidigit, Inc. | System and method for selecting actions based on the identification of user's fingers |
US20030043118A1 (en) * | 2001-08-28 | 2003-03-06 | Lee Sang Min | Compact keyboard for handheld computer |
JP4073215B2 (ja) | 2002-01-28 | 2008-04-09 | 富士通株式会社 | 文字入力装置 |
JP4828826B2 (ja) * | 2002-07-04 | 2011-11-30 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 自動的に適応可能な仮想キーボード |
IL151255A0 (en) | 2002-08-14 | 2003-04-10 | Ariel Yedidya | System and method for interacting with computer using a video-camera image on screen and appurtenances useful therewith |
US7151530B2 (en) * | 2002-08-20 | 2006-12-19 | Canesta, Inc. | System and method for determining an input selected by a user through a virtual interface |
US7199786B2 (en) | 2002-11-29 | 2007-04-03 | Daniel Suraqui | Reduced keyboards system using unistroke input and having automatic disambiguating and a recognition method using said system |
JP4286556B2 (ja) | 2003-02-24 | 2009-07-01 | 株式会社東芝 | 画像表示装置 |
US7532206B2 (en) * | 2003-03-11 | 2009-05-12 | Smart Technologies Ulc | System and method for differentiating between pointers used to contact touch surface |
TWI226584B (en) * | 2003-04-07 | 2005-01-11 | Darfon Electronics Corp | Input device and input method |
US7310053B2 (en) | 2003-04-24 | 2007-12-18 | Taylor Bollman | Compressed standardized keyboard |
KR100590528B1 (ko) * | 2003-06-28 | 2006-06-15 | 삼성전자주식회사 | 착용형 손가락 움직임 감지장치 및 이를 이용한 손가락의움직임 감지방법 |
US20050162402A1 (en) * | 2004-01-27 | 2005-07-28 | Watanachote Susornpol J. | Methods of interacting with a computer using a finger(s) touch sensing input device with visual feedback |
US7555732B2 (en) | 2004-03-12 | 2009-06-30 | Steven Van der Hoeven | Apparatus method and system for a data entry interface |
US7508324B2 (en) * | 2004-08-06 | 2009-03-24 | Daniel Suraqui | Finger activated reduced keyboard and a method for performing text input |
US8334837B2 (en) | 2004-11-10 | 2012-12-18 | Nokia Corporation | Method for displaying approached interaction areas |
US20060132447A1 (en) * | 2004-12-16 | 2006-06-22 | Conrad Richard H | Method and apparatus for automatically transforming functions of computer keyboard keys and pointing devices by detection of hand location |
US9760214B2 (en) | 2005-02-23 | 2017-09-12 | Zienon, Llc | Method and apparatus for data entry input |
US7725511B2 (en) | 2005-03-31 | 2010-05-25 | Intel Corporation | Bio-metric input mechanism |
KR100652725B1 (ko) * | 2005-05-27 | 2006-12-01 | 엘지전자 주식회사 | 단말기의 문자 입력 방법 및 장치 |
US20070035521A1 (en) * | 2005-08-10 | 2007-02-15 | Ping-Chang Jui | Open virtual input and display device and method thereof |
KR100739747B1 (ko) * | 2005-10-31 | 2007-07-13 | 삼성전자주식회사 | 터치 스크린의 사용자 인터페이스장치 및 방법 |
WO2007093984A2 (en) * | 2006-02-16 | 2007-08-23 | Ftk Technologies Ltd. | A system and method of inputting data into a computing system |
US8180114B2 (en) * | 2006-07-13 | 2012-05-15 | Northrop Grumman Systems Corporation | Gesture recognition interface system with vertical display |
US8174555B2 (en) * | 2007-05-30 | 2012-05-08 | Eastman Kodak Company | Portable video communication system |
WO2009059479A1 (en) * | 2007-11-07 | 2009-05-14 | Pohsien Chiu | Input devices with virtual input interfaces |
US20090183098A1 (en) * | 2008-01-14 | 2009-07-16 | Dell Products, Lp | Configurable Keyboard |
US8358277B2 (en) * | 2008-03-18 | 2013-01-22 | Microsoft Corporation | Virtual keyboard based activation and dismissal |
-
2010
- 2010-05-26 CN CN2010101833620A patent/CN101901106A/zh active Pending
- 2010-05-26 CN CN201510209706.3A patent/CN104898879B/zh active Active
- 2010-05-26 CN CN201510126046.2A patent/CN104808821A/zh active Pending
- 2010-05-26 CN CN2010101833550A patent/CN101901051A/zh active Pending
- 2010-05-26 GB GB201008771A patent/GB2470653B/en active Active
- 2010-05-26 US US12/787,805 patent/US20100302165A1/en not_active Abandoned
- 2010-05-26 GB GB201008772A patent/GB2470654B/en active Active
-
2013
- 2013-09-19 US US14/031,412 patent/US9122316B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7016711B2 (en) * | 2001-11-14 | 2006-03-21 | Nec Corporation | Multi-function portable data-processing device |
CN101142617A (zh) * | 2005-02-23 | 2008-03-12 | 杰龙公司 | 数据输入方法和装置 |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103365400A (zh) * | 2012-03-26 | 2013-10-23 | 联想(北京)有限公司 | 一种手势识别操作的反馈方法、装置 |
CN104272218A (zh) * | 2012-06-30 | 2015-01-07 | 惠普发展公司,有限责任合伙企业 | 基于联合数据的虚拟手 |
US10048779B2 (en) | 2012-06-30 | 2018-08-14 | Hewlett-Packard Development Company, L.P. | Virtual hand based on combined data |
CN104272218B (zh) * | 2012-06-30 | 2017-03-08 | 惠普发展公司,有限责任合伙企业 | 基于联合数据的虚拟手 |
CN103713733A (zh) * | 2012-10-08 | 2014-04-09 | 冠捷投资有限公司 | 利用指掌纹辨识的输入方法 |
CN103279225B (zh) * | 2013-05-30 | 2016-02-24 | 清华大学 | 投影式人机交互系统及触控识别方法 |
CN103279225A (zh) * | 2013-05-30 | 2013-09-04 | 清华大学 | 投影式人机交互系统及触控识别方法 |
CN104216653A (zh) * | 2013-05-31 | 2014-12-17 | Lg电子株式会社 | 电子设备及其控制方法 |
US9625996B2 (en) | 2013-05-31 | 2017-04-18 | Lg Electronics Inc. | Electronic device and control method thereof |
CN104216653B (zh) * | 2013-05-31 | 2017-12-12 | Lg电子株式会社 | 电子设备及其控制方法 |
CN103558914A (zh) * | 2013-10-31 | 2014-02-05 | 中山大学 | 基于几何校正优化的单摄像头虚拟键盘 |
CN103793061B (zh) * | 2014-03-03 | 2017-01-11 | 联想(北京)有限公司 | 一种控制方法及电子设备 |
CN103793061A (zh) * | 2014-03-03 | 2014-05-14 | 联想(北京)有限公司 | 一种控制方法及电子设备 |
CN104298355A (zh) * | 2014-10-16 | 2015-01-21 | 广东科学技术职业学院 | 一种移动终端设备快速输入系统及方法 |
CN105807914A (zh) * | 2015-01-16 | 2016-07-27 | 三星电子株式会社 | 虚拟输入设备和用于使用其来接收用户输入的方法 |
WO2017005207A1 (zh) * | 2015-07-09 | 2017-01-12 | 北京搜狗科技发展有限公司 | 一种输入方法、输入装置、服务器和输入系统 |
CN107229380A (zh) * | 2016-03-24 | 2017-10-03 | 卡西欧计算机株式会社 | 信息处理装置以及信息处理方法 |
CN108319375A (zh) * | 2018-01-18 | 2018-07-24 | 安徽三弟电子科技有限责任公司 | 一种旋转式的激光虚拟键盘系统 |
Also Published As
Publication number | Publication date |
---|---|
US20140015757A1 (en) | 2014-01-16 |
US20100302165A1 (en) | 2010-12-02 |
GB2470654A (en) | 2010-12-01 |
CN104808821A (zh) | 2015-07-29 |
GB2470654B (en) | 2015-05-20 |
US9122316B2 (en) | 2015-09-01 |
CN101901106A (zh) | 2010-12-01 |
CN104898879A (zh) | 2015-09-09 |
GB201008772D0 (en) | 2010-07-14 |
GB2470653B (en) | 2015-04-29 |
GB201008771D0 (en) | 2010-07-14 |
GB2470653A (en) | 2010-12-01 |
CN104898879B (zh) | 2019-07-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101901051A (zh) | 基于区别的输入对象的数据输入方法及装置 | |
KR100856203B1 (ko) | 지문 인식 센서를 이용한 사용자 입력 장치 및 방법 | |
US6798401B2 (en) | Optical system for inputting pointer and character data into electronic equipment | |
US7023428B2 (en) | Using touchscreen by pointing means | |
US8115740B2 (en) | Electronic device capable of executing commands therein and method for executing commands in the same | |
CN100391103C (zh) | 集成袖珍键盘系统 | |
EP2211255A1 (en) | Input device for mobile electronic device, and mobile electronic device | |
US20060084482A1 (en) | Electronic hand-held device with a back cover keypad and a related method | |
US20100149099A1 (en) | Motion sensitive mechanical keyboard | |
EP2081107A1 (en) | Electronic device capable of transferring object between two display units and controlling method thereof | |
US20070063976A1 (en) | Mobile information terminal | |
US8106885B2 (en) | Input mechanism for handheld electronic communication device | |
US20060040712A1 (en) | Hand-held communication device as pointing device | |
US20060061557A1 (en) | Method for using a pointing device | |
KR100993508B1 (ko) | 터치 궤적 및 터치 방향의 인식에 기초한 사용자 인터페이스 방법 | |
JP2004213269A (ja) | 文字入力装置 | |
JP2004355606A (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP6740389B2 (ja) | ハンドヘルド電子デバイスのための適応的ユーザ・インターフェース | |
US20100182240A1 (en) | Input system and related method for an electronic device | |
KR20090049153A (ko) | 터치스크린을 구비한 단말기 및 그 문자 입력 방법 | |
US20130314322A1 (en) | Touch panel and input switching method | |
CA2646142C (en) | Input mechanism for handheld electronic communication device | |
CN115176224A (zh) | 文本输入方法、移动设备、头戴式显示设备以及存储介质 | |
KR100830145B1 (ko) | 문자입력과 포인팅이 가능한 광포인팅 장치가 구비된 개인 휴대단말기 | |
KR20120064739A (ko) | 지능형 휴대형 키보드 입력 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20101201 |