CN103034326A - 触觉回馈式虚拟键盘的提供方法及其电子装置 - Google Patents
触觉回馈式虚拟键盘的提供方法及其电子装置 Download PDFInfo
- Publication number
- CN103034326A CN103034326A CN2011103291503A CN201110329150A CN103034326A CN 103034326 A CN103034326 A CN 103034326A CN 2011103291503 A CN2011103291503 A CN 2011103291503A CN 201110329150 A CN201110329150 A CN 201110329150A CN 103034326 A CN103034326 A CN 103034326A
- Authority
- CN
- China
- Prior art keywords
- dummy keyboard
- finger touches
- points
- processing module
- touch points
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 230000004044 response Effects 0.000 claims abstract description 13
- 210000003811 finger Anatomy 0.000 claims description 73
- 238000009434 installation Methods 0.000 claims description 34
- 210000005224 forefinger Anatomy 0.000 claims description 23
- 210000004934 left little finger Anatomy 0.000 claims description 5
- 210000004932 little finger Anatomy 0.000 claims description 5
- 210000004933 right little finger Anatomy 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 14
- 230000035807 sensation Effects 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 210000004247 hand Anatomy 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 5
- 229920001621 AMOLED Polymers 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 210000001015 abdomen Anatomy 0.000 description 3
- 230000001419 dependent effect Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 239000002245 particle Substances 0.000 description 2
- 230000001105 regulatory effect Effects 0.000 description 2
- 210000003813 thumb Anatomy 0.000 description 2
- 208000011092 Hand injury Diseases 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Input From Keyboards Or The Like (AREA)
Abstract
一种触觉回馈式虚拟键盘的提供方法及其电子装置。该方法包括多个步骤。控制触控面板检测多个手指触碰点。回应于手指触碰点,控制显示面板显示虚拟键盘,其中虚拟键盘的形状与尺寸至少依据手指触碰点的座标与触碰面积而被决定。控制触觉致动器产生触觉(haptic/tactile)回馈,以表现出虚拟键盘的各按键的边界。控制该触觉致动器产生触觉回馈,以回应于虚拟键盘的其中一个按键的受压。
Description
技术领域
本发明涉及一种虚拟键盘提供方法及其电子装置,特别是涉及一种用以提供虚拟键盘的触觉回馈方法及其电子装置。
背景技术
随着触控感应技术的蓬勃发展,越来越多的电子装置开始采用触控式屏幕来取代传统屏幕与实体键盘,进而同时做为显示画面以及让使用者输入讯息的界面。依据此种触控感应技术,一种虚拟(virtual)键盘的技术,或称或软件键盘(Software Input Panel,SIP),便是为了让使用者能直接通过触控式屏幕将文字或符号输入至电子装置而发展者。
虚拟键盘仍有一些使用方便性的问题。例如,每个人的双手大小、手指放置在屏幕上的位置、或打字习惯也都不尽相同,故男性、女性、学童、或成人的双手所适合的键盘尺寸也不尽相同。如此,操作尺寸不合适的虚拟键盘将会造成使用不便的问题,且可能会增加手部伤害的风险。
再例如,不同于实体键盘的是,当使用者按压虚拟键盘上的按键时,指尖的触感比较无法感受到按键的回馈,故使用者难以得知是否有正确地碰触到按键、亦不晓得触碰了多少次。故知,要以盲打的方式来操作虚拟键盘是有困难的。因此,使用者需仰赖触控式显示屏幕所提供的视觉回馈,来得知触碰的结果。然而,此种作法会将会造成使用者在视觉上的负担,并降低电子装置的操作方便性。
发明内容
本发明有关于一种虚拟键盘提供方法及其电子装置,能提供适配性的触觉(haptic/tactile)回馈式虚拟键盘,藉以提高电子装置的操作方便性。
根据本发明的一方面,提出一种虚拟键盘提供方法,包括多个步骤。控制触控面板检测多个手指触碰点。回应于手指触碰点,控制显示面板显示虚拟键盘,其中虚拟键盘的形状与尺寸至少依据手指触碰点的座标与触碰面积而被决定。控制触觉致动器产生触觉回馈,以表现出虚拟键盘的各按键的边界。控制该触觉致动器产生触觉回馈,以回应于虚拟键盘的其中一个按键的受压。
根据本发明的一方面,提出一种电子装置,用于触觉回馈。电子装置包括处理模块、显示面板、触控面板、及触控面板。显示面板连接至处理模块。触控面板连接至处理模块,并连接至显示面板而形成触控显示屏幕。触觉作动单元连接至处理模块。处理模块控制该触控面板检测多个手指触碰点。处理模块还回应于手指触碰点控制显示面板显示虚拟键盘。虚拟键盘的形状与尺寸至少依据手指触碰点的座标与触碰面积而被决定。处理模块还控制触觉致动器产生触觉回馈以表现出虚拟键盘的各按键的边界。处理模块还控制触觉致动器产生触觉回馈以回应于虚拟键盘的其中一个按键的受压。
为了对本发明的上述及其他方面有更佳的了解,下文特举较佳实施例,并结合附图详细说明如下。
附图说明
图1绘示依照本发明一实施例的虚拟键盘提供方法的流程图。
图2绘示依照本发明一实施例的电子装置的方块图。
图3绘示为图2的电子装置的处理模块的一例的功能方块图。
图4绘示虚拟键盘的设定过程的一例的流程图。
图5A~5D绘示虚拟键盘的设定过程一例的示意图。
图6绘示虚拟键盘的设定过程的一例的流程图。
图7A~7E绘示虚拟键盘的设定过程一例的示意图。
图8绘示虚拟键盘的压电式触觉回馈的范围的一例的示意图。
附图符号说明
210:处理模块
211:手指定位单元
212:键盘赋形单元
213、214:触发单元
220:显示面板
230:触控面板
240:触觉致动器
A1、A2:触碰面积
B1:按键的边界
B2:按键的字母部分
KB1、KB2、KB3:虚拟键盘
L1、L2:定位线
PL1~PL4、PR1~PR4:手指触碰点
S110~S140、S411~S415、S611~S618:流程步骤
X1、X2、XD1、XW1、YD1:间距
具体实施方式
以下揭示虚拟键盘提供方法及其电子装置。在一些实施例中,通过手指触碰点的座标和面积来决定虚拟键盘的形状与尺寸以提供适配性的虚拟键盘,并通过触觉致动器来增加虚拟键盘的触觉回馈(haptic/tactile),从而提高电子装置的操作方便性。
请参照图1,其绘示依照本发明一实施例的虚拟键盘提供方法的流程图。此控制方法包括多个步骤。于步骤S110中,控制一触控面板检测多个手指触碰点。于步骤S120中,回应于这些手指触碰点,控制一显示面板显示一虚拟键盘,其中该虚拟键盘的形状与尺寸至少依据这些手指触碰点的座标与触碰面积而被决定。于步骤S130中,控制一触觉致动器产生触觉回馈,以表现出该虚拟键盘的各按键的边界。于步骤S140中,控制该触觉致动器产生触觉回馈,以回应于该虚拟键盘的其中一个按键的受压。
手指触碰点的座标和面积的使用能提供适配性的虚拟键盘,使得键盘的尺寸、形状符合使用者的手指间距、指腹大小和/或打字手势。而虚拟触觉回馈的提供能让使用者在触控面板的表面上感受到虚拟键盘的按键的边界与敲击按键的感受,以表现出操作实体键盘的感觉,如此,便能提高电子装置的操作方便性。再者,虚拟触觉回馈的提供能降低使用者对于视觉的仰赖,并增加使用者经验。
请参照图2,其绘示依照本发明一实施例的电子装置的方块图。电子装置200例如是平板计算机、笔记型计算机、手持式装置、智能型手机、或其均等物。于此例中,电子装置200包括处理模块210、显示面板220、触控面板230、及触觉致动器240。
处理模块210用以进行各种运算程序。处理模块210包括微处理芯片或其它具运算能力的处理器。处理模块210操作性地连接至显示面板220、触控面板230与触觉致动器240。处理模块210用以检测触控面板230所受的触碰而对应地控制显示面板220的显示信息,以提供视觉回馈。处理模块210还用以检测触控面板230所受的触碰而对应地驱动触觉致动器240,以产生虚拟触觉回馈。
显示面板220用以显示各种信息。显示面板220例如是电子纸(electronicpaper,ePaper)显示面板、电子墨水(electrophoretic ink,E-Ink)显示面板、发光二极体(Light Emitting Diode,LED)的液晶(liquid crystal)显示面板、有机发光二极体(Organic Light Emitting Diode,OLED)显示面板、主动矩阵有机发光二极体(Active Matrix Organic Light Emitting Diode,AMOLED)显示面板。于一些实施例中,显示面板220也可和触控面板230可整合为一超级(super)AMOLED。然本发明亦不限于此。显示面板220亦可为其它能用来提供视觉回馈的均等装置。
触控面板230例如是电阻式、电容式、光学式、音波式、或其他形式的触控面板。触控面板230的触控区与显示面板220的显示区相互对应,以实现视觉回馈。触控面板230例如是覆盖于显示面板220上,或嵌入于显示面板220中。触控面板230连接至显示面板220而形成一触控显示屏幕。
触觉致动器240用以产生虚拟触觉回馈。触觉致动器240例如包含压电式致动器、振动式致动器(如马达)、产热式致动器、或偏轴转动惯量(EccentricRotating Mass,ERM)致动器。触觉致动器240所能产生的回馈例如包含震动回馈、震动触觉(vibrotactile)回馈、或热能回馈。然本发明亦不限于此。虚拟触觉回馈也可以依据其他形式的触觉致动器而有不同的实施态样。于实作中,触觉致动器240的虚拟触觉回馈可用来模拟出颗粒(grains)的感受,使颗粒的材质(texture)有不同等级,如从柔滑到粗糙、从尖锐到滑顺。
请参照图3,其绘示为图2的电子装置的处理模块的一例的功能方块图。于此例中,处理模块210包括手指定位单元211、键盘赋形单元212、两触发单元213与214。各单元211~214例如但不受限地可由软件程序、硬件电路、或固件配合驱动程序来实现。
请继续参照图3,手指定位单元211的功用在于,当使用者将左右手多只手指如食指、中指、无名指、及小指(还可包含或不包含拇指)轻触触控面板230的触控表面时,进行手指触碰点的定位,以得知手指触碰点的座标与触碰面积。
现结合图4及图5A~5D说明手指定位单元211的功用如下。图4绘示虚拟键盘的设定过程的一例的流程图。图5A~5D绘示虚拟键盘的设定过程一例的示意图。
于步骤S411中,处理模块210控制触控面板230检测多个手指触碰点。举例来说,如图5A所示,触控面板230上有左右手食指、中指、无名指、与小指的八个手指触碰点PL1~PL4与PR1~PR4。
于步骤S412中,处理模块210判断手指触碰点的数量是否满足一预设数量。举例来说,如图5A所示,若手指触碰点的数量少于八个,则可能表示使用者的手势并不是的正确的打击键盘手势,故步骤S411会被重新执行,以检测手指触碰点。若手指触碰点的数量等于八个,则进入步骤S413。若手指触碰点的数量多于八个,则表示触碰点中可能包含了拇指触碰点或其它误触点。此时,可将多余的点滤除后进入步骤S413。
于步骤S413中,处理模块210判断左食指触碰点与左小指触碰点之间的第一间距、和右食指碰点与右小指触碰点之间的第二间距是否相互重迭。举例来说,如图5B,左食指触碰点PL1与左小指触碰点PL4之间有一间距X1,右食指触碰点PR1与右小指触碰点PR4之间有一间距X2。由于间距X1与X2相互重迭,其表示使用者的手势是呈现双手重迭的状态,并不是正确的打击键盘手势,故步骤S411会被重新执行,以检测手指触碰点。相应地,如图5C所示,由于间距X1与X2并不相互重迭,故进入步骤S414。
于步骤S414中,处理模块210计算各手指触碰点的一第一触碰面积以代表触控面板230受轻压、与各手指触碰点的一第二触碰面积以代表触控面板230受重压。举例来说,处理模块210可通过画面指示使用者以手指轻触画面。此时,如图5D所示,处理模块210计算其中一个手指触碰点的触碰面积A1,以代表触控面板230受到轻触。另外,处理模块210可通过画面指示使用者以手指重压画面。此时,如图5D所示,处理模块210计算其中一个手指触碰点的触碰面积A2,以代表触控面板230受到重压。触碰面积A1与A2可以像素为单位的宽*高来表示。由于重压触控面板230时手指指腹与触控面板230之间接触面积会增加,故触碰面积A2一般会大于触碰面积A1。
于步骤S415中,处理模块210将手指触碰点PL1~PL4与PR1~PR4的触碰面积A1与A2各别平均,得出适合使用者手指的轻触面积及重压面积。于范例性的实施例中,手指触碰点PL1~PL4与PR1~PR4的触碰面积A1的平均值例如是50*50个像素,而触碰面积A2的平均值例如是50*100个像素。
请继续参照图3,键盘赋形单元212的功用在于,依照手指触碰点的座标与触碰面积来运算适合使用者的键盘单位键大小,并基于单位键而延伸出键盘上的各个键及位置。
现结合图6及图7A~7E说明键盘赋形单元212的功用如下。图6绘示虚拟键盘的设定过程的一例的流程图。图7A~7E绘示虚拟键盘的设定过程一例的示意图。
于步骤S611中,处理模块210依据与虚拟键盘的尺寸、形状有关的各种参数,决定单位键的尺寸。举例来说,假设单位键的尺寸为XW2*XH2。如图7A所示,左食指触碰点PL1与左小指触碰点PL4在X轴上的间距为XW1。触碰点的触碰面积(如上述的触碰面积A2)的平均值为AW*AH个像素(如上述的50*100个像素),AH代表平均触碰面积的高度。左食指触碰点PL1的座标为(LX1,LY1),右食指触碰点PR1的座标为(RX1,RY1)。显示屏幕220或触控屏幕230的宽度为XX1,高度为XY1。于此例中,单位键的尺寸可设计为XW2=XW1/4,而XH2=AH。
于步骤S612中,处理模块210基于单位键的尺寸判断虚拟键盘的尺寸是否大于阈值尺寸。举例来说,假设虚拟键盘为Qwerty键盘,有12*4个单位键。此时,当XX1(屏幕宽度)大于等于12*XW2(单位键的宽度)时,则表示虚拟键盘的宽度小于阈值宽度。再者,当XY1(屏幕高度)大于等于4*XH2(单位键的高度)时,则表示虚拟键盘的高度小于阈值高度。
当虚拟键盘的尺寸被判定小于阈值尺寸时,进入步骤S613。当虚拟键盘的尺寸被判定大于阈值尺寸时,进入步骤S617。
于步骤S613中,处理模块210基于左食指触碰点的座标和右食指触碰点的座标判断虚拟键盘的位置是否超出屏幕的可视范围。举例来说,如图7A所示,从左食指触碰点PL1来看,其座标(LX1,LY1)用以定位「F」键。对Qwerty键盘而言,键盘宽度的一半约莫是六个按键的宽度、键盘高度的一半约莫是四个按键的高度。因此,为了避免虚拟键盘的位置超出屏幕的可视范围,可判断左食指触碰点PL1的座标(LX1,LY1)是否满足下列判断式:LX1+XW2是否大于等于6*XW2;XY1-LY1是否大于等于4*XH2。相仿地,为了避免虚拟键盘的位置超出屏幕的可视范围,可判断左食指触碰点PR1的座标(RX1,RY1)是否满足下列判断式:XX1-RX1+XW2是否大于等于6*XW2;及XY1-RY1是否大于等于4*XH2。
当虚拟键盘的位置被判定超出屏幕的可视范围时,回到步骤S611。当虚拟键盘的位置被判定未超出屏幕的可视范围时,进入步骤S614。
于步骤S614中,处理模块210判断左食指触碰点和右食指触部点在一座标轴上的间距是否大于一阈值。举例来说,如图7B所示,处理模块210判断左食指触碰点PL1和右食指触部点PR1在X轴上的间距XD1是否大于一个单位键的宽度。处理模块210还判断左食指触碰点PL1和右食指触部点PR1在Y轴上的间距YD1是否大于一个单位键的高度。若间距XD1与YD1的判断式皆为假,则进入步骤S615,若至少有一者为真,则进入步骤S616。
于步骤S615中,处理模块210基于单位键的尺寸延展出双手合并虚拟键盘。举例来说,如图7C所示,双手合并虚拟键盘KB1是以水平置中为例而被延展。换言之,双手合并虚拟键盘KB1从X轴上的座标M1=(XX1-12*XW2)/2开始被延展,并从Y轴上的座标N1=(XY1-4*XH2)开始被延展。
于步骤S616中,处理模块210基于单位键的尺寸延展出左右手分开虚拟键盘。举例来说,如图7D所示,左右手分开虚拟键盘KB2包含一左手键盘部分KB2-1与一右手键盘部分KB2-2。左手键盘部分KB2-1从左食指触碰点PL1的X轴座标LX1向左延展,并从左食指触碰点PL1的Y轴座标LY1向下延展;右手键盘部分KB2-2从右食指触碰点PR1的X轴座标RX1向右延展,并从右食指触碰点PR1的Y轴座标RY1向上延展。
于步骤S617中,处理模块210调整单位键的尺寸。于一些实施例中,处理模块210可依照屏幕(显示屏幕220或触控屏幕230)的尺寸来调整单位键的尺寸。举例来说,若XW2(单位键的宽度)大于XX1(屏幕宽度)/12的阈值,则可调整XW2使其等于XX1/12。若XH2(单位键的高度)大于XY1(屏幕高度)/4的阈值,则可调整XH2使其等于XY1/4。或者,也可基于按键的长宽比例如1∶1、1∶0.618、1∶1.618、或其他黄金比例值,从XW2与XH2的一个来决定另一个。
于步骤S618中,处理模块210基于调整后的单位键的尺寸延展出虚拟键盘。举例来说,如图7E所示,此虚拟键盘KB3可从X轴上的座标M3=0开始被延展,并从Y轴的座标N3=(XY1-4*XH2)开始被延展,此处的XH2代表调整后的单位键的高度。
如此,藉由手指触碰点的座标和面积,便能提供适配性的虚拟键盘,使得键盘的尺寸、形状符合使用者的手指间距、指腹大小和/或打字手势。适配性的虚拟键盘能符合不同使用者的需求,从而提高电子装置的操作方便性。
请继续参照图3,触发单元213的功用在于,以各按键的边缘处作为压电式触觉回馈的反应区,并于各按键的边缘与符号呈现处使用不同强度的压电式触觉回馈。如此,能让使用者在触摸虚拟按键时感受到按键的边界以及输入符号如字母或数字的形状,以表现出操作实体键盘的感觉。
现结合图2及图8说明触发单元213功用如下。图8绘示虚拟键盘的压电式触觉回馈的范围的一例的示意图。
于一些实施例中,处理模块210控制触觉致动器240产生触觉回馈,以表现出虚拟键盘的各按键的边界。举例来说,如图8所示,触觉致动器20可在「A」键的边界B1,如宽度KBW为2个像素的外框,产生压电式触觉回馈。如此,便能让使用者在触控面板的表面上感受到「A」键及其他按键的边界,以表现出操作实体键盘的感觉。
于另一些实施例中,处理模块210控制触觉致动器240产生触觉回馈,以表现出虚拟键盘的各按键的输入符号。举例来说,如图8所示,触觉致动器20可在「A」键内的字母部分B2产生压电式触觉回馈。如此,便能让使用者在触控面板的表面上感受到虚拟键盘的「A」键及其他按键的输入符号的形状,以表现出操作实体键盘的感觉。
于另一些实施例中,处理模块210控制触觉致动器240产生触觉回馈,以表现出虚拟键盘的其中一个按键的一定位线。举例来说,如图8所示,触觉致动器20可在「F」键内的一定位线L1上产生压电式触觉回馈。「J」键的定位线L2的作法亦相仿。如此,便能让使用者在触控面板的表面上感受到虚拟键盘的定位线,以表现出操作实体键盘的感觉。
如图8所示,于一些实施例中,为了进一步表现出实体键盘的感觉,各按键在边界上的触觉回馈可高于字母部分的触觉回馈。于范例性的实施例中,「A」键在边界B1上的触觉回馈约为触觉回馈的最高值的50%,而在字母部分B2的触觉回馈约为触觉回馈的最高值的10%。然本发明亦不限于此。
请继续参照图3,触发单元214的功用在于,回应于一个按键的受压而被触发,以产生震动式触觉回馈。如此,能让使用者在触控面板的表面上感受到敲击按键的感受,以表现出操作实体键盘的感觉。
于一些实施例中,当一针对该虚拟键盘的手指触碰点的触碰面积大于一阈值时,判定该手指触碰点所对应的按键受压。举例来说,如图5D所示,手指触碰点的触碰面积阈值可从触碰面积A1与A2来决定。当使用者为了按压按键所造成的手指触碰点,其触碰面积通常会大于代表触控面板受到轻触的触碰面积A1。因此,于范例性实施例中,当某个手指触碰点的触碰面积大于触碰面积A1时,可判定该手指触碰点所对应的按键受压。
本发明上述实施例的虚拟键盘提供方法及其电子装置,能提供适合使用者的虚拟键盘,并通过触觉致动器来增加虚拟键盘的触觉回馈,从而提高电子装置的操作方便性。于一些实施例中,利用多点触控的方式定位,以键盘上的「F」键及「J」键作为虚拟键盘的定位键,作为建构其他键的基础。如此,可使得虚拟键盘的尺寸、形状符合使用者的手指间距、指腹大小和/或打字手势。虚拟触觉回馈的提供能让使用者在触控面板的表面上感受到虚拟键盘的按键的边界与敲击按键的感受,以表现出操作实体键盘的感觉,如此,便能提高电子装置的操作方便性。再者,虚拟触觉回馈的提供能降低使用者对于视觉的仰赖,并增加使用者经验。
综上所述,虽然本发明已以较佳实施例揭示如上,然其并非用以限定本发明。本领域的技术人员,在不脱离本发明的精神和范围的前提下,可作各种的更动与润饰。因此,本发明的保护范围是以本发明的权利要求为准。
Claims (20)
1.一种虚拟键盘提供方法,包括:
控制一触控面板检测多个手指触碰点;
回应于这些手指触碰点,控制一显示面板显示一虚拟键盘,其中该虚拟键盘的形状与尺寸至少依据这些手指触碰点的座标与触碰面积而被决定;
控制一触觉致动器产生触觉回馈,以表现出该虚拟键盘的各按键的边界;以及
控制该触觉致动器产生触觉回馈,以回应于该虚拟键盘的其中一个按键的受压。
2.如权利要求1所述的方法,还包括:
当这些手指触碰点的数量不满足一预设数量时,控制该触控面板检测另多个手指触碰点。
3.如权利要求1所述的方法,还包括:
当一左食指触碰点与一左小指触碰点之间的一第一间距、和一右食指碰点与一右小指触碰点之间的一第二间距相互重迭时,控制该触控面板检测另多个手指触碰点。
4.如权利要求1所述的方法,还包括:
计算各手指触碰点的一第一触碰面积以代表该触控面板受轻压、与各手指触碰点的一第二触碰面积以代表该触控面板受重压。
5.如权利要求1所述的方法,其中该虚拟键盘的尺寸是依据一食指触碰点与一小指触碰点之间的间距而被决定。
6.如权利要求1所述的方法,其中该虚拟键盘的尺寸是依据这些手指触碰点的触碰面积的平均值而被决定。
7.如权利要求1所述的方法,其中该虚拟键盘的形状是依据一左食指触碰点的座标和一右食指触碰点的座标而被决定。
8.如权利要求7所述的方法,其中当该左食指触碰点和该右食指触部点在一座标轴上的间距大于一阈值时,该虚拟键盘为一左右手分开键盘。
9.如权利要求1所述的方法,还包括:
控制该触觉致动器产生触觉回馈,以表现出该虚拟键盘的各按键的输入符号。
10.如权利要求1所述的方法,还包括:
控制该触觉致动器产生触觉回馈,以表现出该虚拟键盘的其中一个按键上的一定位线。
11.一种电子装置,用于虚拟触觉回馈,该电子装置包括:
一处理模块;
一显示面板,连接至该处理模块;
一触控面板,连接至该处理模块,并连接至该显示面板而形成一触控显示屏幕;以及
一触觉致动器,连接至该处理模块;
其中,该处理模块控制该触控面板检测多个手指触碰点,该处理模块还回应于这些手指触碰点控制该显示面板显示一虚拟键盘,其中该虚拟键盘的形状与尺寸至少依据这些手指触碰点的座标与触碰面积而被决定,该处理模块还控制该触觉致动器产生触觉回馈以表现出该虚拟键盘的各按键的边界,该处理模块还控制该触觉致动器产生触觉回馈以回应于该虚拟键盘的其中一个按键的受压。
12.如权利要求11所述的电子装置,其中当这些手指触碰点的数量不满足一预设数量时,该处理模块控制该触控面板检测另多个手指触碰点。
13.如权利要求11所述的电子装置,其中当一左食指触碰点与一左小指触碰点之间的一第一间距、和一右食指碰点与一右小指触碰点之间的一第二间距相互重迭时,该处理模块控制该触控面板检测另多个手指触碰点。
14.如权利要求11所述的电子装置,其中,针对该触控面板上的一个手指触碰点,该处理模块计算各手指触碰点的一第一触碰面积以代表该触控面板受轻压、与各手指触碰点的一第二触碰面积以代表该触控面板受重压。
15.如权利要求11所述的电子装置,其中该虚拟键盘的尺寸是依据一食指触碰点与一小指触碰点之间的间距而被决定。
16.如权利要求11所述的电子装置,其中该虚拟键盘的尺寸是依据这些手指触碰点的触碰面积的平均值而被决定。
17.如权利要求11所述的电子装置,其中该虚拟键盘的形状是依据一左食指触碰点的座标和一右食指触碰点的座标而被决定。
18.如权利要求17所述的电子装置,其中当该左食指触碰点和该右食指触碰点在一座标轴上的间距大于一阈值时,该虚拟键盘为一左右手分开键盘。
19.如权利要求11所述的电子装置,还包括:
控制该触觉致动器产生触觉回馈,以表现出该虚拟键盘的各按键的输入符号。
20.如权利要求11所述的电子装置,其中该处理模块控制该触觉致动器产生触觉回馈,以表现出该虚拟键盘的其中一个按键的一定位线。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW100136174A TWI524218B (zh) | 2011-10-05 | 2011-10-05 | 觸覺回饋式虛擬鍵盤之提供方法及其電子裝置 |
TW100136174 | 2011-10-05 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103034326A true CN103034326A (zh) | 2013-04-10 |
CN103034326B CN103034326B (zh) | 2015-09-30 |
Family
ID=48021291
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201110329150.3A Active CN103034326B (zh) | 2011-10-05 | 2011-10-26 | 触觉回馈式虚拟键盘的提供方法及其电子装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9030424B2 (zh) |
CN (1) | CN103034326B (zh) |
TW (1) | TWI524218B (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103473044A (zh) * | 2013-08-20 | 2013-12-25 | 广东明创软件科技有限公司 | 适配不同分辨率移动终端的应用程序界面绘制方法 |
CN103780757A (zh) * | 2014-01-10 | 2014-05-07 | 瑞声科技(南京)有限公司 | 基于音频终端开启应用程序的系统及其开启方法 |
CN104765528A (zh) * | 2015-03-19 | 2015-07-08 | 广东欧珀移动通信有限公司 | 一种虚拟键盘显示方法及装置 |
CN105751997A (zh) * | 2015-01-05 | 2016-07-13 | 大众汽车有限公司 | 通过虚拟操作元件输入文字并具有触觉反馈的设备和方法 |
CN105824407A (zh) * | 2016-02-04 | 2016-08-03 | 维沃移动通信有限公司 | 触摸反馈方法及移动终端 |
WO2017020599A1 (zh) * | 2015-07-31 | 2017-02-09 | 宇龙计算机通信科技(深圳)有限公司 | 一种软键盘布局调整方法、装置及电子设备 |
CN108008902A (zh) * | 2016-10-31 | 2018-05-08 | 北京搜狗科技发展有限公司 | 一种虚拟键盘的调整方法、装置和一种播放方法、装置 |
CN109683794A (zh) * | 2018-12-24 | 2019-04-26 | 联想(北京)有限公司 | 信息处理方法及电子设备 |
CN111601008A (zh) * | 2019-02-21 | 2020-08-28 | 夏普株式会社 | 触控面板及触控面板的控制方法 |
CN112130665A (zh) * | 2020-09-16 | 2020-12-25 | 汉得利(常州)电子股份有限公司 | 一种振感均匀的触觉反馈方法及装置 |
CN114690887A (zh) * | 2020-12-30 | 2022-07-01 | 华为技术有限公司 | 一种反馈方法以及相关设备 |
Families Citing this family (43)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10203873B2 (en) * | 2007-09-19 | 2019-02-12 | Apple Inc. | Systems and methods for adaptively presenting a keyboard on a touch-sensitive display |
US8896555B2 (en) * | 2011-05-20 | 2014-11-25 | Robert H Duffield | Touch alphabet and communication system |
US10673691B2 (en) * | 2012-03-24 | 2020-06-02 | Fred Khosropour | User interaction platform |
TWI472954B (zh) * | 2012-10-09 | 2015-02-11 | Cho Yi Lin | 可承載通訊電子裝置之可攜式電子輸入裝置及其系統 |
US9448642B2 (en) * | 2013-02-07 | 2016-09-20 | Dell Products Lp | Systems and methods for rendering keyboard layouts for a touch screen display |
US9557823B1 (en) * | 2013-04-29 | 2017-01-31 | Amazon Technologies, Inc. | Keyboard customization according to finger positions |
USD735237S1 (en) * | 2013-05-02 | 2015-07-28 | Google Inc. | Display panel with an animated computer icon |
JP6088356B2 (ja) * | 2013-05-21 | 2017-03-01 | 京セラ株式会社 | 携帯端末、表示制御プログラムおよび表示制御方法 |
TWI507924B (zh) * | 2013-08-12 | 2015-11-11 | Darfon Electronics Corp | 震動鍵盤 |
US10289302B1 (en) | 2013-09-09 | 2019-05-14 | Apple Inc. | Virtual keyboard animation |
JP6381240B2 (ja) * | 2014-03-14 | 2018-08-29 | キヤノン株式会社 | 電子機器、触感制御方法及びプログラム |
US20160110097A1 (en) * | 2014-10-16 | 2016-04-21 | Lg Electronics Inc. | Display device and method of controlling therefor |
USD786306S1 (en) * | 2014-11-04 | 2017-05-09 | Chris J. Katopis | Display screen with skull keyboard graphical user interface |
EP3314381B1 (en) * | 2015-06-26 | 2023-03-08 | Microsoft Technology Licensing, LLC | Passive haptics as reference for active haptics |
USD780800S1 (en) * | 2015-11-19 | 2017-03-07 | Google Inc. | Display screen with animated graphical user interface |
CN105446646B (zh) | 2015-12-11 | 2019-01-11 | 小米科技有限责任公司 | 基于虚拟键盘的内容输入方法、装置及触控设备 |
US10186081B2 (en) | 2015-12-29 | 2019-01-22 | Microsoft Technology Licensing, Llc | Tracking rigged smooth-surface models of articulated objects |
US10565791B2 (en) | 2015-12-29 | 2020-02-18 | Microsoft Technology Licensing, Llc | Tracking rigged polygon-mesh models of articulated objects |
JP6703688B2 (ja) * | 2016-04-07 | 2020-06-03 | 国立研究開発法人科学技術振興機構 | 触覚情報変換装置、触覚情報変換方法、および、触覚情報変換プログラム、並びに、素子配置構造体 |
US10845878B1 (en) * | 2016-07-25 | 2020-11-24 | Apple Inc. | Input device with tactile feedback |
US10437336B2 (en) | 2017-05-15 | 2019-10-08 | Microsoft Technology Licensing, Llc | Haptics to identify button regions |
DE102017219414A1 (de) * | 2017-10-30 | 2019-05-02 | Robert Bosch Gmbh | Multimedia-Bedienvorrichtung und Verfahren zur Steuerung einer Multimedia-Bedienvorrichtung |
CN109782994A (zh) * | 2017-11-10 | 2019-05-21 | 英业达科技有限公司 | 虚拟键盘的调整方法及触控装置 |
TWI648658B (zh) * | 2018-03-08 | 2019-01-21 | 三竹資訊股份有限公司 | 顯示動態虛擬數字鍵盤之方法及其電腦程式產品 |
US20190302889A1 (en) * | 2018-03-30 | 2019-10-03 | Apple Inc. | Static Pattern Electrostatic Haptic Electrodes |
WO2019229698A1 (en) | 2018-05-31 | 2019-12-05 | Purple Tambourine Limited | Interacting with a virtual environment using a pointing controller |
WO2020107231A1 (zh) * | 2018-11-27 | 2020-06-04 | 深圳市柔宇科技有限公司 | 触摸键盘调整方法、电子设备及计算机可读存储介质 |
US11086431B2 (en) * | 2019-01-30 | 2021-08-10 | Samsung Display Co., Ltd. | Display device and method for providing haptic feedback by display device |
JP7127562B2 (ja) * | 2019-01-31 | 2022-08-30 | 株式会社島津製作所 | 触覚刺激呈示装置 |
JP7305976B2 (ja) * | 2019-02-13 | 2023-07-11 | 京セラドキュメントソリューションズ株式会社 | 表示装置、及び表示制御プログラム |
AU2020226861A1 (en) | 2019-02-18 | 2021-10-14 | Arkh Litho Holdings, LLC | Interacting with a smart device using a pointing controller |
US10768706B1 (en) | 2019-05-07 | 2020-09-08 | Google Llc | Determining an amplitude of a braking portion of a waveform of a driving voltage signal for a linear resonant actuator |
CN110411506B (zh) * | 2019-07-08 | 2021-09-14 | 中国航天员科研训练中心 | 面向遥操作的精细操作能力测试系统 |
CA3152444A1 (en) | 2019-09-24 | 2021-04-01 | Landon NICKERSON | Smart ring |
US20220283641A1 (en) * | 2019-11-08 | 2022-09-08 | Hewlett-Packard Development Company, L.P. | Keyboards with haptic outputs |
WO2021139864A2 (en) * | 2020-01-06 | 2021-07-15 | Camar Aps | Tactile proactive guidance solution in touchscreens |
US11755111B2 (en) | 2020-03-16 | 2023-09-12 | Arkh, Inc. | Spatially aware computing hub and environment |
US11194470B2 (en) | 2020-03-29 | 2021-12-07 | Dell Products L.P. | Systems and methods for implementing a dynamic and contextual on screen keyboard |
CN114115566B (zh) * | 2020-08-25 | 2024-06-25 | 苏州泛普科技股份有限公司 | 多功能物联网的控制方法 |
USD1009861S1 (en) | 2020-09-25 | 2024-01-02 | Arkh, Inc. | Smart ring |
US12118677B2 (en) | 2020-12-22 | 2024-10-15 | Arkh, Inc. | Spatially aware environment interaction |
CN114942718B (zh) * | 2021-02-08 | 2024-07-05 | 腾讯科技(深圳)有限公司 | 虚拟按键的设置方法、装置、介质以及电子设备 |
CN114063876B (zh) * | 2021-09-30 | 2024-08-13 | 北京搜狗科技发展有限公司 | 虚拟键盘设置方法、装置及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090085887A1 (en) * | 2007-09-29 | 2009-04-02 | Htc Corporation | Method for determining pressed location of touch screen |
US20090167690A1 (en) * | 2007-12-27 | 2009-07-02 | Htc Corporation | Keyboard module and electronic apparatus |
US20100141590A1 (en) * | 2008-12-09 | 2010-06-10 | Microsoft Corporation | Soft Keyboard Control |
CN102099768A (zh) * | 2008-07-23 | 2011-06-15 | 进益研究公司 | 触摸屏幕中用于键模拟的触觉反馈 |
US20110157090A1 (en) * | 2009-12-31 | 2011-06-30 | International Business Machines Corporation | Morphing touchscreen keyboard interface |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100020036A1 (en) * | 2008-07-23 | 2010-01-28 | Edward Hui | Portable electronic device and method of controlling same |
TWI490735B (zh) | 2010-01-20 | 2015-07-01 | Silicon Integrated Sys Corp | 利用比對算則之多手指觸碰感測方法 |
US20120166995A1 (en) * | 2010-12-24 | 2012-06-28 | Telefonaktiebolaget L M Ericsson (Publ) | Smart virtual keyboard for touchscreen devices |
US20120212422A1 (en) * | 2011-02-21 | 2012-08-23 | Iasolution Inc. | Software Aided Physical Keyboard for a Touch-Screen |
US20130057475A1 (en) * | 2011-09-01 | 2013-03-07 | Microsoft Corporation | Split keyboard for thumb typing |
-
2011
- 2011-10-05 TW TW100136174A patent/TWI524218B/zh active
- 2011-10-26 CN CN201110329150.3A patent/CN103034326B/zh active Active
-
2012
- 2012-03-13 US US13/418,910 patent/US9030424B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090085887A1 (en) * | 2007-09-29 | 2009-04-02 | Htc Corporation | Method for determining pressed location of touch screen |
US20090167690A1 (en) * | 2007-12-27 | 2009-07-02 | Htc Corporation | Keyboard module and electronic apparatus |
CN102099768A (zh) * | 2008-07-23 | 2011-06-15 | 进益研究公司 | 触摸屏幕中用于键模拟的触觉反馈 |
US20100141590A1 (en) * | 2008-12-09 | 2010-06-10 | Microsoft Corporation | Soft Keyboard Control |
US20110157090A1 (en) * | 2009-12-31 | 2011-06-30 | International Business Machines Corporation | Morphing touchscreen keyboard interface |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103473044A (zh) * | 2013-08-20 | 2013-12-25 | 广东明创软件科技有限公司 | 适配不同分辨率移动终端的应用程序界面绘制方法 |
CN103780757A (zh) * | 2014-01-10 | 2014-05-07 | 瑞声科技(南京)有限公司 | 基于音频终端开启应用程序的系统及其开启方法 |
CN105751997A (zh) * | 2015-01-05 | 2016-07-13 | 大众汽车有限公司 | 通过虚拟操作元件输入文字并具有触觉反馈的设备和方法 |
CN104765528B (zh) * | 2015-03-19 | 2017-11-14 | 广东欧珀移动通信有限公司 | 一种虚拟键盘显示方法及装置 |
CN104765528A (zh) * | 2015-03-19 | 2015-07-08 | 广东欧珀移动通信有限公司 | 一种虚拟键盘显示方法及装置 |
WO2017020599A1 (zh) * | 2015-07-31 | 2017-02-09 | 宇龙计算机通信科技(深圳)有限公司 | 一种软键盘布局调整方法、装置及电子设备 |
CN105824407A (zh) * | 2016-02-04 | 2016-08-03 | 维沃移动通信有限公司 | 触摸反馈方法及移动终端 |
CN108008902A (zh) * | 2016-10-31 | 2018-05-08 | 北京搜狗科技发展有限公司 | 一种虚拟键盘的调整方法、装置和一种播放方法、装置 |
CN108008902B (zh) * | 2016-10-31 | 2022-05-31 | 北京搜狗科技发展有限公司 | 一种虚拟键盘的调整方法、装置和一种播放方法、装置 |
CN109683794A (zh) * | 2018-12-24 | 2019-04-26 | 联想(北京)有限公司 | 信息处理方法及电子设备 |
CN111601008A (zh) * | 2019-02-21 | 2020-08-28 | 夏普株式会社 | 触控面板及触控面板的控制方法 |
CN112130665A (zh) * | 2020-09-16 | 2020-12-25 | 汉得利(常州)电子股份有限公司 | 一种振感均匀的触觉反馈方法及装置 |
CN112130665B (zh) * | 2020-09-16 | 2024-02-02 | 汉得利(常州)电子股份有限公司 | 一种振感均匀的触觉反馈方法及装置 |
CN114690887A (zh) * | 2020-12-30 | 2022-07-01 | 华为技术有限公司 | 一种反馈方法以及相关设备 |
CN114690887B (zh) * | 2020-12-30 | 2024-04-12 | 华为技术有限公司 | 一种反馈方法以及相关设备 |
Also Published As
Publication number | Publication date |
---|---|
TWI524218B (zh) | 2016-03-01 |
CN103034326B (zh) | 2015-09-30 |
US9030424B2 (en) | 2015-05-12 |
US20130088439A1 (en) | 2013-04-11 |
TW201316202A (zh) | 2013-04-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103034326B (zh) | 触觉回馈式虚拟键盘的提供方法及其电子装置 | |
AU2018282404B2 (en) | Touch-sensitive button | |
JP5352619B2 (ja) | 操作入力装置 | |
US9575654B2 (en) | Touch device and control method thereof | |
CN202433855U (zh) | 信息处理装置 | |
US9035883B2 (en) | Systems and methods for modifying virtual keyboards on a user interface | |
US8098235B2 (en) | Multi-touch device having dynamic haptic effects | |
JP5618858B2 (ja) | 表示装置、通信装置及びプログラム | |
US20110291970A1 (en) | Electronic device and operation method thereof | |
US20100020036A1 (en) | Portable electronic device and method of controlling same | |
JPWO2007007682A1 (ja) | タッチパネル表示装置および携帯機器 | |
CA2731042A1 (en) | Portable electronic device and method of controlling same | |
JP5461488B2 (ja) | タッチ表示装置上に表示されるキーボードレイアウトの表示外観を調節する方法 | |
US20170364259A1 (en) | Input apparatus | |
US20110025718A1 (en) | Information input device and information input method | |
JP6017995B2 (ja) | 携帯型情報処理装置、その入力方法、およびコンピュータが実行可能なプログラム | |
EP2474890A1 (en) | Virtual keyboard configuration putting fingers in rest positions on a multitouch screen, calibrating key positions thereof | |
US7855719B2 (en) | Touch input method and portable terminal apparatus | |
EP3211510B1 (en) | Portable electronic device and method of providing haptic feedback | |
TW201102884A (en) | Touch-controlled electronic apparatus and related control method | |
CN103365401A (zh) | 手势控制方法及装置 | |
KR20130075767A (ko) | 휴대용 전자 장치 및 그 제어 방법 | |
US9606651B2 (en) | Electronic device | |
TWI444867B (zh) | 觸感顯示裝置以及觸感顯示裝置的控制方法 | |
TWI410860B (zh) | 具有虛擬鍵盤之觸控裝置及其形成虛擬鍵盤之方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |