CN106406720A - 信息处理方法和信息处理装置 - Google Patents

信息处理方法和信息处理装置 Download PDF

Info

Publication number
CN106406720A
CN106406720A CN201610515418.5A CN201610515418A CN106406720A CN 106406720 A CN106406720 A CN 106406720A CN 201610515418 A CN201610515418 A CN 201610515418A CN 106406720 A CN106406720 A CN 106406720A
Authority
CN
China
Prior art keywords
user
handwriting input
contact points
touch
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610515418.5A
Other languages
English (en)
Other versions
CN106406720B (zh
Inventor
乔纳森·耶恩-韦·尤
亚伦·迈克尔·斯图尔特
杰弗里·E·斯克尼尔
托马斯·赖恩·库克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Singapore Pte Ltd
Original Assignee
Lenovo Singapore Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Singapore Pte Ltd filed Critical Lenovo Singapore Pte Ltd
Publication of CN106406720A publication Critical patent/CN106406720A/zh
Application granted granted Critical
Publication of CN106406720B publication Critical patent/CN106406720B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/142Image acquisition using hand-held instruments; Constructional details of the instruments
    • G06V30/1423Image acquisition using hand-held instruments; Constructional details of the instruments the instrument generating sequences of position coordinates corresponding to handwriting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/142Image acquisition using hand-held instruments; Constructional details of the instruments
    • G06V30/1426Image acquisition using hand-held instruments; Constructional details of the instruments by sensing position defining codes on a support
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/30Writer recognition; Reading and verifying signatures
    • G06V40/33Writer recognition; Reading and verifying signatures based only on signature image, e.g. static signature recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Abstract

本发明提供了信息处理方法和信息处理装置。一个实施例提供了一种信息处理方法,包括:在触摸表面处检测用户的手的至少两个接触点;基于至少两个接触点的配置将由用户提供的输入识别为手写输入;以及在显示屏上显示该手写输入,其中,该手写输入被识别为在相对于用户的手的至少两个接触点的位置处被输入。还描述并且请求保护其他方面。

Description

信息处理方法和信息处理装置
技术领域
本发明涉及信息处理领域,更具体地,涉及用于触摸表面上的自然手写检测的信息处理方法和信息处理装置。
背景技术
信息处理装置(例如,智能电话、平板、个人计算机、膝上型计算机等)的普及和便携性允许用户在各种位置处使用这些装置来提供和接收输入。例如,小企业主可以使用智能电话而不是需要专用的信用卡刷卡机和陆地线路来接受信用卡。作为另一示例,公用事业仪表读取器可以配备有用于记录仪表读数的平板。随着技术的进步,这些装置允许通过各种不同的机制(例如,传统键盘、鼠标、麦克风、照相机、触摸表面等)来输入。
为了辅助不断变化的需求和愿望并且增加装置的便携性,传统键盘和输入法正在被触摸表面所替代以允许更多样的输入类型,例如,触摸表面可以在没有键盘或鼠标的约束的情况下实现文本输入以及绘图、草稿、公式等。为了提供触摸输入,用户传统上使用触控笔或其他触摸表面书写用具(“触控式笔”)。有时,这些触控式笔对于特定触摸表面是唯一的,因为该触摸表面仅识别来自该类型的触控笔的输入。当该触控笔被丢失或损坏时,用户必须更换可能变得非常昂贵的触控笔。
发明内容
总之,一方面提供了一种信息处理方法,包括:在触摸表面处检测用户的手的至少两个接触点;基于至少两个接触点的配置将由用户提供的输入识别为手写输入;以及在显示屏上显示手写输入,其中,手写输入被识别为在相对于用户的手的至少两个接触点的位置处被输入。
另一个方面提供了一种信息处理装置,包括:触摸表面;显示屏,操作地耦接至触摸表面;处理器,操作地耦接至触摸表面和显示屏;存储器装置,存储能够由处理器执行的指令,处理器执行指令以用于:在触摸表面处检测用户的手的至少两个接触点;基于至少两个接触点的配置将由用户提供的输入识别为手写输入;以及在显示屏上显示手写输入,其中,手写输入被识别为在相对于用户的手的至少两个接触点的位置处被输入。
又一个方面提供了一种产品,包括:存储装置,存储装置存储能够由处理器执行的代码,所述代码包括:在触摸表面处检测用户的手的至少两个接触点的代码;基于至少两个接触点的配置将由用户提供的输入识别为手写输入的代码;以及在显示屏上显示手写输入的代码,其中,手写输入被识别为在相对于用户的手的至少两个接触点的位置处被输入。
前述为总结,因此可能包含对细节的简化、概括和省略;因此,本领域技术人员将理解,该总结仅为说明性的,而不意在以任何方式进行限制。
结合附图,参照下面的描述,以连同这些实施例的其他和进一步的特征和优点一起更好地理解这些实施例。在所附权利要求中将指出本发明的范围。
附图说明
图1示出了信息处理装置电路系统的示例。
图2示出了信息处理装置电路系统的另一示例。
图3示出了触摸表面上的自然手写检测的示例方法。
图4示出了用于检测自然手写的示例接触签名。
图5A至图5B示出了显示书写用具的图形的示例。
具体实施方式
将容易理解,可以以除所描述的示例实施例以外的各种不同的配置来布置和设计本文附图中一般性描述和示出的实施例的部件。因而,如在附图中示出的示例实施例的以下更详细的描述并非意在限制所要求保护的实施例的范围,而仅代表示例实施例。
说明书全文所提及的“一个实施例”或“实施例”(等)表示结合实施例所描述的特定特征、结构或特性被包含在至少一个实施例中。因此,在贯穿本说明书中各处所出现的短语“在一个实施例中”或“在实施例中”等未必都指代同一实施例。
此外,在一个或多个实施例中,可以以任意适当的方式组合所描述的特征、结构或特性。在下面的描述中,提供了许多具体的细节以给出对于实施例的透彻理解。然而,相关领域的技术人员将认识到,各种实施例可以在没有一个或多个具体细节的情况下被实施,或者可以使用其他的方法、部件、材料等来实施。在其他示例中,为了避免混淆,未示出或详细描述公知的结构、材料或操作。
便携式信息处理装置(“装置”)增加的功能已允许用户具有更多的灵活性。例如,现在企业可以使用附接到企业主的智能电话的装置进行信用卡和借记卡支付。然后,客户可以在该智能电话的触摸屏上提供签名。然而,一般来说,为了接受这个手写输入,该装置必须具有可以使该装置能够准确地接受触控笔输入的特定技术。例如,该装置可能需要数字转换器或高分辨率触摸电容显示屏。在这样的情况下,该技术可能没有灵敏到足以再现自然的手写。
用于辅助准确地再现手写的一种当前的方法是使用触控笔、钢笔或者用于触摸屏而制成的其他书写用具(“触控式笔”或“触控笔”)。然而,为了使用这样的触控笔将手写准确地输入为数字格式,通常需要使用具有先进技术的触控笔。例如,可能需要该触控笔为有源电容笔、具有电容笔尖的触摸笔或者具有EMR(电磁共振)数字转换器。在电容式触控笔解决方案中,需要接触点具有一定的尺寸以检测触控笔的点的位置,这使得难以精确控制数字墨水。使用这些触控笔的另一个问题是,这些触控笔容易丢失或放错地方。如果用户丢失了对于该触摸表面唯一的书写用具,则可能难以提供手写输入,因为触摸表面可能无法接受来自任意的钢笔或铅笔的输入。此外,这种不是为触摸表面设计的用具可能会划伤或损坏触摸表面。替换这样的书写用具可能很昂贵。
一个解决方案是接受由用户的手指提供的触摸输入。这通常涉及使用单个手指并且使用指尖提供输入的用户。在提供这样的输入时,墨水通常被手指遮挡,使得难以看到墨水被显示在哪里,并且在试图提供精确墨水笔画时引起问题。这种解决方案的另一个问题是,使用单个手指的手写常常不能再现在用户看来自然的手写。此外,不仅在用户看来该手写不自然,而且对于用户来说提供这样的输入也感觉不自然,尤其是如果用户已经被教导过使用钢笔、铅笔和其他传统书写用具来进行手写。这是由于如下事实:当握着常规书写用具提供手写输入时,需要将用具握在两个或三个手指之间,然后引导用具进行期望的手写输入,这样来实现更精确的和受控的移动。因此,只用单个指尖导致手写输入看起来不自然或太粗糙。例如,当在商店处试图提供签名时,由指尖提供的“签名”看起来与当人们使用传统的书写用具来签署时的签名非常不同。
对于用户来说,这些技术问题存在的麻烦在于,可能难以向触摸表面提供自然的手写输入。使用触控笔来提供手写输入(例如,草稿、绘图、公式、文本、符号等)的常规解决方案通常需要使用具有先进技术的特定类型的触控笔,使得触摸表面能够检测到该触控笔和输入。这些触控笔中的一些要求特定尺寸的触控笔尖以被检测到,这降低了可以提供的墨水笔画的精度。此外,如果这些触控笔被丢失或放错地方,替换这些触控笔可能很昂贵。使用指尖提供手写输入省去了对触控笔的需要,然而,使用这种方法产生的手写输入看起来笨拙且不自然,从而不能准确地再现手写输入。
因此,实施例提供了在触摸表面处检测更自然的手写输入的方法。使用这种方法,用户可以模拟更自然的手写握持方式,例如,三点握持、四点握持或者其他握持,用户可以使用这些握持方式来握着书写用具,然后可以使用这些书写用具将手写输入提供到触摸表面。一个实施例可以检测到用户的手的至少两个接触点,例如,用户的手掌的一部分和用户的手指的一部分、两个不同手指的部分或者其他接触点。基于至少两个接触点的配置,实施例可以识别到用户正在试图提供手写输入。接触点也可以被识别为针对用户的接触签名。这种接触签名可以针对特定用户来识别,或者可以只是被识别为手写接触签名以触发手写模式。
然后,实施例可以在相对于接触点的位置处将输入显示为手写输入。例如,如果用户正在提供类似于三点握持的接触点,则可以在指尖汇聚的位置处显示手写输入。一个实施例可以在相对于接触点的位置处附加地显示用于描绘书写用具(例如,钢笔、铅笔、记号笔、蜡笔、画笔等)的图形。例如,可以在指尖汇聚的位置处显示铅笔图形,并且然后可以在铅笔图形的笔尖处显示手写输入。
在一个实施例中,用户可以能够提供附加输入,以改变与手写输入相关联的输入类型。例如,用户可以用手指簇提供点击操作,这样可以将手写输入从铅笔变为橡皮擦。多次点击操作可以执行另外的动作,或者将手写输入变为不同的输入类型。用户可以从另一个源附加地提供输入。例如,用户可以在不移动用于手写的手的接触点的情况下使用另一只手来提供输入。在一个实施例中,这种类型的输入可以导致显示接口,以允许用户修改与手写输入相关联的属性。
将通过参考附图来最好地理解所示出的示例实施例。下面的描述意在仅通过举例的方式,并且简单地说明某些示例实施例。
虽然在信息处理装置中可以采用各种其他电路、电路系统或部件,但是对于智能电话和/或平板电路系统100,图1所示的示例包括例如存在于平板或其他移动计算平台中的片上系统设计。软件和一个或多个处理器合并在单个芯片110中。如本领域公知的那样,处理器包括内部运算单元、寄存器、高速缓存存储器、总线、I/O端口等。内部总线等取决于不同的供应商,但基本上所有的外围装置120均可以附接至单个芯片110。电路系统100将处理器、存储器控制以及I/O控制器集线器全部合并在单个芯片110中。此外,这种类型的系统100通常不使用SATA(串行高级技术附件)或PCI(外围部件互联接口)或LPC(低引脚数接口)。通用接口例如包括SDIO(安全数字输入输出卡)和I2C(内置集成电路)。
存在一个或多个电力管理芯片130,例如电池管理单元BMU,电池管理单元BMU对例如经由可再充电电池140供应的电力进行管理,可以通过将可再充电电池140连接至电源(未示出)来对其再充电。在至少一个设计中,使用单个芯片例如110来提供类似BIOS(基本输入输出系统)的功能和DRAM(动态随机存取)存储器。
系统100通常包括一个或多个WWAN(无线广域网)收发器150和WLAN(无线局域网)收发器160以连接至各种网络,例如电信网络和无线因特网装置(例如接入点)。此外,通常包括装置120,例如,图像传感器如照相机。系统100通常包括用于数据输入和显示/呈现的触摸屏或触摸表面170。系统100通常还包括各种存储装置,例如闪速存储器180和SDRAM(同步动态随机存取存储器)190。
图2描绘了信息处理装置电路、电路系统或部件的另一示例的框图。图2中描绘的示例可以对应于计算系统,例如由北卡罗来纳州莫里斯维尔市的联想(美国)公司销售的THINKPAD系列的个人计算机,或其他装置。根据本文的描述明显的是,实施例可以包括其他特征或仅包括图2所示的示例的特征中的一些特征。
图2的示例包括所谓的芯片集210(一起工作的一组集成电路或芯片,芯片集),芯片集210具有可以根据制造商(例如,INTEL、AMD、ARM等)而变化的架构。INTEL是Intel公司在美国和其他国家的注册商标。AMD是Advanced Micro Devices公司在美国和其他国家的注册商标。ARM是ARM有限公司在美国或其他国家的未经注册的商标。芯片集210的架构包括经由直接管理接口(DMI)242或链路控制器244交换信息(例如数据、信号、命令等)的核和存储器控制组220以及I/O控制器集线器250。在图2中,DMI 242是芯片间接口(有时称为“北桥”与“南桥”之间的链路)。核和存储器控制组220包括经由前端总线(FSB)224交换信息的一个或多个处理器222(例如,单核或多核)和存储器控制器集线器226;注意,组220的部件可以被集成在代替传统“北桥”式架构的芯片中。如本领域公知的那样,一个或多个处理器222包括内部运算单元、寄存器、高速缓存存储器、总线、I/O端口等。
在图2中,存储器控制器集线器226和存储器240对接(例如,用以对可以称为“系统存储器”或“存储器”的一类RAM提供支持)。存储器控制器集线器226还包括用于显示装置292(例如,CRT(阴极射线管)、平板、触摸屏等)的低压差分信号(LVDS)接口232。块238包括可以通过LVDS接口232支持的一些技术(例如串行数字视频、HDMI/DVI(高清晰度多媒体接口/数字视频接口)、显示端口)。存储器控制器集线器226还包括可以支持独立显卡236的PCI-express接口(PCI-E)234。
在图2中,I/O控制器集线器250包括SATA接口251(例如,用于HDD(硬盘驱动器),SDD(固态硬盘)等280),PCI-E接口252(例如用于无线连接282)、USB接口253(例如,用于如数字转换器、键盘、鼠标、摄像头、电话、麦克风、存储装置、其他连接的装置等的装置284)、网络接口254(例如,LAN)、GPIO(通用输入输出)接口255、LPC接口270(用于ASIC(专用集成电路)271、TPM(可信平台模块)272、超级I/O 273、固件集线器274、BIOS支持275以及各种类型的存储器276,例如ROM 277、闪存278以及NVRAM(非易失性随机存取存储器)279),电力管理接口261、时钟发生器接口262、音频接口263(例如,用于扬声器294)、TCO接口264、系统管理总线接口265以及可以包括BIOS 268和启动代码290的SPI(串行外围接口)闪存266。I/O控制器集线器250可以包括千兆比特的以太网支持。
系统可以被配置成在通电时执行存储在SPI闪存266内的、用于BIOS 268的启动代码290,此后,在(例如存储在系统存储器240中的)一个或多个操作系统和应用软件的控制下处理数据。操作系统可以存储在各种位置中的任意位置处,并且例如可以根据BIOS 268的指令来访问该操作系统。如本文所描述的,装置可以包括比图2的系统中示出的特征更少或更多的特征。
例如,如图1或图2中所概述的信息处理装置电路系统通常可以用于诸如平板、智能电话、个人计算机装置的装置以及/或者用户可以用来提供输入特别是触摸或手写输入的电子装置。此外,在确定是否提供了手写输入时,可以使用如图1或图2中所概述的电路系统来处理或存储接触点。例如,图1中概述的电路系统可以在平板或智能电话实施例中实现,而图2中概述的电路系统可以在个人计算机实施例中实现。
现在参照图3,在301处,实施例可以在触摸表面处检测到用户的手的至少两个接触点。接触点可以包括用户的手的不同部分,例如,手掌的一部分,手指的一部分(例如,指关节、指尖等)等。作为示例实施例,用户可能正在将其手搁在触摸表面上,并且一个接触点可以是用户的手掌,另一个接触点可以是用户的指尖。作为另一示例,接触点中的一个可以是一个指尖而接触点中的另一个可以是另一指尖。检测到的接触点可能正在触摸该触摸表面,例如,用户的手搁在触摸表面上。可替代地,接触点可以没有触摸该触摸表面,而是可以替代地被检测为靠近触摸表面。例如,装置可以具有检测悬停输入的能力,悬停输入例如用户的指尖在触摸表面的上方。然后可以将这些悬停输入检测为接触点。
实施例可以检测单个触摸表面上的接触点,例如,接触点全部被包含在单个触摸表面上。可替代地,两个接触点可以在多个触摸表面上,或者在可以检测压力和/或接触的表面上。例如,信息处理装置的触摸屏或表面可能太小而无法使用户将手搁在表面上。然而,围绕该表面的边框可以包括压力传感器,该压力传感器可以检测到用户的手。触摸表面和边框可以都提供允许实施例检测至少两个接触点的输入。
在302处,实施例可以识别接触点的配置。图4示出了触摸表面处的用户的手和接触点的示例。使用图4作为示例,实施例可以在识别该配置时确定各接触点401之间的距离402以及各接触点的形状和尺寸。此外,实施例可以识别其他唯一特性,例如,各接触点之间的角度、接触的类型(例如,指尖与手掌)等。在识别各点的配置和识别该配置的方法时使用的其他识别特征也是可能的和预期的。
使用接触点的特性,一个实施例可以识别配置作为用户的接触签名。接触签名可以被用于识别用户正在试图提供的输入的类型。例如,使用接触签名,实施例可以确定用户正在试图提供手写输入而不是提供打字输入。附加地或者可替代地,实施例可以使用接触签名来识别该用户为特定用户。例如,实施例可以将所接收的接触签名进行比较以了解或先前存储接触签名。可以将这些先前存储的接触签名链接至特定用户。另外,该装置可以具有通过使用从接触点采集的生物特征数据(例如,指纹、手纹、掌纹等)来将用户识别为特定用户的能力。然后,实施例可以使用这种对特定用户的识别来对用户进行认证、核实签名、调用定制的用户设置或者其他动作。
在303处,实施例可以基于至少两个接触点的配置来识别到该用户正在试图提供手写输入。例如,基于接触点的配置,实施例可以识别到该用户正在模拟用户如何握着书写用具。为了识别到用户正在试图提供手写输入,实施例可以识别接触点相对于彼此的位置。换言之,如果用户正在提供用于指示自然手写的接触点,则实施例可以将其识别为手写输入。然而,如果用户正在提供用于指示用户尝试例如将画面的特定部分放大的接触点,则实施例不会将这些接触点识别为提供手写输入。
可以使用数据的统计集或对照集来确定将输入识别为手写输入。例如,基于接触点的尺寸和距离,实施例可以以合理的概率来确定这些接触点指示了用户试图提供手写输入。针对不同用户的统计集可以不同。例如,在一个实施例中,用户可以指示该用户为成年女性。该信息可以被实施例用来确定哪些统计集最适用于该用户。将输入识别为手写输入的其他形式也是可能的和预期的。
在303处,如果实施例识别到用户没有提供手写输入,则在305处,实施例不能将输入显示为手写输入。换言之,如果用户正在提供不被识别为手写输入的输入,则在305处,实施例可以将该输入接受为手写输入以外的输入。可替代地,实施例可以显示用于指示该输入不被接受为手写输入的提示。
然而,在303处,如果实施例识别到用户正在提供手写输入,则在304处,实施例可以在显示屏上将手写输入显示为例如数字墨水。在一个实施例中,显示屏可以是单独的平面如触摸表面。可替代地,触摸表面可以附加地被用作显示屏(例如触摸屏)。可以将手写输入识别为在相对于至少两个接触点的位置处被输入。例如,参照图5A,如果接触点501被识别为用户的指尖,则实施例可以在接近指尖汇聚的点的位置处显示手写输入。手写输入不能恰好显示在两个指尖汇聚的位置处,而是显示在距指尖预定距离处,以防止手遮挡所显示的手写输入。实施例可以将手写输入显示成好像用户在用书写用具进行书写。例如,如果用户将其手形成为好像握着书写用具然后提供输入,就好像用户正在书写一样,则显示屏上的手写输入可以被显示为好像模拟的书写用具正在书写。一个实施例可以将书写用具的图形显示为好像该用具实际上在用户的手中一样,如图5B的502处所示。然后,可以将手写输入显示在书写用具图形的笔尖处。
手写输入和/或书写用具图形的显示不仅限于钢笔或铅笔。手写输入显示和/或书写用具图形可以取决于用户选择的输入的类型。例如,如果用户想要提供蜡笔输入,则显示和图形可以反映这种类型的输入。其他类型的输入也是可能的和预期的,例如,画笔、记号笔、荧光笔、不同尺寸和/或彩色的书写用具、橡皮擦等。实施例还可以感测用户提供的压力有多大,并且压力的量可以使墨的粒度控制更精细,例如,就像模拟钢笔尖或毛笔的角度。
在一个实施例中,用户可以能够提供附加输入以改变与手写输入相关联的输入类型。例如,用户可以点击“握着”书写用具的手指,这可以将输入类型从例如铅笔变为橡皮擦。提供附加的点击操作可以循环经过不同的输入类型,或者可以提供不同的修改,例如,改变手写输入的颜色。在一个实施例中可以预设输入类型的循环,例如,首先是铅笔,然后是橡皮擦,然后是钢笔等。可替代地,输入类型的循环可以由用户来设置。例如,用户通常在蓝色钢笔和黑色钢笔之间切换,因此,用户可以设置点击两下会产生黑色钢笔而不是如标准输入循环中会显示的铅笔。
用户还可以提供其他类型的输入。例如,用户可以保持在301处检测到的接触点,并且使用另一只手提供输入。在一个实施例中,该附加输入可以导致图形用户界面被显示,该图形用户界面允许用户改变与手写输入相关联的属性,例如,墨水颜色、墨水宽度、笔画类型、墨水尺寸、墨水类型等。其他类型的输入可以导致不同的修改,例如,如果用户在将其手指分开的情况下提供输入,则可以导致墨水宽度变得更粗。
因此,本文中描述的各种实施例代表了对常规手写输入技术的技术改进。使用此处描述的技术,用户可以提供在感觉和外观两方面都更加自然的手写输入。用户能够在不需要额外硬件的情况下只使用其手并且更自然地书写而不需要专用触控笔。此外,不是如当前技术所允许的那样用户只使用指尖来提供输入,而是手写输入看起来更自然并且更接近用户的正常手写。
如本领域技术人员将理解的,各个方面可以被实施为系统、方法或装置程序产品。因此,各个方面可以采用全硬件实施例或包括软件的实施例的形式,本文中可以将全硬件实施例或包括软件的实施例统称为“电路”、“模块”或“系统”。此外,各个方面可以采用实施在一个或多个装置可读介质中的装置程序产品的形式,所述一个或多个装置可读介质包含有装置可读程序代码。
应该注意,本文所描述的各种功能可以使用存储在装置可读存储介质(如通过处理器执行的非信号存储装置)上的指令来实现。存储装置例如可以是电子的、磁的、光学的、电磁的、红外的或半导体的系统、设备或装置,或前述的任意适当组合。存储介质的更具体的示例包括:便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪速存储器)、光纤、便携式致密盘只读存储器(CD-ROM)、光存储装置、磁存储装置或前述的任意适当组合。在该文件的上下文中,存储装置不是信号并且“非暂态”包括除信号介质以外的所有介质。
可以使用任意适当的介质来传输存储介质上所包含的程序代码,所述适当的介质包括但不限于无线、电线、光纤线缆、RF(射频)等或前述的任意适当组合。
可以以一种或更多种编程语言的任意组合来编写用于执行操作的程序代码。程序代码可以完全在单个装置上执行、部分地在单个装置上执行、作为独立软件包部分地在单个装置上以及部分地在另一装置上执行或者完全地在其他装置上执行。在一些情况下,可以通过任何类型的连接或网络(包括局域网(LAN)或广域网(WAN))来连接装置,或者可以通过其他装置(例如通过使用因特网服务提供商的因特网)、通过无线连接例如近场通信、或通过硬线连接(例如,通过USB连接)来进行连接。
本文参照附图描述了示例实施例,这些附图示出了根据各种示例实施例的示例的方法、装置以及程序产品。将会理解,动作和功能可以至少部分地由程序指令来实现。可以将这些程序指令提供给装置、专用信息处理装置或其他可编程数据处理装置的处理器以产生机器,使得经由装置的处理器执行的指令实现指定的功能/动作。
值得注意的是,虽然在附图中使用了具体块,并且示出了块的特定顺序,但是这些是非限制性示例。在特定上下文中,可以对两个或更多个块进行组合,可以将一个块划分成两个或更多个块,或者可以将特定块适当地重新排序或重新组织,因为明确示出的示例仅用于描述目的并且并非解释为限制性的。
除非另外明确指出,本文所使用的单数形式(a或an)可以解释为包括复数“一个或多个”。
为了说明和描述的目的提出了本公开内容,而非意在穷举或限制。对于本领域普通技术人员来说,许多修改和变型将是明显的。为了说明原理和实际应用选择并描述了示例实施例,并且示例实施例使得本领域的其他普通技术人员能够理解具有适于预期的特定用途的各种修改的各种实施例的公开内容。
因此,虽然本文参照附图描述了说明性的示例实施例,但是要理解本描述是非限制性的,并且在不偏离本公开内容的范围或精神的情况下本领域的技术人员可以做出各种其他变化和修改。

Claims (19)

1.一种信息处理方法,包括:
在触摸表面处检测用户的手的至少两个接触点;
基于所述至少两个接触点的配置将由用户提供的输入识别为手写输入;以及
在显示屏上显示所述手写输入,其中,所述手写输入被识别为在相对于所述用户的手的所述至少两个接触点的位置处被输入。
2.根据权利要求1所述的方法,其中,所述识别包括:识别所述至少两个接触点相对于彼此的位置。
3.根据权利要求1所述的方法,还包括:确定所述用户的手的所述至少两个接触点包括所述用户的接触签名。
4.根据权利要求3所述的方法,还包括:通过将所述接触签名与先前存储的接触签名进行比较来识别所述用户。
5.根据权利要求1所述的方法,还包括:在所述触摸表面上的所述手写输入的位置处显示用于描绘书写用具的图形。
6.根据权利要求1所述的方法,其中,所述至少两个接触点包括所述用户的手掌的至少一部分以及所述用户的手指的至少一部分。
7.根据权利要求1所述的方法,其中,显示所述手写输入包括:在预定距离处显示数字墨水。
8.根据权利要求1所述的方法,其中,所述至少两个接触点包括所述用户的手指的至少一部分以及所述用户的另一手指的至少一部分;以及
其中,所述显示包括:在距所述手指的至少一部分和所述另一手指的至少一部分触摸所述触摸表面的位置预定距离处显示所述手写输入。
9.根据权利要求1所述的方法,还包括:
在所述至少两个接触点中至少一个接触点的位置处检测至少一次点击操作;以及
修改与所述手写输入相关联的输入类型。
10.根据权利要求1所述的方法,还包括:
检测独立于所述至少两个接触点的另一输入;以及
显示图形用户界面,所述图形用户界面允许用户修改与所述手写输入相关联的属性。
11.一种信息处理装置,包括:
触摸表面;
显示屏,所述显示屏操作地耦接至所述触摸表面;
处理器,所述处理器操作地耦接至所述触摸表面和所述显示屏;
存储器装置,所述存储器装置存储能够由所述处理器执行的指令,所述处理器执行所述指令用于:
在所述触摸表面处检测用户的手的至少两个接触点;
基于所述至少两个接触点的配置将由用户提供的输入识别为手写输入;以及
在所述显示屏上显示所述手写输入,其中,所述手写输入被识别为在相对于所述用户的手的所述至少两个接触点的位置处被输入。
12.根据权利要求11所述的信息处理装置,其中,识别包括:识别所述至少两个接触点相对于彼此的位置。
13.根据权利要求11所述的信息处理装置,其中,所述指令还能够由所述处理器执行,以确定所述用户的手的所述至少两个接触点包括所述用户的接触签名。
14.根据权利要求11所述的信息处理装置,其中,所述指令还能够由所述处理器执行,以在所述触摸表面上的所述手写输入的位置处显示用于描绘书写用具的图形。
15.根据权利要求11所述的信息处理装置,其中,所述至少两个接触点包括所述用户的手掌的至少一部分以及所述用户的手指的至少一部分。
16.根据权利要求11所述的信息处理装置,其中,显示所述手写输入包括:在预定距离处显示数字墨水。
17.根据权利要求11所述的信息处理装置,其中,所述至少两个接触点包括所述用户的手指的至少一部分以及所述用户的另一手指的至少一部分;以及
其中,显示包括:在距所述手指的至少一部分和所述另一手指的至少一部分触摸所述触摸表面的位置预定距离处显示所述手写输入。
18.根据权利要求11所述的信息处理装置,其中,所述指令还能够由所述处理器执行以用于:
在所述至少两个接触点中至少一个接触点的位置处检测至少一次点击操作;以及
修改与所述手写输入相关联的输入类型。
19.根据权利要求11所述的信息处理装置,其中,所述指令还能够由所述处理器执行以用于:
检测独立于所述至少两个接触点的另一输入;以及
显示图形用户界面,所述图形用户界面允许用户修改与所述手写输入相关联的属性。
CN201610515418.5A 2015-08-03 2016-07-01 信息处理方法和信息处理装置 Active CN106406720B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/816,728 US10007421B2 (en) 2015-08-03 2015-08-03 Natural handwriting detection on a touch surface
US14/816,728 2015-08-03

Publications (2)

Publication Number Publication Date
CN106406720A true CN106406720A (zh) 2017-02-15
CN106406720B CN106406720B (zh) 2020-02-21

Family

ID=56609692

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610515418.5A Active CN106406720B (zh) 2015-08-03 2016-07-01 信息处理方法和信息处理装置

Country Status (6)

Country Link
US (1) US10007421B2 (zh)
EP (1) EP3128412B1 (zh)
CN (1) CN106406720B (zh)
DE (1) DE102016113331A1 (zh)
GB (1) GB2542260B (zh)
TW (1) TWI596525B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110647252A (zh) * 2018-06-27 2020-01-03 宏碁股份有限公司 输入装置和电子装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060238518A1 (en) * 1998-01-26 2006-10-26 Fingerworks, Inc. Touch surface
CN101079707A (zh) * 2007-06-21 2007-11-28 中国科学院合肥物质科学研究院 基于可撤消的手写签名的身份认证方法
CN101689187A (zh) * 2007-05-29 2010-03-31 智思博公司 多模态智能笔计算系统
CN101685359A (zh) * 2008-09-27 2010-03-31 佛山市顺德区汉达精密电子科技有限公司 具有互动显示屏幕的电子装置及其处理方法
US20100225443A1 (en) * 2009-01-05 2010-09-09 Sevinc Bayram User authentication for devices with touch sensitive elements, such as touch sensitive display screens
CN102221971A (zh) * 2010-06-09 2011-10-19 微软公司 自由形式数学计算
US20120007815A1 (en) * 2010-07-09 2012-01-12 Samsung Electronics Co., Ltd. Multipurpose sensing apparatus and electronic equipment having the same
US20130093664A1 (en) * 2011-10-18 2013-04-18 Sony Computer Entertainment Inc. Drawing device, drawing control method, and drawing control program for drawing graphics in accordance with input through input device that allows for input at multiple points

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2256606B1 (en) * 1998-01-26 2017-08-09 Apple Inc. Method and apparatus for integrating manual input
US7187801B2 (en) * 2003-03-31 2007-03-06 Microsoft Corporation Multiple handwriting recognition engine selection
US8452978B2 (en) * 2006-09-15 2013-05-28 Identity Metrics, LLC System and method for user authentication and dynamic usability of touch-screen devices
CN101630219B (zh) 2008-07-17 2011-07-06 宏碁股份有限公司 辅助在触控式荧幕上进行手写输入的方法及其电子装置
JP2010268989A (ja) * 2009-05-22 2010-12-02 Sony Ericsson Mobilecommunications Japan Inc 個人認証装置および携帯端末
CN101655771B (zh) 2009-09-07 2011-07-20 上海合合信息科技发展有限公司 多触点字符输入方法及系统
US8535133B2 (en) * 2009-11-16 2013-09-17 Broadcom Corporation Video game with controller sensing player inappropriate activity
US9465532B2 (en) * 2009-12-18 2016-10-11 Synaptics Incorporated Method and apparatus for operating in pointing and enhanced gesturing modes
US8566955B2 (en) * 2010-10-31 2013-10-22 Pixart Imaging Inc. User indentification with capacitive touchscreen
CN102156578B (zh) 2011-03-30 2013-01-09 汉王科技股份有限公司 触摸设备的手写输入方法及装置和电子设备
US8750852B2 (en) * 2011-10-27 2014-06-10 Qualcomm Incorporated Controlling access to a mobile device
US8380995B1 (en) * 2011-11-29 2013-02-19 Google Inc. Process for login of a computing device with a touchscreen
US20130324850A1 (en) * 2012-05-31 2013-12-05 Mindray Ds Usa, Inc. Systems and methods for interfacing with an ultrasound system
CN102789576B (zh) 2012-06-29 2015-09-09 鸿富锦精密工业(深圳)有限公司 签名特征提取系统及方法
KR102051585B1 (ko) * 2012-08-27 2019-12-17 삼성전자주식회사 멀티 터치를 이용한 핸드 라이팅 기능을 갖는 전자 장치 및 제어 방법
US9589120B2 (en) * 2013-04-05 2017-03-07 Microsoft Technology Licensing, Llc Behavior based authentication for touch screen devices
US10082935B2 (en) * 2013-04-15 2018-09-25 Carnegie Mellon University Virtual tools for use with touch-sensitive surfaces
CN103268198A (zh) 2013-05-24 2013-08-28 广东国笔科技股份有限公司 手势输入方法及装置
US9727161B2 (en) * 2014-06-12 2017-08-08 Microsoft Technology Licensing, Llc Sensor correlation for pen and touch-sensitive computing device interaction
US9430085B2 (en) * 2014-09-12 2016-08-30 Microsoft Technology Licensing, Llc Classification of touch input as being unintended or intended

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060238518A1 (en) * 1998-01-26 2006-10-26 Fingerworks, Inc. Touch surface
CN101689187A (zh) * 2007-05-29 2010-03-31 智思博公司 多模态智能笔计算系统
CN101079707A (zh) * 2007-06-21 2007-11-28 中国科学院合肥物质科学研究院 基于可撤消的手写签名的身份认证方法
CN101685359A (zh) * 2008-09-27 2010-03-31 佛山市顺德区汉达精密电子科技有限公司 具有互动显示屏幕的电子装置及其处理方法
US20100225443A1 (en) * 2009-01-05 2010-09-09 Sevinc Bayram User authentication for devices with touch sensitive elements, such as touch sensitive display screens
CN102221971A (zh) * 2010-06-09 2011-10-19 微软公司 自由形式数学计算
US20120007815A1 (en) * 2010-07-09 2012-01-12 Samsung Electronics Co., Ltd. Multipurpose sensing apparatus and electronic equipment having the same
US20130093664A1 (en) * 2011-10-18 2013-04-18 Sony Computer Entertainment Inc. Drawing device, drawing control method, and drawing control program for drawing graphics in accordance with input through input device that allows for input at multiple points

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110647252A (zh) * 2018-06-27 2020-01-03 宏碁股份有限公司 输入装置和电子装置

Also Published As

Publication number Publication date
EP3128412B1 (en) 2018-06-27
CN106406720B (zh) 2020-02-21
US20170038956A1 (en) 2017-02-09
TW201710863A (zh) 2017-03-16
US10007421B2 (en) 2018-06-26
GB2542260A (en) 2017-03-15
GB201613232D0 (en) 2016-09-14
TWI596525B (zh) 2017-08-21
EP3128412A1 (en) 2017-02-08
GB2542260B (en) 2020-06-17
DE102016113331A1 (de) 2017-02-09

Similar Documents

Publication Publication Date Title
US20160179364A1 (en) Disambiguating ink strokes and gesture inputs
CN105718191A (zh) 手写笔画的捕捉
US9454694B2 (en) Displaying and inserting handwriting words over existing typeset
Morley Understanding computers in a changing society
US10671795B2 (en) Handwriting preview window
CN104252247A (zh) 触笔速记
CN104252311A (zh) 使用所推断的情绪修改触笔输入或响应
CN106020434A (zh) 人机接口设备输入融合的方法、设备及产品
US9874950B2 (en) Adaptive guidelines for handwriting
CN104252312A (zh) 触笔词典共享
US10592096B2 (en) Cursor indicator for overlay input applications
US20150169214A1 (en) Graphical input-friendly function selection
US10032071B2 (en) Candidate handwriting words using optical character recognition and spell check
US10037137B2 (en) Directing input of handwriting strokes
CN106406720A (zh) 信息处理方法和信息处理装置
CN105930763B (zh) 基于笔画属性的手写笔画分组的方法和产品
CN104281404B (zh) 信息处理装置及信息处理方法
JP6279732B2 (ja) 端末装置、入力内容制御方法、および、プログラム
US10387721B2 (en) Information handling device handwriting clean-up
CN106557251B (zh) 书写区至数字显示器的灵活映射
US10133368B2 (en) Undo operation for ink stroke conversion
CN104777898B (zh) 信息处理方法、设备和产品
US10248214B2 (en) Wearable device for writing and drawing
KR101376323B1 (ko) 터치입력을 제공하는 방법, 단말기 및 기록매체
US20150227311A1 (en) Selecting alternate keys using multi-touch

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant