TW201710863A - 信息處理方法和信息處理裝置 - Google Patents

信息處理方法和信息處理裝置 Download PDF

Info

Publication number
TW201710863A
TW201710863A TW105123598A TW105123598A TW201710863A TW 201710863 A TW201710863 A TW 201710863A TW 105123598 A TW105123598 A TW 105123598A TW 105123598 A TW105123598 A TW 105123598A TW 201710863 A TW201710863 A TW 201710863A
Authority
TW
Taiwan
Prior art keywords
user
input
contact points
handwriting input
touch surface
Prior art date
Application number
TW105123598A
Other languages
English (en)
Other versions
TWI596525B (zh
Inventor
喬納森 耶恩 韋 尤
亞倫 邁克爾 斯圖爾特
杰弗里E 斯克尼爾
托馬斯 賴恩 庫克
Original Assignee
聯想(新加坡)私人有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯想(新加坡)私人有限公司 filed Critical 聯想(新加坡)私人有限公司
Publication of TW201710863A publication Critical patent/TW201710863A/zh
Application granted granted Critical
Publication of TWI596525B publication Critical patent/TWI596525B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/142Image acquisition using hand-held instruments; Constructional details of the instruments
    • G06V30/1423Image acquisition using hand-held instruments; Constructional details of the instruments the instrument generating sequences of position coordinates corresponding to handwriting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/142Image acquisition using hand-held instruments; Constructional details of the instruments
    • G06V30/1426Image acquisition using hand-held instruments; Constructional details of the instruments by sensing position defining codes on a support
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/30Writer recognition; Reading and verifying signatures
    • G06V40/33Writer recognition; Reading and verifying signatures based only on signature image, e.g. static signature recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Abstract

本發明提供了資訊處理方法和資訊處理裝置。一個實施例提供了一種資訊處理方法,包括:在觸摸表面處檢測使用者的手的至少兩個接觸點;基於至少兩個接觸點的配置將由使用者提供的輸入識別為手寫輸入;以及在顯示器螢幕上顯示該手寫輸入,其中,該手寫輸入被識別為在相對於使用者的手的至少兩個接觸點的位置處被輸入。還描述並且請求保護其他方面。

Description

信息處理方法和信息處理裝置 發明領域
本發明涉及資訊處理領域,更具體地,涉及用於觸摸表面上的自然手寫檢測的資訊處理方法和資訊處理裝置。
發明背景
資訊處理裝置(例如,智慧型電話、平板、個人電腦、膝上型電腦等)的普及和便攜性允許使用者在各種位置處使用這些裝置來提供和接收輸入。例如,小企業主可以使用智慧型電話而不是需要專用的信用卡刷卡機和陸地線路來接受信用卡。作為另一示例,公用事業儀錶讀取器可以配備有用於記錄儀錶讀數的平板。隨著技術的進步,這些裝置允許通過各種不同的機制(例如,傳統鍵盤、滑鼠、麥克風、照相機、觸摸表面等)來輸入。
為了輔助不斷變化的需求和願望並且增加裝置的便攜性,傳統鍵盤和輸入法正在被觸摸表面所替代以允許更多樣的輸入類型,例如,觸摸表面可以在沒有鍵盤或滑鼠的約束的情況下實現文本輸入以及繪圖、草稿、公式 等。為了提供觸摸輸入,使用者傳統上使用觸控筆或其他觸摸表面書寫用具(”觸控式筆”)。有時,這些觸控式筆對於特定觸摸表面是唯一的,因為該觸摸表面僅識別來自該類型的觸控筆的輸入。當該觸控筆被丟失或損壞時,使用者必須更換可能變得非常昂貴的觸控筆。
發明概要
總之,一方面提供了一種資訊處理方法,包括:在觸摸表面處檢測使用者的手的至少兩個接觸點;基於至少兩個接觸點的配置將由使用者提供的輸入識別為手寫輸入;以及在顯示器螢幕上顯示手寫輸入,其中,手寫輸入被識別為在相對於使用者的手的至少兩個接觸點的位置處被輸入。
另一個方面提供了一種資訊處理裝置,包括:觸摸表面;顯示器螢幕,操作地耦接至觸摸表面;處理器,操作地耦接至觸摸表面和顯示器螢幕;記憶體裝置,存儲能夠由處理器執行的指令,處理器執行指令以用於:在觸摸表面處檢測使用者的手的至少兩個接觸點;基於至少兩個接觸點的配置將由使用者提供的輸入識別為手寫輸入;以及在顯示器螢幕上顯示手寫輸入,其中,手寫輸入被識別為在相對於使用者的手的至少兩個接觸點的位置處被輸入。
又一個方面提供了一種產品,包括:存儲裝置,存儲裝置存儲能夠由處理器執行的代碼,所述代碼包括: 在觸摸表面處檢測使用者的手的至少兩個接觸點的代碼;基於至少兩個接觸點的配置將由使用者提供的輸入識別為手寫輸入的代碼;以及在顯示器螢幕上顯示手寫輸入的代碼,其中,手寫輸入被識別為在相對於使用者的手的至少兩個接觸點的位置處被輸入。
前述為總結,因此可能包含對細節的簡化、概括和省略;因此,本領域技術人員將理解,該總結僅為說明性的,而不意在以任何方式進行限制。
結合附圖,參照下面的描述,以連同這些實施例的其他和進一步的特徵和優點一起更好地理解這些實施例。在所附申請專利範圍中將指出本發明的範圍。
100‧‧‧電路系統
110‧‧‧晶片
120‧‧‧週邊裝置
130‧‧‧電力管理晶片
140‧‧‧充電電池
150‧‧‧WWAN(無線廣域網路)收發器
160‧‧‧WLAN(無線局域網)收發器
170‧‧‧觸摸表面
180‧‧‧閃速記憶體
190‧‧‧SDRAM(同步動態隨機存取記憶體)
210‧‧‧晶片集
220‧‧‧記憶體控制組
222‧‧‧處理器
224‧‧‧匯流排(FSB)
226‧‧‧記憶體控制器集線器
232‧‧‧低壓差分信號(LVDS)介面
232‧‧‧LVDS介面
234‧‧‧PCI-express介面(PCI-E)
236‧‧‧獨立顯卡
238‧‧‧塊
240‧‧‧記憶體
242‧‧‧管理介面(DMI)
244‧‧‧鏈路控制器
250‧‧‧I/O控制器集線器
251‧‧‧SATA介面
252‧‧‧PCI-E介面
253‧‧‧USB介面
254‧‧‧網路介面
255‧‧‧GPIO(通用輸入輸出)介面
261‧‧‧電力管理介面
262‧‧‧時鐘發生器介面
263‧‧‧音訊介面
264‧‧‧TCO介面
265‧‧‧系統管理匯流排介面
266‧‧‧SPI快閃記憶體
268‧‧‧BIOS
270‧‧‧LPC介面
271‧‧‧ASIC(專用積體電路)
272‧‧‧TPM(可信平臺模組)
273‧‧‧超級I/O
274‧‧‧固件集線器
275‧‧‧BIOS支持
276‧‧‧記憶體
277‧‧‧ROM
278‧‧‧快閃記憶體
279‧‧‧NVRAM(非易失性隨機存取記憶體)
280‧‧‧SDD(固態硬碟)
282‧‧‧無線連接
284‧‧‧裝置
290‧‧‧啟動代碼
292‧‧‧顯示裝置
294‧‧‧揚聲器
301~305‧‧‧步驟
401、501‧‧‧接觸點
402‧‧‧距離
502‧‧‧處
圖1示出了資訊處理裝置電路系統的示例。
圖2示出了資訊處理裝置電路系統的另一示例。
圖3示出了觸摸表面上的自然手寫檢測的示例方法。
圖4示出了用於檢測自然手寫的示例接觸簽名。
圖5A至圖5B示出了顯示書寫用具的圖形的示例。
詳細說明
將容易理解,可以以除所描述的示例實施例以外的各種不同的配置來佈置和設計本文附圖中一般性描述和示出的實施例的部件。因而,如在附圖中示出的示例實施 例的以下更詳細的描述並非意在限制所要求保護的實施例的範圍,而僅代表示例實施例。
說明書全文所提及的”一個實施例”或”實施例”(等)表示結合實施例所描述的特定特徵、結構或特性被包含在至少一個實施例中。因此,在貫穿本說明書中各處所出現的短語”在一個實施例中”或”在實施例中”等未必都指代同一實施例。
此外,在一個或多個實施例中,可以以任意適當的方式組合所描述的特徵、結構或特性。在下面的描述中,提供了許多具體的細節以給出對於實施例的透徹理解。然而,相關領域的技術人員將認識到,各種實施例可以在沒有一個或多個具體細節的情況下被實施,或者可以使用其他的方法、部件、材料等來實施。在其他示例中,為了避免混淆,未示出或詳細描述公知的結構、材料或操作。
可擕式資訊處理裝置(”裝置”)增加的功能已允許使用者具有更多的靈活性。例如,現在企業可以使用附接到企業主的智慧型電話的裝置進行信用卡和借記卡支付。然後,客戶可以在該智慧型電話的觸控式螢幕上提供簽名。然而,一般來說,為了接受這個手寫輸入,該裝置必須具有可以使該裝置能夠準確地接受觸控筆輸入的特定技術。例如,該裝置可能需要數位轉換器或高解析度觸摸電容顯示器螢幕。在這樣的情況下,該技術可能沒有靈敏到足以再現自然的手寫。
用於輔助準確地再現手寫的一種當前的方法是 使用觸控筆、鋼筆或者用於觸控式螢幕而製成的其他書寫用具(”觸控式筆”或”觸控筆”)。然而,為了使用這樣的觸控筆將手寫準確地輸入為數位格式,通常需要使用具有先進技術的觸控筆。例如,可能需要該觸控筆為有源電容筆、具有電容筆尖的觸摸筆或者具有EMR(電磁共振)數位轉換器。在電容式觸控筆解決方案中,需要接觸點具有一定的尺寸以檢測觸控筆的點的位置,這使得難以精確控制數字墨水。使用這些觸控筆的另一個問題是,這些觸控筆容易丟失或放錯地方。如果使用者丟失了對於該觸摸表面唯一的書寫用具,則可能難以提供手寫輸入,因為觸摸表面可能無法接受來自任意的鋼筆或鉛筆的輸入。此外,這種不是為觸摸表面設計的用具可能會劃傷或損壞觸摸表面。替換這樣的書寫用具可能很昂貴。
一個解決方案是接受由使用者的手指提供的觸摸輸入。這通常涉及使用單個手指並且使用指尖提供輸入的使用者。在提供這樣的輸入時,墨水通常被手指遮擋,使得難以看到墨水被顯示在哪裡,並且在試圖提供精確墨水筆劃時引起問題。這種解決方案的另一個問題是,使用單個手指的手寫常常不能再現在使用者看來自然的手寫。此外,不僅在使用者看來該手寫不自然,而且對於使用者來說提供這樣的輸入也感覺不自然,尤其是如果使用者已經被教導過使用鋼筆、鉛筆和其他傳統書寫用具來進行手寫。這是由於如下事實:當握著常規書寫用具提供手寫輸入時,需要將用具握在兩個或三個手指之間,然後引導用 具進行期望的手寫輸入,這樣來實現更精確的和受控的移動。因此,只用單個指尖導致手寫輸入看起來不自然或太粗糙。例如,當在商店處試圖提供簽名時,由指尖提供的”簽名”看起來與當人們使用傳統的書寫用具來簽署時的簽名非常不同。
對於使用者來說,這些技術問題存在的麻煩在於,可能難以向觸摸表面提供自然的手寫輸入。使用觸控筆來提供手寫輸入(例如,草稿、繪圖、公式、文本、符號等)的常規解決方案通常需要使用具有先進技術的特定類型的觸控筆,使得觸摸表面能夠檢測到該觸控筆和輸入。這些觸控筆中的一些要求特定尺寸的觸控筆尖以被檢測到,這降低了可以提供的墨水筆劃的精度。此外,如果這些觸控筆被丟失或放錯地方,替換這些觸控筆可能很昂貴。使用指尖提供手寫輸入省去了對觸控筆的需要,然而,使用這種方法產生的手寫輸入看起來笨拙且不自然,從而不能準確地再現手寫輸入。
因此,實施例提供了在觸摸表面處檢測更自然的手寫輸入的方法。使用這種方法,使用者可以模擬更自然的手寫握持方式,例如,三點握持、四點握持或者其他握持,使用者可以使用這些握持方式來握著書寫用具,然後可以使用這些書寫用具將手寫輸入提供到觸摸表面。一個實施例可以檢測到使用者的手的至少兩個接觸點,例如,使用者的手掌的一部分和使用者的手指的一部分、兩個不同手指的部分或者其他接觸點。基於至少兩個接觸點的配 置,實施例可以識別到使用者正在試圖提供手寫輸入。接觸點也可以被識別為針對使用者的接觸簽名。這種接觸簽名可以針對特定使用者來識別,或者可以只是被識別為手寫接觸簽名以觸發手寫模式。
然後,實施例可以在相對於接觸點的位置處將輸入顯示為手寫輸入。例如,如果使用者正在提供類似於三點握持的接觸點,則可以在指尖彙聚的位置處顯示手寫輸入。一個實施例可以在相對於接觸點的位置處附加地顯示用於描繪書寫用具(例如,鋼筆、鉛筆、記號筆、蠟筆、畫筆等)的圖形。例如,可以在指尖彙聚的位置處顯示鉛筆圖形,並且然後可以在鉛筆圖形的筆尖處顯示手寫輸入。
在一個實施例中,使用者可以能夠提供附加輸入,以改變與手寫輸入相關聯的輸入類型。例如,使用者可以用手指簇提供點擊操作,這樣可以將手寫輸入從鉛筆變為橡皮擦。多次點擊操作可以執行另外的動作,或者將手寫輸入變為不同的輸入類型。使用者可以從另一個源附加地提供輸入。例如,使用者可以在不移動用於手寫的手的接觸點的情況下使用另一隻手來提供輸入。在一個實施例中,這種類型的輸入可以導致顯示介面,以允許使用者修改與手寫輸入相關聯的屬性。
將通過參考附圖來最好地理解所示出的示例實施例。下面的描述意在僅通過舉例的方式,並且簡單地說明某些示例實施例。
雖然在資訊處理裝置中可以採用各種其他電 路、電路系統或部件,但是對於智慧型電話和/或平板電路系統100,圖1所示的示例包括例如存在於平板或其他移動計算平臺中的片上系統設計。軟體和一個或多個處理器合併在單個晶片110中。如本領域公知的那樣,處理器包括內部運算單元、寄存器、快取記憶體記憶體、匯流排、I/O埠等。內部匯流排等取決於不同的供應商,但基本上所有的週邊裝置120均可以附接至單個晶片110。電路系統100將處理器、記憶體控制以及I/O控制器集線器全部合併在單個晶片110中。此外,這種類型的系統100通常不使用SATA(串列高級技術附件)或PCI(週邊部件互聯介面)或LPC(低引腳數介面)。通用介面例如包括SDIO(安全數位輸入輸出卡)和I2C(內置積體電路)。
存在一個或多個電力管理晶片130,例如電池管理單元BMU,電池管理單元BMU對例如經由可再充電電池140供應的電力進行管理,可以通過將可再充電電池140連接至電源(未示出)來對其再充電。在至少一個設計中,使用單個晶片例如110來提供類似BIOS(基本輸入輸出系統)的功能和DRAM(動態隨機存取)記憶體。
系統100通常包括一個或多個WWAN(無線廣域網路)收發器150和WLAN(無線局域網)收發器160以連接至各種網路,例如電信網路和無線網際網路裝置(例如接入點)。此外,通常包括裝置120,例如,圖像感測器如照相機。系統100通常包括用於資料輸入和顯示/呈現的觸控式螢幕或觸摸表面170。系統100通常還包括各種存儲裝置, 例如閃速記憶體180和SDRAM(同步動態隨機存取記憶體)190。
圖2描繪了資訊處理裝置電路、電路系統或部件的另一示例的框圖。圖2中描繪的示例可以對應於計算系統,例如由北卡羅來納州莫里斯維爾市的聯想(美國)公司銷售的THINKPAD系列的個人電腦,或其他裝置。根據本文的描述明顯的是,實施例可以包括其他特徵或僅包括圖2所示的示例的特徵中的一些特徵。
圖2的示例包括所謂的晶片集210(一起工作的一組積體電路或晶片,晶片集),晶片集210具有可以根據製造商(例如,INTEL、AMD、ARM等)而變化的架構。INTEL是Intel公司在美國和其他國家的註冊商標。AMD是Advanced Micro Devices公司在美國和其他國家的註冊商標。ARM是ARM有限公司在美國或其他國家的未經註冊的商標。晶片集210的架構包括經由直接管理介面(DMI)242或鏈路控制器244交換資訊(例如資料、信號、命令等)的核和記憶體控制組220以及I/O控制器集線器250。在圖2中,DMI 242是晶片間介面(有時稱為”北橋”與”南橋”之間的鏈路)。核和記憶體控制組220包括經由前端匯流排(FSB)224交換資訊的一個或多個處理器222(例如,單核或多核)和記憶體控制器集線器226;注意,組220的部件可以被集成在代替傳統”北橋”式架構的晶片中。如本領域公知的那樣,一個或多個處理器222包括內部運算單元、寄存器、快取記憶體記憶體、匯流排、I/O埠等。
在圖2中,記憶體控制器集線器226和記憶體240對接(例如,用以對可以稱為”系統記憶體”或”記憶體”的一類RAM提供支援)。記憶體控制器集線器226還包括用於顯示裝置292(例如,CRT(陰極射線管)、平板、觸控式螢幕等)的低壓差分信號(LVDS)介面232。塊238包括可以通過LVDS介面232支援的一些技術(例如串列數位視訊、HDMI/DVI(高清晰度多媒體介面/數位視訊介面)、顯示埠)。記憶體控制器集線器226還包括可以支持獨立顯卡236的PCI-express介面(PCI-E)234。
在圖2中,I/O控制器集線器250包括SATA介面251(例如,用於HDD(硬碟驅動器),SDD(固態硬碟)等280),PCI-E介面252(例如用於無線連接282)、USB介面253(例如,用於如數位轉換器、鍵盤、滑鼠、攝像頭、電話、麥克風、存儲裝置、其他連接的裝置等的裝置284)、網路介面254(例如,LAN)、GPIO(通用輸入輸出)介面255、LPC介面270(用於ASIC(專用積體電路)271、TPM(可信平臺模組)272、超級I/O 273、固件集線器274、BIOS支持275以及各種類型的記憶體276,例如ROM 277、快閃記憶體278以及NVRAM(非易失性隨機存取記憶體)279),電力管理介面261、時鐘發生器介面262、音訊介面263(例如,用於揚聲器294)、TCO介面264、系統管理匯流排界面265以及可以包括BIOS 268和啟動代碼290的SPI(串列週邊介面)快閃記憶體266。I/O控制器集線器250可以包括千兆比特的乙太網支持。
系統可以被配置成在通電時執行存儲在SPI快閃記憶體266內的、用於BIOS 268的啟動代碼290,此後,在(例如存儲在系統記憶體240中的)一個或多個作業系統和應用軟體的控制下處理資料。作業系統可以存儲在各種位置中的任意位置處,並且例如可以根據BIOS 268的指令來訪問該作業系統。如本文所描述的,裝置可以包括比圖2的系統中示出的特徵更少或更多的特徵。
例如,如圖1或圖2中所概述的資訊處理裝置電路系統通常可以用於諸如平板、智慧型電話、個人電腦裝置的裝置以及/或者使用者可以用來提供輸入特別是觸摸或手寫輸入的電子裝置。此外,在確定是否提供了手寫輸入時,可以使用如圖1或圖2中所概述的電路系統來處理或存儲接觸點。例如,圖1中概述的電路系統可以在平板或智慧型電話實施例中實現,而圖2中概述的電路系統可以在個人電腦實施例中實現。
現在參照圖3,在301處,實施例可以在觸摸表面處檢測到使用者的手的至少兩個接觸點。接觸點可以包括使用者的手的不同部分,例如,手掌的一部分,手指的一部分(例如,指關節、指尖等)等。作為示例實施例,使用者可能正在將其手擱在觸摸表面上,並且一個接觸點可以是使用者的手掌,另一個接觸點可以是使用者的指尖。作為另一示例,接觸點中的一個可以是一個指尖而接觸點中的另一個可以是另一指尖。檢測到的接觸點可能正在觸摸該觸摸表面,例如,使用者的手擱在觸摸表面上。可替代地, 接觸點可以沒有觸摸該觸摸表面,而是可以替代地被檢測為靠近觸摸表面。例如,裝置可以具有檢測懸停輸入的能力,懸停輸入例如使用者的指尖在觸摸表面的上方。然後可以將這些懸停輸入檢測為接觸點。
實施例可以檢測單個觸摸表面上的接觸點,例如,接觸點全部被包含在單個觸摸表面上。可替代地,兩個接觸點可以在多個觸摸表面上,或者在可以檢測壓力和/或接觸的表面上。例如,資訊處理裝置的觸控式螢幕或表面可能太小而無法使用戶將手擱在表面上。然而,圍繞該表面的邊框可以包括壓力感測器,該壓力感測器可以檢測到使用者的手。觸摸表面和邊框可以都提供允許實施例檢測至少兩個接觸點的輸入。
在302處,實施例可以識別接觸點的配置。圖4示出了觸摸表面處的使用者的手和接觸點的示例。使用圖4作為示例,實施例可以在識別該配置時確定各接觸點401之間的距離402以及各接觸點的形狀和尺寸。此外,實施例可以識別其他唯一特性,例如,各接觸點之間的角度、接觸的類型(例如,指尖與手掌)等。在識別各點的配置和識別該配置的方法時使用的其他識別特徵也是可能的和預期的。
使用接觸點的特性,一個實施例可以識別配置作為使用者的接觸簽名。接觸簽名可以被用於識別使用者正在試圖提供的輸入的類型。例如,使用接觸簽名,實施例可以確定使用者正在試圖提供手寫輸入而不是提供打字輸入。附加地或者可替代地,實施例可以使用接觸簽名來識 別該使用者為特定使用者。例如,實施例可以將所接收的接觸簽名進行比較以瞭解或先前存儲接觸簽名。可以將這些先前存儲的接觸簽名連結至特定使用者。另外,該裝置可以具有通過使用從接觸點採集的生物特徵資料(例如,指紋、手紋、掌紋等)來將使用者識別為特定使用者的能力。然後,實施例可以使用這種對特定使用者的識別來對使用者進行認證、核實簽名、調用定制的使用者設置或者其他動作。
在303處,實施例可以基於至少兩個接觸點的配置來識別到該使用者正在試圖提供手寫輸入。例如,基於接觸點的配置,實施例可以識別到該使用者正在模擬使用者如何握著書寫用具。為了識別到使用者正在試圖提供手寫輸入,實施例可以識別接觸點相對於彼此的位置。換言之,如果使用者正在提供用於指示自然手寫的接觸點,則實施例可以將其識別為手寫輸入。然而,如果使用者正在提供用於指示使用者嘗試例如將畫面的特定部分放大的接觸點,則實施例不會將這些接觸點識別為提供手寫輸入。
可以使用資料的統計集或對照集來確定將輸入識別為手寫輸入。例如,基於接觸點的尺寸和距離,實施例可以以合理的概率來確定這些接觸點指示了使用者試圖提供手寫輸入。針對不同使用者的統計集可以不同。例如,在一個實施例中,使用者可以指示該使用者為成年女性。該資訊可以被實施例用來確定哪些統計集最適用於該使用者。將輸入識別為手寫輸入的其他形式也是可能的和預期 的。
在303處,如果實施例識別到使用者沒有提供手寫輸入,則在305處,實施例不能將輸入顯示為手寫輸入。換言之,如果使用者正在提供不被識別為手寫輸入的輸入,則在305處,實施例可以將該輸入接受為手寫輸入以外的輸入。可替代地,實施例可以顯示用於指示該輸入不被接受為手寫輸入的提示。
然而,在303處,如果實施例識別到使用者正在提供手寫輸入,則在304處,實施例可以在顯示器螢幕上將手寫輸入顯示為例如數位墨水。在一個實施例中,顯示器螢幕可以是單獨的平面如觸摸表面。可替代地,觸摸表面可以附加地被用作顯示器螢幕(例如觸控式螢幕)。可以將手寫輸入識別為在相對於至少兩個接觸點的位置處被輸入。例如,參照圖5A,如果接觸點501被識別為使用者的指尖,則實施例可以在接近指尖彙聚的點的位置處顯示手寫輸入。手寫輸入不能恰好顯示在兩個指尖彙聚的位置處,而是顯示在距指尖預定距離處,以防止手遮擋所顯示的手寫輸入。實施例可以將手寫輸入顯示成好像使用者在用書寫用具進行書寫。例如,如果使用者將其手形成為好像握著書寫用具然後提供輸入,就好像使用者正在書寫一樣,則顯示器螢幕上的手寫輸入可以被顯示為好像模擬的書寫用具正在書寫。一個實施例可以將書寫用具的圖形顯示為好像該用具實際上在使用者的手中一樣,如圖5B的502處所示。然後,可以將手寫輸入顯示在書寫用具圖形的筆尖處。
手寫輸入和/或書寫用具圖形的顯示不僅限於鋼筆或鉛筆。手寫輸入顯示和/或書寫用具圖形可以取決於使用者選擇的輸入的類型。例如,如果使用者想要提供蠟筆輸入,則顯示和圖形可以反映這種類型的輸入。其他類型的輸入也是可能的和預期的,例如,畫筆、記號筆、螢光筆、不同尺寸和/或彩色的書寫用具、橡皮擦等。實施例還可以感測使用者提供的壓力有多大,並且壓力的量可以使墨的細微性控制更精細,例如,就像模擬鋼筆尖或毛筆的角度。
在一個實施例中,使用者可以能夠提供附加輸入以改變與手寫輸入相關聯的輸入類型。例如,使用者可以點擊”握著”書寫用具的手指,這可以將輸入類型從例如鉛筆變為橡皮擦。提供附加的點擊操作可以經由不同的輸入類型循環,或者可以提供不同的修改,例如,改變手寫輸入的顏色。在一個實施例中可以預設輸入類型的循環,例如,首先是鉛筆,然後是橡皮擦,然後是鋼筆等。可替代地,輸入類型的循環可以由使用者來設置。例如,使用者通常在藍色鋼筆和黑色鋼筆之間切換,因此,使用者可以設置點擊兩下會產生黑色鋼筆而不是如標準輸入循環中會顯示的鉛筆。
使用者還可以提供其他類型的輸入。例如,使用者可以保持在301處檢測到的接觸點,並且使用另一隻手提供輸入。在一個實施例中,該附加輸入可以導致圖形使用者介面被顯示,該圖形使用者介面允許使用者改變與手寫 輸入相關聯的屬性,例如,墨水顏色、墨水寬度、筆劃類型、墨水尺寸、墨水類型等。其他類型的輸入可以導致不同的修改,例如,如果使用者在將其手指分開的情況下提供輸入,則可以導致墨水寬度變得更粗。
因此,本文中描述的各種實施例代表了對常規手寫輸入技術的技術改進。使用此處描述的技術,使用者可以提供在感覺和外觀兩方面都更加自然的手寫輸入。使用者能夠在不需要額外硬體的情況下只使用其手並且更自然地書寫而不需要專用觸控筆。此外,不是如當前技術所允許的那樣使用者只使用指尖來提供輸入,而是手寫輸入看起來更自然並且更接近使用者的正常手寫。
如本領域技術人員將理解的,各個方面可以被實施為系統、方法或裝置程式產品。因此,各個方面可以採用全全硬體實施例或包括軟體的實施例統稱為”硬體實施例或包括軟體的實施例的形式,本文中可以將電路”、”模組”或”系統”。此外,各個方面可以採用實施在一個或多個裝置可讀介質中的裝置程式產品的形式,所述一個或多個裝置可讀介質包含有裝置可讀程式碼。
應該注意,本文所描述的各種功能可以使用存儲在裝置可讀存儲介質(如通過處理器執行的非信號存儲裝置)上的指令來實現。存儲裝置例如可以是電子的、磁的、光學的、電磁的、紅外的或半導體的系統、設備或裝置,或前述的任意適當組合。存儲介質的更具體的示例包括:可擕式電腦磁片、硬碟、隨機存取記憶體(RAM)、唯讀記 憶體(ROM)、可擦除可程式設計唯讀記憶體(EPROM或閃速記憶體)、光纖、可擕式緻密盤唯讀記憶體(CD-ROM)、光存儲裝置、磁存儲裝置或前述的任意適當組合。在該文件的上下文中,存儲裝置不是信號並且”非暫態”包括除信號介質以外的所有介質。
可以使用任意適當的介質來傳輸存儲介質上所包含的程式碼,所述適當的介質包括但不限於無線、電線、光纖線纜、RF(射頻)等或前述的任意適當組合。
可以以一種或更多種程式設計語言的任意組合來編寫用於執行操作的程式碼。程式碼可以完全在單個裝置上執行、部分地在單個裝置上執行、作為獨立套裝軟體部分地在單個裝置上以及部分地在另一裝置上執行或者完全地在其他裝置上執行。在一些情況下,可以通過任何類型的連接或網路(包括局域網(LAN)或廣域網路(WAN))來連接裝置,或者可以通過其他裝置(例如通過使用網際網路服務提供商的網際網路)、通過無線連接例如近場通信、或通過硬線連接(例如,通過USB連接)來進行連接。
本文參照附圖描述了示例實施例,這些附圖示出了根據各種示例實施例的示例的方法、裝置以及程式產品。將會理解,動作和功能可以至少部分地由程式指令來實現。可以將這些程式指令提供給裝置、專用資訊處理裝置或其他可程式設計資料處理裝置的處理器以產生機器,使得經由裝置的處理器執行的指令實現指定的功能/動作。
值得注意的是,雖然在附圖中使用了具體塊,並 且示出了塊的特定順序,但是這些是非限制性示例。在特定上下文中,可以對兩個或更多個塊進行組合,可以將一個塊劃分成兩個或更多個塊,或者可以將特定塊適當地重新排序或重新組織,因為明確示出的示例僅用於描述目的並且並非解釋為限制性的。
除非另外明確指出,本文所使用的單數形式(a或an)可以解釋為包括複數”一個或多個”。
為了說明和描述的目的提出了本公開內容,而非意在窮舉或限制。對於本領域普通技術人員來說,許多修改和變型將是明顯的。為了說明原理和實際應用選擇並描述了示例實施例,並且示例實施例使得本領域的其他普通技術人員能夠理解具有適於預期的特定用途的各種修改的各種實施例的公開內容。
因此,雖然本文參照附圖描述了說明性的示例實施例,但是要理解本描述是非限制性的,並且在不偏離本公開內容的範圍或精神的情況下本領域的技術人員可以做出各種其他變化和修改。
301~305‧‧‧步驟

Claims (19)

  1. 一種資訊處理方法,包括:在觸摸表面處檢測使用者的手的至少兩個接觸點;基於所述至少兩個接觸點的配置將由使用者提供的輸入識別為手寫輸入;以及在顯示器螢幕上顯示所述手寫輸入,其中,所述手寫輸入被識別為在相對於所述使用者的手的所述至少兩個接觸點的位置處被輸入。
  2. 如請求項1所述的方法,其中,所述識別包括:識別所述至少兩個接觸點相對於彼此的位置。
  3. 如請求項1所述的方法,還包括:確定所述使用者的手的所述至少兩個接觸點包括所述使用者的接觸簽名。
  4. 如請求項3所述的方法,還包括:通過將所述接觸簽名與先前存儲的接觸簽名進行比較來識別所述使用者。
  5. 如請求項1所述的方法,還包括:在所述觸摸表面上的所述手寫輸入的位置處顯示用於描繪書寫用具的圖形。
  6. 如請求項1所述的方法,其中,所述至少兩個接觸點包括所述使用者的手掌的至少一部分以及所述使用者的手指的至少一部分。
  7. 如請求項1所述的方法,其中,顯示所述手寫輸入包括:在預定距離處顯示數位墨水。
  8. 如請求項1所述的方法,其中,所述至少兩個接觸點包括所述使用者的手指的至少一部分以及所述使用者的 另一手指的至少一部分;以及其中,所述顯示包括:在距所述手指的至少一部分和所述另一手指的至少一部分觸摸所述觸摸表面的位置預定距離處顯示所述手寫輸入。
  9. 如請求項1所述的方法,還包括:在所述至少兩個接觸點中至少一個接觸點的位置處檢測至少一次點擊操作;以及修改與所述手寫輸入相關聯的輸入類型。
  10. 如請求項1所述的方法,還包括:檢測獨立於所述至少兩個接觸點的另一輸入;以及顯示圖形使用者介面,所述圖形使用者介面允許使用者修改與所述手寫輸入相關聯的屬性。
  11. 一種資訊處理裝置,包括:觸摸表面;顯示器螢幕,所述顯示器螢幕操作地耦接至所述觸摸表面;處理器,所述處理器操作地耦接至所述觸摸表面和所述顯示器螢幕;記憶體裝置,所述記憶體裝置存儲能夠由所述處理器執行的指令,所述處理器執行所述指令用於:在所述觸摸表面處檢測使用者的手的至少兩個接觸點;基於所述至少兩個接觸點的配置將由使用者提供的輸入識別為手寫輸入;以及 在所述顯示器螢幕上顯示所述手寫輸入,其中,所述手寫輸入被識別為在相對於所述使用者的手的所述至少兩個接觸點的位置處被輸入。
  12. 如請求項11所述的資訊處理裝置,其中,識別包括:識別所述至少兩個接觸點相對於彼此的位置。
  13. 如請求項11所述的資訊處理裝置,其中,所述指令還能夠由所述處理器執行,以確定所述使用者的手的所述至少兩個接觸點包括所述使用者的接觸簽名。
  14. 如請求項11所述的資訊處理裝置,其中,所述指令還能夠由所述處理器執行,以在所述觸摸表面上的所述手寫輸入的位置處顯示用於描繪書寫用具的圖形。
  15. 如請求項11所述的資訊處理裝置,其中,所述至少兩個接觸點包括所述使用者的手掌的至少一部分以及所述使用者的手指的至少一部分。
  16. 如請求項11所述的資訊處理裝置,其中,顯示所述手寫輸入包括:在預定距離處顯示數位墨水。
  17. 如請求項11所述的資訊處理裝置,其中,所述至少兩個接觸點包括所述使用者的手指的至少一部分以及所述使用者的另一手指的至少一部分;以及其中,顯示包括:在距所述手指的至少一部分和所述另一手指的至少一部分觸摸所述觸摸表面的位置預定距離處顯示所述手寫輸入。
  18. 如請求項11所述的資訊處理裝置,其中,所述指令還能夠由所述處理器執行以用於: 在所述至少兩個接觸點中至少一個接觸點的位置處檢測至少一次點擊操作;以及修改與所述手寫輸入相關聯的輸入類型。
  19. 如請求項11所述的資訊處理裝置,其中,所述指令還能夠由所述處理器執行以用於:檢測獨立於所述至少兩個接觸點的另一輸入;以及顯示圖形使用者介面,所述圖形使用者介面允許使用者修改與所述手寫輸入相關聯的屬性。
TW105123598A 2015-08-03 2016-07-26 資訊處理方法和資訊處理裝置 TWI596525B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US14/816,728 US10007421B2 (en) 2015-08-03 2015-08-03 Natural handwriting detection on a touch surface

Publications (2)

Publication Number Publication Date
TW201710863A true TW201710863A (zh) 2017-03-16
TWI596525B TWI596525B (zh) 2017-08-21

Family

ID=56609692

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105123598A TWI596525B (zh) 2015-08-03 2016-07-26 資訊處理方法和資訊處理裝置

Country Status (6)

Country Link
US (1) US10007421B2 (zh)
EP (1) EP3128412B1 (zh)
CN (1) CN106406720B (zh)
DE (1) DE102016113331A1 (zh)
GB (1) GB2542260B (zh)
TW (1) TWI596525B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110647252A (zh) * 2018-06-27 2020-01-03 宏碁股份有限公司 输入装置和电子装置

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2256605B1 (en) 1998-01-26 2017-12-06 Apple Inc. Method and apparatus for integrating manual input
EP2256607A3 (en) * 1998-01-26 2011-12-14 Apple Inc. Method and apparatus for integrating manual input
US7187801B2 (en) * 2003-03-31 2007-03-06 Microsoft Corporation Multiple handwriting recognition engine selection
US8452978B2 (en) * 2006-09-15 2013-05-28 Identity Metrics, LLC System and method for user authentication and dynamic usability of touch-screen devices
US20090021494A1 (en) * 2007-05-29 2009-01-22 Jim Marggraff Multi-modal smartpen computing system
CN101079707A (zh) * 2007-06-21 2007-11-28 中国科学院合肥物质科学研究院 基于可撤消的手写签名的身份认证方法
CN101630219B (zh) 2008-07-17 2011-07-06 宏碁股份有限公司 辅助在触控式荧幕上进行手写输入的方法及其电子装置
CN101685359A (zh) * 2008-09-27 2010-03-31 佛山市顺德区汉达精密电子科技有限公司 具有互动显示屏幕的电子装置及其处理方法
US8941466B2 (en) * 2009-01-05 2015-01-27 Polytechnic Institute Of New York University User authentication for devices with touch sensitive elements, such as touch sensitive display screens
JP2010268989A (ja) * 2009-05-22 2010-12-02 Sony Ericsson Mobilecommunications Japan Inc 個人認証装置および携帯端末
CN101655771B (zh) 2009-09-07 2011-07-20 上海合合信息科技发展有限公司 多触点字符输入方法及系统
US8535133B2 (en) * 2009-11-16 2013-09-17 Broadcom Corporation Video game with controller sensing player inappropriate activity
US9465532B2 (en) * 2009-12-18 2016-10-11 Synaptics Incorporated Method and apparatus for operating in pointing and enhanced gesturing modes
US8751550B2 (en) * 2010-06-09 2014-06-10 Microsoft Corporation Freeform mathematical computations
KR20120005903A (ko) * 2010-07-09 2012-01-17 삼성전자주식회사 복합 감지 장치 및 이를 구비한 전자 기기
US8566955B2 (en) * 2010-10-31 2013-10-22 Pixart Imaging Inc. User indentification with capacitive touchscreen
CN102156578B (zh) 2011-03-30 2013-01-09 汉王科技股份有限公司 触摸设备的手写输入方法及装置和电子设备
JP5374564B2 (ja) * 2011-10-18 2013-12-25 株式会社ソニー・コンピュータエンタテインメント 描画装置、描画制御方法、及び描画制御プログラム
US8750852B2 (en) * 2011-10-27 2014-06-10 Qualcomm Incorporated Controlling access to a mobile device
US8380995B1 (en) * 2011-11-29 2013-02-19 Google Inc. Process for login of a computing device with a touchscreen
US20130324850A1 (en) * 2012-05-31 2013-12-05 Mindray Ds Usa, Inc. Systems and methods for interfacing with an ultrasound system
CN102789576B (zh) 2012-06-29 2015-09-09 鸿富锦精密工业(深圳)有限公司 签名特征提取系统及方法
KR102051585B1 (ko) * 2012-08-27 2019-12-17 삼성전자주식회사 멀티 터치를 이용한 핸드 라이팅 기능을 갖는 전자 장치 및 제어 방법
US9589120B2 (en) * 2013-04-05 2017-03-07 Microsoft Technology Licensing, Llc Behavior based authentication for touch screen devices
US10082935B2 (en) * 2013-04-15 2018-09-25 Carnegie Mellon University Virtual tools for use with touch-sensitive surfaces
CN103268198A (zh) 2013-05-24 2013-08-28 广东国笔科技股份有限公司 手势输入方法及装置
US9727161B2 (en) * 2014-06-12 2017-08-08 Microsoft Technology Licensing, Llc Sensor correlation for pen and touch-sensitive computing device interaction
US9430085B2 (en) * 2014-09-12 2016-08-30 Microsoft Technology Licensing, Llc Classification of touch input as being unintended or intended

Also Published As

Publication number Publication date
TWI596525B (zh) 2017-08-21
US10007421B2 (en) 2018-06-26
DE102016113331A1 (de) 2017-02-09
EP3128412A1 (en) 2017-02-08
GB201613232D0 (en) 2016-09-14
US20170038956A1 (en) 2017-02-09
CN106406720B (zh) 2020-02-21
EP3128412B1 (en) 2018-06-27
CN106406720A (zh) 2017-02-15
GB2542260B (en) 2020-06-17
GB2542260A (en) 2017-03-15

Similar Documents

Publication Publication Date Title
US20230040146A1 (en) User device and method for creating handwriting content
US9454694B2 (en) Displaying and inserting handwriting words over existing typeset
US10671795B2 (en) Handwriting preview window
US20150135115A1 (en) Multi-touch input for changing text and image attributes
US20140300558A1 (en) Electronic apparatus, method of controlling electronic apparatus, and program for controlling electronic apparatus
US9874950B2 (en) Adaptive guidelines for handwriting
US10592096B2 (en) Cursor indicator for overlay input applications
US20150169214A1 (en) Graphical input-friendly function selection
US20150205360A1 (en) Table top gestures for mimicking mouse control
TWI596525B (zh) 資訊處理方法和資訊處理裝置
US10037137B2 (en) Directing input of handwriting strokes
US10387721B2 (en) Information handling device handwriting clean-up
US11003259B2 (en) Modifier key input on a soft keyboard using pen input
CN106557251B (zh) 书写区至数字显示器的灵活映射
US20150022460A1 (en) Input character capture on touch surface using cholesteric display
CN106201452A (zh) 呈现窗口的装置,呈现用户界面的方法和装置
CN104777898B (zh) 信息处理方法、设备和产品
CN105930763B (zh) 基于笔画属性的手写笔画分组的方法和产品
US20170168597A1 (en) Pen hover range
US20160179224A1 (en) Undo operation for ink stroke conversion
US10248214B2 (en) Wearable device for writing and drawing
US9182904B2 (en) Cues based on location and context for touch interface
US20150227311A1 (en) Selecting alternate keys using multi-touch
US10001839B2 (en) Gesture recognition of ink strokes

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees