TWI529627B - 用於手寫輸入的用戶介面、設備和方法 - Google Patents
用於手寫輸入的用戶介面、設備和方法 Download PDFInfo
- Publication number
- TWI529627B TWI529627B TW097117420A TW97117420A TWI529627B TW I529627 B TWI529627 B TW I529627B TW 097117420 A TW097117420 A TW 097117420A TW 97117420 A TW97117420 A TW 97117420A TW I529627 B TWI529627 B TW I529627B
- Authority
- TW
- Taiwan
- Prior art keywords
- handwriting
- character
- candidate
- sensitive display
- display screen
- Prior art date
Links
Description
本發明大致涉及手寫輸入,具體來說,涉及一種帶有能夠檢測由用戶手寫輸入的字元筆跡的觸敏顯示幕的用戶介面和電子手寫設備,以及一種用於手寫輸入的方法。
目前,使用例如攜帶型/個人助理(PDA)、掌上型電腦和移動終端(例如移動電話)的電子手寫設備來進行手寫輸入已經非常普遍。尤其地,在移動終端上的手寫輸入已經在亞太地區的國家中很流行,尤其是中國。這些電子手寫設備主要依靠例如手寫筆的輸入設備和觸敏顯示幕。如本領域技術人員已熟知的那樣,這種手寫輸入方案的基本過程是:用戶使用手寫筆在觸敏顯示幕上書寫想要輸入的字元,觸敏顯示幕能夠檢測到手寫筆書寫的筆跡,從而識別用戶真正想要輸入的字元。
目前,包括Motorola、Sony-Ericson和Nokia的多個公司已經設計了很多手寫輸入方案。就所允許的用戶書寫區域而言,手寫輸入方案大致存在兩種形式:基於框的文本輸入法和全屏文本輸入法。基於框的方法將終端用戶的書寫區域限制在觸敏顯示幕中的一個或多個虛擬的框中,而全屏書寫輸入方案使用戶免收框邊界的限制,將觸敏顯示幕螢幕區域的絕大部分提供用於書寫。
就單次所能輸入的字元數量而言,手寫輸入方案大致存在兩種形式:單字元輸入法和多字元輸入法。在單字元輸入法中,用戶一次書寫的字元筆跡作為一個字元被識別,因此用戶一次只能輸入一個字元;而在多字元輸入法中,用戶一次可以輸入多個字元,用戶一次連續書寫的多字元筆跡可以被識別為多個字元。
對於單字元輸入法,普遍作法是在每一次輸入一個字元之後為用戶提供字元估計,因此用戶在書寫每一字元之後不得不停筆等待片刻以等待估計結果,並在估計結果當中進行選擇。儘管這種輸入法在對輸入的識別方面非常精確,但因為逐字元輸入的方式,其識別速度從根本上難以滿足人們的需求。並且,這不符合一般用戶的書寫習慣,因為當在紙上進行書寫時,很少用戶會在寫下每一字元之後等待片刻。而通常情況人們總是習慣於進行連續書寫,例如以短語、片語或短句為單位停頓。
由此可見,多字元輸入法相對於單字元輸入法更加貼近用戶的書寫習慣。然而,對於多字元輸入法,一個令人困擾的問題是很難對所書寫的多字元筆跡進行正確的分割。一般而言,在識別多字元的書寫筆跡過程中,需要將該筆跡分割成多個組分,把所分割的多個組分劃分為多個組,一個組就對應一個字元,而後在該分割結果的基礎上識別用戶想要輸入那幾個字元。通常,所述分割可以基於所書寫的多個字元之間的間隙或單個字元的不同部分(例如漢字的偏旁部首)之間的間隙。分割的難點往往在於對筆
跡組分的劃組,因為用戶書寫時很有可能並沒有注意從而使得例如字元之間的間隙與同一字元中的筆畫之間的間隙相當,導致劃組錯誤。這種情況對於結構複雜的中文字元的書寫尤其容易發生。因此可見,如果能夠將多字元筆跡中的筆畫正確地分割成單個字元,那麽可以避免很多識別錯誤。
此外,在現有的多字元輸入解決方案中,人機交互方法的缺乏和用戶介面設計的不足不能為分割錯誤的修正提供高效的方法,並且因此很多用戶因為頻繁的輸入錯誤而氣餒。而且因為用以修正字元分割錯誤的交互能力的缺乏,識別速度非常慢。
因此,提供一種允許更高效的手寫輸入--尤其是多字元輸入--的用戶介面和電子輸入設備在本領域中具有先進之處。
為了克服上述現有技術的限制,並克服通過閱讀和理解本說明書將理解的其他限制,本發明提出一種用戶介面、設備和方法,以用於手寫輸入。
本發明的第一方面是一種設備,包括輸入裝置;被配置為檢測由所述輸入裝置在其上書寫的字元筆跡的觸敏顯示幕;以及與所述觸敏顯示幕相耦合並且被配置為識別所述字元筆跡的處理裝置,其中,所述觸敏顯示幕包括能夠彈出和縮進的面積比所述觸敏顯示幕小的筆跡查閱視窗,
所述筆跡查閱視窗適用於呈現按比例縮小的所述字元筆跡,以供用戶按照需要查閱。
根據本發明的實施例,所述筆跡查閱視窗適用於接受對所述分割結果進行的修正,並且處理裝置被配置為回應於所述修正而根據所修正的分割結果來更新對所述字元筆跡的識別。
根據本發明的又一實施例,所述觸敏顯示幕進一步包括候選視窗,所述候選視窗包括候選短語欄,其被配置為呈現所識別的對應於所述字元筆跡的候選短語列表,並且回應於用戶輸入而聚焦到所述候選短語列表中的任何一個候選短語中的任何一個字元上;以及候選字欄,其用於呈現所識別的對應於所聚焦的字元的候選字元列表。
根據本發明的設備提供了良好的用戶交互,便於用戶操作,並且有利於提高手寫輸入的正確率和速度。
本發明的第二方面是一種方法,包括檢測在觸敏顯示幕上書寫的字元筆跡;識別所述字元筆跡;以及按照需要,彈出和縮進在所述在觸敏顯示幕上的面積比所述觸敏顯示幕小的筆跡查閱視窗,其中,所述筆跡查閱視窗呈現帶有按比例縮小的所述字元筆跡。
根據本發明的實施例,所述方法進一步包括在所述筆跡查閱視窗上對所述分割結果進行修正;以及回應於所述修正,根據所修正的分割結果來更新對所述字元筆跡的識別。
根據本發明的又一實施例,所述識別包括估計與所述
字元筆跡對應的候選短語列表,並且估計與所述候選短語列表中的任何一個候選短語中的任何一個字元對應的候選字元列表,並且所述方法進一步包括從所述候選短語列表中選擇一個短語,作為對應於所述字元筆跡的整個識別短語,或者從所述候選字元列表中選擇一個字元,作為對應於所述字元筆跡的單個識別字元。
本發明的第三方面是一種用於手寫輸入用戶介面,包括觸敏顯示幕,其被配置為檢測由輸入裝置在其上書寫的字元筆跡,其中,所述觸敏顯示幕包括能夠彈出和縮進的面積比所述觸敏顯示幕小的筆跡查閱視窗,所述筆跡查閱視窗適用於呈現按比例縮小的所述字元筆跡以供用戶根據需要查閱。
發明的第二和第三方面基本上具有與第一方面相同或相應的特徵和優點。從下述詳細的公開、所附的從屬申請專利範圍以及附圖,本發明的其他目的、特徵和優點將變得清楚。
通常,依照本技術領域的一般含義解釋申請專利範圍中所用的所有術語,除非這裏進行了其他的明確限定。對“一個/所述〔部件、設備、成分、裝置、步驟等〕”的所有描述應被開放地解釋為指代所述單元、設備、部件、裝置、步驟等的至少一個例子,除非另外進行了明確描述。這裏公開的任何方法的步驟並不必須以公開的順序執行,除非進行了明確陳述。
可以通過結合附圖參照以下描述來獲得本發明及其特定優點的完整理解,在附圖中,相似的標號表示相似的特徵,其中:第1圖是依照本發明實施例的電子手寫設備的示意性正視圖,其中詳細闡明了它的用戶介面,該用戶介面包含通過筆、手寫筆或者類似輸入裝置進行操作的觸敏顯示幕;第2圖是舉例說明根據本發明實施例的根據需要彈出和縮進筆跡查閱視窗的直觀圖;第3圖是舉例說明根據本發明實施例的、在筆跡查閱視窗上修正對筆跡的分割結果並因而更新識別結果的直觀圖;第4a-u圖是舉例說明根據本發明實施例執行多字元手寫輸入的流程的直觀圖;第5(a)圖是舉例說明根據本發明實施例的刪除整個短語的直觀圖;第5(b)圖是舉例說明根據本發明實施例的刪除單個字元的直觀圖;以及第6圖是根據本發明實施例的用於多字元手寫輸入的方法的流程圖。
在以下各個示例性實施例的描述中參考附圖,附圖形成實施例的一部分,並且在附圖中通過圖解來示出可以實踐本發明的各個示例性實施例。應理解,可以使用其他實
施例,並且在不脫離本發明的範圍的情況下可以進行結構上和功能上的修改。
筆跡:表示通過例如手寫筆的輸入裝置在觸敏顯示幕上書寫的字元痕跡整體。
筆畫:表示通過例如手寫筆的輸入裝置在觸敏顯示幕上書寫的字元痕跡中的單獨的一筆,是字元基本的構成部分。
筆跡的組分:表示通過分割筆跡得到的組成筆跡的部分,通常由一個或多個相關聯的筆畫構成。
分割結果:表示在筆跡識別時,將筆跡分割成一個或多個組分,其中屬於所書寫的多字元中的各個字元的相應組分分別可以被劃分為一組,以便識別單個字元。這個由筆跡分割成組分,再由組分成組的過程所得的結果就是分割結果。
舉例來說:在觸敏顯示幕上書寫了“女”、“子”兩個字元,表示這兩個字元的書寫痕跡即筆跡,共寫了五筆,則每一筆為一個筆畫。在識別時,該書寫痕跡可能被分割成一個組分來識別,這樣識別結果可能是“好”;該書寫痕跡也可能被分割成兩個組分來識別,這樣識別結果可能是“女子”。由此可見,兩種不同的分割結果導致兩種不同的識別結果。
第1圖示出了依照本發明實施例的電子手寫設備100的示意圖。如本領域所熟知的,用於手寫字元輸入的電子手
寫設備一般包括三部分:用於檢測所書寫的筆跡的觸敏顯示幕110、用於書寫筆跡或輸入指令的輸入裝置120和用於進行資料處理以識別筆跡的處理裝置130。
觸敏顯示幕110可以是適用於手寫輸入的任何商業可用類型的顯示幕。輸入裝置120可以是筆、手寫筆,或者其他筆狀物--包括用戶的手指或者其他身體部位。處理裝置130可以是CPU(“中央處理單元”)、DSP(“數位信號處理器”)或者任何其他電子可編程邏輯器件或者器件的組合。當然,電子手寫設備還可以包括其他裝置或部件,例如用於無線通信的裝置、用於有線通信的裝置、用於攝像的裝置、鍵盤、揚聲器、麥克風等等,但在此僅描述與本發明有關的部件。
正如本領域所熟知的,觸敏顯示幕110不僅僅用於向用戶顯示可視資訊,還可以用於接收手寫字元筆跡和指令輸入。在該顯示幕110的絕大部分螢幕區域上,用戶可以通過使用輸入裝置120書寫其想要輸入的字元或者進行指令操作。根據本發明的觸敏顯示幕110可以支援多字元輸入法,並可以將多個字元書寫在螢幕的多個行中(即支援多行書寫)。
具體地說,通過在顯示幕上以類似於在紙上書寫的形式操作輸入裝置120,觸敏顯示幕110可以檢測到書寫筆跡,將其轉為電子資料提供給處理裝置,由處理裝置對該筆跡進行識別。最終,所識別的字元--即用戶想要輸入的字元,可以作為文本資訊被輸入到電子設備100的各種應
用程式中,例如消息應用程式(例如email、SMS、MMS等)、日程應用程式、電話簿應用程式,等等。例如在第1圖示出的示例中,最終所識別的字元“好”被呈現在點畫線指示的行上。
另外,通過在顯示幕110上的不同區域或視窗介面上點擊、輕敲或拖拉輸入裝置120,用戶可以將手寫筆250作為類似於電腦中的滑鼠的交互工具,通過以下操作來控制電子輸入設備100的字元輸入,例如在候選字元列表選項內進行選擇、在顯示幕110上設置游標的位置、選擇不同的控制元素(例如圖示或點擊按鈕)等等。
處理裝置130與觸敏顯示幕相耦合,可以對從觸敏顯示幕檢測到的書寫筆跡進行識別,也可以回應於輸入裝置120所輸入的指令來進行相應的操作。
在傳統的手寫輸入過程中,當用戶書寫時書寫筆跡被顯示在觸敏顯示幕上,但是一旦書寫落筆即一次一個或多個字元的書寫結束,書寫筆跡就就會被處理裝置通過識別所獲得的字元(例如顯示在第1圖中的點劃線所表示的行上的字元“好”)所替代。在這種情況下,一旦用戶書寫落筆,就不能再查看之前所書寫的字元筆跡,這樣設計的一個原因是通常觸敏顯示幕的尺寸非常有限,書寫之後在觸敏顯示幕上不僅需要顯示文本應用,還需要顯示一些控制視窗,例如候選字元列表選項、控制圖示、按鈕或功能表。而書寫時留下的筆跡常常會佔據觸敏顯示幕的大部分(例如一半以上)或幾乎整個,因而在書寫落筆之後,如果仍然
在觸敏顯示幕上保留顯示筆跡的話,就會減少書寫空間,還有可能因為與文本應用和控制視窗的顯示相重疊而容易造成混亂。
對於多字元的輸入,由於一次書寫了多個字元,而且尤其是多行書寫的情況(即一次輸入的多個字元被分別書寫在觸敏顯示幕上的不同的行中),因此筆跡在觸敏顯示幕上所佔據的空間與單字元輸入相比就更大了。
根據本發明,在觸敏顯示幕上設置能夠彈出和縮進的用戶介面--筆跡查詢視窗112。筆跡查閱視窗112的尺寸可以比觸敏顯示幕110小很多。當筆跡查閱視窗112被彈出時(即第1圖中所示的情形),在其上呈現之前剛剛書寫的筆跡,只不過與原來在觸敏顯示幕上書寫下的筆跡相比,視窗112所顯示的筆跡的尺寸被按比例縮小了--因為筆跡查閱視窗112的尺寸比觸敏顯示幕110小。當筆跡查閱視窗112被縮進時,其可以縮小為一個圖示,處於觸敏顯示幕110上的一角或側邊,以便儘量少地佔用觸敏顯示幕上的書寫空間。這樣,用戶可以在需要查看筆跡的時候彈出筆跡查閱視窗,而在不需要的時候將其縮進。由此,通過筆跡查閱視窗可以在一定程度上緩解觸敏顯示幕的空間局限性問題,使得書寫完字元後能夠查閱所書寫的筆跡,同時不影響書寫空間和其他視窗介面的使用。
此外,用戶有時難免會出現書寫錯誤需要修改,或者對於處理裝置的識別錯誤需要進行修正。並且,有可能用戶希望僅修改/修正其中的某一個字元而非所書寫的所有
字元。這樣,如果用戶能夠在一次書寫完字元後查閱所書寫的筆跡並對筆跡進行修正,針對修改後的筆跡進行識別,那麽將會有利於提高筆跡識別的正確率和識別速度。因此更進一步的,在筆跡查閱視窗112上,為用戶提供對之前剛剛書寫下的筆跡進行修正的功能。當筆跡查閱視窗112被彈出時,例如使用輸入裝置120,可以直接在該筆跡查閱視窗上對所顯示的按比例縮小的筆跡進行修改/修正,也可以通過其他用戶介面裝置(例如鍵盤)對該筆跡進行修改/修正。而後處理裝置130將針對修改/修正後的筆跡更新識別結果。例如,可以直接在所顯示的按比例縮小的筆跡上添加或刪除筆畫以修正書寫錯誤。又例如,可以對處理裝置130的某些中間識別過程--筆跡分割結果進行修正,這在稍後將參考第3圖詳細描述。
普遍的手寫輸入用戶介面為了改進用戶介面的性能,會提供候選字元列表區域,其中有多個候選字元以供用戶選擇。這些候選字元是通過處理裝置130的識別處理,對所書寫的筆跡的對應字元的估計和/或對後續可能輸入的字元的聯想預測。然而,現有的用戶介面在多字元識別後,大多只提供與所書寫的多字元筆跡相對應的一個短語作為整體識別結果,而沒有其他短語作為候選識別結果。這樣如果用戶發現了識別錯誤,大多只能查看與每一個手寫字元對應的多個候選字元,從中選擇原本想要輸入的正確的字元。
因此,本發明的又一創造性方案提出在觸敏顯示幕110
上設置候選視窗,候選視窗包括兩部分:候選短語欄114和候選字欄116。候選短語欄114用於呈現與所書寫的多字元筆跡對應的包括多個候選短語的列表,並且能夠回應於(例如通過輸入裝置120直接點擊預期聚焦的目標、通過鍵盤、導航桿等將游標移動到預期聚焦的目標上等等適合的方式而產生的)聚焦指令而聚焦到所述候選短語列表中的任何一個候選短語中的任何一個字元上。於是,在候選字欄116上呈現與所聚焦的字元對應的候選字元列表。這樣,可以直接從多個候選短語中選出原本想要輸入的正確短語,如果候選短語列表中有的話。如果候選列表中沒有完全正確的短語,則可以先選擇基本正確的短語,然後聚焦到該短語中不正確的單個字元上,再從候選字欄116中選出與該單個字元對應的原本想要輸入的正確字元。稍後,將參考第4和5圖以直觀的方式,詳細地描述利用候選視窗進行短語和單個字元的選擇、刪除、重寫等操作的實施例。
在下面參照2-5對本發明的實施例的描述中,把移動終端用作電子手寫設備的一個例子,但是也可以使用其他類型的電子手寫設備,例如帶有觸敏顯示幕的PDA、掌上型電腦等。此外,在下面的描述中將使用SMS消息作為應用手寫字元輸入的應用的一個例子,但是應理解其他應用也可以用於實施本發明的技術方案。
第2a-e圖舉例說明根據本發明實施例的根據需要彈出和縮進筆跡查閱視窗的直觀圖。如圖所示,在書寫(第2a圖)下多個字元“更加快樂”之後,通過單擊(第2b圖)觸敏顯示幕
110右側箭頭2A,將可以彈出(第2c圖)筆跡查閱視窗112。視窗112上呈現剛剛書寫的“更加快樂”四個字元的按比例縮小的筆跡。可以通過再單擊(第2d圖)箭頭2B將使該視窗縮進(第2e圖)。應理解,控制視窗112彈出和縮進的方式(例如上述的單擊箭頭的操作2A/2B)並非本發明的關鍵要素,也可以使用其他控制方式來控制視窗112的彈出和縮進,例如通過鍵盤輸入指令或使用手寫筆點擊(包括單擊、雙擊、拖拉等動作)觸敏顯示幕上的其他功能表或其他按鈕。
第3a-c圖舉例說明了如何在筆跡查閱視窗上修正對筆跡的分割結果並因而更新識別結果的直觀圖。如第3a圖所示,在筆跡查閱視窗112上所呈現的是剛剛在觸敏顯示幕110上書寫的“更加快樂”四個字元的筆跡。假設,根據筆跡分割功能該筆跡可以被分割成六個組分,例如如圖所示每一組分分別被框在一個虛框中。有可能,由於書寫時“更”的筆畫與“加”中的“力”靠得較近,從而導致在筆跡分割時,把“更”與“力”劃分在一組中。對於“快”和“樂”兩字元的筆跡也出現了類似的問題。於是,一開始通過識別功能估計的與該多字元筆跡對應的短語為“勛口中韞”,和用戶原本想要輸入的短語完全不相符。
如第3b圖所示,可以使用例如手寫筆,通過筆式手勢來對所分割的組分進行重新劃組。例如,可以通過如圖所示的環行筆式手勢將屬於同一字元的多個組分集合在一起。在該例中,“力”和“口”被集合在一起以形成字元“加”,並且“快”的組分也是如此。儘管在圖中未示出,但可以通
過使用標記指示組分的成組情況,即那些組分被劃分在那一個組中,來使得對組分的重新劃組更加直觀。例如,可以隨著重新劃組而變化圖中的虛框,使得被劃分在同一組中的組分被框在同一個虛框中,以虛框來區分不同的組分組(即不同的字元)。
在重新劃組之後,識別結果從不正確的“勛口中韞”變成了正確的短語“更加快樂”,如第3c圖所示。這樣,通過筆跡查閱視窗,可以直觀迅速地修正多字元筆跡的分割結果,獲得用戶想要輸入的正確字元。
容易想到,對字元筆跡進行修改的方式不限於第3圖所示的形式。例如,還可以使用其他筆式手勢將不屬於同一字元的各個組分分開,或者通過其他操作刪除某一組分。
在此提到的環行筆式手勢是指通過手寫筆在觸敏顯示幕上的移動痕跡的幾何位置來確定圈選內容的操作,可以用現有技術實現。如本領與技術人員顯而易見的,上述描述中的筆式手勢並非對本發明的限定,也可以通過其他操作來對組分進行重新分組或對筆跡進行其他修正。
如前所述,現有的多字元輸入用戶介面要麽逐個字元地識別、選擇、修改或刪除重寫,要麽整個短語地識別、選擇、修改或刪除重寫。因而多字元輸入效率非常低。而本發明的技術方案既可以獲得對於與多字元筆跡對應的整個短語的識別結果,由此可以獲得對於相應單個字元的識別結果,因而既允許用戶對整個短語進行選擇、修改或刪除,又允許用戶對單個字元進行選擇、修改、刪除或插入
重寫。
為了說明根據本發明的用戶介面的這些特徵,參照第4a-u圖,以手寫輸入中文句子“祝大家春節快樂元宵節更加快樂”的流程為例來說明。
如第4a圖所示,在觸敏顯示幕上書寫下“祝大家”三個字元的筆跡。通過處理裝置的識別,在候選視窗的候選短語欄114中呈現候選短語列表。如第4b圖所示,候選短語列表包括兩個候選短語條目“祝大家”和“視大家”。當第一條目恰好是用戶想要輸入的多字元短語時,可以繼續書寫而無需停頓(如第4c圖所示),這時所述第一條目“祝大家”被默認為正確短語,作為短消息內容的文本來呈現。
如果候選短語欄114中呈現的候選短語列表的第一條目不是用戶想要輸入的正確短語,並且正確的候選短語位於該候選短語列表的其他位置上,則可以選擇從候選短語列表中選出正確的那個短語。如第4d-4f圖所示,在觸敏顯示幕上一次書寫(第4d圖)下四個字元“春節快樂”的筆跡之後,可以使用例如手寫筆的輸入裝置選擇(第4e圖)排在候選短語列表第二位的短語“春節快樂”,以作為短消息內容的文本來呈現(第4f圖)。
如果候選短語欄114中呈現的候選短語列表中沒有用戶想要輸入的正確短語,則如果不是分割錯誤,可以先選擇與正確短語基本相同的選項短語,然後再通過候選字欄116來選擇單個的正確字元或者重新書寫單個字元。這樣避免重新書寫整個短語的麻煩。
如第4g-i圖所示,在觸敏顯示幕上一次書寫(第4g圖)下三個字元“元宵節”的筆跡之後,可以選擇(第4h圖)候選短語欄114中呈現的“無胃節”,儘管這並不是用戶想要輸入的短語,較為接近正確短語--例如都包括三個字元且第三個字元“節”是正確的。如第4i圖所示,可以將游標聚焦到從候選短語欄114中選出的“無胃節”中的字元“無”上面,於是在候選字欄116中呈現對於字元“無”的其他候選字元,其中包括用戶原本想要輸入的正確字元“元”,這樣就可以從候選字元欄中選出正確字元“元”。
如果候選字欄中仍然沒有與該單個字元對應的正確候選字元,則可以刪除該單個字元,以重新書寫,第4j-o圖示出了這種情況。如第4j和4k圖所示,當聚焦到候選短語中的字元“胃”時,在候選字欄中沒有正確的候選字元,於是可以刪除字元“胃”(其中涉及的對倒退鍵118的操作稍後將參考第5(b)圖被詳細說明)。這樣短消息文本內容中僅留下“元節”(第41圖)。如第4m-o圖所示,重新書寫字元“宵”,並將字元“宵”插入在字元“元”和“節”之間。
如果存在分割錯誤,候選短語欄114中可能根本沒有基本接近於正確短語的候選短語。於是,筆跡查閱視窗112可以被彈出,以查看筆跡分割結果,並且在該視窗上對所分割的組分進行重新劃組或其他筆跡修正,以獲得更新了的識別結果。如第4p-4u圖所示,選擇繼續書寫的位置(第4p圖),並且一次書寫(第4q圖)下四個字元“更加快樂”。如第4r和4s圖所示,當發現候選短語欄114中可能根本沒有基本
接近於正確短語的候選短語時,確定可能是分割錯誤,於是彈出筆跡查閱視窗112。這樣,可以在筆跡查閱視窗上對分割錯誤的組分進行重新劃組(第4t圖)。於是,在候選短語欄中顯示出更新了的候選短語列表(第4u圖),其中包括用戶原本想要輸入的正確短語。
本發明試圖最大程度地避免重新書寫筆畫的麻煩,對於因為書寫錯誤而不得不重新書寫的情況,可以通過按照需要一次刪除整個短語或一次刪除單個字元的倒退鍵來儘量使手寫輸入更加便捷。第5(a)圖示出了根據本發明實施例的刪除整個短語的例子的直觀圖;第5(b)圖示出了根據本發明實施例的刪除單個字元的例子的直觀圖。如第5(a)圖所示,一次書寫了三個字元“手寫體”之後,候選視窗中的倒退鍵118處於的形式,可以通過點擊它來整個地刪除這三個字元。如第5(b)圖所示,當在候選字欄中進行了聚焦選擇之後,倒退鍵118處於←
的形式,它的功能就只對選中的單個字元有效,於是點擊它會刪除所選中的單個字元。在此示出的倒退鍵118的形式和對其的操作方式(即點擊)僅僅是舉例說明,顯然其可以採用其他任何適合的形式和操作方式。
在上述實施例中,手寫輸入的是中文字元,書寫軸線為水平,並且書寫方向由左向右並向下換行。但應理解,這些只是示例,而非對本發明的限制。手寫輸入的也可以是英文字元或其他形式的字元或符號。書寫軸線和書寫方向也可以是其他的,例如垂直、從上向下等等。並且所述
書寫的多個字元也可以被分別書寫在多個行中。實際上,這些變化僅僅涉及到對所檢測的筆跡的識別方式的變化,而不會影響對本發明的技術方案的實施。此外,本發明也可以支援單字元輸入法。
第6圖是根據本發明實施例的用於手寫輸入的方法的流程圖。在步驟S1,在觸敏顯示幕上書寫字元。在步驟S2,檢測在觸敏顯示幕上所書寫的字元的筆跡。在步驟S3,識別所述字元筆跡。在步驟S4,按照需要,彈出在所述在觸敏顯示幕上的面積比所述觸敏顯示幕小的筆跡查閱視窗,其中,所述筆跡查閱視窗呈現按比例縮小的所述中文字元筆跡。所述筆跡查閱視窗也可以被縮進,以增大書寫空間。
根據本發明進一步的實施例,如果需要修正/修改筆跡的分割結果,則該過程進行到步驟S5,在所述筆跡查閱視窗上對所述分割結果進行修正。對筆跡的進行分割可以在對字元筆跡進行識別的過程中進行,也可以回應於需要修正/修改筆跡的指示而進行。
於是,回應於所述修正,返回步驟S3,根據所修正的分割結果來更新對所書寫的字元筆跡的識別。
如果不需要修正/修改筆跡分割結果,那麽可以在步驟S6從識別過程所估計的候選字元中選擇要輸入的正確字元。根據本發明進一步的實施例,識別步驟S3可以包括當識別所書寫的對字元筆跡時,估計與所述多字元筆跡對應的候選短語列表,並且估計與所述候選短語列表中的任何一個候選短語中的任何一個字元對應的候選字元列表。並
且,從所述候選短語列表中可以直接選出正確短語(步驟S61),作為對應於所述多字元筆跡的整個短語的預期輸入字元。也可以從對應於所選候選短語中的單個字元的候選字元列表中選擇正確字元(步驟S62),作為所述單個字元的預期輸入字元。
此外,本發明可以提供和方法相應的設備,所述設備由各種模組組成,所述模組提供用於執行所述方法的功能。模組可以部分地被實施為硬體,部分地實施為可以由例如控制器、微處理器或其他計算設備的處理器執行的軟體或固件(軟體硬體相結合)。本發明可以作為電腦程式產品被提供,所述產品包含在其上具體化該電腦程式代碼(也就是,軟體或固件)以用於由處理器執行的電腦可讀存儲結構。
本發明所提出的上述手寫輸入方案,作為增強的手寫輸入法,將改進移動電話的可用性。在上述和下面的內容中,以中文字元輸入為例進行描述,但應理解,除了中文字元之外,本發明也可以適用於其他類型的字元,例如其他語言的字元(例如英文、日文、韓文等等)、其他非語言類的字元(例如符號),或上述的結合。另外本發明的技術可以被應用到支援手寫輸入用戶介面設計的其他設備上,例如該有觸敏顯示幕的固定電話機、電腦、個人數位助理(PDA)等。
本發明包括在此顯式地或概括地公開的任意新穎特徵或這些特徵的組合。雖然已經關於包括執行本發明的優選
模式的特定示例描述了本發明,但本領域技術人員應理解,存在對上述系統和技術的多種改變和變化。因此,本發明的精神和範圍應如所附申請專利範圍中所闡述的被廣泛地解釋。
100‧‧‧電子手寫設備
110‧‧‧觸敏顯示幕
112‧‧‧筆跡查閱視窗
114‧‧‧候選短語欄
116‧‧‧候選字欄
118‧‧‧倒退鍵
120‧‧‧輸入裝置
130‧‧‧處理裝置
250‧‧‧手寫筆
S1、S2、S3、S4、S5、S6、S61、S62‧‧‧步驟
第1圖是依照本發明實施例的電子手寫設備的示意性正視圖,其中詳細闡明了它的用戶介面,該用戶介面包含通過筆、手寫筆或者類似輸入裝置進行操作的觸敏顯示幕;第2圖是舉例說明根據本發明實施例的根據需要彈出和縮進筆跡查閱視窗的直觀圖;第3圖是舉例說明根據本發明實施例的、在筆跡查閱視窗上修正對筆跡的分割結果並因而更新識別結果的直觀圖;第4a-u圖是舉例說明根據本發明實施例執行多字元手寫輸入的流程的直觀圖;第5(a)圖是舉例說明根據本發明實施例的刪除整個短語的直觀圖;第5(b)圖是舉例說明根據本發明實施例的刪除單個字元的直觀圖;以及第6圖是根據本發明實施例的用於多字元手寫輸入的方法的流程圖。
100‧‧‧電子手寫設備
110‧‧‧觸敏顯示幕
112‧‧‧筆跡查詢視窗
114‧‧‧候選短語欄
116‧‧‧候選字欄
120‧‧‧輸入裝置
130‧‧‧處理裝置
Claims (27)
- 一種用於手寫輸入的設備,包括:輸入裝置;觸敏顯示幕,其被配置為檢測由所述輸入裝置在其上書寫的字元筆跡;以及處理裝置,其與所述觸敏顯示幕相耦合,並且被配置為識別所述字元筆跡,其中,所述觸敏顯示幕包括能夠彈出和縮進的面積比所述觸敏顯示幕小的筆跡查閱視窗,所述筆跡查閱視窗適用於呈現按比例縮小的所述字元筆跡,以便用戶按照需要查閱。
- 如申請專利範圍第1項所述的設備,其中,所述筆跡查閱視窗適用於接受對所述字元筆跡的分割結果進行的修正;以及所述處理裝置被配置為,回應於所述修正,根據所修正的分割結果來更新對所述字元筆跡的識別。
- 如申請專利範圍第2項所述的設備,其中,對所述分割結果進行的修正包括對所述字元筆跡被分割成的一個或多個組分進行重新劃組。
- 如申請專利範圍第2項所述的設備,其中,對所述分割結果進行的修正包括刪除所述字元筆跡被分割成的一個或多個組分中的任意一個。
- 如前述申請專利範圍中任一項所述的設備,其中,所述觸敏顯示幕進一步包括候選視窗,所述候選視窗包括: 候選短語欄,其適用於呈現所識別的對應於所述字元筆跡的候選短語列表,並且回應於用戶輸入而聚焦到所述候選短語列表中的任何一個候選短語中的任何一個字元上;以及候選字欄,其適用於呈現所識別的對應於所聚焦的字元的候選字元列表。
- 如申請專利範圍第5項所述的設備,其中,所述候選視窗進一步包括倒退鍵,其適用於一次移除對應於所述字元筆跡的整個識別短語或者對應於所聚焦的字元的單個識別字元。
- 如申請專利範圍第1項所述的設備,其中,所述字元筆跡被書寫在所述觸敏顯示幕內的多個行中。
- 如申請專利範圍第3項所述的設備,其中,所述重新劃組包括將使用環行筆式手勢所環繞的所述一個或多個組分中的組分劃分為一組,所環繞的組分將作為單個字元被識別。
- 一種用於手寫輸入的方法,包括:檢測在觸敏顯示幕上書寫的字元筆跡;識別所述字元筆跡;以及按照需要,彈出或縮進在所述在觸敏顯示幕上的面積比所述觸敏顯示幕小的筆跡查閱視窗,其中,所述筆跡查閱視窗呈現帶有按比例縮小的所述字元筆跡。
- 如申請專利範圍第9項所述的方法,其中,所述方法進一步包括: 在所述筆跡查閱視窗上對所述字元筆跡的分割結果進行修正;以及回應於所述修正,根據所修正的分割結果來更新對所述字元筆跡的識別。
- 如申請專利範圍第10項所述的方法,其中,所述修正包括對所述書寫筆跡被分割成的一個或多個組分進行重新劃組。
- 如申請專利範圍第10項所述的方法,其中,所述修正包括刪除所述書寫筆跡被分割成的一個或多個組分中的任意一個。
- 如申請專利範圍第9-12項中任一項所述的方法,其中,所述識別包括估計與所述字元筆跡對應的候選短語列表,並且估計與所述候選短語列表中的任何一個候選短語中的任何一個字元對應的候選字元列表,並且所述方法進一步包括從所述候選短語列表中選擇一個短語,作為對應於所述字元筆跡的整個識別短語,或者從所述候選字元列表中選擇一個字元,作為對應於所述字元筆跡的單個識別字元。
- 如申請專利範圍第13項所述的方法,所述方法進一步包括一次移除所述整個識別短語或者所述單個識別字元。
- 如申請專利範圍第9項所述的方法,其中,所述字元筆跡被書寫在所述觸敏顯示幕內的多個行中。
- 如申請專利範圍第11項所述的方法,其中,所述重新劃組包括將使用環行筆式手勢所環繞的所述一個或多個 組分中的組分劃分為一組,所環繞的組分將作為單個字元被識別。
- 一種用於手寫輸入的用戶介面,包括:觸敏顯示幕,其被配置為檢測由輸入裝置在其上書寫的字元筆跡,其中,所述觸敏顯示幕包括能夠彈出和縮進的面積比所述觸敏顯示幕小的筆跡查閱視窗,所述筆跡查閱視窗適用於呈現按比例縮小的所述字元筆跡,以便用戶根據需要查閱。
- 如申請專利範圍第17項所述的用戶介面,其中所述筆跡查閱視窗適用於接受對所述字元筆跡的分割結果進行的修正。
- 如申請專利範圍第18項所述的用戶介面,其中,對所述分割結果進行的修正包括對所述字元筆跡被分割成的一個或多個組分進行重新劃組。
- 如申請專利範圍第18項所述的用戶介面,其中,對所述分割結果進行的修正包括刪除所述字元筆跡被分割成的一個或多個組分中的任意一個。
- 如申請專利範圍第17-20項中任一項所述的用戶介面,其中,所述觸敏顯示幕進一步包括候選視窗,所述候選視窗包括:候選短語欄,其適用於呈現所識別的對應於所述字元筆跡的候選短語列表,並且回應於用戶輸入而聚焦到所述候選短語列表中的任何一個候選短語中的任何一 個字元上;以及候選字欄,其適用於呈現所識別的對應於所聚焦的字元的候選字元列表。
- 如申請專利範圍第21項所述的用戶介面,其中,所述候選視窗進一步包括倒退鍵,用於一次移除對應於所述中文字元筆跡的整個識別短語或者對應於所聚焦的字元的單個識別字元。
- 如申請專利範圍第17項所述的用戶介面,其中所述字元筆跡被書寫在所述觸敏顯示幕內的多個行中。
- 如申請專利範圍第19項所述的用戶介面,其中,所述重新劃組包括將使用環行筆式手勢所環繞的所述一個或多個組分中的組分劃分為一組,所環繞的組分將作為單個字元被識別。
- 一種電腦程式產品,包括在其上具體化的電腦程式代碼,所述代碼被配置為當運行在處理器上時,執行包括以下的操作:檢測在觸敏顯示幕上書寫的字元筆跡;識別所述字元筆跡;以及按照需要,彈出或縮進在所述在觸敏顯示幕上的面積比所述觸敏顯示幕小的筆跡查閱視窗,其中,所述筆跡查閱視窗呈現帶有按比例縮小的所述字元筆跡。
- 如申請專利範圍第25項所述的電腦程式產品,其中,所述操作進一步包括:在所述筆跡查閱視窗上對所述字元筆跡的分割結 果進行修正;以及回應於所述修正,根據所修正的分割結果來更新對所述字元筆跡的識別。
- 如申請專利範圍第26項所述的電腦程式產品,其中,所述修正包括對所述書寫筆跡被分割成的一個或多個組分進行重新劃組。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2008100964389A CN101576783B (zh) | 2008-05-09 | 2008-05-09 | 用于手写输入的用户接口、设备和方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW200947309A TW200947309A (en) | 2009-11-16 |
TWI529627B true TWI529627B (zh) | 2016-04-11 |
Family
ID=41271727
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW097117420A TWI529627B (zh) | 2008-05-09 | 2008-05-12 | 用於手寫輸入的用戶介面、設備和方法 |
Country Status (3)
Country | Link |
---|---|
CN (1) | CN101576783B (zh) |
HK (1) | HK1135486A1 (zh) |
TW (1) | TWI529627B (zh) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI490734B (zh) | 2009-11-23 | 2015-07-01 | Htc Corp | 動態調整手寫輸入之等待時間的方法、電子設備及其相關電腦程式產品 |
TWI468986B (zh) * | 2010-05-17 | 2015-01-11 | Htc Corp | 電子裝置、其輸入方法與電腦程式產品 |
CN102141884B (zh) * | 2010-12-31 | 2014-01-01 | 珠海金山办公软件有限公司 | 一种绘图装置及绘图方法 |
JP5706001B2 (ja) * | 2011-01-31 | 2015-04-22 | 北京壹人壹本信息科技有限公司Beijing Ereneben Information Technology Co., Ltd. | 手書き原筆跡の実現方法、実現装置及び電子装置 |
WO2012159250A1 (en) | 2011-05-20 | 2012-11-29 | Microsoft Corporation | User interface for handwriting inputs |
CN103547983B (zh) * | 2011-05-20 | 2016-04-06 | 微软技术许可有限责任公司 | 用于手写输入的用户界面 |
KR101951257B1 (ko) | 2011-09-09 | 2019-02-26 | 삼성전자주식회사 | 데이터 입력 방법 및 이를 구현하는 휴대 단말기 |
CN102455867B (zh) * | 2011-09-29 | 2015-06-24 | 北京壹人壹本信息科技有限公司 | 一种手写文字信息的匹配处理方法及装置 |
CN103425424B (zh) * | 2012-05-22 | 2018-02-13 | 北京蒙恬科技有限公司 | 手写输入选字系统及方法 |
AU2015280257B2 (en) * | 2014-06-24 | 2017-08-24 | Apple Inc. | Character recognition on a computing device |
CN106293431A (zh) * | 2015-05-26 | 2017-01-04 | 富泰华工业(深圳)有限公司 | 手写输入识别方法、系统与电子装置 |
TWI619027B (zh) * | 2015-10-19 | 2018-03-21 | 威鋒數位開發股份有限公司 | 動態生成個人化手寫字型的系統和方法 |
CN106250035B (zh) | 2015-10-19 | 2019-07-26 | 威锋数位开发股份有限公司 | 动态生成个人化手写字型的系统和方法 |
CN106940596A (zh) * | 2016-01-04 | 2017-07-11 | 北京峰盛博远科技股份有限公司 | 一种手写输入多个字符的识别方法和系统 |
CN107657230A (zh) * | 2017-09-27 | 2018-02-02 | 安徽硕威智能科技有限公司 | 一种银行自助机器人文字识别装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7403888B1 (en) * | 1999-11-05 | 2008-07-22 | Microsoft Corporation | Language input user interface |
CN100410966C (zh) * | 2003-11-28 | 2008-08-13 | 诺基亚公司 | 改进的手写汉字输入识别方法 |
CN100492264C (zh) * | 2004-11-16 | 2009-05-27 | 诺基亚(中国)投资有限公司 | 中文汉字输入方法和中文汉字输入设备 |
-
2008
- 2008-05-09 CN CN2008100964389A patent/CN101576783B/zh not_active Expired - Fee Related
- 2008-05-12 TW TW097117420A patent/TWI529627B/zh not_active IP Right Cessation
-
2009
- 2009-12-16 HK HK09111834.8A patent/HK1135486A1/xx not_active IP Right Cessation
Also Published As
Publication number | Publication date |
---|---|
TW200947309A (en) | 2009-11-16 |
CN101576783B (zh) | 2012-11-28 |
CN101576783A (zh) | 2009-11-11 |
HK1135486A1 (en) | 2010-06-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI529627B (zh) | 用於手寫輸入的用戶介面、設備和方法 | |
US11681866B2 (en) | Device, method, and graphical user interface for editing screenshot images | |
US11709560B2 (en) | Device, method, and graphical user interface for navigating through a user interface using a dynamic object selection indicator | |
US11893230B2 (en) | Semantic zoom animations | |
US11137905B2 (en) | Modeless augmentations to a virtual trackpad on a multiple screen computing device | |
US10235040B2 (en) | Controlling application windows in an operating system | |
EP2565770B1 (en) | A portable apparatus and an input method of a portable apparatus | |
US8633906B2 (en) | Operation control apparatus, operation control method, and computer program | |
US10007426B2 (en) | Device, method, and graphical user interface for performing character entry | |
RU2416120C2 (ru) | Копирование текста с использованием сенсорного дисплея | |
US8908973B2 (en) | Handwritten character recognition interface | |
US8914743B2 (en) | Device, method, and graphical user interface for navigating a list of identifiers | |
US9557909B2 (en) | Semantic zoom linguistic helpers | |
US8612884B2 (en) | Device, method, and graphical user interface for resizing objects | |
US8595645B2 (en) | Device, method, and graphical user interface for marquee scrolling within a display area | |
US20150026554A1 (en) | Device, method, and graphical user interface for manipulating tables using multicontact gestures | |
US20130067398A1 (en) | Semantic Zoom | |
US20110154246A1 (en) | Image forming apparatus with touchscreen and method of editing input letter thereof | |
JP2003303047A (ja) | 画像入力及び表示システム、ユーザインタフェースの利用方法並びにコンピュータで使用可能な媒体を含む製品 | |
US11822780B2 (en) | Devices, methods, and systems for performing content manipulation operations | |
US20190196712A1 (en) | Systems and Methods for Facilitating Data Entry into Small Screen Electronic Devices | |
US20050052431A1 (en) | Apparatus and method for character recognition | |
US8629846B2 (en) | Information processing apparatus and information processing method | |
US10261675B2 (en) | Method and apparatus for displaying screen in device having touch screen | |
KR20110125049A (ko) | 휴대용 단말기, 그의 문자 입력 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
MM4A | Annulment or lapse of patent due to non-payment of fees |