TWI503737B - 用於組態一電子器件以解譯來自一鍵盤之按鍵輸入信號的方法、器件及電腦可讀儲存媒體 - Google Patents

用於組態一電子器件以解譯來自一鍵盤之按鍵輸入信號的方法、器件及電腦可讀儲存媒體 Download PDF

Info

Publication number
TWI503737B
TWI503737B TW100101586A TW100101586A TWI503737B TW I503737 B TWI503737 B TW I503737B TW 100101586 A TW100101586 A TW 100101586A TW 100101586 A TW100101586 A TW 100101586A TW I503737 B TWI503737 B TW I503737B
Authority
TW
Taiwan
Prior art keywords
keyboard
language
information
hardware
module
Prior art date
Application number
TW100101586A
Other languages
English (en)
Other versions
TW201145149A (en
Inventor
Bradford Allen Moore
Stephen W Swales
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Publication of TW201145149A publication Critical patent/TW201145149A/zh
Application granted granted Critical
Publication of TWI503737B publication Critical patent/TWI503737B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0237—Character input methods using prediction or retrieval techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/454—Multi-language systems; Localisation; Internationalisation

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Description

用於組態一電子器件以解譯來自一鍵盤之按鍵輸入信號的方法、器件及電腦可讀儲存媒體
所揭示之實施例大體而言係關於具有觸敏表面之電子器件，且更特定言之，係關於具有經組態以接受來自硬體鍵盤之輸入的觸敏表面之電子器件。
近年來，將觸敏表面作為電腦及其他電子計算器件之輸入器件的使用已顯著增加。例示性觸敏表面包括觸控板及觸控螢幕顯示器。此等表面廣泛用以操控顯示器上之使用者介面物件。
用於判定鍵盤按鍵配置之現存方法係麻煩的且效率低的。當前，不存在普遍使用的鍵盤語言及鍵盤按鍵配置。通常，使用者必須指定鍵盤按鍵配置或答覆一系列鍵盤組態問題。
因此，計算器件需要具有用於自動判定一鍵盤之按鍵配置且組態一鍵盤之更快、更高效的方法及介面。此等方法及介面可補充或取代用於自動判定鍵盤按鍵配置且組態鍵盤之習知方法。此等方法及介面減少使用者的認知負擔且產生更高效的人機介面。對於電池操作之計算器件，此等方法及介面節省電力且增加電池充電之間的時間。
藉由所揭示之器件而減少或消除與用於具有觸敏表面之計算器件之使用者介面相關聯的上述缺點及其他問題。在一些實施例中，該器件為一桌上型電腦。在一些實施例中，該器件為攜帶型的(例如，筆記型電腦、平板型電腦或手持型器件)。在一些實施例中，該器件具有一觸控板。在一些實施例中，該器件具有一觸敏顯示器(亦稱為「觸控螢幕」或「觸控螢幕顯示器」)。在一些實施例中，該器件具有一圖形使用者介面(GUI)、一或多個處理器、記憶體及一或多個模組、儲存於該記憶體中以用於執行多個功能的程式或指令集。在一些實施例中，該使用者主要經由在該觸敏表面上之手指接觸及示意動作而與該GUI互動。在一些實施例中，該等功能可包括影像編輯、繪圖、呈現、文書處理、網站建立、磁碟製作、試算表產生、遊戲、打電話、視訊會議、寄送電子郵件、即時訊息傳遞、健身支援、數位攝影、數位視訊、網頁瀏覽、數位音樂播放，及/或數位視訊播放。用於執行此等功能之可執行指令可包括於經組態以用於由一或多個處理器執行之一電腦可讀儲存媒體或其他電腦程式產品中。
根據一些實施例，提供一種用以自動判定一鍵盤按鍵配置且相應地組態該鍵盤之方法，其包括無使用者介入。自複數個硬體及軟體源獲得語言資訊及位置資訊。基於由該各別源所提供之該語言資訊及該位置資訊的可靠性而排定該等硬體及軟體源之優先次序。將來自具有最高優先級之該源之該語言資訊及該位置資訊映射至一硬體及/或一螢幕上鍵盤之一鍵盤按鍵配置。以多種方式使用該鍵盤按鍵配置。舉例而言，在一些實施例中，使用該鍵盤按鍵配置以基於由該複數個硬體及軟體源所提供的該語言資訊及該位置資訊而組態一硬體鍵盤來反映一使用者很可能偏好的一鍵入語言及鍵盤格式。此使得該器件能夠基於該所判定之鍵盤按鍵配置而解譯來自該硬體鍵盤之按鍵輸入信號，而無需該使用者在一單獨鍵盤組態程序中輸入鍵盤組態資訊。
根據一些實施例，在包括一或多個處理器、記憶體及一顯示器之一電子器件處執行一種方法。該方法包括自與該電子器件相關聯之一或多個硬體及軟體資訊源獲得語言資訊及位置資訊中之至少一者。該方法亦包括基於該等硬體及軟體資訊源之相關聯語言及位置資訊的可靠性而排定該等硬體及軟體資訊源之優先次序。該方法進一步包括基於自具有最高相對優先級之該資訊源所獲得的該語言資訊及該位置資訊而判定一硬體鍵盤之一鍵盤語言及一鍵盤按鍵配置。該方法進一步包括組態該電子器件以基於該所判定之鍵盤語言及該所判定之鍵盤按鍵配置而解譯來自該硬體鍵盤之按鍵輸入信號。在一些實施例中，可自動地(意謂無使用者介入)進行該組態。
根據一些實施例，在包括一或多個處理器、記憶體及一顯示器之一電子器件處執行一種方法。該方法包括自與該電子器件相關聯之一或多個資訊源獲得語言資訊及位置資訊中之至少一者。該方法亦包括基於該等資訊源之相關聯語言及位置資訊的可靠性而排定該等資訊源之優先次序。該方法進一步包括基於自具有最高相對優先級之該資訊源所獲得的該語言資訊及該位置資訊而判定一鍵盤之一鍵盤語言及一鍵盤按鍵配置。該方法進一步包括組態該電子器件以基於該所判定之鍵盤語言及該所判定之鍵盤按鍵配置而解譯來自該鍵盤之輸入信號。
根據一些實施例，一種電子器件包括一觸敏顯示器、一或多個處理器、記憶體，及一或多個程式；該一或多個程式儲存於該記憶體中且經組態以由該一或多個處理器執行，且該一或多個程式包括用於執行上文所描述之方法中的任一者之操作之指令。根據一些實施例，在具有一顯示器、一記憶體及用以執行儲存於該記憶體中的一或多個程式之一或多個處理器之一電子器件上的一圖形使用者介面包括在上文所描述之方法中的任一者中所顯示之元件中的一或多者，回應於輸入而更新該等元件，如在上述方法之任一者中所描述。根據一些實施例，一種電腦可讀儲存媒體儲存有指令，該等指令在由具有一觸敏顯示器之一電子器件執行時使該器件執行上文所描述之方法中的任一者之操作。根據一些實施例，一種電子器件包括：一顯示器；及用於執行上文所描述之方法中的任一者之操作之構件。根據一些實施例，用於具有一顯示器之一電子器件中的一資訊處理裝置包括用於執行上文所描述之方法中的任一者之操作之構件。
根據一些實施例，一種電子器件包括一處理單元及一耦接至該處理單元之顯示單元。該處理單元經組態以進行以下操作：自與該電子器件相關聯之一或多個硬體及軟體資訊源獲得語言資訊及位置資訊中之至少一者；基於該等硬體及軟體資訊源之相關聯語言及位置資訊的可靠性而排定該等硬體及軟體資訊源之優先次序；基於自具有最高相對優先級之該資訊源所獲得的該語言資訊及該位置資訊而判定一硬體鍵盤之一鍵盤語言及一鍵盤按鍵配置；及組態該電子器件以基於該所判定之鍵盤語言及該所判定之鍵盤按鍵配置而解譯來自該硬體鍵盤之按鍵輸入信號。該顯示單元經組態以顯示與該等經解譯之按鍵輸入信號相關聯之資訊。
根據一些實施例，一種電子器件包括一處理單元及一耦接至該處理單元之顯示單元。該處理單元經組態以進行以下操作：自與該電子器件相關聯之一或多個資訊源獲得語言資訊及位置資訊中之至少一者；基於該等資訊源之相關聯語言及位置資訊的可靠性而排定該等資訊源之優先次序；基於自具有最高相對優先級之該資訊源所獲得的該語言資訊及該位置資訊而判定一鍵盤之一鍵盤語言及一鍵盤按鍵配置；及組態該電子器件以基於該所判定之鍵盤語言及該所判定之鍵盤按鍵配置而解譯來自該鍵盤之輸入信號。該顯示單元經組態以顯示與該等經解譯之按鍵輸入信號相關聯之資訊。
因此，向具有顯示器之電子器件提供用於自動判定鍵盤按鍵配置且組態鍵盤之更快、更高效的方法及介面，藉此增加在使用此等器件的情況下之有效性、效率及使用者滿意度。此等方法及介面可補充或取代用於判定鍵盤按鍵配置且組態鍵盤之習知方法。
為了較佳地理解本發明之上述實施例以及其額外實施例，應結合以下圖式來參考下文之[實施方式]，在該等圖式中，相似參考數字貫穿諸圖指代相應部件。
現將詳細參考實施例，該等實施例之實例在隨附圖式中說明。在以下詳細描述中，闡述眾多特定細節以便提供對本發明之透徹理解。然而，對於一般熟習此項技術者而言應顯而易見，可在無此等特定細節的情況下實踐本發明。在其他例子中，不詳細描述熟知的方法、程序、組件、電路及網路，以便不會不必要地混淆該等實施例之態樣。
亦應理解，儘管術語第一、第二等可在本文中用以描述各種元件，但此等元件不應受此等術語限制。此等術語係僅用以區分一元件與另一元件。舉例而言，在不脫離本發明之範疇的情況下，第一接點可被稱為第二接點，且類似地，第二接點可被稱為第一接點。第一接點及第二接點為兩個接點，但其並非相同接點。
本文中用於描述本發明之術語係僅出於描述特定實施例之目的，且不意欲限制本發明。如本發明之描述及附加申請專利範圍中所使用，單數形式「一」及「該」意欲亦包括複數形式，除非上下文另外明確指示。亦應理解，如本文中所使用之術語「及/或」指代且涵蓋相關聯所列項目中之一或多個項目的任何及所有可能的組合。應進一步理解，術語「包括」、「包含」在用於本說明書中時指定所陳述之特徵、整數、步驟、操作、元件及/或組件之存在，但並不排除一或多個其他特徵、整數、步驟、操作、元件、組件及/或其群組之存在或添加。
如本文中所使用，術語「若」可被解釋為「在...時」或「在...後」或「回應於判定」或「回應於偵測」，此視上下文而定。類似地，短語「若判定」或「若偵測到[所陳述之條件或事件]」可被解釋為意謂「在判定後」或「回應於判定」或「在偵測到[所陳述之條件或事件]後」或「回應於偵測到[所陳述之條件或事件]」，此視上下文而定。
描述計算器件、此等器件之使用者介面及用於使用此等器件之相關聯程序的實施例。在一些實施例中，計算器件為亦含有諸如PDA及/或音樂播放器功能之其他功能的攜帶型通信器件，諸如，行動電話。攜帶型多功能器件之例示性實施例包括(但不限於)來自蘋果公司(Cupertino,California)的iPhone及iPod Touch器件。亦可使用具有觸敏表面(例如，觸控螢幕顯示器及/或觸控板)之其他攜帶型器件，諸如，膝上型電腦或平板型電腦。亦應理解，在一些實施例中，器件並非為攜帶型通信器件，而是為具有觸敏表面(例如，觸控螢幕顯示器及/或觸控板)之桌上型電腦。
在以下之論述中，描述包括一顯示器及一觸敏表面之計算器件。然而，應理解，該計算器件可包括一或多個其他實體使用者介面器件，諸如，實體鍵盤、滑鼠及/或操縱桿。
該器件支援多種應用程式，諸如以下應用程式中之一或多者：繪圖應用程式、呈現應用程式(presentation application)、文書處理應用程式、網站建立應用程式、磁碟製作應用程式、試算表應用程式、遊戲應用程式、電話應用程式、視訊會議應用程式、電子郵件應用程式、即時訊息傳遞應用程式、健身支援應用程式(workout support application)、照片管理應用程式、數位相機應用程式、數位視訊相機應用程式、網頁瀏覽應用程式、數位音樂播放器應用程式，及/或數位視訊播放器應用程式。
可在該器件上執行之各種應用程式可使用至少一共同實體使用者介面器件，諸如，觸敏表面。觸敏表面之一或多個功能以及顯示於器件上的相應資訊可自一應用程式至下一應用程式及/或在各別應用程式內調整及/或變化。以此方式，器件之共同實體架構(諸如，觸敏表面)可藉由為直觀且透明的使用者介面支援該多種應用程式。
使用者介面可包括一或多個軟鍵盤或螢幕上鍵盤實施例。軟鍵盤實施例可包括鍵盤之所顯示圖示上之符號的標準(QWERTY、AZERTY、Dvorak)及/或非標準組態，諸如描述於以下申請案中之彼等組態：2006年7月24日申請之題為「Keyboards For Portable Electronic Devices」的美國專利申請案第11/459,606號、2006年7月24日申請之題為「Touch Screen Keyboards For Portable Electronic Devices」的美國專利申請案第11/459,615號，及2009年3月16日申請之題為「Smart Keyboard Management for a Multifunction Device with a Touch Screen Display」的美國專利申請案第61/210,331號，該等申請案之全部內容在此以引用的方式併入本文中。軟鍵盤可呈任何語言形式。鍵盤實施例可包括相對於現存實體鍵盤中的按鍵之數目(諸如，打字機之實體鍵盤中的按鍵之數目)的減少之數目的圖示(或軟鍵)。此可使得使用者較容易選擇鍵盤中之一或多個圖示，且因此，選擇一或多個相應符號。鍵盤實施例可為適應性的。舉例而言，可根據使用者動作(諸如，選擇一或多個圖示及/或一或多個相應符號)修改所顯示圖示。該器件上之一或多個應用程式可利用共同及/或不同的鍵盤實施例。因此，可使所使用之鍵盤實施例適合該等應用程式中之至少一些應用程式。在一些實施例中，可使一或多個鍵盤實施例適合各別使用者。舉例而言，可基於各別使用者之文書使用歷史(詞典、俚語、個別使用)而使一或多個鍵盤實施例適合該各別使用者。在使用軟鍵盤實施例時，可調整一些鍵盤實施例以在選擇一或多個圖示(且因此選擇一或多個符號)時減少使用者錯誤之機率。
現將注意力轉向具有觸敏顯示器之攜帶型器件的實施例。圖1A及圖1B為說明根據一些實施例之具有觸敏顯示器112之攜帶型多功能器件100的方塊圖。為方便起見，觸敏顯示器112有時稱為「觸控螢幕」，且亦可被稱作或稱為觸敏顯示系統。器件100可包括記憶體102(其可包括一或多個電腦可讀儲存媒體)、記憶體控制器122、一或多個處理單元(CPU)120、周邊介面118、RF電路108、音訊電路110、揚聲器111、麥克風113、輸入/輸出(I/O)子系統106、其他輸入或控制器件116，及外部埠124。器件100可包括一或多個光學感測器164。此等組件可經由一或多個通信匯流排或信號線103而通信。
應瞭解，器件100僅為攜帶型多功能器件之一實例，且器件100可具有比所展示之組件多或少的組件，可組合兩個或兩個以上組件，或可具有該等組件之不同組態或配置。圖1A及圖1B中所展示之各種組件可以硬體、軟體或硬體與軟體兩者之組合(包括一或多個信號處理電路及/或特殊應用積體電路)來實施。
記憶體102可包括高速隨機存取記憶體，且亦可包括非揮發性記憶體，諸如，一或多個磁碟儲存器件、快閃記憶體器件或其他非揮發性固態記憶體器件。藉由器件100之其他組件(諸如，CPU 120及周邊介面118)之對記憶體102之存取可由記憶體控制器122控制。
周邊介面118可用以將器件之輸入及輸出周邊裝置耦接至CPU 120及記憶體102。一或多個處理器120執行或執行儲存於記憶體102中的各種軟體程式及/或指令集以執行器件100之各種功能且處理資料。
在一些實施例中，周邊介面118、CPU 120及記憶體控制器122可在單一晶片(諸如，晶片104)上實施。在一些其他實施例中，周邊介面118、CPU 120及記憶體控制器122可在單獨晶片上實施。
RF(射頻)電路108接收並發送RF信號，RF信號亦稱為電磁信號。RF電路108將電信號轉換成電磁信號/將電磁信號轉換成電信號，且經由電磁信號與通信網路及其他通信器件通信。RF電路108可包括用於執行此等功能之熟知電路，包括(但不限於)天線系統、RF收發器、一或多個放大器、調諧器、一或多個振盪器、數位信號處理器、CODEC晶片組、用戶識別模組(SIM)卡、記憶體等。RF電路108可與諸如網際網路(亦被稱作全球資訊網(WWW))、企業內部網路及/或無線網路(諸如，蜂巢式電話網路、無線區域網路(LAN)及/或都會網路(MAN))之網路通信，及藉由無線通信而與其他器件通信。無線通信可使用複數個通信標準、協定及技術中之任一者，其包括(但不限於)：全球行動通信系統(GSM)、增強型資料GSM環境(EDGE)、高速下行鏈路封包存取(HSDPA)、寬頻分碼多重存取(W-CDMA)、分碼多重存取(CDMA)、分時多重存取(TDMA)、藍芽(BLUETOOTH)、無線保真(Wi-Fi)(例如，IEEE 802.11a、IEEE 802.11b、IEEE 802.11g及/或IEEE 802.11n)、網路電話(VoIP)、Wi-MAX、電子郵件之協定(例如，網路網路訊息存取協定(IMAP)及/或郵局協定(POP))、即時訊息傳遞(例如，可擴展訊息傳遞及在場協定(extensible messaging and presence protocol,XMPP)、即時訊息傳遞及在場槓桿擴展之會期起始協定(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions,SIMPLE)、即時訊息傳遞及在場服務(Instant Messaging and Presence Service,IMPS))，及/或簡訊服務(SMS)，或任何其他合適通信協定(包括至本文件之申請日期為止尚未開發出的通信協定)。
音訊電路110、揚聲器111及麥克風113提供使用者與器件100之間的音訊介面。音訊電路110自周邊介面118接收音訊資料，將該音訊資料轉換成電信號，且將該電信號傳輸至揚聲器111。揚聲器111將該電信號轉換成人類可聽到的聲波。音訊電路110亦接收由麥克風113自聲波轉換之電信號。音訊電路110將該電信號轉換成音訊資料，且將該音訊資料傳輸至周邊介面118以供處理。可藉由周邊介面118自記憶體102及/或RF電路108擷取音訊資料，及/或將音訊資料傳輸至記憶體102及/或RF電路108。在一些實施例中，音訊電路110亦包括一耳機插孔(例如，圖2之212)。耳機插孔提供音訊電路110與可移除式音訊輸入/輸出周邊裝置(諸如，僅輸出頭戴式耳機或具有輸出(例如，針對一或兩個耳朵的頭戴式耳機)與輸入(例如，麥克風)兩者的耳機)之間的介面。
I/O子系統106將器件100上之輸入/輸出周邊裝置(諸如，觸控螢幕112及其他輸入控制器件116)耦接至周邊介面118。I/O子系統106可包括顯示控制器156及其他輸入或控制器件之一或多個輸入控制器160。該一或多個輸入控制器160自其他輸入或控制器件116接收電信號/將電信號發送至其他輸入或控制器件116。其他輸入控制器件116可包括實體按鈕(例如，按壓按鈕、搖桿按鈕等)、撥號盤、滑動開關、操縱桿、點按式選盤(click wheel)等。在一些替代實施例中，(多個)輸入控制器160可耦接至以下各者中之任一者(或不耦接至以下各者)：鍵盤、紅外線埠、USB埠，及諸如滑鼠之指標器件。一或多個按鈕(例如，圖2之208)可包括用於揚聲器111及/或麥克風113之音量控制的增/減按鈕。一或多個按鈕可包括按壓按鈕(例如，圖2之206)。快速按下按壓按鈕可解除觸控螢幕112之鎖定或開始在觸控螢幕上使用示意動作而將器件解除鎖定之程序，如描述於2005年12月23日申請之題為「Unlocking a Device by Performing Gestures on an Unlock Image」的美國專利申請案第11/322,549號中，該案之全部內容在此以引用的方式併入本文中。較久按下按壓按鈕(例如，206)可將器件100之電力接通或關斷。使用者可能能夠定製按鈕中之一或多者的功能性。觸控螢幕112用以實施虛擬按鈕或軟按鈕及一或多個軟鍵盤。
觸敏顯示器112提供器件與使用者之間的輸入介面及輸出介面。顯示控制器156自觸控螢幕112接收電信號及/或將電信號發送至觸控螢幕112。觸控螢幕112向使用者顯示虛擬輸出。虛擬輸出可包括圖形、文字、圖示、視訊及其任何組合(共同地稱為「圖形」)。在一些實施例中，一些或所有虛擬輸出可對應於使用者介面物件。
觸控螢幕112具有基於觸覺及/或觸知接觸而接受來自使用者之輸入的觸敏表面、感測器或感測器之集合。觸控螢幕112及顯示控制器156(連同記憶體102中之任何相關聯模組及/或指令集)偵測在觸控螢幕112上之接觸(及任何移動或接觸之阻斷)，且將所偵測之接觸轉換成與顯示於觸控螢幕112上的使用者介面物件(例如，一或多個軟鍵、圖示、網頁或影像)之互動。在一例示性實施例中，觸控螢幕112與使用者之間的接觸之點對應於使用者的手指。
觸控螢幕112可使用LCD(液晶顯示器)技術、LPD(發光聚合物顯示器)技術，或LED(發光二極體)技術，但在其他實施例中，可使用其他顯示技術。觸控螢幕112及顯示控制器156可使用現已知或稍後開發的複數種觸摸感測技術(包括(但不限於)電容性、電阻性、紅外線及表面聲波技術)中之任一者以及用於判定與觸控螢幕112之接觸之一或多個點之其他近接感測器陣列或其他元件來偵測接觸及任何移動或其阻斷。在一例示性實施例中，使用投射互電容式感測技術，諸如在來自蘋果公司(Cupertino,California)的iPhone及iPod Touch中所發現的投射互電容感測技術。
在一些實施例中，觸控螢幕112之觸敏顯示器可與描述於以下美國專利中之多點觸敏觸控板類似：6,323,846(Westerman等人)，6,570,557(Westerman等人)，及/或6,677,932(Westerman)，及/或美國專利公開案第2002/0015024A1號，該等專利中之每一者之全部內容在此以引用的方式併入本文中。然而，觸控螢幕112顯示來自攜帶型器件100之視覺輸出，而觸敏觸控板並不提供視覺輸出。
在一些實施例中，觸控螢幕112之觸敏顯示器可如描述於以下申請案中：(1) 2006年5月2日申請之題為「Multipoint Touch Surface Controller」的美國專利申請案第11/381,313號；(2) 2004年5月6日申請之題為「Multipoint Touchscreen」的美國專利申請案第10/840,862號；(3) 2004年7月30日申請之題為「Gestures For Touch Sensitive Input Devices」的美國專利申請案第10/903,964號；(4) 2005年1月31日申請之題為「Gestures For Touch Sensitive Input Devices」的美國專利申請案第11/048,264號；(5) 2005年1月18日申請之題為「Mode-Based Graphical User Interfaces For Touch Sensitive Input Devices」的美國專利申請案第11/038,590號；(6) 2005年9月16日申請之題為「Virtual Input Device Placement On A Touch Screen User Interface」的美國專利申請案第11/228,758號；(7) 2005年9月16日申請之題為「Operation Of A Computer With A Touch Screen Interface」的美國專利申請案第11/228,700號；(8) 2005年9月16日申請之題為「Activating Virtual Keys Of A Touch-Screen Virtual Keyboard」的美國專利申請案第11/228,737號；及(9) 2006年3月3日申請之題為「Multi-Functional Hand-Held Device」的美國專利申請案第11/367,749號，所有此等申請案之全部內容以引用的方式併入本文中。
觸控螢幕112可具有超過100 dpi之解析度。在一些實施例中，觸控螢幕具有為大約160 dpi之解析度。使用者可使用任何合適物件或附屬件(諸如，手寫筆、手指等等)與觸控螢幕112接觸。在一些實施例中，將使用者介面設計成主要藉由基於手指之接觸及示意動作而工作，與基於手寫筆之輸入相比，此歸因於手指在觸控螢幕上之接觸的較大區域而可為較不精確的。在一些實施例中，器件將粗略的基於手指之輸入轉譯成精確的指標/游標位置或命令以用於執行使用者所需要之動作。
在一些實施例中，除了觸控螢幕之外，器件100可包括用於啟動或撤銷特定功能的一觸控板(圖中未展示)。在一些實施例中，觸控板為器件之觸敏區域，與觸控螢幕不同，其並不顯示視覺輸出。觸控板可為與觸控螢幕112分離之觸敏表面或由觸控螢幕所形成的觸敏表面之一擴展。
在一些實施例中，器件100可包括一實體或虛擬選盤(例如，點按式選盤)作為輸入控制器件116。使用者可藉由旋轉點按選式選盤或藉由移動與點按式選盤接觸之點(例如，其中接觸之點之移動的量係藉由其相對於點按式選盤之中心點之角移位而量測)而在顯示於觸控螢幕112中的一或多個圖形物件(例如，圖示)當中導覽且與該一或多個圖形物件(例如，圖示)互動。點按式選盤亦可用以選擇所顯示圖示中之一或多者。舉例而言，使用者可在點按式選盤之至少一部分或相關聯按鈕上向下按。由使用者經由點按式選盤而提供的使用者命令及導覽命令可由輸入控制器160以及記憶體102中的模組及/或指令集中之一或多者處理。對於虛擬點按式選盤，該點按式選盤及點按式選盤控制器可分別為觸控螢幕112及顯示控制器156之部分。對於虛擬點按式選盤，該點按式選盤可為回應於與器件之使用者互動而在觸控螢幕顯示器上出現及消失的不透明或半透明物件。在一些實施例中，虛擬點按式選盤顯示於攜帶型多功能器件之觸控螢幕上且由與觸控螢幕之使用者接觸來操作。
器件100亦包括用於向各種組件供電之電力系統162。電力系統162可包括電力管理系統、一或多個電源(例如，電池、交流電(AC))、再充電系統、電力故障偵測電路、電力轉換器或反轉器、電力狀態指示器(例如，發光二極體(LED))，及與在攜帶型器件中產生、管理及分配電力相關聯的任何其他組件。
器件100亦可包括一或多個光學感測器164。圖1A及圖1B展示耦接至I/O子系統106中之光學感測器控制器158的光學感測器。光學感測器164可包括電荷耦合器件(CCD)或互補金屬氧化物半導體(CMOS)光電晶體。光學感測器164自環境接收經由一或多個透鏡所投射之光，且將該光轉換成表示影像之資料。在結合成像模組143(亦稱為相機模組)時，光學感測器164可俘獲靜態影像或視訊。在一些實施例中，光學感測器位於器件100之背面，與該器件前面的觸控螢幕顯示器112相對，使得該觸控螢幕顯示器可用作靜態及/或視訊影像獲取之取景器。在一些實施例中，光學感測器位於器件之前面，使得使用者在該觸控螢幕顯示器上檢視其他視訊會議參與者的同時可獲得視訊會議之使用者之影像。在一些實施例中，光學感測器164之位置可由使用者(例如，藉由旋轉器件外殼中之透鏡及感測器)而改變，使得單一光學感測器164可連同觸控螢幕顯示器一起用於視訊會議與靜態及/或視訊影像獲取兩者。
器件100亦可包括一或多個近接感測器166。圖1A及圖1B展示耦接至周邊介面118之近接感測器166。或者，近接感測器166可耦接至I/O子系統106中之輸入控制器160。近接感測器166可如以下申請案中所描述而執行：題為「Proximity Detector In Handheld Device」的美國專利申請案第11/241,839號；題為「Proximity Detector In Handheld Device」的美國專利申請案第11/240,788號；題為「Using Ambient Light Sensor To Augment Proximity Sensor Output」的美國專利申請案第11/620,702號；題為「Automated Response To And Sensing Of User Activity In Portable Devices」的美國專利申請案第11/586,862號；及題為「Methods And Systems For Automatic Configuration Of Peripherals」的美國專利申請案第11/638,251號，該等申請案之全部內容在此以引用的方式併入本文中。在一些實施例中，當將多功能器件置放成接近使用者之耳朵時(例如，當使用者正打電話時)，近接感測器關斷且停用觸控螢幕112。
器件100亦可包括一或多個加速度計168。圖1A及圖1B展示耦接至周邊介面118之加速度計168。或者，加速度計168可耦接至I/O子系統106中之輸入控制器160。加速度計168可如以下公開案中所描述而執行：題為「Acceleration-based Theft Detection System for Portable Electronic Devices」的美國專利公開案第20050190059號；及題為「Methods And Apparatuses For Operating A Portable Device Based On An Accelerometer」的美國專利公開案第20060017692號，該兩個公開案之全部內容以引用的方式併入本文中。在一些實施例中，基於對自一或多個加速度計所接收之資料的分析而以縱向視圖或橫向視圖將資訊顯示於觸控螢幕顯示器上。除了(多個)加速度計168之外，器件100視情況亦包括用於獲得關於器件100之位置及定向(例如，縱向或橫向)之資訊的磁力計(圖中未展示)及GPS(或GLONASS或其他全球導航系統)接收器(圖中未展示)。
在一些實施例中，儲存於記憶體102中之軟體組件包括作業系統126、通信模組(或指令集)128、接觸/運動模組(或指令集)130、圖形模組(或指令集)132、文字輸入模組(或指令集)134、全球定位系統(GPS)模組(或指令集)135，及應用程式(或指令集)136。此外，在一些實施例中，記憶體102儲存器件/全域內部狀態157，如圖1A、圖1B及圖3中所展示。器件/全域內部狀態157包括以下各者中之一或多者：作用中應用程式狀態，其指示哪些應用程式(若存在)當前為作用中的；顯示狀態，其指示哪些應用程式、視圖或其他資訊佔據觸控螢幕顯示器112之各種區；感測器狀態，其包括自器件之各種感測器及輸入控制器件116所獲得的資訊；及關於器件之位置及/或姿態之位置資訊。
作業系統126(例如，Darwin、RTXC、LINUX、UNIX、OS X、WINDOWS或諸如VxWorks之嵌入式作業系統)包括用於控制及管理一般系統任務(例如，記憶體管理、儲存器件控制、電力管理等)之各種軟體組件及/或驅動器，且促進各種硬體組件與軟體組件之間的通信。
通信模組128促進經由一或多個外部埠124之與其他器件之通信，且亦包括用於處置由RF電路108及/或外部埠124所接收之資料的各種軟體組件。外部埠124(例如，通用串列匯流排(USB)、FIREWIRE等)經調適以用於直接耦接至其他器件或經由網路(例如，網際網路、無線LAN等)間接地耦接至其他器件。在一些實施例中，外部埠為與用於iPod(蘋果公司的商標)器件上之30接針連接器相同或類似及/或與該連接器相容的多接針(例如，30接針)連接器。
接觸/運動模組130可偵測與觸控螢幕112(結合顯示控制器156)及其他觸敏器件(例如，觸控板或實體點按式選盤)之接觸。接觸/運動模組130包括用於執行與接觸之偵測有關之各種操作的各種軟體組件，該等操作諸如，判定是否已發生接觸(例如，偵測手指向下事件)，判定是否存在接觸之移動且越過觸敏表面追蹤該移動(例如，偵測一或多個手指拖曳事件)，及判定是否已停止接觸(例如，偵測手指向上事件或接觸之阻斷)。接觸/運動模組130自觸敏表面接收接觸資料。判定接觸之點之移動(其由一系列接觸資料表示)可包括判定接觸之點的速率(量值)、速度(量值及方向)，及/或加速度(量值及/或方向之改變)。此等操作可應用於單一接觸(例如，一手指接觸)或應用於多個同時接觸(例如，「多點觸摸」/多個手指接觸)。在一些實施例中，接觸/運動模組130及顯示控制器156偵測觸控板上之接觸。在一些實施例中，接觸/運動模組130及控制器160偵測點按式選盤上之接觸。
接觸/運動模組130可偵測由使用者輸入之示意動作。觸敏表面上之不同的示意動作具有不同的接觸圖案。因此，可藉由偵測特定接觸圖案來偵測示意動作。舉例而言，偵測手指觸按示意動作包括偵測手指向下事件，後續接著在與手指向下事件相同的位置(或與手指向下事件實質上相同的位置)處(例如，在圖示之位置處)偵測手指向上(起離)事件。作為另一實例，偵測觸敏表面上之手指滑動(swipe)示意動作包括偵測手指向下事件，後續接著偵測一或多個手指拖曳事件，且隨後後續接著偵測手指向上(起離)事件。
圖形模組132包括用於在觸控螢幕112或其他顯示器上呈現及顯示圖形之各種已知軟體組件，包括用於改變所顯示之圖形的強度之組件。如本文中所使用，術語「圖形」包括可向使用者顯示之任何物件，其包括(但不限於)文字、網頁、圖示(諸如，包括軟鍵之使用者介面物件)、數位影像、視訊、動畫及其類似物。
在一些實施例中，圖形模組132儲存表示待使用之圖形之資料。可向每一圖形指派一相應碼。圖形模組132自應用程式等接收指定待顯示之圖形之一或多個碼連同(在必要時)座標資料及其他圖形性質資料，且接著產生螢幕影像資料以輸出至顯示控制器156。
文字輸入模組134(其可為圖形模組132之組件)提供用於將文字鍵入至各種應用程式(例如，聯繫人137、電子郵件140、IM 141、瀏覽器147及需要文字輸入之任何其他應用程式)中之軟鍵盤。
GPS模組135判定器件之位置，且提供此資訊以供用於各種應用程式中(例如，提供至電話138以用於基於位置之撥號，提供至相機143作為圖片/視訊中繼資料，及提供至提供基於位置之服務的應用程式，諸如，天氣介面工具集(widget)、本地黃頁介面工具集及地圖/導航介面工具集)。
應用程式136可包括以下模組(或指令集)，或其子集或超集：
●　一聯繫人模組137(有時稱為地址簿或聯繫人清單)；
●　一電話模組138；
●　一視訊會議模組139；
●　一電子郵件用戶端模組140；
●　一即時訊息傳遞(IM)模組141；
●　一健身支援模組；
●　用於靜態及/或視訊影像之一相機模組143；
●　一影像管理模組144；
●　一視訊播放器模組145；
●　一音樂播放器模組146；
●　一瀏覽器模組147；
●　一行事曆模組148；
●　介面工具集模組149，其可包括天氣介面工具集、股票介面工具集149-2、計算器介面工具集149-3、鬧鐘介面工具集149-4、字典介面工具集149-5，及由使用者所獲得之其他介面工具集，以及使用者建立之介面工具集149-6；
●　用於產生使用者建立之介面工具集149-6的介面工具集建立者模組；
●　搜尋模組151；
●　視訊及音樂播放器模組152，其將視訊播放器模組145及音樂播放器模組146合併；
●　備忘錄模組(notes module)153；
●　地圖模組154；
●　線上視訊模組155；及/或
●　鍵盤組態模組160。
可儲存於記憶體102中之其他應用程式136之實例包括其他文書處理應用程式、其他影像編輯應用程式、繪圖應用程式、呈現應用程式、具備JAVA能力之應用程式、加密、數位權限管理、語音辨識，及語音複製。
在結合觸控螢幕112、顯示控制器156、接觸模組130、圖形模組132及文字輸入模組134時，聯繫人模組137可用以管理地址簿或聯繫人清單(例如，儲存於記憶體102或記憶體370中的聯繫人模組137之應用程式內部狀態192中)，包括：將(多個)名稱添加至地址簿；自地址簿刪除(多個)名稱；將(多個)電話號碼、(多個)電子郵件地址、(多個)實體地址或其他資訊與名稱相關聯；將影像與名稱相關聯；將名稱分類及排序；提供電話號碼或電子郵件地址以藉由電話138、視訊會議139、電子郵件140或IM 141起始及/或促進通信；等等。
在結合RF電路108、音訊電路110、揚聲器111、麥克風113、觸控螢幕112、顯示控制器156、接觸模組130、圖形模組132及文字輸入模組134時，電話模組138可用以鍵入對應於電話號碼之字元之序列，存取地址簿137中之一或多個電話號碼，修改已鍵入的電話號碼，對各別電話號碼撥號，進行交談，且在交談完成時斷開或掛斷。如上文所提及，無線通信可使用複數個通信標準、協定及技術中之任一者。
在結合RF電路108、音訊電路110、揚聲器111、麥克風113、觸控螢幕112、顯示控制器156、光學感測器164、光學感測器控制器158、接觸模組130、圖形模組132、文字輸入模組134、聯繫人清單137及電話模組138時，視訊會議模組139包括可執行指令以根據使用者指令而起始、進行及終止使用者與一或多個其他參與者之間的視訊會議。
在結合RF電路108、觸控螢幕112、顯示控制器156、接觸模組130、圖形模組132及文字輸入模組134時，電子郵件用戶端模組140包括可執行指令以回應於使用者指令而建立、發送、接收及管理電子郵件。在結合影像管理模組144時，電子郵件用戶端模組140使得極容易建立及發送具有使用相機模組143所拍攝的靜態或視訊影像之電子郵件。
在結合RF電路108、觸控螢幕112、顯示控制器156、接觸模組130、圖形模組132及文字輸入模組134時，即時訊息傳遞模組141包括可執行指令以鍵入對應於即時訊息之字元之序列，修改先前所鍵入之字元，傳輸各別即時訊息(例如，針對基於電話之即時訊息使用簡訊服務(SMS)或多媒體訊息服務(MMS)協定或針對基於網路網路之即時訊息使用XMPP、SIMPLE或IMPS)，接收即時訊息且檢視所接收之即時訊息。在一些實施例中，所傳輸及/或接收之即時訊息可包括圖形、照片、音訊檔案及/或如在MMS及/或增強型訊息傳遞服務(EMS)中所支援的其他附件。如本文中所使用，「即時訊息傳遞」指代基於電話之訊息(例如，使用SMS或MMS所發送之訊息)與基於網際網路之訊息(例如，使用XMPP、SIMPLE或IMPS所發送之訊息)兩者。
在結合RF電路108、觸控螢幕112、顯示控制器156、接觸模組130、圖形模組132、文字輸入模組134、GPS模組135、地圖模組154及音樂播放器模組146時，健身支援模組142包括可執行指令以建立健身(例如，針對時間、距離及/或卡路里燃燒目標)；與健身感測器(運動器件)通信；接收健身感測器資料；校準用以監視健身之感測器；選擇並播放健身之音樂；且顯示、儲存並傳輸健身資料。
在結合觸控螢幕112、顯示控制器156、(多個)光學感測器164、光學感測器控制器158、接觸模組130、圖形模組132及影像管理模組144時，相機模組143包括可執行指令以俘獲靜態影像或視訊(包括視訊串流)並將其儲存於記憶體102中，修改靜態影像或視訊之特性，或自記憶體102刪除靜態影像或視訊。
在結合觸控螢幕112、顯示控制器156、接觸模組130、圖形模組132、文字輸入模組134及相機模組143時，影像管理模組144包括可執行指令以配置、修改(例如，編輯)或以其他方式操控、加標籤、刪除、呈現(例如，在數位幻燈片或相簿中)及儲存靜態及/或視訊影像。
在結合觸控螢幕112、顯示控制器156、接觸模組130、圖形模組132、音訊電路110及揚聲器111時，視訊播放器模組145包括可執行指令以顯示、呈現或以其他方式播放視訊(例如，在觸控螢幕112上或在經由外部埠124之外部連接之顯示器上)。
在結合觸控螢幕112、顯示系統控制器156、接觸模組130、圖形模組132、音訊電路110、揚聲器111、RF電路108及瀏覽器模組147時，音樂播放器模組146包括可執行指令，該等可執行指令允許使用者下載及播放以一或多個檔案格式儲存的所記錄之音樂及其他聲音檔案(諸如，MP3或AAC檔案)。在一些實施例中，器件100可包括MP3播放器(諸如，iPod(蘋果公司的商標))之功能性。
在結合RF電路108、觸控螢幕112、顯示系統控制器156、接觸模組130、圖形模組132及文字輸入模組134時，瀏覽器模組147包括可執行指令以根據使用者指令瀏覽網際網路，包括搜尋、連結至、接收及顯示網頁或其部分，以及連結至網頁之附件及其他檔案。
在結合RF電路108、觸控螢幕112、顯示系統控制器156、接觸模組130、圖形模組132、文字輸入模組134、電子郵件用戶端模組140及瀏覽器模組147時，行事曆模組148包括可執行指令以根據使用者指令而建立、顯示、修改及儲存行事曆及與行事曆相關聯之資料(例如，行事曆條目、待辦事項清單等)。
在結合RF電路108、觸控螢幕112、顯示系統控制器156、接觸模組130、圖形模組132、文字輸入模組134及瀏覽器模組147時，介面工具集模組149為小型應用程式，其可由使用者下載及使用(例如，天氣介面工具集149-1、股票介面工具集149-2、計算器介面工具集149-3、鬧鐘介面工具集149-4及字典介面工具集149-5)或由使用者建立(例如，使用者建立之介面工具集149-6)。在一些實施例中，介面工具集包括HTML(超文字標記語言)檔案、CSS(階層式樣式表)檔案，及JavaScript檔案。在一些實施例中，介面工具集包括XML(可擴展標記語言)檔案及JavaScript檔案(例如，Yahoo！ Widgets)。
在結合RF電路108、觸控螢幕112、顯示系統控制器156、接觸模組130、圖形模組132、文字輸入模組134及瀏覽器模組147時，介面工具集建立者模組150可由使用者用以建立介面工具集(例如，使網頁之使用者指定之部分變成介面工具集)。
在結合觸控螢幕112、顯示系統控制器156、接觸模組130、圖形模組132及文字輸入模組134時，搜尋模組151包括可執行指令以根據使用者指令搜尋記憶體102中的與一或多個搜尋準則(例如，一或多個使用者指定之搜尋術語)匹配之文字、音樂、聲音、影像、視訊及/或其他檔案。
在結合觸控螢幕112、顯示控制器156、接觸模組130、圖形模組132及文字輸入模組134時，備忘錄模組153包括可執行指令以根據使用者指令建立且管理備忘錄、待辦事項清單及其類似者。
在結合RF電路108、觸控螢幕112、顯示系統控制器156、接觸模組130、圖形模組132、文字輸入模組134、GPS模組135及瀏覽器模組147時，地圖模組154可用以根據使用者指令接收、顯示、修改及儲存地圖及與地圖相關聯之資料(例如，駕駛方向；關於商店及在特定位置或特定位置附近之其他感興趣點之資料；及基於位置之其他資料)。
在結合觸控螢幕112、顯示系統控制器156、接觸模組130、圖形模組132、音訊電路110、揚聲器111、RF電路108、文字輸入模組134、電子郵件用戶端模組140及瀏覽器模組147時，線上視訊模組155包括指令，該等指令允許使用者存取、瀏覽、接收(例如，藉由串流傳輸及/或下載)、播放(例如，在觸控螢幕上或在經由外部埠124之外部連接之顯示器上)、發送具有至特定線上視訊之連結的電子郵件，及以其他方式管理呈一或多個檔案格式(諸如，H.264)之線上視訊。在一些實施例中，即時訊息傳遞模組141(而非電子郵件用戶端模組140)用以發送至特定線上視訊之連結。對線上視訊應用程式之額外描述可見於以下申請案中：2007年6月20日申請之題為「Portable Multifunction Device,Method,and Graphical User Interface for Playing Online Videos」的美國臨時專利申請案第60/936,562號，及2007年12月31日申請之題為「Portable Multifunction Device,Method,and Graphical User Interface for Playing Online Videos」的美國專利申請案第11/968,067號，該等申請案之全部內容在此以引用的方式併入本文中。
如在圖3之論述中進一步論述，鍵盤組態模組160根據與器件100相關聯的硬體及軟體源來判定鍵盤按鍵配置。
上文所識別之模組及應用程式中的每一者對應於用於執行上文所描述之一或多個功能及本申請案中所描述之方法(例如，本文中所描述之電腦實施之方法及其他資訊處理方法)的可執行指令集。此等模組(亦即，指令集)無需實施為單獨軟體程式、程序或模組，且因此，在各種實施例中，可組合或以其他方式重新配置此等模組之各種子集。舉例而言，可將視訊播放器模組145與音樂播放器模組146組合成單一模組(例如，圖1B之視訊及音樂播放器模組152)。在一些實施例中，記憶體102可儲存上文所識別之模組及資料結構之子集。此外，記憶體102可儲存上文未描述的額外模組及資料結構。
在一些實施例中，器件100為經由觸控螢幕112及/或實體鍵盤而執行一器件上之預定義功能集合之操作的器件。舉例而言，可經由螢幕上鍵盤或經由實體鍵盤而進行文字鍵入。藉由將觸控螢幕及/或實體鍵盤用作器件100之操作之輸入控制器件，使用者具有關於輸入方法之更多靈活性。
圖1C為說明根據一些實施例之用於事件處置之例示性組件的方塊圖。在一些實施例中，記憶體102(圖1A及圖1B中)或370(圖3)包括事件分類器170(例如，在作業系統126中)及一各別應用程式136-1(例如，上述應用程式137至151、155、380至390中之任一者)。
事件分類器170接收事件資訊且判定應用程式136-1及應用程式136-1之應用程式視圖191，將事件資訊遞送至該應用程式視圖191。事件分類器170包括事件監視器171及事件分派器模組174。在一些實施例中，應用程式136-1包括應用程式內部狀態192，其指示當該應用程式為作用中的或正執行時顯示於觸敏顯示器112上的(多個)當前應用程式視圖。在一些實施例中，器件/全域內部狀態157係由事件分類器170用以判定哪一(哪些)應用程式當前為作用中的，且應用程式內部狀態192係由事件分類器170用以判定應用程式視圖191，將事件資訊遞送至該應用程式視圖191。
在一些實施例中，應用程式內部狀態192包括額外資訊，諸如以下各者中的一或多者：當應用程式136-1重新繼續執行時待使用之重新繼續資訊，指示資訊正由應用程式136-1顯示或準備好由應用程式136-1顯示之使用者介面狀態資訊，用於令使用者能夠返回至應用程式136-1之先前狀態或視圖之狀態佇列，及由使用者所採取的先前動作之重做/復原佇列(redo/undo queue)。
事件監視器171自周邊介面118接收事件資訊。事件資訊包括關於子事件(例如，觸敏顯示器112上之作為多點觸摸示意動作之部分的使用者觸摸)之資訊。周邊介面118傳輸其自I/O子系統106或感測器(諸如，近接感測器166)、(多個)加速度計168及/或麥克風113(經由音訊電路110)接收之資訊。周邊介面118自I/O子系統106接收之資訊包括來自觸敏顯示器112或觸敏表面之資訊。
在一些實施例中，事件監視器171以預定時間間隔將請求發送至周邊介面118。作為回應，周邊介面118傳輸事件資訊。在其他實施例中，周邊介面118僅在存在重大事件(例如，接收超過預定雜訊臨限值之輸入及/或接收輸入歷時多於預定持續時間)時才傳輸事件資訊。
在一些實施例中，事件分類器170亦包括一點選命中(hit)視圖判定模組172及/或一作用中事件辨識器判定模組173。
點選命中視圖判定模組172提供軟體程序以用於判定當觸敏顯示器112顯示一個以上視圖時在一或多個視圖內已發生子事件之處。視圖係由使用者可在顯示器上看到的控制及其他元件構成。
與應用程式相關聯之使用者介面之另一態樣為視圖之集合，其在本文中有時稱為應用程式視圖或使用者介面視窗，其中顯示資訊且發生基於觸摸之示意動作。偵測到觸摸之應用程式視圖(各別應用程式之視圖)可對應於應用程式之程式設計或視圖階層架構內之程式設計層級。舉例而言，偵測到觸摸的最低層級視圖可稱為點選命中視圖，且可至少部分地基於開始基於觸摸之示意動作的初始觸摸之點選命中視圖而判定被辨識為適當輸入的事件之集合。
點選命中視圖判定模組172接收與基於觸摸之示意動作之子事件有關的資訊。當一應用程式具有以一階層架構組織的多個視圖時，點選命中視圖判定模組172將點選命中視圖識別為該階層架構中之應處置子事件的最低視圖。在大多數情況下，點選命中視圖為發生起始子事件(亦即，在形成事件或潛在事件的子事件之序列中之第一子事件)的最低層級視圖。一旦由點選命中視圖判定模組識別點選命中視圖，該點選命中視圖通常就接收與同一觸摸或輸入源(針對該觸摸或輸入源將該視圖識別為點選命中視圖)有關的所有子事件。
作用中事件辨識器判定模組173判定視圖階層架構內的哪一或哪些視圖應接收子事件之特定序列。在一些實施例中，作用中事件辨識器判定模組173判定僅點選命中視圖應接收子事件之特定序列。在其他實施例中，作用中事件辨識器判定模組173判定包括子事件之實體位置的所有視圖為有效涉及之視圖，且因此判定所有有效涉及之視圖應接收子事件之特定序列。在其他實施例中，即使觸摸子事件完全限於與特定視圖相關聯之區域，在該階層架構中較高之視圖亦仍將保持為有效涉及之視圖。
事件分派器模組174將事件資訊分派至事件辨識器(例如，事件辨識器180)。在包括作用中事件辨識器判定模組173之實施例中，事件分派器模組174將由作用中事件辨識器判定模組173所判定的事件資訊遞送至事件辨識器。在一些實施例中，事件分派器模組174將事件資訊儲存於事件佇列中，該事件資訊由各別事件接收器模組182擷取。
在一些實施例中，作業系統126包括事件分類器170。或者，應用程式136-1包括事件分類器170。在又其他實施例中，事件分類器170為獨立模組或儲存於記憶體102中之另一模組(諸如，接觸/運動模組130)的一部分。
在一些實施例中，應用程式136-1包括複數個事件處理常式190及一或多個應用程式視圖191，其中之每一者包括用於處置在應用程式之使用者介面之各別視圖內所發生的觸摸事件之指令。應用程式136-1之每一應用程式視圖191包括一或多個事件辨識器180。通常，各別應用程式視圖191包括複數個事件辨識器180。在其他實施例中，事件辨識器180中之一或多者為單獨模組(諸如，使用者介面套組(圖中未展示)或較高層級物件(應用程式136-1自其繼承方法及其他性質))之部分。在一些實施例中，各別事件處理常式190包括以下各者中之一或多者：資料更新程式176、物件更新程式177、GUI更新程式178，及/或自事件分類器170所接收之事件資料179。事件處理常式190可利用或呼叫資料更新程式176、物件更新程式177或GUI更新程式178以更新應用程式內部狀態192。或者，應用程式視圖191中之一或多者包括一或多個各別事件處理常式190。又，在一些實施例中，一或多個資料更新程式176、物件更新程式177及GUI更新程式178包括於各別應用程式視圖191中。
各別事件辨識器180自事件分類器170接收事件資訊(例如，事件資料179)，且自該事件資訊識別事件。事件辨識器180包括事件接收器182及事件比較器184。在一些實施例中，事件辨識器180亦包括以下各者之至少一子集：中繼資料183，及事件遞送指令188(其可包括子事件遞送指令)。
事件接收器182自事件分類器170接收事件資訊。事件資訊包括關於子事件(例如，觸摸或觸摸移動)之資訊。取決於該子事件，事件資訊亦包括額外資訊，諸如，子事件之位置。當子事件與觸摸之運動有關時，事件資訊亦可包括該子事件之速率及方向。在一些實施例中，事件包括器件自一定向至另一定向(例如，自縱向定向至橫向定向，或自橫向定向至縱向定向)之旋轉，且事件資訊包括關於器件之當前定向(亦稱為器件姿態)的相應資訊。
事件比較器184比較事件資訊與預定義事件或子事件定義，且基於該比較判定事件或子事件，或判定或更新事件或子事件之狀態。在一些實施例中，事件比較器184包括事件定義186。事件定義186含有事件(例如，子事件之預定義序列)之定義，例如，事件1(187-1)、事件2(187-2)及其他事件。在一些實施例中，事件187中之子事件包括(例如)觸摸開始、觸摸結束、觸摸移動、觸摸取消，及多點觸摸。在一實例中，事件1(187-1)之定義為在所顯示之物件上之雙觸按。雙觸按(例如)包含在所顯示之物件上之第一觸摸持續預定階段(觸摸開始)，第一起離持續預定階段(觸摸結束)，在所顯示之物件上之第二觸摸持續預定階段(觸摸開始)，及第二起離持續預定階段(觸摸結束)。在另一實例中，事件2(187-2)之定義為在所顯示物件上之拖曳。拖曳(例如)包含在所顯示物件上之觸摸(或接觸)持續預定階段，觸摸越過觸敏顯示器112之移動，及觸摸之起離(觸摸結束)。在一些實施例中，事件亦包括一或多個相關聯事件處理常式190之資訊。
在一些實施例中，事件定義187包括針對各別使用者介面物件之事件之定義。在一些實施例中，事件比較器184執行點選命中測試以判定哪一使用者介面物件與子事件相關聯。舉例而言，在三個使用者介面物件顯示於觸敏顯示器112上之應用程式視圖中，當偵測到觸敏顯示器112上之觸摸時，事件比較器184執行點選命中測試以判定該三個使用者介面物件中的哪一者與該觸摸(子事件)相關聯。若每一所顯示之物件與各別事件處理常式190相關聯，則事件比較器使用點選命中測試之結果以判定應啟動哪一事件處理常式190。舉例而言，事件比較器184選擇與觸發點選命中測試之子事件及物件相關聯之事件處理常式。
在一些實施例中，各別事件187之定義亦包括延遲動作，其延遲事件資訊之遞送直至在已判定子事件之序列是對應於事件辨識器之事件類型或是不對應於事件辨識器之事件類型之後為止。
當各別事件辨識器180判定該系列子事件與事件定義186中之事件中的任一者不匹配時，該各別事件辨識器180鍵入事件不可能、事件故障或事件結束之狀態，在此之後，其忽視基於觸摸之示意動作的後續子事件。在此情形下，針對點選命中視圖保持為作用中的其他事件辨識器(若存在)繼續追蹤且處理正在進行的基於觸摸之示意動作之子事件。
在一些實施例中，各別事件辨識器180包括中繼資料183，該中繼資料具有指示事件遞送系統應如何執行至有效涉及之事件辨識器之子事件遞送的可組態性質、旗標及/或清單。在一些實施例中，中繼資料183包括指示事件辨識器如何可彼此互動之可組態性質、旗標及/或清單。在一些實施例中，中繼資料183包括指示子事件是否經遞送至視圖或程式設計階層架構中之變化層級的可組態性質、旗標及/或清單。
在一些實施例中，當事件之一或多個特定子事件被辨識時，各別事件辨識器180啟動與事件相關聯之事件處理常式190。在一些實施例中，各別事件辨識器180將與事件相關聯之事件資訊遞送至事件處理常式190。啟動事件處理常式190與將子事件發送(及推遲發送)至各別點選命中視圖相異。在一些實施例中，事件辨識器180丟擲(throw)與所辨識之事件相關聯之旗標，且與該旗標相關聯之事件處理常式190捕獲該旗標且執行預定義程序。
在一些實施例中，事件遞送指令188包括在不啟動事件處理常式的情況下遞送關於子事件之事件資訊的子事件遞送指令。實情為，子事件遞送指令將事件資訊遞送至與該系列子事件相關聯之事件處理常式或將事件資訊遞送至有效涉及之視圖。與該系列子事件相關聯或與有效涉及之視圖相關聯的事件處理常式接收該事件資訊且執行預定程序。
在一些實施例中，資料更新程式176建立且更新用於應用程式136-1中之資料。舉例而言，資料更新程式176更新用於聯繫人模組137中之電話號碼，或儲存用於視訊播放器模組145中之視訊檔案。在一些實施例中，物件更新程式177建立且更新用於應用程式136-1中之物件。舉例而言，物件更新程式176建立新的使用者介面物件或更新使用者介面物件之位置。GUI更新程式178更新GUI。舉例而言，GUI更新程式178準備顯示資訊，且將其發送至圖形模組132以供顯示於觸敏顯示器上。
在一些實施例中，(多個)事件處理常式190包括或能夠存取資料更新程式176、物件更新程式177及GUI更新程式178。在一些實施例中，資料更新程式176、物件更新程式177及GUI更新程式178包括於各別應用程式136-1或應用程式視圖191之單一模組中。在其他實施例中，該等更新程式包括於兩個或兩個以上軟體模組中。
應理解，關於觸敏顯示器上之使用者觸摸之事件處置的前述論述亦應用於其他形式之使用者輸入以藉由輸入器件操作多功能器件100(在觸控螢幕上並不起始所有輸入器件)，例如：協調滑鼠移動與滑鼠按鈕按下(在具有或不具有單一或多次鍵盤按下或按住的情況下)；在觸控板上之使用者移動觸按、拖曳、捲動等；手寫筆輸入；器件之移動；口頭指令；所偵測眼睛移動；生物測定輸入；及/或其任何組合，該等動作可用作對應於定義待辨識之事件之子事件的輸入。
圖2說明根據一些實施例之具有觸控螢幕112的攜帶型多功能器件100。該觸控螢幕可在使用者介面(UI)200內顯示一或多個圖形。在此實施例中以及下文所描述之其他實施例中，使用者可藉由(例如)使用一或多個手指202(在該圖中未按比例繪製)或一或多個手寫筆203(在該圖中未按比例繪製)接觸或觸摸圖形而選擇該等圖形中之一或多者。在一些實施例中，當使用者阻斷與一或多個圖形之接觸時，發生對該一或多個圖形之選擇。在一些實施例中，接觸可包括示意動作，諸如，一或多個觸按、一或多個滑動(自左至右、自右至左、向上及/或向下)及/或已與器件100接觸之手指之捲動(自右至左、自左至右、向上及/或向下)。在一些實施例中，與圖形之無意接觸可能不選擇圖形。舉例而言，當對應於選擇之示意動作為觸按時，滑過一應用程式圖示之滑動示意動作可能不選擇相應的應用程式。
器件100亦可包括一或多個實體按鈕，諸如，「首頁」或功能表按鈕204。如先前所描述，功能表按鈕204可用以導覽至可在器件100上執行的應用程式集合中之任何應用程式136。或者，在一些實施例中，將功能表按鈕實施為顯示於觸控螢幕112上之GUI中之軟鍵。
在一實施例中，器件100包括觸控螢幕112、功能表按鈕204、用於對器件通電/斷電及鎖定器件之按壓按鈕206、(多個)音量調整按鈕208、用戶識別模組(SIM)卡槽210、耳機插孔212，及銜接/充電外部埠124。按壓按鈕206可用以藉由壓下按鈕且按住呈壓下狀態之按鈕歷時預定義時間間隔而對器件通電/斷電；用以藉由壓下按鈕且在預定義時間間隔已屆期之前釋放該按鈕來鎖定器件；及/或用以將器件解除鎖定或起始解除鎖定程序。在一替代實施例中，器件100亦可經由麥克風113接受關於啟動或撤銷某些功能的語言輸入。
圖2說明根據一些實施例之具有觸控螢幕112及硬體鍵盤250的攜帶型多功能器件100。在一些實施例中，該觸控螢幕可顯示來自硬體鍵盤250之輸入。該觸控螢幕可在使用者介面(UI)200內顯示一或多個圖形。在此實施例中以及下文所描述之其他實施例中，使用者可藉由(例如)使用一或多個手指202(在該圖中未按比例繪製)或一或多個手寫筆203(在該圖中未按比例繪製)接觸或觸摸圖形而選擇該等圖形中之一或多者。在一些實施例中，當使用者阻斷與一或多個圖形之接觸時，發生對該一或多個圖形之選擇。在一些實施例中，接觸可包括示意動作，諸如，一或多個觸按、一或多個滑動(自左至右、自右至左、向上及/或向下)及/或已與器件100接觸之手指之捲動(自右至左、自左至右、向上及/或向下)。在一些實施例中，與圖形之無意接觸可能不選擇圖形。舉例而言，當對應於選擇之示意動作為觸按時，滑過一應用程式圖示之滑動示意動作可能不選擇相應的應用程式。
器件100亦可包括一或多個實體按鈕，諸如，「首頁」或功能表按鈕204。如先前所描述，功能表按鈕204可用以導覽至可在器件100上執行的應用程式集合中之任何應用程式136。或者，在一些實施例中，將功能表按鈕實施為觸控螢幕112中之GUI中之軟鍵。
在一實施例中，器件100包括觸控螢幕112、功能表按鈕204、用於對器件通電/斷電及鎖定器件之按壓按鈕206、(多個)音量調整按鈕208、用戶識別模組(SIM)卡槽210、耳機插孔212，及銜接/充電外部埠124。按壓按鈕206可用以藉由壓下按鈕且按住呈壓下狀態之按鈕歷時預定義時間間隔而對器件通電/斷電；用以藉由壓下按鈕且在預定義時間間隔已屆期之前釋放該按鈕來鎖定器件；及/或用以將器件解除鎖定或起始解除鎖定程序。在一替代實施例中，器件100亦可經由麥克風113接受關於啟動或撤銷某些功能的語言輸入。
硬體鍵盤250之按鍵可呈任何按鍵配置或語言之形式，諸如，QWERTY、AZERTY及Dvorak，包括針對不同國家之變體(諸如，法國及比利時AZERTY鍵盤按鍵配置)。攜帶型多功能器件100經組態以接受來自硬體鍵盤250之對應於硬體鍵盤之按鍵配置及語言的輸入。
圖3為根據一些實施例之具有顯示器及觸敏表面之例示性多功能器件的方塊圖。器件300無需為攜帶型的。在一些實施例中，器件300為膝上型電腦、桌上型電腦、平板型電腦、多媒體播放器器件、導航器件、教育器件(諸如，兒童的學習玩具)、遊戲系統，或控制器件(例如，家用或工業控制器)。器件300通常包括一或多個處理單元(CPU)310、一或多個網路或其他通信介面360、記憶體370，及用於將此等組件互連之一或多個通信匯流排320。通信匯流排320可包括將系統組件互連且控制系統組件之間的通信之電路(有時稱為晶片組)。器件300包括一包含輸入/輸出(I/O)介面330，該輸入/輸出(I/O)介面330一顯示器340，該顯示器340通常為觸控螢幕顯示器。I/O介面330亦可包括一鍵盤250、一滑鼠(或其他指標器件)350及一觸控板355。鍵盤經由有線或無線連接(例如，藍芽)連接至器件300。有線連接可經由銜接台而進行。記憶體370包括高速隨機存取記憶體，諸如，DRAM、SRAM、DDR RAM或其他隨機存取固態記憶體器件；且可包括非揮發性記憶體，諸如，一或多個磁碟儲存器件，光碟儲存器件，快閃記憶體器件，或其他非揮發性固態儲存器件。記憶體370可視情況包括位於該(等)CPU 310遠端之一或多個儲存器件。在一些實施例中，記憶體370儲存與儲存於攜帶型多功能器件100(圖1)之記憶體102中的程式、模組及資料結構類似的程式、模組及資料結構，或其子集。在一些實施例中，記憶體370或記憶體370之電腦可讀儲存媒體儲存以下程式、模組及資料結構或其子集，包括：作業系統126、通信模組128、GPS模組135、文字輸入模組134、視訊播放器模組145、音樂播放器模組146、鍵盤組態模組160及組態資料庫370。
作業系統126包括用於處置各種基本系統服務且用於執行硬體相依任務之程序。
通信模組128促進經由一或多個通信網路介面360(有線或無線的)及一或多個通信網路(諸如，網際網路、其他廣域網路、區域網路、都會網路、蜂巢式網路等)之與其他器件之通信。在一些實施例中，通信模組128包括電信廠商配套(carrier bundle)資料129。在一些實施例中，電信廠商配套資料由通信模組128經由與蜂巢式網路通信而獲得。在一些實施例中，自網路介面135獲得電信廠商配套資料129。電信廠商配套資料包括行動國家碼192、行動網路碼193及存取點名稱194，在圖5之論述中進一步詳細論述行動國家碼192、行動網路碼193及存取點名稱194。
GPS模組135判定器件之位置，且提供此資訊以供用於各種應用程式中。GPS模組135包括GPS資料175。GPS資料包括器件300之位置。
文字輸入模組134提供軟鍵盤或螢幕上鍵盤以用於將文字鍵入至各種應用程式(例如，聯繫人137、電子郵件140、IM 141、瀏覽器147，及需要文字輸入之任何其他應用程式)中。
視訊播放器模組145播放視訊檔案。視訊播放器模組145包括器件300之使用者的語言及位置資料176。使用者的語言及位置資訊可能在視訊播放器模組145之偏好中或在與模組145相關聯之使用者帳戶中。在一些實施例中，使用者鍵入語言及位置資料176。
音樂播放器模組146播放音樂檔案。音樂播放器模組146包括與器件300之使用者相關聯的語言及位置資料177。使用者的語言及位置資訊可能在音樂播放器模組146之偏好中或在與模組146相關聯之使用者帳戶中。在一些實施例中，使用者鍵入語言及位置資料177。
鍵盤組態模組160判定鍵盤按鍵配置。在一些實施例中，鍵盤組態模組160包括自與器件300相關聯之硬體及軟體源所獲得的語言及位置資料161。鍵盤組態模組160基於源之可靠性而排定一或多個源之優先次序。來自最高評等或最可靠源之語言及位置資料用以判定鍵盤按鍵配置。在一些實施例中，鍵盤組態模組160使用儲存於組態資料庫370中之組態映射372以判定鍵盤按鍵配置。組態映射372將語言及位置資訊映射至鍵盤按鍵配置。舉例而言，映射374-1可將語言英語及位置美國映射至QWERTY鍵盤按鍵配置。
在一些實施例中，鍵盤組態模組160組態器件300以根據所判定之按鍵配置而解譯來自硬體鍵盤250之信號。在一些實施例中，組態模組160自組態資料庫370擷取硬體鍵盤按鍵配置組態372，且使用該組態372以組態硬體鍵盤250。
在一些實施例中，鍵盤組態模組160根據所判定之按鍵配置來組態螢幕上鍵盤之按鍵配置。在一些實施例中，組態模組160自組態資料庫370擷取螢幕上鍵盤按鍵配置組態376，且使用該組態以組態螢幕上鍵盤之按鍵配置。
組態資料庫370儲存組態映射372、螢幕上鍵盤按鍵配置組態376及硬體鍵盤按鍵配置組態197。組態映射372包括語言及位置資訊至鍵盤按鍵配置之所有可能映射。舉例而言，映射374-1可將語言英語及位置美國映射至QWERTY鍵盤按鍵配置。在另一實例中，映射可將語言法語及位置加拿大映射至加拿大多語言標準或加拿大法語鍵盤按鍵配置。應注意，組態資料庫370、組態映射372、螢幕上鍵盤按鍵配置組態376及硬體鍵盤按鍵配置組態380可儲存於位於器件300遠端之伺服器上。
螢幕上鍵盤按鍵配置組態376包括針對螢幕上鍵盤之鍵盤按鍵配置組態196。鍵盤按鍵配置組態196對應於任何語言及按鍵配置。舉例而言，組態378-1可對應於QWERTY鍵盤按鍵配置。在一些實施例中，螢幕上鍵盤按鍵配置組態376包括預設按鍵配置組態。在一些實施例中，螢幕上鍵盤按鍵配置組態376包括使用者建立之按鍵配置。在一些實施例中，組態376包括指示各別組態是已由使用者選擇、自語言及位置資訊推斷出或是為預設按鍵配置之旗標。
硬體鍵盤按鍵配置組態380包括所有可能的硬體鍵盤按鍵配置組態380。硬體鍵盤按鍵配置組態380對應於任何語言及按鍵配置。舉例而言，組態382-2可對應於AZERTY鍵盤按鍵配置。在一些實施例中，硬體鍵盤按鍵配置組態380包括預設按鍵配置。在一些實施例中，硬體上鍵盤按鍵配置組態380包括使用者建立之按鍵配置。在一些實施例中，組態382包括指示各別組態382是已由使用者選擇、自語言及位置資訊推斷出或是為預設按鍵配置之旗標。
圖3中之上文所識別之元件中的每一者可儲存於先前所提及之記憶體器件中的一或多者中。上文所識別之模組中之每一者對應於用於執行上文所描述之功能的指令集。上文所識別之模組或程式(亦即，指令集)無需實施為單獨軟體程式、程序或模組，且因此在各種實施例中可組合或以其他方式重新配置此等模組之各種子集。在一些實施例中，記憶體370可儲存上文所識別之模組及資料結構之子集。此外，記憶體370可儲存上文未描述的額外模組及資料結構。
現將注意力轉向可在攜帶型多功能器件100上實施的使用者介面(「UI」)之實施例。
圖4A及圖4B說明根據一些實施例之攜帶型多功能器件100上的應用程式之功能表的例示性使用者介面及硬體鍵盤250。類似使用者介面可實施於器件300上。在一些實施例中，使用者介面400A包括以下元件，或其子集或超集：
●　用於(多個)無線通信之(多個)信號強度指示器402，諸如蜂巢式及Wi-Fi信號；
●　時間404；
●　藍芽指示器405；
●　電池狀態指示器406；
●　具有用於頻繁使用之應用程式之圖示之系統匣(Tray)408，諸如：
○　電話138，其可包括未接電話或語音郵件訊息之數目的指示器414；
○　電子郵件用戶端140，其可包括未讀電子郵件之數目之指示器410；
○　瀏覽器147；及
○　音樂播放器146；及
●　用於其他應用程式之圖示，諸如：
○　IM 141；
○　影像管理144；
○　相機143；
○　視訊播放器145；
○　天氣149-1；
○　股票149-2；
○　健身支援142；
○　行事曆148；
○　計算器149-3；
○　鬧鐘149-4；
○　字典149-5；及
○　使用者建立之介面工具集149-6。
在一些實施例中，使用者介面400B包括以下元件，或其子集或超集：
●　402、404、405、406、141、148、144、143、149-3、149-2、149-1、149-4、410、414、138、140及147，如上文所描述；
●　地圖154；
●　備忘錄153；
●　設定412，其提供對器件100及器件100之各種應用程式136之設定之存取，如下文進一步描述；
●　視訊及音樂播放器模組152，其亦被稱作iPod(蘋果公司的商標)模組152；及
●　線上視訊模組155，其亦被稱作YouTube(谷歌公司的商標)模組155。
圖4C說明具有與顯示器450(例如，觸控螢幕顯示器112)分離的觸敏表面451(例如，圖3之平板或觸控板355)之器件(例如，圖3之器件300)上的例示性使用者介面。雖然將參考觸控螢幕顯示器112(其中觸敏表面與顯示器組合)上之輸入來提供以下之許多實例，但在一些實施例中，器件偵測在與顯示器分離的觸敏表面上之輸入，如圖4C中所展示。在一些實施例中，觸敏表面(例如，圖4C中之451)具有對應於顯示器(例如，450)上之主軸(例如，圖4C中之453)的主軸(例如，圖4C中之452)。根據此等實施例，器件偵測在對應於顯示器上之各別位置的位置處(例如，在圖4C中，460對應於468，且462對應於470)之與觸敏表面451之接觸(例如，圖4C中之460及462)。以此方式，當觸敏表面(例如，圖4C中之451)與顯示器(例如，圖4C中之450)分離時，由器件在該觸敏表面上所偵測的使用者輸入(例如，接觸460及462)由該器件使用以操控多功能器件之該顯示器上的使用者介面。應理解，類似方法可用於本文中所描述之其他使用者介面。
現將注意力轉向圖5，其說明根據一些實施例之攜帶型多功能器件100(具有可選螢幕上鍵盤506)以及語言及位置資訊源的方塊圖。語言資訊指代書面語或口語，諸如，英語、德語或法語。位置指代地理位置且包括城市、州、地區及國家。取決於該源，位置資訊可針對器件，針對與器件相關聯之使用者，或針對器件之預期位置。語言及位置資訊源包括位於攜帶型多功能器件遠端之軟體510、電信廠商配套512、GPS 135、軟體516及硬體鍵盤250。如下文更詳細描述，根據來自該等源中之一或多者的語言及位置資訊來判定鍵盤按鍵配置。
自硬體鍵盤250所獲得之資訊可被視為最可靠的以用於判定硬體鍵盤250之按鍵配置，此係因為該資訊提供使用者之所偏好鍵盤按鍵配置的最強指示。舉例而言，若使用者使用QWERTY鍵盤，則可推斷出，使用者偏好用英語輸入文字，且偏好QWERTY鍵盤按鍵配置。在一些實施例中，硬體鍵盤250包括鍵盤按鍵配置資訊504。鍵盤按鍵配置資訊504包括按鍵之語言及實體按鍵配置。換言之，鍵盤按鍵配置資訊504包括鍵盤之視覺外觀及每一按鍵之功能含義。舉例而言，鍵盤按鍵配置資訊504可指定，硬體鍵盤250為英語QWERTY鍵盤。在一些實施例中，硬體鍵盤250僅包括語言及/或位置資訊502。舉例而言，語言可為法語，且位置可為加拿大。許多硬體鍵盤並不提供完整組態資訊，因此在許多情形下，有必要關於用以判定鍵盤按鍵配置之器件位置及語言來向其他硬體及軟體資訊源進行諮詢。
在一些實施例中，自一或多個軟體模組516及510獲得與攜帶型多功能器件100之使用者相關聯之語言資訊及位置資訊502。該等軟體模組提供關於使用者之位置及所偏好語言之線索。在一些實施例中，一或多個軟體模組516位於攜帶型多功能器件100上。在一些實施例中，一或多個軟體模組510位於攜帶型多功能器件100之遠端。在一些實施例中，軟體516包括諸如iTunes 518之媒體播放器軟體。自在與軟體模組516及510相關聯之偏好、設定、選項、帳戶及設定檔中的使用者鍵入之資訊而獲得語言及位置資訊。舉例而言，可自位於攜帶型多功能器件100遠端之伺服器上的使用者之iTunes設定檔/帳戶獲得使用者之位置及語言資訊。
在一些實施例中，自攜帶型多功能器件100之電信廠商配套512獲得或導出與攜帶型多功能器件100之使用者相關聯的語言及位置資訊502。電信廠商配套512包括攜帶型多功能器件100與蜂巢式電話網路之連接之設定及資訊。在一些實施例中，電信廠商配套512包括行動國家碼513、行動網路碼514及存取點名稱515。存取點名稱515識別攜帶型多功能器件100連接至的封包資料網路。封包資料網路負責提供至行動器件之資料連接性。在一些實施例中，自存取點名稱515或藉由經由存取點名稱515存取一或多個資源而導出語言及位置資訊502。在一些實施例中，自行動國家碼513導出語言及位置資訊502。舉例而言，行動國家碼「466」對應於臺灣。在一些實施例中，與行動國家碼結合之行動網路碼514識別行動電話業者/電信廠商。舉例而言，與行動網路碼「01」結合之行動國家碼「505」識別澳大利亞的電信廠商Telstra。
在一些實施例中，自GPS模組135獲得使用者或攜帶型多功能器件100之語言及位置資訊502。
圖6A至圖6D說明根據一些實施例之顯示於攜帶型多功能器件100上的硬體鍵盤輸入。
圖6A說明經錯誤組態而用於解譯來自QWERTY鍵盤610之輸入的攜帶型多功能器件602。攜帶型多功能器件100經組態以接受來自Dvorak鍵盤之輸入，而硬體鍵盤610具有QWERTY按鍵配置。結果，顯示於顯示器件112上之輸出630「h>nnr」與對應於「hello」的使用者QWERTY鍵盤輸入序列(亦即，620、622、623、623及624)匹配。
圖6B說明經適當組態以用於解譯來自QWERTY鍵盤610之輸入的攜帶型多功能器件604。如圖6B中所展示，顯示於顯示器件112上之輸出631與對應於「hello」的QWERTY鍵盤輸入序列(亦即，620、622、623、623及624)匹配。
圖6C說明經組態以解譯來自希臘語鍵盤611之輸入的攜帶型多功能器件606。如圖6C中所展示，顯示於顯示器件112上之文字輸出632對應於希臘語鍵盤611上之按下的按鍵625。
圖6D說明經組態以顯示在視覺上對應於QWERTY鍵盤的螢幕上鍵盤114之攜帶型多功能606。在一些實施例中，器件606經組態以接受來自螢幕上鍵盤114及硬體鍵盤610兩者之輸入。在一些實施例中，器件606經組態以僅接受來自螢幕上鍵盤114或硬體鍵盤610之輸入。在一些實施例中，當在QWERTY鍵盤610上已按下相應按鍵時，螢幕上鍵盤反白顯示或提供螢幕上按鍵已被按下之視覺指示。
圖7A及圖7B為說明根據一些實施例之自動判定鍵盤語言及按鍵配置之方法700的流程圖。在具有顯示器及觸敏表面之多功能器件(例如，圖3之器件300，或圖1之攜帶型多功能器件100)處執行該方法700。在一些實施例中，顯示器為觸控螢幕顯示器，且觸敏表面在顯示器上。在一些實施例中，顯示器與觸敏表面分離。可組合方法700中之一些操作，及/或可改變一些操作之次序。
在一些實施例中，自儲存於器件上或與器件相關聯之次要源推斷硬體鍵盤之鍵盤按鍵配置，該等次要源諸如以下各者中的一或多者：用於與器件相關聯之行動通信服務之電信廠商配套、數位媒體訂用資訊(諸如，可購自iTunes(R)軟體)、來自GPS器件之位置資訊，及關於螢幕上鍵盤之組態資料。當器件之使用者希望使用具有不提供相關聯鍵盤語言及按鍵配置資訊的硬體鍵盤之器件時，此途徑為有用的。在此情形下，在無使用者介入的情況下，器件自動實施一或多個方法以基於器件上可獲得的與資訊很可能由使用者鍵入所用的語言有關及器件正使用所在的位置有關之資訊而推斷鍵盤之適當語言及按鍵配置(例如，QWERY、AZERTY或Dvorak)，且基於所推斷之資訊組態器件及鍵盤以一起工作，而非要求使用者答覆若干鍵盤組態問題。在一些實施例中，排定此等次要源之優先次序，以使得首先使用來自較可靠源的資訊來推斷鍵盤之組態。在一些實施例中，螢幕上鍵盤經組態以與硬體鍵盤之推斷出之語言及按鍵配置匹配。
現將注意力轉向圖7A，其說明根據一些實施例之自動判定鍵盤語言及按鍵配置之方法700。在一些實施例中，自與電子器件相關聯之一或多個硬體及軟體資訊源獲得語言資訊及位置資訊中之至少一者(702)。如本文中所使用，硬體及軟體資訊源亦將被稱作「次要源」。該一或多個硬體及軟體源位於電子器件上或可經由有線或無線連接而由電子器件存取。可自所獲得的語言及位置資訊導出鍵盤按鍵配置及鍵盤語言。該一或多個硬體及軟體資訊源包括電信廠商配套、硬體鍵盤、一或多個軟體模組、行動通信能力及GPS服務中的一或多者(704)。該一或多個軟體模組包括媒體播放器軟體及個人資訊管理軟體(706)。在一些實施例中，一或多個軟體模組位於電子器件之遠端(707)。語言資訊指代書面語或口語，諸如，英語、德語或法語。位置資訊包括國家、地區、州及城市資訊中之至少一者(708)。在一些實施例中，週期性地獲得語言資訊及位置資訊。在一些實施例中，回應於硬體鍵盤連接至電子器件而獲得語言資訊及位置資訊。在一些實施例中，回應於需要文字輸入之輸入欄位之使用者選擇而獲得語言資訊及位置資訊。在一些實施例中，藉由鍵盤組態模組160收集語言及位置資訊。
基於硬體及軟體源或次要源之可靠性而排定硬體及軟體源或次要源之優先次序/對硬體及軟體源或次要源評級。應注意，描述於本申請案中的資訊源之優先級/評級為例示性的，且可基於器件之特性及器件之可獲得的或與器件相關聯的定位資訊而變化。亦應注意，在一些實施例中，所使用之次要源可包括所描述源的子集或超集。
在一些實施例中，基於硬體及軟體資訊源之相關聯語言及位置資訊的可靠性而排定硬體及軟體資訊源之優先次序(710)。排定優先次序包括在硬體鍵盤提供語言及位置資訊中的至少一者時將最高優先級指派給各別所提供之語言及位置資訊(712)。硬體鍵盤提供硬體鍵盤之按鍵配置之最強指示。許多硬體鍵盤提供與硬體鍵盤之按鍵配置有關的一些資訊。在一些實施例中，硬體鍵盤提供組態器件以正確地接受來自硬體鍵盤之輸入所必需的全鍵盤按鍵配置資訊。鍵盤按鍵配置資訊包括關於硬體鍵盤上之按鍵的語言及按鍵配置之用以組態器件以接受來自硬體鍵盤之輸入的資訊。換言之，鍵盤按鍵配置資訊包括關於鍵盤上之按鍵的置放及對應於鍵盤之按鍵上所出現的視覺標記之語言之資訊。舉例而言，語言資訊可指定按鍵上之標記為英語、日語或希臘語。在一些實施例中，若硬體鍵盤提供鍵盤按鍵配置資訊，則並不自其他硬體及軟體源獲得語言及位置資訊。在一些實施例中，硬體鍵盤提供語言及/或位置資訊，而非鍵盤按鍵配置資訊。位置資訊提供鍵盤之預期位置。舉例而言，硬體鍵盤可指定，該鍵盤意欲用於某國家。
排定優先次序亦包括在電子器件包括提供與該器件之使用者相關聯的語言及位置資訊中之至少一者之軟體模組時將第二高優先級指派給各別所提供之語言及位置資訊(712)。自軟體模組所獲得的語言及位置資訊可被視為第二可靠的，此係因為其係由使用者鍵入。在一些實施例中，該資訊提供關於使用者認為硬體鍵盤之按鍵配置為何之指示。在一些實施例中，該資訊提供由使用者使用之語言及使用者之位置，可根據該語言及位置來判定或推斷鍵盤按鍵配置。在一些實施例中，可自電子器件上之一或多個軟體模組獲得語言及位置資訊。舉例而言，可自電子器件上之偏好、選項及設定檔獲得語言及位置。在一些實施例中，自位於電子器件遠端之一或多個軟體模組獲得語言及位置資訊。舉例而言，可自位於電子器件遠端之伺服器上的使用者之iTunes設定檔獲得使用者之相關聯語言及位置資訊。在一些實施例中，語言資訊指定各別軟體模組之語言。在一些實施例中，位置資訊指定使用者之位置。在一些實施例中，與其他軟體模組相比，可向一些軟體模組指派較高優先級。舉例而言，與使用者之天氣介面工具集相比，可向使用者之iTunes設定檔指派較高優先級。
排定優先次序進一步包括將第三高優先級指派給自電信廠商配套所獲得的語言資訊及位置資訊(712)。由電信廠商所提供之語言及位置資訊提供使用者之位置之強指示。與來自硬體鍵盤或軟體模組之資訊相比，此資訊被視為較不可靠的，此係因為使用者之實體位置未必映射至鍵盤按鍵配置。舉例而言，使用者可能正在行進。在一些實施例中，電信廠商配套包括行動國家碼、行動網路碼，及存取點名稱。存取點名稱識別行動器件連接至的封包資料網路。封包資料網路負責提供至行動器件之資料連接性。在一些實施例中，自存取點名稱或藉由經由存取點名稱存取一或多個資源而導出語言及位置資訊502。舉例而言，可將一或多個指令發送至存取點名稱以獲取IP位址、行動國家碼及行動網路碼。在一些實施例中，自行動國家碼導出語言及位置資訊。舉例而言，行動國家碼「466」對應於臺灣。在一些實施例中，與行動國家碼結合之行動網路碼識別行動電話業者/電信廠商。舉例而言，與行動網路碼「01」結合之行動國家碼「505」識別澳大利亞的電信廠商Telstra。
此外，排定優先次序包括在電子器件包括GPS服務時將第四高優先級指派給自GPS能力所獲得的語言資訊及位置資訊(712)。如上文所論述，與自硬體鍵盤及軟體模組所獲得的資訊相比，使用者實體位置為較不可靠的。在一些實施例中，藉由鍵盤組態模組160排定次要源之優先次序。
基於自具有最高相對優先級之資訊源所獲得的語言資訊及位置資訊而判定硬體鍵盤之鍵盤語言及鍵盤按鍵配置(714)。所判定之鍵盤按鍵配置包括所判定之鍵盤語言中的字元至硬體鍵盤之按鍵的指派，及選自QWERTY、AZERTY及Dvorak格式之格式(716)。若硬體鍵盤提供鍵盤按鍵配置資訊，則所判定之鍵盤語言及鍵盤按鍵配置對應於由該硬體鍵盤所提供的鍵盤按鍵配置資訊。當僅可獲得語言及/或位置資訊時，將語言及/或位置資訊映射至鍵盤語言及按鍵配置。換言之，在使用所獲得的語言及/或位置資訊的情況下，可判定或推測鍵盤語言及按鍵配置。舉例而言，若所獲得之語言資訊為英語且所獲得之位置為美國，則鍵盤按鍵配置最有可能為QWERTY。在另一實例中，若所獲得之語言為法語且位置為法國，則鍵盤按鍵配置最有可能為AZERTY。在又一實例中，若所獲得之語言為法語且所獲得之位置為加拿大，則鍵盤按鍵配置可為加拿大多語言標準或加拿大法語。在一些實施例中，僅根據位置資訊判定鍵盤語言及按鍵配置。在一些實施例中，僅根據所獲得之語言資訊判定鍵盤語言及按鍵配置。在一些實施例中，藉由鍵盤組態模組160判定鍵盤按鍵配置。
組態電子器件以基於所判定之鍵盤語言及鍵盤按鍵配置而解譯來自硬體鍵盤之按鍵輸入信號(718)。在組態之後，當使用者按下硬體鍵盤上之按鍵時，螢幕上輸入應展示對應於使用者之選取之符號。舉例而言，如圖6B中所展示，所顯示之輸入631對應於按鍵按下之序列(亦即，620、622、623及624)。自動地且在無任何使用者動作的情況下組態電子器件。在一些實施例中，在不需要使用者確認組態的情況下組態鍵盤(720)。在一些實施例中，回應於硬體鍵盤連接至電子器件之指示而組態電子器件。在一些實施例中，鍵盤組態模組160組態器件。
在一些實施例中，組態呈現於顯示器上之螢幕上鍵盤以在視覺上對應於所判定之鍵盤語言及所判定之鍵盤按鍵配置(722)。如圖6D中所展示，螢幕上鍵盤114可對應於硬體鍵盤610之按鍵配置。在一些實施例中，器件經組態以接受來自螢幕上鍵盤或硬體鍵盤之輸入。在一些實施例中，螢幕上鍵盤為停用的，而硬體鍵盤為作用中的，或硬體鍵盤為停用的，而螢幕上鍵盤為作用中的。
在一些實施例中，所判定之鍵盤按鍵配置為使用者之所偏好鍵盤按鍵配置。甚至在不存在硬體鍵盤時，也使用類似方法來判定螢幕上鍵盤之語言及按鍵配置。若硬體鍵盤連接至器件，則該硬體鍵盤提供使用者之所偏好螢幕上鍵盤按鍵配置之最可靠來源。可推斷出，若使用者選擇使用特定硬體鍵盤，則該使用者具有關於鍵盤按鍵配置之對應於所選擇之硬體鍵盤的偏好。
在一些實施例中，將用以檢視一或多個鍵盤組態之選項呈現給使用者(724)。舉例而言，使用者可能能夠選擇QWERTY、AZERTY或Dvorak鍵盤之圖形鍵盤表示。使用者亦可指定位置及/或語言資訊，且可將一或多個匹配鍵盤按鍵配置呈現給使用者。偵測與觸敏顯示器之對應於各別鍵盤組態之接觸，且回應於所偵測之接觸而組態電子器件以基於各別鍵盤組態而解譯來自硬體鍵盤之按鍵輸入信號(724)。
根據一些實施例，圖8展示根據如上文所描述之本發明之原理而組態的電子器件800之功能方塊圖。該器件之功能區塊可由硬體、軟體或硬體與軟體之組合來實施以進行本發明之原理。熟習此項技術者應理解，可組合圖8中所描述之功能區塊或將其分離成子區塊來實施如上文所描述之本發明之原理。因此，本文中之描述可支援本文中所描述之功能區塊之任何可能的組合或分離或其他定義。
如圖8中所展示，電子器件800包括一處理單元804及一耦接至該處理單元804之顯示單元802。在一些實施例中，處理單元804包括一獲得單元806、一排定優先次序單元808、一判定單元810、一組態單元812、一呈現單元814，及一偵測單元816。
在一些實施例中，處理單元804經組態以進行以下操作：自與電子器件800相關聯之一或多個硬體及軟體資訊源獲得語言資訊及位置資訊中之至少一者(例如，藉由獲得單元806)；基於硬體及軟體資訊源之相關聯語言及位置資訊的可靠性而排定硬體及軟體資訊源之優先次序(例如，藉由排定優先次序單元808)；基於自具有最高相對優先級之資訊源所獲得的語言資訊及位置資訊而判定硬體鍵盤900之鍵盤語言及鍵盤按鍵配置(例如，藉由判定單元810)；及組態電子器件800以基於所判定之鍵盤語言及鍵盤按鍵配置而解譯來自硬體鍵盤900之按鍵輸入信號(例如，藉由組態單元812)。顯示單元802經組態以顯示與經解譯之按鍵輸入信號相關聯之資訊。
在一些實施例中，顯示單元802為觸敏顯示器，且處理單元804經進一步組態以組態呈現於顯示單元802上的螢幕上鍵盤以在視覺上對應於所判定之鍵盤語言及所判定之鍵盤按鍵配置(例如，藉由組態單元812)。
在一些實施例中，該一或多個硬體及軟體資訊源包括電信廠商配套、硬體鍵盤900、一或多個軟體模組、行動通信能力及GPS服務中之一或多者。
在一些實施例中，位置資訊包括國家、地區、州及城市資訊中之至少一者。
在一些實施例中，所判定之鍵盤按鍵配置包括所判定之鍵盤語言中的字元至硬體鍵盤900之按鍵的指派，及選自QWERTY、AZERTY及Dvorak格式之格式。
在一些實施例中，排定優先次序包括：在硬體鍵盤900提供語言及位置資訊中的至少一者時，將最高優先級指派給各別所提供之語言及位置資訊；在電子器件800包括提供與該器件之使用者相關聯的語言及位置資訊中之至少一者的軟體模組時，將第二高優先級指派給各別所提供之語言及位置資訊；在電子器件800包括電信廠商配套時，將第三高優先級指派給自該電信廠商配套所獲得的語言資訊及位置資訊；及在電子器件800包括GPS服務時，將第四高優先級指派給自GPS能力所獲得的語言資訊及位置資訊。
在一些實施例中，一或多個軟體模組位於電子器件800之遠端。
在一些實施例中，一或多個軟體模組包括媒體播放器軟體及個人資訊管理軟體。
在一些實施例中，處理單元804經進一步組態以進行以下操作：將用以檢視一或多個鍵盤組態之選項呈現給使用者(例如，藉由呈現單元814)；偵測與觸敏顯示器之對應於各別鍵盤組態之接觸(例如，藉由偵測單元816)；及回應於該所偵測之接觸，組態電子器件800以基於各別鍵盤組態而解譯來自硬體鍵盤900之按鍵輸入信號(例如，藉由組態單元812)。
在一些實施例中，在不需要使用者確認組態的情況下組態硬體鍵盤900。
在一些實施例中，在無使用者介入的情況下組態硬體鍵盤900。
在一些實施例中，處理單元804經組態以進行以下操作：自與電子器件800相關聯之一或多個資訊源獲得語言資訊及位置資訊中之至少一者(例如，藉由獲得單元806)；基於資訊源之相關聯語言及位置資訊的可靠性而排定資訊源之優先次序(例如，藉由排定優先次序單元808)；基於自具有最高相對優先級之資訊源所獲得的語言資訊及位置資訊而判定鍵盤之鍵盤語言及鍵盤按鍵配置(例如，藉由判定單元810)；及組態電子器件800以基於所判定之鍵盤語言及鍵盤按鍵配置而解譯來自鍵盤之輸入信號(例如，藉由組態單元812)。顯示單元802經組態以顯示與經解譯之按鍵輸入信號相關聯之資訊。
在一些實施例中，顯示單元802為觸敏顯示器，且鍵盤為螢幕上鍵盤。
在一些實施例中，鍵盤為硬體鍵盤900。
上文所描述之資訊處理方法中的步驟可藉由執行資訊處理裝置中之一或多個功能模組(諸如，通用處理器或特殊應用晶片)來實施。此等模組、此等模組之組合及/或其與一般硬體之組合(例如，如上文關於圖1A、圖1B及圖3所描述)皆包括於本發明之保護範疇內。
出於解釋之目的，前述描述已參考特定實施例而加以描述。然而，上文之說明性論述並不意欲為詳盡的或將本發明限於所揭示之精確形式。鑒於上文之教示，許多修改及變化係可能的。選擇並描述實施例以便最佳地解釋本發明之原理及其實務應用，以藉此使其他熟習此項技術者能夠最佳地利用本發明及具有適合於所預期之特定使用的各種修改之各種實施例。
100．．．攜帶型多功能器件
102．．．記憶體
103．．．通信匯流排或信號線
104．．．晶片
106．．．輸入/輸出(I/O)子系統
108．．．射頻電路
110．．．音訊電路
111．．．揚聲器
112．．．觸敏顯示器/觸控螢幕
113．．．麥克風
114．．．螢幕上鍵盤
116．．．其他輸入或控制器件/其他輸入控制器件
118．．．周邊介面
120．．．中央處理單元/處理器
122．．．記憶體控制器
124．．．銜接/充電外部埠
126．．．作業系統
128．．．通信模組
129．．．電信廠商配套資料
130．．．接觸/運動模組
132．．．圖形模組
134．．．文字輸入模組
135．．．全球定位系統(GPS)模組
136．．．應用程式
136-1．．．應用程式
137．．．聯繫人模組
138．．．電話模組
139．．．視訊會議模組
140．．．電子郵件用戶端模組
141．．．即時訊息傳遞(IM)模組
142．．．健身支援模組
143．．．成像模組/相機模組
144．．．影像管理模組
145．．．視訊播放器模組
146．．．音樂播放器模組
147．．．瀏覽器模組
148．．．行事曆模組
149．．．介面工具集模組
149-1．．．天氣介面工具集
149-2．．．股票介面工具集
149-3．．．計算器介面工具集
149-4．．．鬧鐘介面工具集
149-5．．．字典介面工具集
149-6．．．使用者建立之介面工具集
151．．．搜尋模組
152．．．視訊及音樂播放器模組/iPod模組
153．．．備忘錄模組
154．．．地圖模組
155．．．線上視訊模組/YouTube模組
156．．．顯示系統控制器
157．．．器件/全域內部狀態
158．．．光學感測器控制器
160．．．輸入控制器/鍵盤組態模組
161．．．語言及位置資料
162．．．電力系統
164．．．光學感測器
166．．．近接感測器
168．．．加速度計
170．．．事件分類器
171．．．事件監視器
172．．．點選命中視圖判定模組
173．．．作用中事件辨識器判定模組
174．．．事件分派器模組
175．．．全球定位系統資料
176．．．資料更新程式/語言及位置資料
177．．．物件更新程式/語言及位置資料
178．．．圖形使用者介面更新程式
179．．．事件資料
180．．．事件辨識器
182．．．事件接收器模組
183．．．中繼資料
184．．．事件比較器
186．．．事件定義
187-1．．．事件1
187-2．．．事件2
188．．．事件遞送指令
190．．．事件處理常式
191．．．應用程式視圖
192．．．應用程式內部狀態/行動國家碼
193．．．行動網路碼
194．．．存取點名稱
200．．．使用者介面
202．．．手指
203．．．手寫筆
204．．．「首頁」或功能表按鈕
206．．．按壓按鈕
208．．．音量調整按鈕
210．．．用戶識別模組(SIM)卡槽
212．．．耳機插孔
250．．．硬體鍵盤
300．．．器件
310．．．中央處理單元
320．．．通信匯流排
330．．．輸入/輸出(I/O)介面
340．．．顯示器
350．．．滑鼠
355．．．觸控板
360．．．網路或其他通信介面
370．．．記憶體/組態資料庫
372．．．組態映射/硬體鍵盤按鍵配置組態
374-1．．．映射
376．．．螢幕上鍵盤按鍵配置組態
378-1．．．組態
378-2．．．組態
380．．．硬體鍵盤按鍵配置組態
382-1．．．組態
382-2．．．組態
400A．．．使用者介面
400B．．．使用者介面
402．．．信號強度指示器
404．．．時間
405．．．藍芽指示器
406．．．電池狀態指示器
408．．．系統匣
410．．．未讀電子郵件之數目的指示器
412．．．設定
414．．．未接電話或語音郵件訊息之數目的指示器指示器
450．．．顯示器
451．．．觸敏表面
452．．．主軸
453．．．主軸
460．．．接觸
462．．．接觸
468．．．接觸
470．．．接觸
502．．．語言資訊及位置資訊
504．．．鍵盤按鍵配置資訊
506．．．螢幕上鍵盤
510．．．軟體模組
512．．．電信廠商配套
513．．．行動國家碼
514．．．行動網路碼
515．．．存取點名稱
516．．．軟體模組
518．．．iTunes
602．．．攜帶型多功能器件
604．．．攜帶型多功能器件
606．．．攜帶型多功能器件
610．．．QWERTY鍵盤/硬體鍵盤
611．．．希臘語鍵盤
620．．．使用者QWERTY鍵盤輸入
622．．．使用者QWERTY鍵盤輸入
623．．．使用者QWERTY鍵盤輸入
624．．．使用者QWERTY鍵盤輸入
625．．．按下的按鍵
630．．．輸出
631．．．輸出
632．．．文字輸出
700．．．自動判定鍵盤語言及按鍵配置之方法
800．．．電子器件
802．．．顯示單元
804．．．處理單元
806．．．獲得單元
808．．．排定優先次序單元
810．．．判定單元
812．．．組態單元
814．．．呈現單元
816．．．偵測單元
900．．．硬體鍵盤
圖1A及圖1B為說明根據一些實施例之具有觸敏顯示器之攜帶型多功能器件的方塊圖。
圖1C為說明根據一些實施例之用於事件處置之例示性組件的方塊圖。
圖2說明根據一些實施例之具有觸控螢幕的攜帶型多功能器件。
圖3為根據一些實施例之具有顯示器及觸敏表面之例示性多功能器件的方塊圖。
圖4A及圖4B說明根據一些實施例之攜帶型多功能器件上的應用程式之功能表的例示性使用者介面。
圖4C說明根據一些實施例之具有與顯示器分離的觸敏表面之多功能器件的例示性使用者介面。
圖5為可與多功能器件互動以獲得鍵盤按鍵配置、語言及位置資訊之源的方塊圖。
圖6A、圖6B、圖6C及圖6D為展示多功能器件上之硬體鍵盤輸入的方塊圖。
圖7A及圖7B為說明根據一些實施例之自動判定鍵盤按鍵配置之方法的流程圖。
圖8為根據一些實施例之電子器件的功能方塊圖。
100．．．攜帶型多功能器件
135．．．全球定位系統(GPS)模組
250．．．硬體鍵盤
502．．．語言資訊及位置資訊
504．．．鍵盤按鍵配置資訊
506．．．螢幕上鍵盤
510．．．軟體模組
512．．．電信廠商配套
513．．．行動國家碼
514．．．行動網路碼
515．．．存取點名稱
516．．．軟體模組
518．．．iTunes

Claims (14)

  1. 一種電腦實施之方法，其包含：在包括一或多個處理器、記憶體、一顯示器及一單一硬體鍵盤之一電子器件處進行以下操作：自與該電子器件相關聯之複數個硬體及軟體資訊源獲得語言資訊及位置資訊中之至少一者，其中該複數個硬體及軟體資訊源包括一電信廠商配套、該單一硬體鍵盤、位於該電子器件遠端之一或多個軟體模組、行動通信能力及GPS服務中之兩個或多者；基於該等硬體及軟體資訊源之相關聯語言及位置資訊的可靠性而排定該等硬體及軟體資訊源之優先次序；基於自具有最高相對優先級之該資訊源所獲得的該語言資訊及該位置資訊而判定該單一硬體鍵盤之一鍵盤語言及一鍵盤按鍵配置；及組態該電子器件以基於該所判定之鍵盤語言及該所判定之鍵盤按鍵配置而解譯來自該單一硬體鍵盤之按鍵輸入信號。
  2. 如請求項1之方法，其中該顯示器為一觸敏顯示器，該方法進一步包含組態呈現於該顯示器上之一螢幕上鍵盤以在視覺上對應於該所判定之鍵盤語言及該所判定之鍵盤按鍵配置。
  3. 如請求項1之方法，其中該位置資訊包括國家、地區、州及城市資訊中之至少一者。
  4. 如請求項1之方法，其中該所判定之鍵盤按鍵配置包：括該所判定之鍵盤語言中的字元至該單一硬體鍵盤之按鍵的一指派；及選自QWERTY、AZERTY及Dvorak格式之一格式。
  5. 如請求項1之方法，其中該排定優先次序包括：在該單一硬體鍵盤提供語言及位置資訊中的至少一者時，將最高優先級指派給該各別所提供之語言及位置資訊；在該電子器件包括提供與該器件之一使用者相關聯的語言及位置資訊中之至少一者的一軟體模組時，將第二高優先級指派給該各別所提供之語言及位置資訊；在該電子器件包括電信廠商配套時，將第三高優先級指派給自該電信廠商配套所獲得的該語言資訊及該位置資訊；及在該電子器件包括GPS服務時，將第四高優先級指派給自該等GPS能力所獲得的該語言資訊及該位置資訊。
  6. 如請求項1之方法，其中該一或多個軟體模組包括媒體播放器軟體及個人資訊管理軟體。
  7. 如請求項1之方法，其進一步包含：將用以檢視一或多個鍵盤組態之一選項呈現給使用者；偵測與一觸敏顯示器之對應於一各別鍵盤組態的一接觸；及回應於該所偵測之接觸，組態該電子器件以基於該各 別鍵盤組態而解譯來自該單一硬體鍵盤之按鍵輸入信號。
  8. 如請求項1之方法，其中：該單一硬體鍵盤係在不需要使用者確認該組態的情況下加以組態。
  9. 如請求項1之方法，其中該單一硬體鍵盤係在無使用者介入的情況下加以組態。
  10. 一種攜帶型電子器件，其包含：一顯示器；一記憶體；一單一硬體鍵盤；一或多個處理器；一或多個程式，該一或多個程式儲存於記憶體中且經組態以由該一或多個處理器執行，該一或多個程式包括用於進行以下操作之指令：自與該電子器件相關聯之複數個硬體及軟體資訊源獲得語言資訊及位置資訊中之至少一者，其中該複數個硬體及軟體資訊源包括一電信廠商配套、該單一硬體鍵盤、位於該電子器件遠端之一或多個軟體模組、行動通信能力及GPS服務中之兩個或多者；基於該等硬體及軟體資訊源之相關聯語言及位置資訊的可靠性而排定該等硬體及軟體資訊源之優先次序；基於自具有最高相對優先級之該資訊源所獲得的該 語言資訊及該位置資訊而判定該單一硬體鍵盤之一鍵盤語言及一鍵盤按鍵配置；及組態該電子器件以基於該所判定之鍵盤語言及該所判定之鍵盤按鍵配置而解譯來自該單一硬體鍵盤之按鍵輸入信號。
  11. 一種儲存一或多個程式之電腦可讀儲存媒體，該一或多個程式包含指令，該等指令在由具有一顯示器及一單一硬體鍵盤之一電子器件執行時使該器件進行以下操作：自與該電子器件相關聯之複數個硬體及軟體資訊源獲得語言資訊及位置資訊中之至少一者，其中該複數個硬體及軟體資訊源包括一電信廠商配套、該單一硬體鍵盤、位於該電子器件遠端之一或多個軟體模組、行動通信能力及GPS服務中之兩個或多者；基於該等硬體及軟體資訊源之相關聯之語言及位置資訊的可靠性而排定該等硬體及軟體資訊源之優先次序；基於自具有最高相對優先級之該資訊源所獲得的該語言資訊及該位置資訊而判定該單一硬體鍵盤之一鍵盤語言及一鍵盤按鍵配置；及組態該電子器件以基於該所判定之鍵盤語言及該所判定之鍵盤按鍵配置而解譯來自該單一硬體鍵盤之按鍵輸入信號。
  12. 一種用於組態一鍵盤之電腦實施之方法，其包含：在無使用者介入的情況下在包括一或多個處理器、記憶體及一顯示器之一電子器件處進行以下操作： 自與該電子器件相關聯之複數個資訊源獲得語言資訊及位置資訊中之至少一者，其中該複數個硬體及軟體資訊源包括一電信廠商配套、該單一硬體鍵盤、位於該電子器件遠端之一或多個軟體模組、行動通信能力及GPS服務中之兩個或多者；基於該等資訊源之相關聯語言及位置資訊的可靠性而排定該等資訊源之優先次序；基於自具有最高相對優先級之該資訊源所獲得的該語言資訊及該位置資訊而判定一鍵盤之一鍵盤語言及一鍵盤按鍵配置；及組態該電子器件以基於該所判定之鍵盤語言及該所判定之鍵盤按鍵配置而解譯來自該鍵盤之輸入信號。
  13. 如請求項12之方法，其中該顯示器為一觸敏顯示器，且該鍵盤為一螢幕上鍵盤。
  14. 如請求項12之方法，其中該鍵盤為一硬體鍵盤。
TW100101586A 2010-01-15 2011-01-14 用於組態一電子器件以解譯來自一鍵盤之按鍵輸入信號的方法、器件及電腦可讀儲存媒體 TWI503737B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US29567410P 2010-01-15 2010-01-15
US12/789,658 US20110179372A1 (en) 2010-01-15 2010-05-28 Automatic Keyboard Layout Determination

Publications (2)

Publication Number Publication Date
TW201145149A TW201145149A (en) 2011-12-16
TWI503737B true TWI503737B (zh) 2015-10-11

Family

ID=44278469

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100101586A TWI503737B (zh) 2010-01-15 2011-01-14 用於組態一電子器件以解譯來自一鍵盤之按鍵輸入信號的方法、器件及電腦可讀儲存媒體

Country Status (6)

Country Link
US (1) US20110179372A1 (zh)
EP (1) EP2354929B1 (zh)
CN (1) CN102763074B (zh)
HK (1) HK1160954A1 (zh)
TW (1) TWI503737B (zh)
WO (1) WO2011087880A1 (zh)

Families Citing this family (237)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
TWI360762B (en) * 2008-09-05 2012-03-21 Mitake Information Corp On-screen virtual keyboard system
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US20120005592A1 (en) * 2010-06-30 2012-01-05 Joshi Shrinivas B Method and Apparatus for Providing Metadata-Based User Interfaces
US8335596B2 (en) * 2010-07-16 2012-12-18 Verizon Patent And Licensing Inc. Remote energy management using persistent smart grid network context
US8812973B1 (en) 2010-12-07 2014-08-19 Google Inc. Mobile device text-formatting
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
JP2012146268A (ja) * 2011-01-14 2012-08-02 Kyocera Corp 携帯電子機器、制御方法及び制御プログラム
CN102622156B (zh) * 2011-01-26 2016-08-03 腾讯科技（深圳）有限公司 获取虚拟键盘的方法、装置和系统
EP2487577A3 (en) * 2011-02-11 2017-10-11 BlackBerry Limited Presenting buttons for controlling an application
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US20120266079A1 (en) * 2011-04-18 2012-10-18 Mark Lee Usability of cross-device user interfaces
US9229489B2 (en) * 2011-05-03 2016-01-05 Facebook, Inc. Adjusting mobile device state based on user intentions and/or identity
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US9021245B2 (en) * 2011-07-15 2015-04-28 International Business Machines Corporation Applying settings in a cloud computing environment based on geographical region
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US9218129B2 (en) * 2011-08-29 2015-12-22 Ncr Corporation User interface
KR101859102B1 (ko) * 2011-09-16 2018-05-17 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
US20130086504A1 (en) * 2011-09-29 2013-04-04 Infosys Limited Systems and methods for facilitating navigation in a virtual input device
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
KR20130123251A (ko) * 2012-05-02 2013-11-12 삼성전자주식회사 웹 브라우저를 위한 키 보드 구성 방법 및 장치와 그 방법에 대한 프로그램 소스를 저장한 기록 매체
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
KR101431581B1 (ko) * 2012-06-22 2014-09-23 성균관대학교산학협력단 모바일 단말기를 기반으로 한 가상 게임 컨트롤러 장치 및 이를 이용한 원격 컨트롤 시스템
US9146622B2 (en) 2012-06-25 2015-09-29 International Business Machines Corporation Dynamically updating a smart physical keyboard
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9548012B1 (en) * 2012-08-29 2017-01-17 Amazon Technologies, Inc. Adaptive ergonomic keyboard
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
CN108536370B (zh) * 2012-12-03 2021-11-16 联想(北京)有限公司 一种输入界面切换方法及装置、电子设备
KR101480516B1 (ko) * 2013-01-31 2015-01-08 삼성전자주식회사 디스플레이 장치 및 그의 메뉴 디스플레이 방법
US20140215348A1 (en) * 2013-01-31 2014-07-31 Samsung Electronics Co., Ltd. Display apparatus and menu displaying method thereof
DE112014000709B4 (de) 2013-02-07 2021-12-30 Apple Inc. Verfahren und vorrichtung zum betrieb eines sprachtriggers für einen digitalen assistenten
CN105027449B (zh) * 2013-02-28 2018-11-02 克里斯多福·赫尔德埃斯 用于确定输入设备的启动的输入组件的方法及输入设备
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
AU2014233517B2 (en) 2013-03-15 2017-05-25 Apple Inc. Training an at least partial voice command system
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
EP3937002A1 (en) 2013-06-09 2022-01-12 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
AU2014278595B2 (en) 2013-06-13 2017-04-06 Apple Inc. System and method for emergency calls initiated by voice command
DE112014003653B4 (de) 2013-08-06 2024-04-18 Apple Inc. Automatisch aktivierende intelligente Antworten auf der Grundlage von Aktivitäten von entfernt angeordneten Vorrichtungen
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US20150177847A1 (en) * 2013-12-23 2015-06-25 Google Inc. Techniques for resolving keyboard and input method ambiguity on computing devices
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
TWI566107B (zh) 2014-05-30 2017-01-11 蘋果公司 用於處理多部分語音命令之方法、非暫時性電腦可讀儲存媒體及電子裝置
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
EP3195096B1 (en) 2014-08-02 2020-08-12 Apple Inc. Context-specific user interfaces
US10452253B2 (en) 2014-08-15 2019-10-22 Apple Inc. Weather user interface
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US10254948B2 (en) 2014-09-02 2019-04-09 Apple Inc. Reduced-size user interfaces for dynamically updated application overviews
US10613743B2 (en) 2014-09-02 2020-04-07 Apple Inc. User interface for receiving user input
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9606986B2 (en) 2014-09-29 2017-03-28 Apple Inc. Integrated word N-gram and class M-gram language models
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US10055121B2 (en) 2015-03-07 2018-08-21 Apple Inc. Activity based thresholds and feedbacks
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
WO2016144385A1 (en) 2015-03-08 2016-09-15 Apple Inc. Sharing user-configurable graphical constructs
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US20160277868A1 (en) * 2015-03-16 2016-09-22 James E. Niles Method and System for Changing Language on a Smart Device From a Personal Electronic Device
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9916075B2 (en) 2015-06-05 2018-03-13 Apple Inc. Formatting content for a reduced-size user interface
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
JP2017010428A (ja) * 2015-06-25 2017-01-12 京セラドキュメントソリューションズ株式会社 電子機器およびアプリケーションプログラム
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
EP4327731A3 (en) 2015-08-20 2024-05-15 Apple Inc. Exercise-based watch face
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
JP6214618B2 (ja) * 2015-11-25 2017-10-18 レノボ・シンガポール・プライベート・リミテッド 情報処理装置、ソフトウェアキーボード表示方法、及びプログラム
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US20170160818A1 (en) * 2015-12-04 2017-06-08 Synerdyne Corporation Reprogramable multi-host, multi-character set keyboard
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK201770428A1 (en) 2017-05-12 2019-02-18 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK179412B1 (en) 2017-05-12 2018-06-06 Apple Inc Context-Specific User Interfaces
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
CN110442405A (zh) * 2018-05-02 2019-11-12 深圳Tcl数字技术有限公司 一种浏览器自动匹配软键盘的方法、存储介质及智能终端
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11327650B2 (en) 2018-05-07 2022-05-10 Apple Inc. User interfaces having a collection of complications
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US11076039B2 (en) 2018-06-03 2021-07-27 Apple Inc. Accelerated task performance
CN110580636B (zh) * 2018-06-11 2022-10-18 佛山市顺德区美的电热电器制造有限公司 基于用户行为分析的按键设置方法、智能电器及服务器
KR102592044B1 (ko) * 2018-06-29 2023-10-23 삼성전자 주식회사 전자 장치에서 물리적 키보드의 레이아웃 설정 방법 및 장치
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
KR102653267B1 (ko) * 2018-11-28 2024-04-02 삼성전자 주식회사 전자 장치의 키 입력 방법 및 이를 사용하는 전자 장치
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
CN109658758A (zh) * 2019-02-18 2019-04-19 西安科技大学 一种计算机会计教学仿真系统
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
JP6921338B2 (ja) 2019-05-06 2021-08-18 アップル インコーポレイテッドＡｐｐｌｅ Ｉｎｃ． 電子デバイスの制限された動作
US11131967B2 (en) 2019-05-06 2021-09-28 Apple Inc. Clock faces for an electronic device
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11960701B2 (en) 2019-05-06 2024-04-16 Apple Inc. Using an illustration to show the passing of time
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
DK180684B1 (en) 2019-09-09 2021-11-25 Apple Inc Techniques for managing display usage
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11372659B2 (en) 2020-05-11 2022-06-28 Apple Inc. User interfaces for managing user interface sharing
DK181103B1 (en) 2020-05-11 2022-12-15 Apple Inc User interfaces related to time
CN115904596B (zh) 2020-05-11 2024-02-02 苹果公司 用于管理用户界面共享的用户界面
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11694590B2 (en) 2020-12-21 2023-07-04 Apple Inc. Dynamic user interface with time indicator
US11720239B2 (en) 2021-01-07 2023-08-08 Apple Inc. Techniques for user interfaces related to an event
US11921992B2 (en) 2021-05-14 2024-03-05 Apple Inc. User interfaces related to time
US11630559B2 (en) 2021-06-06 2023-04-18 Apple Inc. User interfaces for managing weather information
CN113505777B (zh) * 2021-07-20 2023-05-02 深圳市拓普泰克技术股份有限公司 键盘布局版本检测方法、装置、设备和存储介质
CN113535025A (zh) * 2021-07-28 2021-10-22 中国工商银行股份有限公司 多语言页面布局方法、装置、设备、介质及程序产品
CN114327732B (zh) * 2021-12-31 2024-04-19 北京五八信息技术有限公司 页面配置方法、装置、电子设备和计算机可读介质
US20230236547A1 (en) 2022-01-24 2023-07-27 Apple Inc. User interfaces for indicating time

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6512467B1 (en) * 1999-04-09 2003-01-28 Sun Microsystems, Inc. Method and apparatus for dynamically configuring device using device code
TWI235942B (en) * 2001-10-29 2005-07-11 Oqo Inc Keyboard with variable-sized key
US20080225006A1 (en) * 2005-10-11 2008-09-18 Abderrahim Ennadi Universal Touch Screen Keyboard

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4459581A (en) * 1981-07-22 1984-07-10 Data General Corporation Alphanumeric keyboard having identification capability
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
JP3311133B2 (ja) * 1994-02-16 2002-08-05 株式会社東芝 出力回路
EP1717679B1 (en) 1998-01-26 2016-09-21 Apple Inc. Method for integrating manual input
US6615287B1 (en) * 2000-05-23 2003-09-02 International Business Machines Corporation Means for flexible keyboard auto-ID implementation
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
KR100726582B1 (ko) * 2000-10-25 2007-06-11 주식회사 케이티 무선통신 단말기의 위치 확인에 의한 다국 문자 자판의제공 방법
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US6830396B2 (en) * 2003-03-31 2004-12-14 Francis N. Kurriss Keyboard configuration system
JP2007156548A (ja) * 2005-11-30 2007-06-21 Toshiba Corp 情報処理装置および切り替え方法
US7602378B2 (en) * 2006-10-26 2009-10-13 Apple Inc. Method, system, and graphical user interface for selecting a soft keyboard
CN101206659B (zh) * 2006-12-15 2013-09-18 谷歌股份有限公司 自动搜索查询校正
KR20080095661A (ko) * 2007-04-25 2008-10-29 삼성전자주식회사 휴대용컴퓨터 및 그 제어방법
US8090885B2 (en) * 2008-01-14 2012-01-03 Microsoft Corporation Automatically configuring computer devices wherein customization parameters of the computer devices are adjusted based on detected removable key-pad input devices
US8122170B2 (en) * 2009-06-11 2012-02-21 Microsoft Corporation Adaptive keyboard layout mapping

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6512467B1 (en) * 1999-04-09 2003-01-28 Sun Microsystems, Inc. Method and apparatus for dynamically configuring device using device code
TWI235942B (en) * 2001-10-29 2005-07-11 Oqo Inc Keyboard with variable-sized key
US20080225006A1 (en) * 2005-10-11 2008-09-18 Abderrahim Ennadi Universal Touch Screen Keyboard

Also Published As

Publication number Publication date
EP2354929A1 (en) 2011-08-10
CN102763074A (zh) 2012-10-31
TW201145149A (en) 2011-12-16
CN102763074B (zh) 2015-11-25
US20110179372A1 (en) 2011-07-21
EP2354929B1 (en) 2015-04-22
HK1160954A1 (zh) 2012-08-17
WO2011087880A1 (en) 2011-07-21

Similar Documents

Publication Publication Date Title
TWI503737B (zh) 用於組態一電子器件以解譯來自一鍵盤之按鍵輸入信號的方法、器件及電腦可讀儲存媒體
TWI437483B (zh) 一種電腦實施之方法、攜帶型電子器件及電腦可讀儲存媒體
US8826164B2 (en) Device, method, and graphical user interface for creating a new folder
AU2010339633B2 (en) Apparatus and method having multiple application display modes including mode with display resolution of another apparatus
US8806362B2 (en) Device, method, and graphical user interface for accessing alternate keys
US8694902B2 (en) Device, method, and graphical user interface for modifying a multi-column application
KR101607365B1 (ko) 전자 문서의 페이지들을 변경하기 위한 장치, 방법 및 그래픽 사용자 인터페이스
TWI448956B (zh) 用於條件啟動或停用軟式按鈕之裝置及方法
US20110167339A1 (en) Device, Method, and Graphical User Interface for Attachment Viewing and Editing
KR101962774B1 (ko) 애플리케이션과 연관된 신규 메시지를 처리하기 위한 방법 및 장치
KR20160146970A (ko) 하나의 디바이스의 사용으로부터 다른 디바이스의 사용으로의 전환
KR101982305B1 (ko) 애플리케이션 인터페이스 엘리먼트를 이동시키는 데 사용되는 디바이스, 방법 및 그래픽 사용자 인터페이스
WO2017092680A1 (zh) 用于删除对象的电子设备和方法
JP7002512B2 (ja) アプリケーション・インタフェース要素を移動させるために使用されるデバイス、方法およびグラフィック・ユーザ・インタフェース
AU2015201237A1 (en) Device, method, and graphical user interface for changing pages in an electronic document