TWI544369B - 計算設備中的觸摸事件預期 - Google Patents

計算設備中的觸摸事件預期 Download PDF

Info

Publication number
TWI544369B
TWI544369B TW100143765A TW100143765A TWI544369B TW I544369 B TWI544369 B TW I544369B TW 100143765 A TW100143765 A TW 100143765A TW 100143765 A TW100143765 A TW 100143765A TW I544369 B TWI544369 B TW I544369B
Authority
TW
Taiwan
Prior art keywords
touch
user
computing device
hand
input
Prior art date
Application number
TW100143765A
Other languages
English (en)
Other versions
TW201227438A (en
Inventor
柏克斯奧多
蓋格艾維
艾姆杜爾梅瑞迪斯Ｅ
Original Assignee
微軟技術授權有限責任公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 微軟技術授權有限責任公司 filed Critical 微軟技術授權有限責任公司
Publication of TW201227438A publication Critical patent/TW201227438A/zh
Application granted granted Critical
Publication of TWI544369B publication Critical patent/TWI544369B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/045—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using resistive elements, e.g. a single continuous surface or two parallel surfaces put in contact
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04101—2.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106—Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04108—Touchless 2D- digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface without distance measurement in the Z direction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Description

計算設備中的觸摸事件預期
本發明涉及計算設備中的觸摸事件預期。
隨著更小的處理器和記憶體設備的發展，諸如行動電話以及平板電腦等觸敏計算設備變得越來越便攜。另外，消費者對在此種設備上執行的軟體要求越來越複雜，包括電子郵件、遊戲、照片、電影以及各種其他應用。另外，該等觸敏計算設備通常使用基於手勢的輸入，而該等基於手勢的輸入耗費處理功率。為了處理該等任務，具有越來越高的效能的處理器以及記憶體不斷被開發為具有更小的覆蓋區域(footprints)。
然而，軟體和硬體有時無法與使用者保持一致。所以，使用者有時經歷時間滯後，在該時間滯後期間，觸敏設備在使用者選擇了圖形化使用者介面選項或在螢幕上劃過一個手勢後立刻表現為在進行「思考」。該等時間滯後令使用者沮喪，因為使用者無法決定設備是否在正常地工作，無法決定手勢輸入是被適當地接收還是需要重新輸入，無法決定設備是否正經歷網路連接事件，等等。在該不決定之際，使用者常常盯著他們的螢幕，在沮喪時一度呆滯，既無法在電腦環境中繼續任務，也無法返回到與他們周圍的環境互動。此情形降低了對觸敏設備的使用者體驗、潛在地損害了該等設備的採用並且亦負面影響了使用者與他們周圍的人之間的社交。
提供了預期計算設備中的觸摸事件的系統和方法。計算設備可包括多點觸敏顯示螢幕，該顯示螢幕包括被配置成感應手的位置及/或移動的感測器。圖形化使用者介面(GUI)可被顯示具有包括複數個可能的觸摸輸入的狀態。計算設備亦可包括觸摸事件預測模組，該觸摸事件預測模組被配置成基於感應到的手位置及/或移動以及具有複數個可能的使用者輸入的GUI的狀態來計算一或多個預期的觸摸輸入。計算設備亦可包括預處理模組，該預處理模組被配置成預處理用於各預期的觸摸輸入的資料，並且當偵測到從使用者處接收到的與該等預期的觸摸輸入之一者相匹配的實際觸摸輸入時，在GUI上顯示用於該實際觸摸輸入的經預處理的資料。
提供本發明內容是為了以簡化的形式介紹將在以下實施方式中進一步描述的一些概念。本發明內容並不意欲標識所主張保護的標的的關鍵特徵或必要特徵，亦不意欲用於限制所主張保護的標的的範圍。此外，所主張保護的標的不限於解決在本案的任一部分中提及的任何或所有缺點的實現。
圖1圖示出被配置成預期一或多個觸摸事件的計算設備10的一個實施例。當使用者準備進行觸摸輸入時，使用者的手5接近計算設備10的觸敏顯示螢幕12。觸敏顯示螢幕12被配置成使用如下述及之各種感應技術來感應使用者手5，亦即使手5與顯示螢幕的上表面有間隙14。從顯示螢幕12的角度來看，手表現為在顯示螢幕12上投射被感應的陰影16。計算設備被配置成解釋手的位置和運動並預測可能發生的一或多個預期的觸摸輸入，隨後執行預處理以減少使用者實際執行預期的觸摸輸入中的一個時的等待時間。結果，例如，可能改善了計算設備回應預期的觸摸輸入的回應時間，改進了對計算設備的使用者體驗，並使得使用者能更快地完成電腦任務並繼續與他人互動。
如圖2所圖示，計算設備10通常包括多點觸敏顯示螢幕12，該顯示螢幕12包括被配置成感應使用者手5的手位置20及/或手移動22的感測器18。在一些實施例中，感測器18可被配置成偵測隔開輸入46，該隔開輸入46表示手與顯示螢幕的上表面隔開一距離時的手的位置及/或移動，該感測器亦被配置成偵測手5接觸顯示螢幕12時的實際觸摸輸入48。在一些實施例中，感測器18被配置成偵測並區分手的一或多個手指以及整個手的位置和移動。另外，感測器可被配置成偵測由手握持的觸控筆的位置或移動，並區分觸控筆和手。
感測器18可使用各種感測器類型中的一或多個。例如，感測器18可以是或可以包括像素內光感測器、電容性觸摸感測器、電阻性觸摸感測器、紅外感測器、壓力感測器或者其他感測器類型中的一或多個。感測器18可以集成到顯示螢幕12中，或如虛線框所示的獨立於顯示螢幕12而形成。例如，電容性、電阻性和像素內感測器一般與顯示螢幕集成，而諸如攝像機等光感測器可獨立於顯示螢幕而形成並意欲查看顯示螢幕上面的區域。
計算設備10包括儲存在大型儲存單元24中的一或多個程式和模組，該等程式和模組可使用記憶體28中的各部分經由處理器26來執行，以處理從感測器18接收到的感測器輸入30並輸出處理結果用於顯示在顯示螢幕12上。處理器26、記憶體28和大型儲存單元24可互相通訊，並經由一或多個資料匯流排29與顯示螢幕12通訊。可採用各種處理器、記憶體和大型儲存配置。在一些實施例中，計算設備被配置成行動電話及/或平板計算設備，並且記憶體和大型儲存兩者均可以是例如固態的。在其他實施例中，計算設備可以是膝上型電腦、桌上型電腦、桌面電腦、自助服務終端電腦等，並且大量存放區可以是例如硬碟。
儲存在大型儲存單元24上的程式32可以是應用程式、作業系統部件或包括圖形化使用者介面模組34的其他程式，該圖形介面模組34被配置成產生圖形化使用者介面(GUI)36並將圖形化使用者介面(GUI)36顯示於顯示螢幕12上。圖形化使用者介面通常包括含有複數個可能的觸摸輸入的狀態38。在圖1圖示出的實例中，顯示螢幕12上顯示的GUI 36包括小塊模式排列的複數個可選的圖標。各圖標表示使用者的可能的觸摸輸入。許多其他GUI配置是可能的，包括諸如按鈕、下拉式功能表、滑動塊、捲軸、超連結、清單、選項按鈕等元素，每個表示一或多個可能的觸摸輸入。
計算設備10亦包括儲存在大型儲存單元24上的觸摸事件預測摸組40。一旦執行，觸摸事件預測模組40被配置成基於感應到的使用者手位置20及/或手移動22以及具有複數個可能的使用者輸入的GUI 36的狀態38來計算一或多個預期的觸摸輸入42。通常，觸摸事件預測模組40基於來自手的隔開輸入46的感應到的手位置20和手移動22來計算預期的觸摸輸入42，其中該手與顯示螢幕12隔開間隙14。
計算設備10亦包括儲存在大型儲存單元24上的預處理模組44。預處理模組44被配置成產生用於各預期的觸摸輸入42的經預處理的資料54。例如，預處理模組44可被配置成將資料預載入至預載入快取記憶體50以便當預期的觸摸事件實現後顯示及/或為預期的觸摸事件執行高級計算(advance computation)52。
一旦偵測到使用者的與預期觸摸輸入48相匹配的實際的觸摸輸入48，其中該實際的觸摸輸入是來自使用者手與顯示螢幕12的接觸，則預處理模組44被配置成令經預處理的資料54顯示在圖形化使用者介面上，以用於實際的觸摸輸入48。將理解的是，在一個實施例中，實際觸摸事件可經由觸摸事件預測模組被偵測到，或者，在其他實施例中，實際觸摸事件可經由獨立的手勢辨識模組被偵測。預處理模組可經由，例如傳達給程式32經預處理的資料54可用，並在被觸摸事件預測模組或上述的手勢辨識模組通知到該實際觸摸事件後使該程式從預定位置取得並顯示該經預處理的資料，以使經預處理的資料54顯示。
在所示實施例中，觸摸事件預測模組包括統計引擎56，該統計引擎被配置成基於先前的使用資料計算各預測的使用者輸入48被選擇的估計概率58，並指令預處理模組將諸如預載入快取記憶體50和用於高級計算52的邏輯區塊等預處理資源配置給具有較高的選擇概率的一或多個預期的使用者輸入48，並放棄對其他預期的使用者輸入48的預處理。可計算計算設備上的個人使用者、計算設備上的所有使用者的先前的使用資料，或者先前的使用資料可以是經由例如電腦網路從中央資料庫下載的用於大批使用者的合計的使用統計量。
觸摸事件預測模組的預測引擎60被配置成接收來自感測器18的隔開輸入46的手位置20和手移動22，並接收來自GUI模組34的GUI狀態38資訊以及來自統計引擎56的概率，並計算出由預期的觸摸輸入42組成的排序清單，該清單根據估計的發生概率排序。預處理模組可檢查計算設備上可獲得的記憶體和處理器使用，以決定進行預處理活動的可用資源閾值，並選擇產生針對排序列表上的預期的觸摸輸入的子集的經預處理的資料54，直到達到了可用資源閾值。按此種方式，可進行資源的有效使用，而不會令計算設備10超負荷。
將理解的是，計算設備可包括作業系統，該作業系統包括應用程式設計介面，其中各種程式經由該應用程式設計發展介面與作業系統資源通訊並使用該等作業系統資源。因此，在一個實施例中，觸摸事件預測模組40和預處理模組44可以是將程式連結至計算設備上的作業系統功能的應用程式設計介面的一部分。在其他實施例中，觸摸事件預測模組40和預處理模組44是計算設備10上的可執行程式，例如跨使用者通信期在後臺執行的服務。
圖3圖示出計算設備10，其中第一手運動圖示為與計算設備10的顯示螢幕12隔開並位於顯示螢幕12上方。手5圖示為食指伸展並從手的第一位置，圖示為5，自右向左移動至手的第二位置，圖示為5A。儘管以虛線所圖示的所有小塊格表示獨立的可選圖標，其中該等獨立的可選圖標是GUI 36上的可能觸摸輸入，但是，當偵測到具有伸展的食指的手的該自右向左的移動時，觸摸事件預測模組40可被配置成決定該最左邊的兩個圖標是所示出的預期的觸摸輸入42，因為食指有可能會進行選擇並已經移過了GUI 36上的剩餘可能的輸入。
圖4圖示出計算設備10，其中第二手運動圖示為與計算設備10的顯示螢幕12隔開並位於顯示螢幕12上方。手5的手指圖示為伸開並從手的手指的第一位置，圖示為5，自左向右移動至手的手指的第二位置，圖示為5A。當偵測到伸展的手指的自左向右的移動，觸摸事件預測模組40被配置成決定最右邊的兩個圖標是如所示的預期的觸摸輸入42，因為，伸展的食指有可能會進行選擇並已經移過了GUI 36上剩餘的可能輸入。
圖5圖示出計算設備10，其中第三手運動圖示為與計算設備10的顯示螢幕12隔開並位於顯示螢幕12上方。手5圖示為手指彎曲向下朝向顯示螢幕並從手的第一位置，圖示為5，自右向左移動至手的第二位置，圖示為5A。當偵測到手在該位置處停留並懸浮，因之前已從右移向左，所以觸摸事件預測模組40可被配置成決定該手是左手、食指和中指是最有可能參與選擇圖標的手指，並且食指和中指位於三個圖標上方，三個圖標圖示為預期的觸摸輸入42。剩餘的可能輸入是食指和中指的無法達到的。因此，該等剩餘的可能輸入並不能被決定為預期的觸摸輸入42。
圖6圖示出計算設備10，其中第四手運動圖示為與計算設備10的顯示螢幕12隔開並位於顯示螢幕12上方。在該視圖中，伸展的手指正交地接近顯示螢幕12至頁面中。感應到的由手的手指投射的陰影被圖示為在該手指的第一位置處更大並且更散開，如5所圖示，並且在該手指的第二位置處更銳和更小，如5A所圖示。當偵測到手向顯示螢幕的該正交移動，該觸摸事件預測模組40可被配置為決定僅緊接著位於手的第二位置之下的圖標才是預期的觸摸輸入42，因為不太可能有任何其他的可能輸入被選擇。
在一些實施例中，預期的觸摸輸入可經由顯示螢幕上的指示作為回饋而提供給使用者。例如，被決定為預期的觸摸輸入的一或多個圖標可變得更亮及/或改成與顯示螢幕上其他圖標不同的顏色。在另一個實例中，被決定為預期的觸摸輸入的一或多個圖標可以是可見的，並且其他圖標可以從顯示螢幕上淡入淡出或消失。圖標可回應於手運動(例如，圖3-6中所圖示的第一、第二、第三及/或第四手運動)向使用者即時提供可逆指標。以此種方式，使用者可接收與預期的觸摸輸入相關聯的回饋。
圖7是圖示出預期計算設備中的一或多個觸摸事件的方法100的一個實施例的流程圖。將理解的是，方法100可以由上述計算設備10的硬體和軟體部件或由其他合適的硬體和軟體部件來執行。
方法100包括，在102處，在計算設備的諸如多點觸摸顯示螢幕等觸敏顯示螢幕上顯示具有一狀態的圖形化使用者介面，該狀態具有複數個可能的觸摸輸入。在104處，該方法包括經由計算設備的感測器感應使用者手的位置及/或移動。該感應可由感測器執行，該感測器選自由例如上述的像素內感測器、電容性觸摸感測器、電阻性觸摸感測器和紅外感測器組成的組。或者，可以採用其他感測器技術。
如在106所圖示，感應使用者手的位置及/或移動可進一步包括當手離開顯示螢幕的上表面一定距離時偵測手的位置及/或移動。另外，如108所圖示，感應使用者手的位置及/或移動亦可包括偵測手的一或多個手指的位置和移動。此舉使得該方法能區分右手和左手，並區分手的各個手指，此舉在決定最有可能執行觸摸輸入的食指和中指的位置和預期的移動時會有用。另外，在一些實施例中，如110所圖示，感應使用者手的位置及/或移動亦可包括偵測手握的觸控筆的位置和移動，此舉能更精確地預測預期的輸入。
在112處，該方法亦可包括基於感應到的使用者手位置及/或移動以及具有複數個可能的觸摸輸入的使用者介面的狀態來計算一或多個預期的觸摸輸入。該計算可由預測引擎執行，並且，如上詳述，該計算可以基於先前的使用資料。
在116處，該方法可包括預處理用於各預期的觸摸輸入的資料。如118處所圖示，預處理資料可包括將欲在各預期的觸摸事件執行時所顯示的資料預載入到快取記憶體中。進一步，如在120處所圖示，預處理資料可包括為各預期的觸摸事件執行高級計算。116處預處理而產生的經預處理的資料可被儲存在已知位置，該已知位置已傳達給發出請求的程式，以便該程式可隨後存取並顯示該經預處理的資料。
在124處，該方法可包括偵測與預期的觸摸輸入之一相匹配的實際觸摸輸入。實際觸摸輸入通常是使用者經由將手的手指及/或手掌與顯示螢幕的上表面接觸而輸入的手勢。該偵測可由上述的預測模組執行，或由在計算設備10上執行的獨立的手勢辨識模組執行。
在126處，該方法包括在圖形化使用者介面上顯示用於實際觸摸輸入的經預處理的資料。在接收到來自預處理模組的經預處理的資料在已知位置可用並待顯示的資訊之後，經預處理的資料的顯示可由顯示圖形化使用者介面的程式的圖形化使用者介面模組執行。經由顯示經預處理的資料，等待時間可減少。亦即，使用者對GUI元件的選擇與後續資料在顯示螢幕上的顯示之間的時滯將減少，並具有增進使用者體驗的附隨效果。
在一些實施例中，方法100可包括在114處基於先前的使用資料計算各預期的使用者輸入被選擇的估計概率，以及在122處針對具有較高概率的預期的使用者輸入進行資料的預處理，並如上所述，放棄對具有較低概率的預期使用者輸入的預處理。
在一些實施例中，方法100可以可選地包括對使用者的關於預期觸摸輸入的指示。該指示可包括回應於上述的預期的使用者觸摸，將GUI的多個部分改變得更亮、改變顏色、淡入淡出及/或消失。
將理解的是，可由應用程式設計介面全部或至少部分地執行以下步驟：112處計算一或多個預期的觸摸輸入，114處計算估計概率及/或116處預處理用於各預期的觸摸輸入的資料，如上所述，該應用程式設計介面將程式連結至計算設備上的作業系統功能。
上述系統和方法可用來減少使用者與計算設備上的觸敏顯示器的圖形化使用者介面互動的等待時間，從而使得任務完成得更快並改善使用者體驗。
術語「模組」、「程式」和「引擎」在此處用於表示當被計算設備的處理器執行時執行一或多個特定功能的軟體。該等術語意在涵蓋例如單個或成組的可執行檔、資料檔、庫、驅動程式、腳本、資料庫記錄等。此處所描述的實施例顯示對該等模組、程式以及引擎的一個實例組織，然而，應該理解的是，此處所描述的功能可由按不同方式組織的軟體部件實現。
應該理解，此處述及之配置及/或方法在本質上是示例性的，並且，由於可能存在多個變體，所以該等特定實施例或實例不具有限制意義。本文中述及之具體常式或方法可表示任意數量的處理策略中的一或多個。由此，所圖示的各個動作可按述及之循序執行、按其他循序執行、並行地執行或者在某些情況下被省略。同樣，可改變上述程序的次序。
本案的標的包括各種程序、系統和配置的所有新穎和非顯而易見的組合和子群組合，和此處所揭示的其他特徵、功能、動作及/或特性、以及以上任何和全部均等物。
5．．．手、第一位置
5A．．．第二位置
10．．．計算設備
12．．．顯示螢幕
14．．．間隙
16．．．陰影
18．．．感測器
20．．．手位置
22．．．手移動
24．．．大型儲存單元
26．．．處理器
28．．．記憶體
29．．．資料匯流排
30．．．感測器輸入
32．．．程式
34．．．圖形介面模組
36．．．圖形化使用者介面
38．．．狀態
40．．．觸摸事件預測模組
42．．．觸摸輸入
44．．．預處理模組
46．．．隔開輸入
48．．．實際觸摸輸入
50．．．快取記憶體
52．．．高級計算
54．．．資料
56．．．統計引擎
58．．．估計概率
60．．．預測引擎
100．．．方法
102．．．步驟
104．．．步驟
106．．．步驟
108．．．步驟
110．．．步驟
112．．．步驟
114．．．步驟
116．．．步驟
118．．．步驟
120．．．步驟
122．．．步驟
124．．．步驟
126．．．步驟
圖1是圖示出計算設備的一個實施例的透視圖，該計算設備被配置成預期一或多個觸摸事件；
圖2是圖示出圖1的計算設備的軟體和硬體配置的示意圖；
圖3是圖示出圖1的計算設備的俯視圖，該俯視圖圖示有在計算設備上方的第一手運動；
圖4是圖示出圖1的計算設備的俯視圖，該俯視圖圖示有在計算設備上方的第二手運動；
圖5是圖示出圖1的計算設備的俯視圖，該俯視圖圖示有在計算設備上方的第三手運動；
圖6是圖示出圖1的計算設備的俯視圖，該俯視圖圖示有在計算設備上方的第四手運動；
圖7是圖示出預期一或多個觸摸事件的方法的一個實施例的流程圖。
5．．．手
10．．．計算設備
12．．．顯示螢幕
14．．．間隙
16．．．陰影

Claims (14)

  1. 一種計算設備，該計算設備包括：一多點觸敏顯示螢幕，包括一感測器，該感測器被配置成當一使用者手是從該顯示螢幕的一頂表面隔開一距離時，首先感應隔開輸入(spaced apart input)，該隔開輸入指示該使用者手的一位置及/或移動，該感測器進一步被配置成當該使用者手正接觸到該顯示螢幕時，接著感應一實際觸摸輸入；一顯示在該顯示螢幕上的圖形化使用者介面，該圖形化使用者介面具有包括複數個可能的觸摸輸入的一狀態，該複數個觸摸輸入的每一者與該圖形化使用者介面的一特定元件(element)相關聯；一觸摸事件預測模組，該觸摸事件預測模組由一處理器執行，該觸摸事件預測模組被配置成在偵測到來自一使用者的該實際觸摸輸入之前基於該首先感應到的隔開輸入而計算一或多個預期的觸摸輸入，該首先感應到的隔開輸入指示相對於具有該複數個可能的觸摸輸入的使用者介面的一目前狀態之該使用者手的位置及/或移動，該觸摸事件預測模組包括一統計引擎，該統計引擎被配置成基於先前的使用資料及基於至少兩個懸浮位置(hover position)而計算該等預期的使用者輸入各者被選擇的一估計概率，該至少兩個懸浮位置指示該使用者手的移動，並命令(instruct)該預處理模組將預處理資源配置給具有較高選 擇概率的一或多個預期的觸摸輸入並放棄(forgo)對該等其他預期的觸摸輸入的預處理；及一預處理模組，該預處理模組由該處理器執行，該預處理模組被配置成，在該計算設備，產生針對各預期的觸摸輸入的經預處理的資料，該經預處理的資料與該圖形化使用者介面的一或多個元件(element)的各者相關聯，並且當隨後該偵測到從該使用者處接收到的與該等預期的觸摸輸入之一者相匹配的該實際觸摸輸入時，使針對該實際觸摸輸入的該經預處理的資料在該圖形化使用者介面上顯示，該預處理模組被進一步配置成：將在預期一觸摸事件時將被顯示的資料，預載入至一快取記憶體(cache)中，及/或對該預期的觸摸事件實行一高級計算(advance computation)。
  2. 如請求項1述及之計算設備，其中該感測器是一像素內光感測器、電容性觸摸感測器、電阻性觸摸感測器、壓力感測器或紅外感測器。
  3. 如請求項1述及之計算設備，其中該觸摸事件預測模組和該預處理模組是一應用程式設計介面的一部分，該應用程式設計介面將程式連結至該計算設備上的作業系統功能。
  4. 如請求項1述及之計算設備，其中該計算設備被配置成 一行動電話、一平板計算設備、一膝上型電腦、一桌上型電腦、一桌面電腦或一自助服務終端電腦。
  5. 如請求項1述及之計算設備，其中該感測器被配置成偵測該使用者手的一或多個手指(digits)及/或由該使用者手握的一觸控筆的位置及/或移動。
  6. 如請求項1述及之計算設備，其中該計算設備被配置成向該預期的觸摸輸入的該使用者顯示一指示，其中該指示包括將圖形化使用者介面的部分改變成更亮、改變顏色、淡入淡出及/或消失，以便提供該預期的觸摸輸入的使用者回饋(user feedback)。
  7. 如請求項1述及之計算設備，其中：該感測器被配置成藉由感應到由該使用者手在該顯示螢幕的該頂表面上之一投射的陰影(shadow cast)已隨時間變得較小且較銳，來感應該隔開輸入；及作為回應，該觸摸事件預測模組被進一步配置以判定該使用者手正向該圖形化使用者介面的該等元件中之一者移動。
  8. 一種計算方法，該方法包括以下步驟：顯示包括一狀態的一圖形化使用者介面，該狀態具有在一計算設備的一觸敏顯示螢幕上的複數個可能的觸摸 輸入，該複數個觸摸輸入的各者與該圖形化使用者介面的一特定元件(element)相關聯；當一使用者手是從該顯示螢幕的一頂表面隔開一垂直(orthogonal)距離時，經由該計算設備的一感測器感應隔開輸入(spaced apart input)，該隔開輸入指示該使用者手的一位置及/或移動；當該使用者手接觸該顯示螢幕時，在偵測到來自一使用者的一實際觸摸輸入之前，基於該感應的隔開輸入來計算一或多個預期的觸摸輸入，該隔開輸入指示相關於具有該複數個可能的觸摸輸入的該使用者介面的一目前狀態之該使用者手位置及/或移動；基於先前的使用資料及基於至少兩個懸浮位置(hover position)而計算該等預期的觸摸輸入各者被選擇的一估計概率，該至少兩個懸浮位置指示該使用者手的移動；在該計算設備，對具有一較高概率的預期的觸摸輸入預處理資料，並放棄(forgoing)對具有一較低概率的預期的觸摸輸入的預處理，該預處理資料是藉由將在當具有該較高概率的各預期的觸摸輸入實行時所將被顯示的資料預載入至一快取記憶體(cache)，及對具有該較高概率的各觸摸輸入實行一高級計算(advance computation)，該資料與該圖形化使用者介面的一或多個元件(element)中之各者相關聯；當該使用者手接觸該顯示螢幕時，偵測與該等預期的觸摸輸入之一者相匹配的該實際觸摸輸入；及 在該圖形化使用者介面上顯示用於該實際觸摸輸入的該經預處理的資料。
  9. 如請求項8述及之方法，其中計算一或多個預期的觸摸輸入以及針對各預期的觸摸輸入的預處理資料是至少部分地由一應用程式設計介面來實行，該應用程式設計介面將程式連結至該計算設備上的作業系統功能。
  10. 如請求項8述及之方法，其中感應是由一感測器實行，該感測器選自由像素內光感測器、電容性觸摸感測器、電阻性觸摸感測器和紅外感測器組成的該組。
  11. 如請求項8述及之方法，其中感應該使用者手的該位置及/或移動亦包括以下步驟：偵測該使用者手的一或多個手指(digits)或由該使用者手握的一觸控筆的一位置及/或移動。
  12. 如請求項8述及之方法，該方法亦包括以下步驟：在該顯示螢幕上向該預期的觸摸輸入的該使用者顯示一指示，其中該指示包括將該圖形化使用者介面的部分改變成更亮、改變顏色、淡入淡出及/或消失，以便提供該預期的觸摸輸入的使用者回饋(user feedback)。
  13. 如請求項8述及之計算設備，其中該計算設備被配置成 一行動電話、一平板計算設備、一膝上型電腦、一桌上型電腦、一桌面電腦或一自助服務終端電腦。
  14. 一種計算方法，該方法包括以下步驟：顯示一圖形化使用者介面於一計算設備的一觸敏顯示螢幕上，該圖形化使用者介面包括具有複數個可能的觸摸輸入的一狀態，該複數個觸摸輸入的各者與該圖形化使用者介面的一特定元件(element)相關聯；當一使用者手是從該顯示螢幕的一頂表面隔開一距離時，經由該計算設備的一感測器感應隔開輸入(spaced apart input)，該隔開輸入指示該使用者手的一位置及/或移動；當該使用者手接觸該顯示螢幕時，在偵測到來自一使用者的一實際觸摸輸入之前，基於該感應的隔開輸入來計算一或多個預期的觸摸輸入，該隔開輸入指示相關於具有該複數個可能的觸摸輸入的該使用者介面的一目前狀態之該使用者手位置及/或移動；基於先前的使用資料及基於至少兩個懸浮位置(hover position)而計算該等預期的觸摸輸入各者被選擇的一估計概率，該至少兩個懸浮位置指示該使用者手的移動；在該計算設備，對具有一較高概率的預期的觸摸輸入預處理資料，並放棄(forgoing)對具有一較低概率的預期的觸摸輸入的預處理，該預處理資料是藉由將在當具有該較高概率的各預期的觸摸輸入實行時所將被顯示的資 料預載入至一快取記憶體(cache)，及/或是藉由對具有該較高概率的各預期的觸摸輸入實行一高級計算(advance computation)，預載入的該資料與該圖形化使用者介面的一或多個元件(element)中之各者相關聯；當該使用者手接觸該顯示螢幕時，偵測與該等預期的觸摸輸入之一者相匹配的該實際觸摸輸入；及在該圖形化使用者介面上顯示用於該實際觸摸輸入的該經預處理的資料；其中該計算設備被配置成一行動電話、一平板計算設備、一膝上型電腦、一桌上型電腦、一桌面電腦或一自助服務終端電腦。
TW100143765A 2010-12-29 2011-11-29 計算設備中的觸摸事件預期 TWI544369B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US12/981,184 US9354804B2 (en) 2010-12-29 2010-12-29 Touch event anticipation in a computing device

Publications (2)

Publication Number Publication Date
TW201227438A TW201227438A (en) 2012-07-01
TWI544369B true TWI544369B (zh) 2016-08-01

Family

ID=46380342

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100143765A TWI544369B (zh) 2010-12-29 2011-11-29 計算設備中的觸摸事件預期

Country Status (8)

Country Link
US (1) US9354804B2 (zh)
EP (1) EP2659341B1 (zh)
JP (1) JP5955861B2 (zh)
KR (1) KR101892315B1 (zh)
CN (1) CN102609130B (zh)
HK (1) HK1171829A1 (zh)
TW (1) TWI544369B (zh)
WO (1) WO2012092291A2 (zh)

Families Citing this family (184)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7991910B2 (en) 2008-11-17 2011-08-02 Amazon Technologies, Inc. Updating routing information based on client location
US8028090B2 (en) 2008-11-17 2011-09-27 Amazon Technologies, Inc. Request routing utilizing client location information
US7962597B2 (en) 2008-03-31 2011-06-14 Amazon Technologies, Inc. Request routing based on class
US8533293B1 (en) 2008-03-31 2013-09-10 Amazon Technologies, Inc. Client side cache management
US8606996B2 (en) 2008-03-31 2013-12-10 Amazon Technologies, Inc. Cache optimization
US8447831B1 (en) 2008-03-31 2013-05-21 Amazon Technologies, Inc. Incentive driven content delivery
US7970820B1 (en) 2008-03-31 2011-06-28 Amazon Technologies, Inc. Locality based content distribution
US8601090B1 (en) 2008-03-31 2013-12-03 Amazon Technologies, Inc. Network resource identification
US8321568B2 (en) 2008-03-31 2012-11-27 Amazon Technologies, Inc. Content management
US8156243B2 (en) 2008-03-31 2012-04-10 Amazon Technologies, Inc. Request routing
US7925782B2 (en) 2008-06-30 2011-04-12 Amazon Technologies, Inc. Request routing using network computing components
US9912740B2 (en) 2008-06-30 2018-03-06 Amazon Technologies, Inc. Latency measurement in resource requests
US9407681B1 (en) 2010-09-28 2016-08-02 Amazon Technologies, Inc. Latency measurement in resource requests
US8122098B1 (en) 2008-11-17 2012-02-21 Amazon Technologies, Inc. Managing content delivery network service providers by a content broker
US8060616B1 (en) 2008-11-17 2011-11-15 Amazon Technologies, Inc. Managing CDN registration by a storage provider
US8732309B1 (en) 2008-11-17 2014-05-20 Amazon Technologies, Inc. Request routing utilizing cost information
US8521880B1 (en) 2008-11-17 2013-08-27 Amazon Technologies, Inc. Managing content delivery network service providers
US8065417B1 (en) 2008-11-17 2011-11-22 Amazon Technologies, Inc. Service provider registration by a content broker
US8073940B1 (en) 2008-11-17 2011-12-06 Amazon Technologies, Inc. Managing content delivery network service providers
US8688837B1 (en) 2009-03-27 2014-04-01 Amazon Technologies, Inc. Dynamically translating resource identifiers for request routing using popularity information
US8521851B1 (en) 2009-03-27 2013-08-27 Amazon Technologies, Inc. DNS query processing using resource identifiers specifying an application broker
US8412823B1 (en) 2009-03-27 2013-04-02 Amazon Technologies, Inc. Managing tracking information entries in resource cache components
US8756341B1 (en) 2009-03-27 2014-06-17 Amazon Technologies, Inc. Request routing utilizing popularity information
US8782236B1 (en) 2009-06-16 2014-07-15 Amazon Technologies, Inc. Managing resources using resource expiration data
US8397073B1 (en) 2009-09-04 2013-03-12 Amazon Technologies, Inc. Managing secure content in a content delivery network
US8433771B1 (en) 2009-10-02 2013-04-30 Amazon Technologies, Inc. Distribution network with forward resource propagation
US9495338B1 (en) 2010-01-28 2016-11-15 Amazon Technologies, Inc. Content distribution network
US8756272B1 (en) 2010-08-26 2014-06-17 Amazon Technologies, Inc. Processing encoded content
US8930513B1 (en) 2010-09-28 2015-01-06 Amazon Technologies, Inc. Latency measurement in resource requests
US8938526B1 (en) 2010-09-28 2015-01-20 Amazon Technologies, Inc. Request routing management based on network components
US8577992B1 (en) 2010-09-28 2013-11-05 Amazon Technologies, Inc. Request routing management based on network components
US9712484B1 (en) 2010-09-28 2017-07-18 Amazon Technologies, Inc. Managing request routing information utilizing client identifiers
US10958501B1 (en) 2010-09-28 2021-03-23 Amazon Technologies, Inc. Request routing information based on client IP groupings
US8819283B2 (en) 2010-09-28 2014-08-26 Amazon Technologies, Inc. Request routing in a networked environment
US8468247B1 (en) 2010-09-28 2013-06-18 Amazon Technologies, Inc. Point of presence management in request routing
US10097398B1 (en) 2010-09-28 2018-10-09 Amazon Technologies, Inc. Point of presence management in request routing
US9003035B1 (en) 2010-09-28 2015-04-07 Amazon Technologies, Inc. Point of presence management in request routing
US8924528B1 (en) 2010-09-28 2014-12-30 Amazon Technologies, Inc. Latency measurement in resource requests
US8452874B2 (en) 2010-11-22 2013-05-28 Amazon Technologies, Inc. Request routing processing
US9391949B1 (en) 2010-12-03 2016-07-12 Amazon Technologies, Inc. Request routing processing
US8717318B2 (en) * 2011-03-29 2014-05-06 Intel Corporation Continued virtual links between gestures and user interface elements
US8751564B2 (en) * 2011-04-19 2014-06-10 Echostar Technologies L.L.C. Reducing latency for served applications by anticipatory preprocessing
US10467042B1 (en) 2011-04-27 2019-11-05 Amazon Technologies, Inc. Optimized deployment based upon customer locality
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US20130047100A1 (en) * 2011-08-17 2013-02-21 Google Inc. Link Disambiguation For Touch Screens
US20130063368A1 (en) * 2011-09-14 2013-03-14 Microsoft Corporation Touch-screen surface temperature control
WO2013095678A1 (en) 2011-12-23 2013-06-27 Intel Corporation Mechanism to provide feedback regarding computing system command gestures
US8904009B1 (en) 2012-02-10 2014-12-02 Amazon Technologies, Inc. Dynamic content delivery
US10021179B1 (en) 2012-02-21 2018-07-10 Amazon Technologies, Inc. Local resource delivery network
US9172674B1 (en) 2012-03-21 2015-10-27 Amazon Technologies, Inc. Managing request routing information utilizing performance information
US9015682B1 (en) 2012-03-28 2015-04-21 Google Inc. Computer code transformations to create synthetic global scopes
US10623408B1 (en) 2012-04-02 2020-04-14 Amazon Technologies, Inc. Context sensitive object management
CN104487928B (zh) 2012-05-09 2018-07-06 苹果公司 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
EP3264252B1 (en) 2012-05-09 2019-11-27 Apple Inc. Device, method, and graphical user interface for performing an operation in accordance with a selected mode of operation
CN109298789B (zh) 2012-05-09 2021-12-31 苹果公司 用于针对激活状态提供反馈的设备、方法和图形用户界面
DE202013012233U1 (de) 2012-05-09 2016-01-18 Apple Inc. Vorrichtung und grafische Benutzerschnittstelle zum Anzeigen zusätzlicher Informationen in Antwort auf einen Benutzerkontakt
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
CN108287651B (zh) * 2012-05-09 2021-04-13 苹果公司 用于针对在用户界面中执行的操作提供触觉反馈的方法和装置
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
CN109062488B (zh) 2012-05-09 2022-05-27 苹果公司 用于选择用户界面对象的设备、方法和图形用户界面
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
US20150205585A1 (en) * 2012-06-04 2015-07-23 Google Inc. Delayed compiling of scripting language code
US9154551B1 (en) 2012-06-11 2015-10-06 Amazon Technologies, Inc. Processing DNS queries to identify pre-processing information
US20140035829A1 (en) * 2012-07-31 2014-02-06 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Adjusting a displayed widget or delineated touch-selectable area of a touch screen dispaly in response to a predicted touch-contact site of an approaching user-appendage
SE537553C2 (sv) 2012-08-03 2015-06-09 Crunchfish Ab Förbättrad identifiering av en gest
GB201214663D0 (en) * 2012-08-17 2012-10-03 Spencer Michael D User interaction method for input selection
CN103403665B (zh) * 2012-08-29 2016-08-03 华为终端有限公司 一种终端设备获取指令的方法及终端设备
US9525659B1 (en) 2012-09-04 2016-12-20 Amazon Technologies, Inc. Request routing utilizing point of presence load information
US9323577B2 (en) 2012-09-20 2016-04-26 Amazon Technologies, Inc. Automated profiling of resource usage
US9135048B2 (en) 2012-09-20 2015-09-15 Amazon Technologies, Inc. Automated profiling of resource usage
CN102929532B (zh) * 2012-09-29 2015-07-22 东莞宇龙通信科技有限公司 应用程序的启动方法及通信终端
JP6000797B2 (ja) * 2012-10-17 2016-10-05 シャープ株式会社 タッチパネル式入力装置、その制御方法、および、プログラム
GB2507556A (en) * 2012-11-05 2014-05-07 Ibm Configuring a keyboard model
US10205698B1 (en) 2012-12-19 2019-02-12 Amazon Technologies, Inc. Source-dependent address resolution
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
KR20170081744A (ko) 2012-12-29 2017-07-12 애플 인크. 다중 접촉 제스처에 대한 촉각적 출력의 발생을 보류하는 디바이스, 방법, 및 그래픽 사용자 인터페이스
EP2939095B1 (en) 2012-12-29 2018-10-03 Apple Inc. Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
CN107831991B (zh) 2012-12-29 2020-11-27 苹果公司 用于确定是滚动还是选择内容的设备、方法和图形用户界面
JP6138274B2 (ja) 2012-12-29 2017-05-31 アップル インコーポレイテッド ユーザインタフェース階層をナビゲートするためのデバイス、方法、及びグラフィカルユーザインタフェース
KR101958582B1 (ko) 2012-12-29 2019-07-04 애플 인크. 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
US8814683B2 (en) 2013-01-22 2014-08-26 Wms Gaming Inc. Gaming system and methods adapted to utilize recorded player gestures
KR102043148B1 (ko) * 2013-02-19 2019-11-11 엘지전자 주식회사 이동 단말기 및 그의 터치 좌표 예측 방법
JP5991538B2 (ja) * 2013-02-20 2016-09-14 富士ゼロックス株式会社 データ処理装置、データ処理システム及びプログラム
US20140253427A1 (en) * 2013-03-06 2014-09-11 Qualcomm Mems Technologies, Inc. Gesture based commands
US9164609B2 (en) 2013-03-13 2015-10-20 Amazon Technologies, Inc. Managing sensory information of a user device
KR102117450B1 (ko) * 2013-03-26 2020-06-01 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US20140317428A1 (en) * 2013-04-23 2014-10-23 Htc Corporation Pre-processing Operation Method and Related Electronic Device
US9294391B1 (en) 2013-06-04 2016-03-22 Amazon Technologies, Inc. Managing network computing components utilizing request routing
US20150002454A1 (en) * 2013-07-01 2015-01-01 Kaining Yuan Quick response capacitive touch screen devices
KR20150014679A (ko) * 2013-07-30 2015-02-09 삼성전자주식회사 디스플레이장치 및 그 제어방법
US10722789B2 (en) * 2013-08-20 2020-07-28 Microsoft Technology Licensing, Llc Integrated game development cloud computing platform
US9086749B2 (en) 2013-08-30 2015-07-21 Qualcomm Incorporated System and method for improved processing of touch sensor data
MX2016003408A (es) * 2013-09-18 2016-06-30 Tactual Labs Co Sistemas y metodos para proporcionar respuesta a una entrada de usuario utilizando informacion sobre cambios de estado que predicen una entrada de usuario futura.
KR101532581B1 (ko) 2013-11-27 2015-07-01 주식회사 지니틱스 터치입력위치 오류의 보정방법 및 이를 위한 장치
US9501183B2 (en) * 2013-12-02 2016-11-22 Nokia Technologies Oy Method, apparatus and computer program product for distinguishing a touch event from a gesture
KR101485907B1 (ko) * 2014-01-03 2015-02-11 연세대학교 산학협력단 확률모델에 기반한 데이터 프리로드 방법 및 장치
US9372577B2 (en) 2014-02-21 2016-06-21 Google Technology Holdings LLC Method and device to reduce swipe latency
WO2015167511A2 (en) * 2014-04-30 2015-11-05 Empire Technology Development Llc Adjusting tap position on touch screen
US9406025B2 (en) * 2014-06-04 2016-08-02 International Business Machines Corporation Touch prediction for visual displays
CN104035714B (zh) * 2014-06-24 2017-05-03 中科创达软件股份有限公司 一种基于安卓系统的触摸事件处理方法、装置和设备
US10025427B2 (en) 2014-06-27 2018-07-17 Microsoft Technology Licensing, Llc Probabilistic touch sensing
CN104238941A (zh) * 2014-09-01 2014-12-24 联想(北京)有限公司 一种信息处理方法及电子设备
WO2016044807A1 (en) * 2014-09-18 2016-03-24 Tactual Labs Co. Systems and methods for using hover information to predict touch locations and reduce or eliminate touchdown latency
US9483134B2 (en) * 2014-10-17 2016-11-01 Elwha Llc Systems and methods for actively resisting touch-induced motion
TWI575429B (zh) * 2014-11-24 2017-03-21 義隆電子股份有限公司 電容式觸控面板模組之操作模式切換方法
JP6394335B2 (ja) * 2014-12-03 2018-09-26 日本電気株式会社 入力予測装置、入力予測方法および入力予測プログラム
JP2016110296A (ja) * 2014-12-03 2016-06-20 株式会社ゼンリンデータコム ウェアラブルデバイス、情報処理方法及びプログラム
US10097448B1 (en) 2014-12-18 2018-10-09 Amazon Technologies, Inc. Routing mode and point-of-presence selection service
US10033627B1 (en) 2014-12-18 2018-07-24 Amazon Technologies, Inc. Routing mode and point-of-presence selection service
US10091096B1 (en) 2014-12-18 2018-10-02 Amazon Technologies, Inc. Routing mode and point-of-presence selection service
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
AU2016101435B4 (en) * 2015-03-08 2017-04-06 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9632664B2 (en) * 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
EP3268853B1 (en) * 2015-03-13 2021-05-05 Telefonaktiebolaget LM Ericsson (PUBL) Device for handheld operation and method thereof
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US10225326B1 (en) 2015-03-23 2019-03-05 Amazon Technologies, Inc. Point of presence based data uploading
US9819567B1 (en) 2015-03-30 2017-11-14 Amazon Technologies, Inc. Traffic surge management for points of presence
US9887932B1 (en) 2015-03-30 2018-02-06 Amazon Technologies, Inc. Traffic surge management for points of presence
US9887931B1 (en) 2015-03-30 2018-02-06 Amazon Technologies, Inc. Traffic surge management for points of presence
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10152208B2 (en) 2015-04-01 2018-12-11 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US9832141B1 (en) 2015-05-13 2017-11-28 Amazon Technologies, Inc. Routing based request correlation
US10185464B2 (en) 2015-05-28 2019-01-22 Microsoft Technology Licensing, Llc Pausing transient user interface elements based on hover information
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9658704B2 (en) 2015-06-10 2017-05-23 Apple Inc. Devices and methods for manipulating user interfaces with a stylus
US10616179B1 (en) 2015-06-25 2020-04-07 Amazon Technologies, Inc. Selective routing of domain name system (DNS) requests
US10097566B1 (en) 2015-07-31 2018-10-09 Amazon Technologies, Inc. Identifying targets of network attacks
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US9933901B2 (en) * 2015-08-24 2018-04-03 Apple Inc. Reduction of media application response time through prediction of remote controller input data
US10114499B2 (en) * 2015-08-24 2018-10-30 Apple Inc. Enhanced handling of remote controller touchpad input data
CN105204764B (zh) * 2015-09-06 2020-08-21 惠州Tcl移动通信有限公司 具有悬浮屏的手持终端、显示设备及遥控方法
US9742795B1 (en) 2015-09-24 2017-08-22 Amazon Technologies, Inc. Mitigating network attacks
US9774619B1 (en) 2015-09-24 2017-09-26 Amazon Technologies, Inc. Mitigating network attacks
US9794281B1 (en) 2015-09-24 2017-10-17 Amazon Technologies, Inc. Identifying sources of network attacks
US10270878B1 (en) 2015-11-10 2019-04-23 Amazon Technologies, Inc. Routing for origin-facing points of presence
US10049051B1 (en) 2015-12-11 2018-08-14 Amazon Technologies, Inc. Reserved cache space in content delivery networks
US10257307B1 (en) 2015-12-11 2019-04-09 Amazon Technologies, Inc. Reserved cache space in content delivery networks
US10348639B2 (en) 2015-12-18 2019-07-09 Amazon Technologies, Inc. Use of virtual endpoints to improve data transmission rates
CN105653085B (zh) * 2015-12-23 2018-07-24 小米科技有限责任公司 触摸响应方法和装置
US10809842B2 (en) 2016-05-26 2020-10-20 Microsoft Technology Licensing, Llc Active touch input device pairing negotiation
US10228781B2 (en) * 2016-05-31 2019-03-12 Microsoft Technology Licensing, Llc Resistive force sensor
US10075551B1 (en) 2016-06-06 2018-09-11 Amazon Technologies, Inc. Request management for hierarchical cache
US10110694B1 (en) 2016-06-29 2018-10-23 Amazon Technologies, Inc. Adaptive transfer rate for retrieving content from a server
US10353478B2 (en) * 2016-06-29 2019-07-16 Google Llc Hover touch input compensation in augmented and/or virtual reality
CN107688478A (zh) * 2016-08-05 2018-02-13 阿里巴巴集团控股有限公司 终端、应用信息的显示方法及装置
US9992086B1 (en) 2016-08-23 2018-06-05 Amazon Technologies, Inc. External health checking of virtual private cloud network environments
US10033691B1 (en) 2016-08-24 2018-07-24 Amazon Technologies, Inc. Adaptive resolution of domain name requests in virtual private cloud network environments
US10514799B2 (en) * 2016-09-08 2019-12-24 Google Llc Deep machine learning to perform touch motion prediction
US10469513B2 (en) 2016-10-05 2019-11-05 Amazon Technologies, Inc. Encrypted network addresses
US10831549B1 (en) 2016-12-27 2020-11-10 Amazon Technologies, Inc. Multi-region request-driven code execution system
US10372499B1 (en) 2016-12-27 2019-08-06 Amazon Technologies, Inc. Efficient region selection system for executing request-driven code
US10507385B2 (en) 2017-01-25 2019-12-17 Kieran S. Lyden Game controller
US10938884B1 (en) 2017-01-30 2021-03-02 Amazon Technologies, Inc. Origin server cloaking using virtual private cloud network environments
US10503613B1 (en) 2017-04-21 2019-12-10 Amazon Technologies, Inc. Efficient serving of resources during server unavailability
US11075987B1 (en) 2017-06-12 2021-07-27 Amazon Technologies, Inc. Load estimating content delivery network
US10447648B2 (en) 2017-06-19 2019-10-15 Amazon Technologies, Inc. Assignment of a POP to a DNS resolver based on volume of communications over a link between client devices and the POP
US10742593B1 (en) 2017-09-25 2020-08-11 Amazon Technologies, Inc. Hybrid content request routing system
CN107967058B (zh) * 2017-12-07 2021-04-13 联想(北京)有限公司 信息处理方法、电子设备和计算机可读存储介质
CN108055405B (zh) * 2017-12-26 2020-12-15 重庆传音通讯技术有限公司 唤醒终端的方法及终端
US10937240B2 (en) 2018-01-04 2021-03-02 Intel Corporation Augmented reality bindings of physical objects and virtual objects
US10592578B1 (en) 2018-03-07 2020-03-17 Amazon Technologies, Inc. Predictive content push-enabled content delivery network
US10862852B1 (en) 2018-11-16 2020-12-08 Amazon Technologies, Inc. Resolution of domain name requests in heterogeneous network environments
US11025747B1 (en) 2018-12-12 2021-06-01 Amazon Technologies, Inc. Content request pattern-based routing system
US10684725B1 (en) 2019-02-01 2020-06-16 Microsoft Technology Licensing, Llc Touch input hover
US11354969B2 (en) * 2019-12-20 2022-06-07 Igt Touch input prediction using gesture input at gaming devices, and related devices, systems, and methods
WO2023120809A1 (en) * 2021-12-22 2023-06-29 Samsung Electronics Co., Ltd. Methods and systems for identification of an unintended touch at a user interface of a device
US11720205B2 (en) 2021-12-27 2023-08-08 Stmicroelectronics Ltd. Touch report rate of touchscreen
KR20230131020A (ko) * 2022-03-04 2023-09-12 삼성전자주식회사 전자 장치 및 그 제어 방법

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4986280A (en) 1988-07-20 1991-01-22 Arthur D. Little, Inc. Hand position/measurement control system
JP3560670B2 (ja) 1995-02-06 2004-09-02 富士通株式会社 適応的認識システム
US6720949B1 (en) 1997-08-22 2004-04-13 Timothy R. Pryor Man machine interfaces and applications
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
EP1717684A3 (en) 1998-01-26 2008-01-23 Fingerworks, Inc. Method and apparatus for integrating manual input
US7240299B2 (en) * 2001-04-26 2007-07-03 International Business Machines Corporation Method for improving usage of a graphic user interface pointing device
JP2003005912A (ja) 2001-06-20 2003-01-10 Hitachi Ltd タッチパネル付きディスプレイ装置及び表示方法
KR100444074B1 (ko) 2002-10-04 2004-08-12 현대자동차주식회사 터치 스크린 시스템
GB0315151D0 (en) * 2003-06-28 2003-08-06 Ibm Graphical user interface operation
JP2006178625A (ja) 2004-12-21 2006-07-06 Canon Inc 座標入力装置及びその制御方法、並びにプログラム
KR101085447B1 (ko) 2004-12-31 2011-11-21 삼성전자주식회사 터치 위치 검출 장치 및 이의 터치 위치 검출 방법과,이를 구비한 터치 스크린 표시 장치
JP4479962B2 (ja) 2005-02-25 2010-06-09 ソニー エリクソン モバイル コミュニケーションズ， エービー 入力処理プログラム、携帯端末装置、及び入力処理方法
US7802202B2 (en) * 2005-03-17 2010-09-21 Microsoft Corporation Computer interaction based upon a currently active input device
CN100583013C (zh) 2005-09-23 2010-01-20 鸿富锦精密工业（深圳）有限公司 用户操作控制装置及其方法
US7747749B1 (en) * 2006-05-05 2010-06-29 Google Inc. Systems and methods of efficiently preloading documents to client devices
WO2008093332A2 (en) 2007-01-30 2008-08-07 Zvi Feldman Systems and methods for producing clip-ons for a primary eyewear
US8065624B2 (en) 2007-06-28 2011-11-22 Panasonic Corporation Virtual keypad systems and methods
JP4372188B2 (ja) * 2007-12-21 2009-11-25 株式会社東芝 情報処理装置および表示制御方法
KR20090089254A (ko) * 2008-02-18 2009-08-21 세이코 엡슨 가부시키가이샤 센싱 장치, 표시 장치, 전자 기기 및, 센싱 방법
JP2009217416A (ja) 2008-03-10 2009-09-24 Sanyo Electric Co Ltd タッチパネル入力装置、及びタッチパネル入力装置におけるボタン特定方法
US20110029185A1 (en) 2008-03-19 2011-02-03 Denso Corporation Vehicular manipulation input apparatus
JP5532544B2 (ja) 2008-03-28 2014-06-25 カシオ計算機株式会社 情報出力装置およびプログラム
WO2009137355A2 (en) * 2008-05-06 2009-11-12 Next Holdings, Inc. Systems and methods for resolving multitouch scenarios using software filters
JP5448370B2 (ja) 2008-05-20 2014-03-19 キヤノン株式会社 情報処理装置及びその制御方法、プログラム、記憶媒体
TW201019191A (en) 2008-11-07 2010-05-16 Pixart Imaging Inc Touch system and method for obtaining position of pointer thereof
US20100134424A1 (en) 2008-12-02 2010-06-03 At&T Mobility Ii Llc Edge hand and finger presence and motion sensor
JP4752921B2 (ja) 2009-01-28 2011-08-17 ソニー株式会社 情報処理装置、アニメーション付加方法、及びプログラム
JP2010199349A (ja) * 2009-02-26 2010-09-09 Toshiba Corp 半導体装置の製造方法
US8583421B2 (en) 2009-03-06 2013-11-12 Motorola Mobility Llc Method and apparatus for psychomotor and psycholinguistic prediction on touch based device
US8355007B2 (en) * 2009-05-11 2013-01-15 Adobe Systems Incorporated Methods for use with multi-touch displays for determining when a touch is processed as a mouse event
KR20100122383A (ko) 2009-05-12 2010-11-22 삼성전자주식회사 좌표 예측을 통한 이미지의 출력 속도 향상 방법 및 장치
KR101562792B1 (ko) * 2009-06-10 2015-10-23 삼성전자주식회사 목표 예측 인터페이스 제공 장치 및 그 방법
JP2011170834A (ja) 2010-01-19 2011-09-01 Sony Corp 情報処理装置、操作予測方法及び操作予測プログラム

Also Published As

Publication number Publication date
EP2659341A2 (en) 2013-11-06
EP2659341B1 (en) 2019-04-03
US9354804B2 (en) 2016-05-31
JP2014505937A (ja) 2014-03-06
US20120169646A1 (en) 2012-07-05
JP5955861B2 (ja) 2016-07-20
HK1171829A1 (zh) 2013-04-05
CN102609130B (zh) 2015-02-25
CN102609130A (zh) 2012-07-25
KR20130133225A (ko) 2013-12-06
WO2012092291A3 (en) 2012-11-22
KR101892315B1 (ko) 2018-08-27
WO2012092291A2 (en) 2012-07-05
TW201227438A (en) 2012-07-01
EP2659341A4 (en) 2017-09-06

Similar Documents

Publication Publication Date Title
TWI544369B (zh) 計算設備中的觸摸事件預期
US10908789B2 (en) Application switching method and apparatus and graphical user interface
CN104364734B (zh) 使用多点触摸输入的远程会话控制
KR101535320B1 (ko) 표면상에 놓인 손에 맞는 제스쳐를 생성하는 방법
EP2433201B1 (en) Touch screen disambiguation based on prior ancillary touch input
EP2972688B1 (en) Managing sensory information of a user device
JP5847939B2 (ja) タッチ・インテリジェント・ターゲッティング
JP2014529138A (ja) タッチ入力を用いたマルチセル選択
WO2014071073A1 (en) Touch screen operation using additional inputs
TW201224850A (en) Gesture recognition
KR102323892B1 (ko) 멀티 터치 가상 마우스
CN116507995A (zh) 带有虚拟轨迹板的触摸屏显示器
JP2016529640A (ja) マルチタッチ仮想マウス
TWI421731B (zh) 電子裝置之滑鼠功能執行方法及其電子裝置
US20150169072A1 (en) Method, apparatus and computer readable medium for polygon gesture detection and interaction
US11301128B2 (en) Intended input to a user interface from detected gesture positions
US10345932B2 (en) Disambiguation of indirect input
TWI615747B (zh) 虛擬鍵盤顯示系統及方法
CN106681640B (zh) 一种移动终端的屏幕显示控制方法及移动终端
US9235338B1 (en) Pan and zoom gesture detection in a multiple touch display
KR20140122687A (ko) 터치이벤트 처리방법 및 이를 위한 장치
JP5757118B2 (ja) 情報処理装置、情報処理方法及びプログラム
CN107077272B (zh) 响应于用户动作而确定启用直接操纵的命中测试
US20110205157A1 (en) System and Method for Information Handling System Touchpad Enablement

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees