TWI597629B - 用於利用智慧模板遮罩與觸控螢幕介面互動之系統及方法 - Google Patents

用於利用智慧模板遮罩與觸控螢幕介面互動之系統及方法 Download PDF

Info

Publication number
TWI597629B
TWI597629B TW102144947A TW102144947A TWI597629B TW I597629 B TWI597629 B TW I597629B TW 102144947 A TW102144947 A TW 102144947A TW 102144947 A TW102144947 A TW 102144947A TW I597629 B TWI597629 B TW I597629B
Authority
TW
Taiwan
Prior art keywords
user
intentional
virtual mask
interaction
touch screen
Prior art date
Application number
TW102144947A
Other languages
English (en)
Other versions
TW201435675A (zh
Inventor
阿密特 尼西刊特 卡瓦卡爾
漢斯 羅絲
Original Assignee
哈尼威爾國際公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 哈尼威爾國際公司 filed Critical 哈尼威爾國際公司
Publication of TW201435675A publication Critical patent/TW201435675A/zh
Application granted granted Critical
Publication of TWI597629B publication Critical patent/TWI597629B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Description

用於利用智慧模板遮罩與觸控螢幕介面互動之系統及方法
本文中所闡述之標的物之實施例一般而言係關於觸控螢幕介面。更特定而言,本文中所闡述之標的物之實施例係關於一種用於採用一智慧模板遮罩來與一觸控螢幕介面互動且藉此減少意外控制功能啟動之可能性之系統及方法。
在多種工業、商業、航空及消費性電子產品應用中,採用觸控螢幕介面作為主要輸入裝置。然而,觸控螢幕介面在此等市場中之成長受與無意互動相關聯之問題約束;該等無意互動可定義為在不具有使用者之操作同意之情況下發出至觸控螢幕介面之任何系統可偵測之互動。亦即,一無意互動可由衝擊、震動或其他物件導致,從而引起可能系統故障或操作誤差。舉例而言,無意互動之潛在來源包含但不限於藉由一使用者之手或其他實體物件之意外擦過。意外互動亦可由一使用者之非互動手指或手部分導致。此外,取決於所採用之技術,環境因素亦可引起無意互動;例如昆蟲、日光、筆、剪輯板等。除了與重要控制功能相關聯之上文所闡述之副效應之外,較不重要控制功能之啟動亦可使觸控螢幕介面之總體功能性降級。
用於減少一觸控螢幕介面上之無意互動之一種已知方法涉及藉 由分析與該觸控螢幕介面之一接觸之大小及持續時間而估計使用者啟動一特定控制功能之意向。令人遺憾地,此等系統不在具有不同位準之操作重要性之功能之間進行區分。舉例而言,關於一航空電子系統,特定控制功能操作重要航空電子功能(例如,嚙合自動油門),而其他控制功能與較不重要功能(例如,一攝影機視訊顯示器)相關聯。簡言之,受一無意觸控影響之功能性之重要性可介於一僅不便性至一可能安全問題之範圍內。
鑒於前述說明,將期望提供一種藉由利用一脈絡敏感性智慧遮罩系統來減少無意使用者互動的用於與一觸控螢幕介面互動之系統及方法。
本發明內容經提供以以一簡化形式引入在下文詳細說明中進一步闡述之概念之一選擇。本發明內容並不意欲識別所主張標的物之關鍵特徵或主要特徵,亦不意欲用作判定隨附申請專利範圍之範疇之一輔助。
提供一種用於操作一觸控螢幕介面之方法。該方法包括:產生其上具有一第一區域之一第一虛擬遮罩;及回應於與該第一區域之一使用者互動而產生一第一經重新組態虛擬遮罩。
亦提供一種用於操作一飛機觸控螢幕控制器上之一觸控螢幕介面之方法。該方法包括產生具有一第一區域及一第二區域之一第一虛擬遮罩。然後,偵測與該第一區域及該第二區域中之一者之一使用者互動。若該使用者與該第二區域互動,則產生一第一經重新組態虛擬遮罩。然而,若該使用者與該第一區域互動,則啟動一飛機控制功能。
此外,提供一種用於一飛機上之系統。該系統包括耦合至一處理器之一觸控螢幕介面,該觸控螢幕介面經組態以在該觸控螢幕介面 上產生其上具有一第一區域之一第一虛擬遮罩且回應於偵測到與該第一區域之一使用者互動而在該觸控螢幕上產生一經重新組態虛擬遮罩。
100‧‧‧駕駛艙顯示系統/顯示系統
102‧‧‧使用者介面/觸控螢幕介面
103‧‧‧隨機存取記憶體/記憶體
104‧‧‧處理器
105‧‧‧唯讀記憶體/記憶體
106‧‧‧地形資料庫
107‧‧‧觸控螢幕顯示器/觸控螢幕
108‧‧‧導航資料庫
109‧‧‧使用者
111‧‧‧觸控螢幕控制器
112‧‧‧感測器
113‧‧‧驅動信號
114‧‧‧外部資料源
115‧‧‧感測信號
116‧‧‧顯示裝置
117‧‧‧控制信號/控制器信號
118‧‧‧ILS
119‧‧‧信號
124‧‧‧GPS接收器
200‧‧‧軟體遮罩控制器
202‧‧‧觸控事件預處理器
204‧‧‧第一虛擬遮罩/第一虛擬遮罩層
206‧‧‧軟體介面
208‧‧‧意向性辨識器
210‧‧‧意向性描述符資料庫
212‧‧‧任務脈絡評估引擎
214‧‧‧任務脈絡文法資料庫/任務脈絡資料庫
215‧‧‧應用使用者介面佈局及功能重要性映射資料庫
216‧‧‧遮罩產生器引擎/遮罩產生引擎
217‧‧‧動態遮罩定義資料庫
219‧‧‧區
221‧‧‧區
502‧‧‧使用者介面影像
504‧‧‧控制功能
505‧‧‧控制功能
506‧‧‧控制功能
507‧‧‧控制功能
508‧‧‧控制功能
509‧‧‧控制功能
510‧‧‧非控制功能/捲動列表
511‧‧‧控制功能
512‧‧‧控制功能
513‧‧‧控制功能/所要元素/物件
514‧‧‧控制功能
515‧‧‧控制功能
516‧‧‧控制功能
518‧‧‧封閉區域
520‧‧‧開放區域
600‧‧‧試算表
602‧‧‧頁ID/行
604‧‧‧圖形元素ID/行
606‧‧‧佈局定義/行
608‧‧‧示能性類型/行
610‧‧‧重要性位準/行
620‧‧‧捲動列表1/列
622‧‧‧列
624‧‧‧列/按鈕1
625‧‧‧列/按鈕2
626‧‧‧列/按鈕3
627‧‧‧列/按鈕4
628‧‧‧列/按鈕5
629‧‧‧列/按鈕6
圖1係包含一觸控螢幕顯示器及一觸控螢幕控制器之一飛機座艙顯示系統之一方塊圖;圖2係根據一例示性實施例之一軟體遮罩控制器之一方塊圖;圖3圖解說明轉化成複數個區以提供一使用者互動意向性量變曲線之一例示性使用者互動;圖4係根據一例示性實施例之一軟體遮罩控制方法之一流程圖;圖5及圖6係一第一虛擬遮罩及分別與使用者介面(UI)影像中含有之每一元素相關聯之特性之一試算表之說明性例示性實施方案;圖7係根據一例示性實施例之一虛擬遮罩產生程序之一流程圖;及圖8係根據一例示性實施例之一任務脈絡評估引擎程序之一流程圖。
以下詳細說明本質上僅具說明性且不意欲限制標的物或申請案之實施例及此等實施例之用途。在本文中闡述為例示性之任何實施方案不必視為比其他實施方案較佳或有利。此外,並不意欲受前述技術領域、背景技術、發明內容或以下實施方式中呈現的任何所表達或暗示之理論束縛。
本文中可就功能及/或邏輯區塊組件且參考可由各種計算組件或裝置執行之操作、處理任務及功能之符號表示而闡述技法及技術。此等操作、任務及功能有時稱作電腦執行的、電腦化的、軟體實施的或電腦實施的。實務上,一或多個處理器裝置可藉由操縱表示系統記憶 體中之記憶體位置處之資料位元之電信號以及對信號之其他處理來實施所闡述之操作、任務及功能。其中維持資料位元之該等記憶體位置係具有對應於該等資料位元之特定電、磁、光學或有機性質之實體位置。應瞭解,圖式中所展示之各種區塊組件可藉由經組態以執行指定功能之任何數目個硬體、軟體及/或韌體組件來實現。舉例而言,一系統或一組件之一實施例可採用在一或多個微處理器或其他控制裝置之控制下可實施多種功能之各種積體電路組件,例如記憶體元件、數位信號處理元件、邏輯元件、查找表或諸如此類。
為簡潔起見,本文中可不詳細地闡述與特定系統及子系統(及其個別操作組件)之圖形及影像處理、觸控螢幕顯示器以及其他功能態樣相關之習用技法。此外,本文中含有之各種圖式中所展示之連接線意欲表示各種元件之間的例示性功能關係及/或實體耦合。應注意,諸多替代或額外功能關係或者實體連接可存在於標的物之一實施例中。
本文中揭示一種減少無意使用者互動之可能性的用於與一觸控螢幕介面互動之新穎智慧模板遮罩系統及方法。此透過使用定義為智慧模板遮罩之一脈絡敏感性軟體而達成。一智慧模板遮罩(下文中「虛擬遮罩」)係防止一直接使用者互動或需要額外處理來達成使用者互動的放置於使用者介面影像層上方之一軟體層。該虛擬遮罩系統使得使用者或開發者能夠定義擴展超過與使用者之輸入相關之一特定操作系統或應用之極限的與該觸控螢幕介面之互動要求。出於闡明之目的,本文中呈現在一特定裝置上可如何採用虛擬遮罩層系統之特定例示性實施例。舉例而言,將論述適合於在航空應用中使用之一介面之實施例。然而,應瞭解,此闡明之實例性實施例僅係用於在任何工業、商業、航空或消費性電子產品應用中之任何觸控螢幕介面上實施本文中之新穎系統及方法之一實例及一導向。因此,本文中所呈現之 實例意欲為非限制性。
圖1圖解說明一駕駛艙顯示系統100,該駕駛艙顯示系統包含:一使用者介面102、一處理器104、一或多個地形資料庫106(有時稱作一地形迴避及警示系統(TAWS))、一或多個導航資料庫108、感測器112、外部資料源114及一或多個顯示裝置116。使用者介面102與處理器104可操作地通信且經組態以接收來自一使用者109(例如,一飛行員)之輸入,且回應於該使用者輸入而將命令信號供應至處理器104。使用者介面102可係各種已知使用者介面裝置中之任一者或組合,包含但不限於一或多個按鈕、開關或旋鈕(未展示)。在所繪示實施例中,使用者介面102包含一觸控螢幕顯示器107及一觸控螢幕控制器(TSC)111。TSC 111亦含有將結合圖2完全地闡述之一軟體遮罩控制器200。TSC 111將驅動信號113提供至一觸控螢幕顯示器107,且一感測信號115自觸控螢幕顯示器107被提供至觸控螢幕控制器111,該觸控螢幕控制器將一觸控之判定之一控制信號117週期性地提供至處理器104。處理器104解譯控制器信號117、判定觸控螢幕107上之數字之應用且將(舉例而言)一控制器信號117提供至觸控螢幕控制器111並且將一信號119提供至顯示裝置116。因此,使用者109使用觸控螢幕107來提供一輸入及對該輸入之處理,如下文較完全地闡述。
處理器104可藉助一個一般用途處理器、一內容可定址記憶體、一數位信號處理器、一特殊應用積體電路、一場可程式化閘陣列、任何適合可程式化邏輯裝置、離散閘或電晶體邏輯、離散硬體組件或經設計以執行本文中所闡述之功能之任何組合來實施或實現。一處理器裝置可實現為一微處理器、一控制器、一微控制器或一狀態機。此外,一處理器裝置可實施為計算裝置之一組合,例如一數位信號處理器與一微處理器之一組合、複數個微處理器之一組合、結合一數位信號處理器核心之一或多個微處理器之一組合或任何其他此類組態。在 所繪示實施例中,處理器104包含板上RAM(隨機存取記憶體)103及板上ROM(唯讀記憶體)105。控制處理器104之程式指令可儲存於RAM 103及ROM 105中之任一者或兩者中。舉例而言,作業系統軟體可儲存於ROM 105中,而各種操作模式軟體常式及各種操作參數可儲存於RAM 103中。執行例示性實施例之軟體儲存於ROM 105或RAM 103中。應瞭解,此僅係用於儲存作業系統軟體及軟體常式之一方案之例示性,且可實施各種其他儲存方案。
記憶體103、105可實現為RAM記憶體、快閃記憶體、EPROM記憶體、EEPROM記憶體、暫存器、一硬碟、一可抽換式磁碟、一CD-ROM或此項技術中已知之任何其他形式之儲存媒體。就此而言,記憶體103、105可耦合至處理器104以使得處理器104可自記憶體103、105讀取資訊及將資訊寫入至記憶體103、105。另一選擇係,記憶體103、105可係處理器104之組成部分。作為一實例,處理器104及記憶體103、105可駐存於一ASIC中。實務上,顯示系統100之一功能或邏輯模組/組件可使用維持於記憶體103、105中之程式碼來實現。舉例而言,記憶體103、105可用以儲存用於支援顯示系統100之操作之資料,如自以下說明將變得顯而易見。
無論如何具體地實施處理器104,其皆與地形資料庫106、導航資料庫108及顯示裝置116可操作地通信且經耦合以自感測器112接收各種類型之慣性資料且自外部資料源114接收各種其他航空電子學相關資料。處理器104經組態以回應於該等慣性資料及該等航空電子學相關資料而選擇性地自地形資料庫106中之一或多者擷取地形資料且自導航資料庫108中之一或多者擷取導航資料且將適當顯示命令供應至顯示裝置116。顯示裝置116回應於該等顯示命令而選擇性地顯現各種類型之文字、圖形及/或圖標資訊。
地形資料庫106包含表示飛機正飛行之下方之地形之各種類型之 資料,且導航資料庫108包含各種類型之導航相關資料。可使用現在已知或未來開發之各種類型之慣性感測器、系統及/或子系統來實施感測器112以供應(舉例而言)表示飛機狀態(包含飛機速度、航向、高度及姿態)之各種類型之慣性資料。ILS 118恰在著陸之前或期間給飛機提供水平(或左右定位台)及垂直(或滑降台)引導,且在特定固定點處指示至一特定跑道上之參考著陸點之距離。GPS接收器124係一多通道接收器,其中每一通道經調諧以接收藉由繞地球軌道運行之GPS衛星(未圖解說明)星座傳輸之GPS廣播信號中之一或多者。
如上文所提及,顯示裝置116回應於自處理器104供應之顯示命令而選擇性地顯現各種文字、圖形及/或圖標資訊,且藉此將視覺回饋供應至使用者109。應瞭解,可使用適合於以可由使用者109看見之一格式顯現文字、圖形及/或圖標資訊之眾多已知顯示裝置中之任一者來實施顯示裝置116。此等顯示裝置之非限制性實例包含各種陰極射線管(CRT)顯示器及各種平面螢幕顯示器(諸如各種類型之LCD(液晶顯示器)及TFT(薄膜電晶體)顯示器)。顯示裝置116可另外實施為一螢幕安裝式顯示器或眾多已知技術中之任一者。另外,應注意,顯示裝置116可經組態為眾多類型之飛機駕駛艙顯示器中之任一者。舉例而言,該顯示裝置可經組態為一多功能顯示器、一水平狀態指示器或一垂直狀態指示器(僅舉幾個實例)。然而,在所繪示實施例中,顯示裝置116中之一者經組態為一主飛行顯示器(PFD)。
在操作中,顯示裝置116亦經組態以處理主飛機之當前飛行狀態資料。就此而言,飛行狀態資料源產生、量測及/或提供與該主飛機之操作狀態、該主飛機正運行之環境、飛行參數及諸如此類相關之不同類型之資料。實務上,飛行狀態資料源可使用飛行線可換件(LRU)、傳感器、加速度計、儀器、感測器及其他眾所周知裝置來實現。飛行狀態資料源所提供之資料可包含但不限於:空速資料、地速 資料、高度資料、姿態資料(包含俯仰資料及翻滾資料)、偏航資料、地理位置資料(諸如GPS資料)、時間/日期資訊、航向資訊、天氣資訊、飛行路徑資料、航跡資料、雷達高度資料、幾何高度資料、風速資料、風向資料等。顯示裝置116適合地經設計而以本文中較詳細地闡述之方式處理自飛行狀態資料源獲得之資料。
存在諸多類型之觸控螢幕感測技術,包含電容式、電阻式、紅外線、表面聲波及嵌入式光學。所有此等技術皆感測一螢幕上之使用者互動。揭示顯示含有複數個元素之一UI影像之一觸控螢幕。每一元素經組態以顯示闡述該元素(例如自動駕駛儀)之功能之一或多個符號。如本文中所使用之一元素係囊括該(該等)符號之觸控螢幕上之一經定義可見位置。如本文中所使用之符號經定義以包含單獨地或以組合形式之文數字元、圖標、標誌、字、術語、片語。藉由感測接觸觸控螢幕介面之一使用者互動(例如一圖或式樣之一數位)而選擇一特定元素。
無意使用者互動可由藉由一飛行員之手或能夠將可偵測互動發出至觸控感測器之任何實體物件之意外擦過引起。此等種類之無意互動可在使用者跨越駕駛艙移動時或因顛簸所誘發之顫動而發出。某些無意互動由取決於系統中所使用之觸控技術之環境因素導致;例如昆蟲、日光、筆等。理想上,飛行員或空勤組員無意發出之所有觸控皆應被拒絕;然而,此將係不實際的。一實際解決方案應考量一無意互動及控制功能之後續啟動之影響;某些影響可具有一相對輕微效應且其他影響可具有較顯著效應。另外,控制功能介面互動特性(任務時間、工作負荷、可存取性、便於使用等)應保持等效於在非觸控螢幕駕駛艙中可用或透過替代控制面板可用之介面。以下軟體遮罩控制器結合一觸控螢幕介面解決上文問題且提供用於減少無意使用者互動之構件。
圖2係根據一例示性實施例之一軟體遮罩控制器200之一方塊圖。一觸控螢幕介面102回應於一所偵測觸控而產生一使用者互動。該所產生使用者互動發送至一觸控事件預處理器202以根據儲存於動態遮罩定義資料庫217中之一第一虛擬遮罩204進行處理。若觸控事件預處理器202判定該使用者互動係在該第一虛擬遮罩之一第一區域內,則觸控事件預處理器202將該使用者互動傳遞至意向性辨識器208。然而,若觸控事件預處理器202判定該使用者互動位於該第一虛擬遮罩之一第二區域內,則該使用者互動將被傳遞至軟體介面206。
意向性辨識器208利用一互動意向性方法來比較使用者互動意向性與儲存於意向性描述符資料庫210中之一預定使用者互動意向性描述符。可使用各種方法來達成該比較,所述方法包含但不限於下文所闡述之方法或於2012年8月28日提出申請之美國專利申請案13/597,021中所闡述之方法,所述美國專利申請案標題為「System and Method for Reducing The Probability of Accidental Activation of Control Functions on a Touch Screen」且受讓於同一受讓人。
意向性辨識器208自觸控事件預處理器202接收對應於該使用者互動中所涉及之複數個觸控感測器參數之信號串流且在離散時間週期內對該等信號進行取樣以將信號分離成複數個區;例如219、221。該複數個區中之每一者之振幅經加權以產生如圖3中所展示之使用者互動意向性量變曲線。將新建構之使用者互動意向性與儲存於意向性描述符資料庫210中之對應預定使用者互動意向性描述符進行比較。在形成該預定使用者互動意向性時,將計及包含環境條件、觸控螢幕技術及使用者互動要求之各種因素。
意向性辨識器208判定該意向性量變曲線之預定義特性是否滿足與該預定義意向性量變曲線相關聯之一預定特性。若意向性量變曲線滿足預定特性,則接受該使用者互動並將其發送至任務脈絡評估引擎 212。然而,若意向性量變曲線不滿足預定特性,則拒絕或忽略該使用者互動。
任務脈絡評估引擎212接受來自意向性辨識器208之該使用者互動且評估與使用者互動之元素與額外元素之間的關係。此可使用將具有相同使用者互動之所有額外元素儲存於任務脈絡文法資料庫214中之一第一模式或僅將控制功能儲存於任務脈絡文法資料庫214中之一第二模式而達成,同時需要對與非控制功能之所有使用者互動進行進一步分析。
遮罩產生器引擎216接收使用者互動連同來自任務脈絡文法資料庫214的與該使用者互動相關聯之現行任務脈絡。遮罩產生器引擎216具有耦合至動態遮罩定義資料庫217之一第一輸出以儲存虛擬遮罩及耦合至軟體介面206之一第二輸出以將該使用者互動傳遞至下伏軟體應用程式。遮罩產生引擎216基於自應用UI佈局及功能重要性映射資料庫215所接收之資料而產生第一虛擬遮罩。經重新組態虛擬遮罩亦基於與該等使用者互動中之每一者相關聯之所接收現行任務脈絡而由遮罩產生器引擎216產生,如下文將更詳細地闡述。此等虛擬遮罩中之每一者將儲存於可由觸控事件預處理器202存取之動態遮罩定義資料庫217中。
圖4係根據一例示性實施例之一軟體遮罩控制器方法之一流程圖250。該程序藉由產生一第一虛擬遮罩而開始(步驟252)。然後,在觸控螢幕介面(102,圖2)上偵測一使用者互動且將位置與該第一虛擬遮罩進行比較(步驟254)。若該使用者互動係在該虛擬遮罩之一第二區域內,則將把該使用者互動傳遞至下伏軟體介面(步驟256)。然而,若該使用者互動係在該虛擬遮罩之一第一區域內,則在步驟258中,判定使用者互動意向性。在步驟260中,將該使用者互動意向性與一對應預定使用者互動意向性進行比較。若該使用者互動意向性不滿足 與預定義意向性量變曲線相關聯之一預定特性,則摒棄該使用者互動且暫存為一無效結果(步驟262)。然而,若該使用者互動意向性滿足與該預定義意向性量變曲線相關聯之預定特性,則將識別且評估該現行任務脈絡(步驟264)。然後,在步驟266中,根據該現行任務脈絡重新組態該第一虛擬遮罩。在步驟268中,軟體遮罩控制器判定該現行任務脈絡是否已期滿。若該現行任務脈絡已期滿,則使用者將在步驟254處之程序之開始處開始。然而,若該現行任務脈絡未期滿,則將把該使用者互動傳遞至該下伏軟體介面。
圖5係一第一虛擬遮罩204之一說明性例示性實施例,且圖6係與UI影像502中含有之每一元素相關聯之特性之一試算表600。UI影像502含有顯示於一觸控螢幕介面102上之複數個元素。該等元素可分類為控制功能(例如504至509及511至516)或非控制功能(例如510)。一控制功能可啟動機器之一功能(例如一飛機上之自動駕駛儀),而一非控制功能允許使用者更改UI影像502(例如改變一捲動列表內部含有之顯示之元素)。儘管此實施例中展示一例示性UI影像502,但應瞭解本文中所揭示之概念將擴展至包含但不限於下拉檔案及其他元素之多種其他UI元素502。亦應瞭解,顯示於UI影像502上之特定非控制功能元素可需要使用者與多個元素互動以選擇控制功能。舉例而言,一捲動列表510可需要使用者捲動元素列表以顯示所要元素513,且然後使用者將必須藉由輕敲物件513而選擇該元素。
試算表600列舉圖5中所展示之複數個元素及每一元素之相關聯特性。試算表600之行含有元素之特性(例如頁ID 602、圖形元素ID 604、佈局定義606、示能性類型608及重要性位準610),而試算表600之列含有該等元素(例如捲動列表1 620及按鈕1 624至按鈕6 629)。頁ID 602識別元素顯示於其上之頁,而圖形元素ID 604係顯示於每一元素上之符號表示。佈局定義606含有每一元素之位置及大小,且示能 性類型含有啟動元素所需要之使用者互動類型。舉例而言,一TAP將需要使用者接觸觸控螢幕達一短時間段同時保持於實質上相同位置中。重要性位準610係由使用者或設計者定義且係基於包含但不限於元素控制之功能(例如自動駕駛儀、座艙燈等)、UI影像上之位置、元素之大小、其他相關聯元素、緊密接近之其他元素等之各種參數而定義。
含於試算表600中且顯示於UI影像502上之每一元素可具有各種相關聯特性。舉例而言,顯示於行604中之捲動列表1准許兩個不同示能性類型608(例如List_Scroll行608,列620及Item_Select行608,列622)。此由以下事實所致:使用者可必須執行與捲動列表1之兩個不同互動(例如捲動所顯示元素及選擇所要元素)。與具有一經指派重要性位準「8」之Item_Select示能性類型相比,使用者或設計者可將一較低重要性位準「4」指派給List_Scroll示能性類型。此可係期望的,此乃因在List_Scroll示能性類型之情況下不存在一控制功能之無意啟動之風險,而在Item_Select示能性類型之情況下存在無意啟動之一風險。此准許使用者或設計者修改系統以滿足具體設計要求。應瞭解,一虛擬遮罩可具有各自與不同準則相關聯之兩個以上區域。可更改虛擬遮罩區域之數目及其相關聯準則以滿足系統之設計要求。
第一虛擬遮罩層204覆蓋於UI影像502上。所圖解說明之實施例將第一虛擬遮罩204顯示為具有由複數個封閉區域518構成之一第一區域及由複數個開放區域520構成之一第二區域。第一虛擬遮罩204係藉由比較每一元素之相關聯重要性位準610與一使用者所判定臨限位準而產生。若該重要性位準低於該臨限位準,則移除由該元素定界之虛擬遮罩之一區域從而形成一開放區域。然而,若該重要性位準高於該臨限位準,則該區域將保持一封閉區域。舉例而言,圖6中所展示之例示性列表用以形成圖5中所展示之第一虛擬遮罩204。在此實施例 中,使用者或設計者將臨限位準設定為「3」,從而在列628中之按鈕5及列629中之按鈕6上方形成開放區域。此乃因其重要性位準(行610)低於「3」。試算表中含有之所有其他元素皆具有高於「3」之重要性位準,從而需要此等元素上方之虛擬遮罩之區域保持封閉。
圖7係根據一例示性實施例之一虛擬遮罩產生程序之一流程圖700。自應用UI佈局及功能重要性映射資料庫擷取一軟體應用程式之UI影像及每一元素之相關聯重要性位準(步驟702)。分析每一元素之重要性位準(步驟704)且將其與一臨限位準進行比較(步驟706)。若重要性位準高於該臨限位準,則在該元素上方保持該虛擬遮罩之一封閉區域(步驟708)。然而,若該重要性位準低於該臨限位準,則在該虛擬遮罩中形成一開放區域(步驟710)。
圖8係根據一例示性實施例之一任務脈絡評估引擎程序之一流程圖800。任務脈絡評估引擎(圖2中之212)接受來自意向性辨識器(圖2中之208)之使用者互動且評估與使用者互動之一元素與UI影像之額外元素之間的關係。此程序藉由偵測與使用者互動之一第一元素而開始(步驟802)。在步驟804中,發現含有作為一開始狀態之第一元素之對應任務。然後,發現與該第一元素互動之額外元素(步驟806)。若未發現任何元素(步驟808),則將該第一元素儲存於任務脈絡文法資料庫(圖2中之214)中且將該第一元素判定為一控制功能。然而,若發現額外元素(步驟808),則偵測對該第一元素執行之使用者互動類型(步驟810)。若存在具有相同使用者互動類型之額外元素,則將其儲存於任務脈絡資料庫中。然而,使用者可選擇兩個不同模式中之一者用於判定儲存哪些額外元素(步驟812)。第一模式將具有相同使用者互動之所有額外元素儲存於任務脈絡資料庫中(步驟814)。第二模式將所有額外元素皆儲存於一暫時資料庫中(步驟816)。在步驟818中,分析儲存於暫時資料庫中之所有額外元素以判定該等所有額外元素是否係 控制功能。若判定該等額外元素係控制功能,則將其儲存於任務脈絡資料庫中(步驟820)。在步驟822中,若該等額外元素不係一控制功能,則重複以下步驟直至所有額外元素皆係控制功能為止:偵測一使用者互動類型(步驟810);將該使用者互動與額外元素進行比較(步驟812);將所有額外元素皆儲存於一暫時資料庫中(步驟816);及判定該等額外元素是否係控制功能(步驟818)。
返回參考圖2,遮罩產生器引擎216根據用於分析現行任務脈絡(結合圖8所闡述)之第一模式或第二模式而產生第一經重新組態虛擬遮罩。若選擇用於分析現行任務脈絡之第一模式,則虛擬遮罩經組態以僅准許與儲存於任務脈絡資料庫214中之元素之使用者互動。舉例而言,在偵測到與含有一元素列表之一捲動列表之一使用者互動的情況下。在任務脈絡評估引擎212中分析捲動列表之現行任務脈絡且發現僅捲動列表內部之元素列表與該捲動列表互動。因此,第一經重新組態虛擬遮罩僅開放由該捲動列表中含有之元素定界之遮罩上之區域。另外,該第一經重新組態虛擬遮罩僅准許與該遮罩之開放區域之使用者互動以減少無意使用者互動。
在圖8中,若選擇用於分析現行任務脈絡之第二模式,則可回應於每一使用者互動而形成後續經重新組態虛擬遮罩;例如在一使用者期望改變飛機之一航線航向的情況下。使用者可首先與啟動含有一數字鍵台之一選單的UI影像中含有之一元素互動。現行任務脈絡由任務脈絡評估引擎212評估且判定該數字鍵台中含有之元素係僅與該選單互動之元素。因此,該第一經重新組態虛擬遮罩僅開放由該數字鍵台中含有之元素定界之區域。若偵測到與鍵入所要航向相關聯之一第二使用者互動,則顯示一構形元素且再次產生第二經重新組態虛擬遮罩以防止與除該構形元素外之其他元素之所有使用者互動。
因此,已提供一種減少無意使用者互動的用於與一觸控螢幕介 面互動之新穎軟體遮罩控制器及方法。此藉助一智慧虛擬模板遮罩之使用而達成。此實際解決方案評估每一元素之重要性以採用防止在特定區域中之使用者互動且需要對其他區域中之使用者互動進行額外處理之一虛擬遮罩系統。此方法減少無意互動,而控制功能介面互動特性(任務時間、工作負荷、可存取性、便於使用等)保持等效於在非觸控螢幕駕駛艙中可用或透過替代控制面板可用之介面。
儘管前述詳細說明中已呈現至少一項例示性實施例,但應瞭解存在大量變化形式。亦應瞭解,該例示性實施例或該等例示性實施例僅係實例,且並不意欲以任何方式限制本發明之範疇、應用性或組態。而是,前述詳細說明將給熟習此項技術者提供用於實施本發明之一例示性實施例之一便捷道路圖,應理解可在不背離如隨附申請專利範圍中所陳述之本發明之範疇之情況下,對一例示性實施例中所闡述之元件之功能及配置做出各種改變。

Claims (10)

  1. 一種用於操作一觸控螢幕介面之方法,該方法包括:產生其上具有一第一區域之一第一虛擬遮罩;回應於與該第一區域之一使用者互動,而產生一第一經重新(reconfigured)組態虛擬遮罩;在該第一經重新組態虛擬遮罩上產生與該第一虛擬遮罩之該第一區域互動之一第二區域;偵測與該第一虛擬遮罩之該第一區域之一使用者互動;產生一使用者互動意向性量變曲線(intentionality profile);判定該使用者意向性量變曲線之一預定特性是否滿足與一預定意向性量變曲線相關聯之一預定準則(criteria);偵測與該第一經重新組態虛擬遮罩之該第二區域之一使用者互動;及回應於與該第一經重新組態虛擬遮罩之該第二區域之一使用者互動,而產生一第二經重新組態虛擬遮罩。
  2. 如請求項1之方法,其中該第一區域具有大於一臨限位準之一重要性位準。
  3. 如請求項2之方法,其進一步包括:偵測與該第一區域之一使用者互動;產生一使用者互動意向性量變曲線;及將該使用者互動意向性量變曲線與一預定使用者互動意向性量變曲線進行比較。
  4. 如請求項3之方法,其中該產生一使用者互動意向性量變曲線之步驟包括:將該使用者互動分離成複數個區,每一區具有一相關聯振幅 (associated amplitude);及加權該複數個區之振幅。
  5. 如請求項3之方法,其進一步包括:若該使用者意向性量變曲線之一預定義特性不滿足與一預定義意向性量變曲線相關聯之一預定準則,則拒絕該使用者互動意向性量變曲線;及若該使用者意向性量變曲線滿足該預定準則,則啟動與該第一區域相關聯之一控制功能。
  6. 如請求項1之方法,其進一步包括:擷取與一第二區域相關聯之一重要性位準;判定該第二區域之該重要性位準是否小於一臨限位準;及在該第一虛擬遮罩上產生該第二區域。
  7. 如請求項6之方法,其進一步包括:偵測與該第二區域之一使用者互動;及回應於該使用者互動而啟動一控制功能。
  8. 一種用於一飛機(aircraft)上之觸控螢幕控制器系統,其包括:一觸控螢幕介面;及一處理器,其經組態以:(a)在該觸控螢幕介面上產生其上具有一第一區域之一第一虛擬遮罩;(b)回應於偵測與該第一區域之一使用者互動而在該觸控螢幕介面上產生一第一經重新組態虛擬遮罩;(c)在該第一經重新組態虛擬遮罩上產生與該第一虛擬遮罩之該第一區域互動之一第二區域;(d)偵測與該第一虛擬遮罩之該第一區域之一使用者互動;(e)產生一使用者互動意向性量變曲線; (f)判定該使用者意向性量變曲線之一預定特性是否滿足與一預定意向性量變曲線相關聯之一預定準則;(g)偵測與該第一經重新組態虛擬遮罩之該第二區域之一使用者互動;及(h)回應於與該第一經重新組態虛擬遮罩之該第二區域之一使用者互動,而產生一第二經重新組態虛擬遮罩。
  9. 如請求項8之系統,其中該處理器進一步經組態以:(i)若該使用者意向性量變曲線之預定義特性不滿足與該預定義意向性量變曲線相關聯之預定準則,則拒絕該使用者互動意向性量變曲線;及(j)若該使用者意向性量變曲線滿足該預定準則,則啟動(activate)與該第一區域相關聯之一控制功能。
  10. 如請求項9之系統,其中該處理器進一步經組態以:(k)擷取(retrive)與一區域相關聯之一重要性位準;(l)判定該重要性位準小於一臨限位準;及(m)回應於與該第二區域之該使用者互動而啟動一控制功能。
TW102144947A 2012-12-07 2013-12-06 用於利用智慧模板遮罩與觸控螢幕介面互動之系統及方法 TWI597629B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US13/708,320 US9128580B2 (en) 2012-12-07 2012-12-07 System and method for interacting with a touch screen interface utilizing an intelligent stencil mask

Publications (2)

Publication Number Publication Date
TW201435675A TW201435675A (zh) 2014-09-16
TWI597629B true TWI597629B (zh) 2017-09-01

Family

ID=49596120

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102144947A TWI597629B (zh) 2012-12-07 2013-12-06 用於利用智慧模板遮罩與觸控螢幕介面互動之系統及方法

Country Status (5)

Country Link
US (1) US9128580B2 (zh)
EP (1) EP2741198A3 (zh)
KR (1) KR102205251B1 (zh)
CN (1) CN103870059B (zh)
TW (1) TWI597629B (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9733707B2 (en) 2012-03-22 2017-08-15 Honeywell International Inc. Touch screen display user interface and method for improving touch interface utility on the same employing a rules-based masking system
US9423871B2 (en) 2012-08-07 2016-08-23 Honeywell International Inc. System and method for reducing the effects of inadvertent touch on a touch screen controller
US20140062893A1 (en) * 2012-08-28 2014-03-06 Honeywell International Inc. System and method for reducing the probability of accidental activation of control functions on a touch screen
US9128580B2 (en) 2012-12-07 2015-09-08 Honeywell International Inc. System and method for interacting with a touch screen interface utilizing an intelligent stencil mask
US9658716B2 (en) * 2013-02-12 2017-05-23 Shenzhen Seefaa Scitech Co., Ltd. Method and device of deactivating portion of touch screen to prevent accidental activation
TWI511031B (zh) * 2014-10-23 2015-12-01 Qisda Corp 電子裝置運作方法以及電子裝置
EP3295577A4 (en) 2015-05-12 2018-10-10 D&M Holdings, Inc. System and method for negotiating group membership for audio controllers
US20170199748A1 (en) * 2016-01-13 2017-07-13 International Business Machines Corporation Preventing accidental interaction when rendering user interface components
GB2551520B (en) * 2016-06-20 2018-11-21 Ge Aviat Systems Ltd Correction of vibration-induced error for touch screen display in an aircraft
US10136316B2 (en) 2016-09-28 2018-11-20 International Business Machines Corporation Unlocking of a mobile device by a code received via a stencil on a touchscreen
TR201716275A1 (tr) * 2017-10-23 2019-05-21 Tuerkiye Bilimsel Ve Teknolojik Arastirma Kurumu Tuebitak Hava araçlari i̇çi̇n bi̇r kontrol paneli̇ denetleme ci̇hazi
US11262900B1 (en) * 2018-07-30 2022-03-01 The Boeing Company Graphical user interface in a computer system in an aircraft
US11822863B2 (en) * 2018-10-22 2023-11-21 Honeywell International Inc. Model based system for virtual device simulation
CN109656462A (zh) * 2018-12-25 2019-04-19 邵阳学院 一种用于利用智能模板掩模与触摸屏界面交互的系统
TWI759955B (zh) 2020-11-10 2022-04-01 財團法人工業技術研究院 通訊系統及其方法

Family Cites Families (118)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5128672A (en) 1990-10-30 1992-07-07 Apple Computer, Inc. Dynamic predictive keyboard
US7489303B1 (en) 2001-02-22 2009-02-10 Pryor Timothy R Reconfigurable instrument panels
US6160536A (en) 1995-03-27 2000-12-12 Forest; Donald K. Dwell time indication method and apparatus
US5956020A (en) 1995-07-27 1999-09-21 Microtouch Systems, Inc. Touchscreen controller with pen and/or finger inputs
US5764222A (en) 1996-05-28 1998-06-09 International Business Machines Corporation Virtual pointing device for touchscreens
US5689619A (en) 1996-08-09 1997-11-18 The United States Of America As Represented By The Secretary Of The Army Eyetracker control of heads-up displays
US5870083A (en) 1996-10-04 1999-02-09 International Business Machines Corporation Breakaway touchscreen pointing device
EP1717677B1 (en) 1998-01-26 2015-06-17 Apple Inc. Method and apparatus for integrating manual input
US7834855B2 (en) 2004-08-25 2010-11-16 Apple Inc. Wide touchpad on a portable computer
US6181328B1 (en) 1998-03-02 2001-01-30 International Business Machines Corporation Method and system for calibrating touch screen sensitivities according to particular physical characteristics associated with a user
US6459424B1 (en) 1999-08-10 2002-10-01 Hewlett-Packard Company Touch-sensitive input screen having regional sensitivity and resolution properties
US6636897B1 (en) 1999-09-28 2003-10-21 Microsoft Corporation Selective information subset synchronization based on single user action
US7289102B2 (en) 2000-07-17 2007-10-30 Microsoft Corporation Method and apparatus using multiple sensors in a device with a display
US7730401B2 (en) 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
US7895522B2 (en) 2001-09-28 2011-02-22 Ntt Docomo, Inc. Layout of platform specific graphical user interface widgets migrated between heterogeneous device platforms
US20090040184A9 (en) * 2001-10-04 2009-02-12 Infogation Corporation Information entry mechanism
TW528981B (en) 2001-10-25 2003-04-21 Compal Electronics Inc Portable computer and related method for preventing input interruption by write-tracking input region
US7023427B2 (en) 2002-06-28 2006-04-04 Microsoft Corporation Method and system for detecting multiple touches on a touch-sensitive screen
US20040150626A1 (en) 2003-01-30 2004-08-05 Raymond Husman Operator interface panel with control for visibility of desplayed objects
US20040212601A1 (en) 2003-04-24 2004-10-28 Anthony Cake Method and apparatus for improving accuracy of touch screen input devices
US6879731B2 (en) 2003-04-29 2005-04-12 Microsoft Corporation System and process for generating high dynamic range video
US7313255B2 (en) 2003-05-19 2007-12-25 Avago Technologies Ecbu Ip Pte Ltd System and method for optically detecting a click event
US7499040B2 (en) 2003-08-18 2009-03-03 Apple Inc. Movable touch pad with added functionality
US9274598B2 (en) 2003-08-25 2016-03-01 International Business Machines Corporation System and method for selecting and activating a target object using a combination of eye gaze and key presses
US7411575B2 (en) 2003-09-16 2008-08-12 Smart Technologies Ulc Gesture recognition method and touch system incorporating the same
US7176902B2 (en) 2003-10-10 2007-02-13 3M Innovative Properties Company Wake-on-touch for vibration sensing touch input devices
US7942743B2 (en) 2004-01-20 2011-05-17 Nintendo Co., Ltd. Game apparatus and storage medium storing game program
US7561143B1 (en) 2004-03-19 2009-07-14 The University of the Arts Using gaze actions to interact with a display
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
US7847789B2 (en) 2004-11-23 2010-12-07 Microsoft Corporation Reducing accidental touch-sensitive device activation
US20060221061A1 (en) 2005-03-31 2006-10-05 Tyco Electronic Corporation Touch sensor and control with random pulse spacing
US9019209B2 (en) 2005-06-08 2015-04-28 3M Innovative Properties Company Touch location determination involving multiple touch location processes
US8018440B2 (en) 2005-12-30 2011-09-13 Microsoft Corporation Unintentional touch rejection
US20070198141A1 (en) * 2006-02-21 2007-08-23 Cmc Electronics Inc. Cockpit display system
KR100866484B1 (ko) 2006-05-17 2008-11-03 삼성전자주식회사 다접점 터치 센서를 이용한 손가락의 이동 감지 장치 및방법
US7693869B2 (en) 2006-09-06 2010-04-06 International Business Machines Corporation Method and apparatus for using item dwell time to manage a set of items
US20080100586A1 (en) 2006-10-26 2008-05-01 Deere & Company Method and system for calibrating a touch screen
US8269727B2 (en) 2007-01-03 2012-09-18 Apple Inc. Irregular input identification
KR100881186B1 (ko) 2007-01-04 2009-02-05 삼성전자주식회사 터치 스크린 디스플레이 장치
US20080284739A1 (en) 2007-05-17 2008-11-20 Microsoft Corporation Human Interface Device
US8085252B1 (en) 2007-05-29 2011-12-27 Cypress Semiconductor Corporation Method and apparatus to determine direction of motion in a sensor array of a touch sensing device
US20090058819A1 (en) 2007-08-31 2009-03-05 Richard Gioscia Soft-user interface feature provided in combination with pressable display surface
US8587559B2 (en) 2007-09-28 2013-11-19 Samsung Electronics Co., Ltd. Multipoint nanostructure-film touch screen
ITBO20070820A1 (it) 2007-12-13 2009-06-14 Technogym Spa Macchina ginnica con interfaccia adattativa.
JP4990753B2 (ja) 2007-12-28 2012-08-01 パナソニック株式会社 電子機器の入力装置及び入力操作処理方法、並びに入力制御プログラム
US20090174676A1 (en) 2008-01-04 2009-07-09 Apple Inc. Motion component dominance factors for motion locking of touch sensor data
US20090174679A1 (en) 2008-01-04 2009-07-09 Wayne Carl Westerman Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface
JP5383053B2 (ja) 2008-01-29 2014-01-08 京セラ株式会社 表示機能付き端末装置
TW200943140A (en) 2008-04-02 2009-10-16 Asustek Comp Inc Electronic apparatus and control method thereof
TWI366776B (en) 2008-04-21 2012-06-21 Htc Corp Operating method and system and stroage device using the same
US8526767B2 (en) 2008-05-01 2013-09-03 Atmel Corporation Gesture recognition
JP4982430B2 (ja) 2008-05-27 2012-07-25 株式会社エヌ・ティ・ティ・ドコモ 文字入力装置及び文字入力方法
EP2288981B1 (en) 2008-06-10 2015-09-30 Nokia Technologies Oy Touch button false activation suppression
US8754855B2 (en) 2008-06-27 2014-06-17 Microsoft Corporation Virtual touchpad
JP4672756B2 (ja) 2008-06-30 2011-04-20 株式会社東芝 電子機器
DE102008035090B4 (de) 2008-07-28 2010-09-23 Airbus Deutschland Gmbh Flexibel einsetzbare Passagierkabinenbedieneinheit zur Steuerung von Kabinenfunktionen, Flugzeug damit und deren Verwendung
TW201011605A (en) 2008-09-01 2010-03-16 Turbotouch Technology Inc E Method capable of preventing mistakenly triggering a touch panel
US20100085303A1 (en) 2008-10-07 2010-04-08 Research In Motion Limited Portable electronic device and method of controlling same
KR100971501B1 (ko) 2008-10-24 2010-07-21 주식회사 애트랩 접촉센서 장치
US8856690B2 (en) 2008-10-31 2014-10-07 Sprint Communications Company L.P. Associating gestures on a touch screen with characters
US8502787B2 (en) 2008-11-26 2013-08-06 Panasonic Corporation System and method for differentiating between intended and unintended user input on a touchpad
KR101050642B1 (ko) 2008-12-04 2011-07-19 삼성전자주식회사 와치 폰 및 상기 와치 폰에서 통화수행 방법
US20100146459A1 (en) 2008-12-08 2010-06-10 Mikko Repka Apparatus and Method for Influencing Application Window Functionality Based on Characteristics of Touch Initiated User Interface Manipulations
KR101030398B1 (ko) 2008-12-15 2011-04-20 삼성전자주식회사 단말의 사용자 인터페이스 모드에 따른 감도 가변 터치 센서 및 그 제공 방법
US20100153313A1 (en) * 2008-12-15 2010-06-17 Symbol Technologies, Inc. Interface adaptation system
KR101534109B1 (ko) 2008-12-23 2015-07-07 삼성전자주식회사 정전용량형 터치 패널 및 이를 포함하는 정전용량형 터치 시스템
US8291348B2 (en) 2008-12-31 2012-10-16 Hewlett-Packard Development Company, L.P. Computing device and method for selecting display regions responsive to non-discrete directional input actions and intelligent content analysis
US8279184B2 (en) 2009-01-27 2012-10-02 Research In Motion Limited Electronic device including a touchscreen and method
JP2010176332A (ja) 2009-01-28 2010-08-12 Sony Corp 情報処理装置、情報処理方法およびプログラム
JP4771183B2 (ja) 2009-01-30 2011-09-14 株式会社デンソー 操作装置
TWI378382B (en) * 2009-02-13 2012-12-01 Htc Corp Method, apparatus and computer program product for preventing on-screen buttons from being mistakenly touched
DE102010009607A1 (de) 2009-02-27 2010-09-30 Stoneridge Control Devices, Inc., Canton Berührungsempfindliches Sensorsystem mit Speicher
US8432366B2 (en) 2009-03-03 2013-04-30 Microsoft Corporation Touch discrimination
US8370736B2 (en) 2009-03-16 2013-02-05 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US8570280B2 (en) 2009-03-25 2013-10-29 Lenovo (Singapore) Pte. Ltd. Filtering of inadvertent contact with touch pad input device
US20120105486A1 (en) 2009-04-09 2012-05-03 Dynavox Systems Llc Calibration free, motion tolerent eye-gaze direction detector with contextually aware computer interaction and communication methods
KR101537706B1 (ko) 2009-04-16 2015-07-20 엘지전자 주식회사 이동 단말기 및 그 제어 방법
KR20100118366A (ko) 2009-04-28 2010-11-05 삼성전자주식회사 휴대 단말기의 터치스크린 운용 방법 및 이를 지원하는 휴대 단말기
US9354751B2 (en) 2009-05-15 2016-05-31 Apple Inc. Input device with optimized capacitive sensing
WO2010134263A1 (ja) * 2009-05-22 2010-11-25 パナソニック株式会社 表示装置及びその駆動方法
US20110006996A1 (en) 2009-07-08 2011-01-13 Smith Nathan J Private data entry
TW201104531A (en) 2009-07-17 2011-02-01 Egalax Empia Technology Inc Method and device for palm rejection
US8279189B2 (en) 2009-08-11 2012-10-02 Atmel Corporation Touch-sensitive user interface
US9696856B2 (en) 2009-09-29 2017-07-04 Elo Touch Solutions, Inc. Method and apparatus for detecting simultaneous touch events on a bending-wave touchscreen
US10068728B2 (en) 2009-10-15 2018-09-04 Synaptics Incorporated Touchpad with capacitive force sensing
US8587532B2 (en) 2009-12-18 2013-11-19 Intel Corporation Multi-feature interactive touch user interface
US8964013B2 (en) 2009-12-31 2015-02-24 Broadcom Corporation Display with elastic light manipulator
US9507418B2 (en) 2010-01-21 2016-11-29 Tobii Ab Eye tracker based contextual action
JP5556423B2 (ja) 2010-01-29 2014-07-23 ブラザー工業株式会社 入力装置および入力制御プログラム
US20110187651A1 (en) 2010-02-03 2011-08-04 Honeywell International Inc. Touch screen having adaptive input parameter
US20110214162A1 (en) 2010-02-26 2011-09-01 Nokia Corporation Method and appartus for providing cooperative enablement of user input options
US9361018B2 (en) 2010-03-01 2016-06-07 Blackberry Limited Method of providing tactile feedback and apparatus
US9740364B2 (en) 2010-05-03 2017-08-22 Microsoft Technology Licensing, Llc Computer with graphical user interface for interaction
US20110283241A1 (en) 2010-05-14 2011-11-17 Google Inc. Touch Gesture Actions From A Device's Lock Screen
US9411459B2 (en) 2010-05-19 2016-08-09 Lg Electronics Inc. Mobile terminal and control method thereof
US8797280B2 (en) 2010-05-26 2014-08-05 Atmel Corporation Systems and methods for improved touch screen response
JP5501992B2 (ja) 2010-05-28 2014-05-28 パナソニック株式会社 情報端末、画面部品表示方法、プログラム、及び記録媒体
US9946459B2 (en) 2010-05-28 2018-04-17 Lenovo (Singapore) Pte. Ltd. Systems and methods for determining intentional touch screen contact
US20110310001A1 (en) 2010-06-16 2011-12-22 Visteon Global Technologies, Inc Display reconfiguration based on face/eye tracking
US8674959B2 (en) 2010-06-28 2014-03-18 Intel Corporation Dynamic bezel for a mobile device
KR101667586B1 (ko) 2010-07-12 2016-10-19 엘지전자 주식회사 이동단말기 및 그 제어방법
JP5618665B2 (ja) 2010-07-16 2014-11-05 キヤノン株式会社 制御装置、制御方法、およびプログラム
FR2963121B1 (fr) 2010-07-22 2014-04-11 Airbus Operations Sas Procede et dispositif de protection de commandes logicielles dans un cockpit d'aeronef
US8531355B2 (en) 2010-07-23 2013-09-10 Gregory A. Maltz Unitized, vision-controlled, wireless eyeglass transceiver
FR2963690B1 (fr) 2010-08-06 2012-08-03 Thales Sa Systeme informatique "client-serveur" securise pour applications interactives
US9377324B2 (en) * 2010-09-27 2016-06-28 Honeywell International Inc. Computer assisted human machine interface display
KR101855250B1 (ko) * 2010-11-03 2018-05-09 삼성전자 주식회사 터치 제어 방법 및 이를 지원하는 휴대 단말기
US8994646B2 (en) 2010-12-17 2015-03-31 Microsoft Corporation Detecting gestures involving intentional movement of a computing device
US8766936B2 (en) * 2011-03-25 2014-07-01 Honeywell International Inc. Touch screen and method for providing stable touches
US9285950B2 (en) 2011-03-30 2016-03-15 Google Inc. Hover-over gesturing on mobile devices
US8184069B1 (en) 2011-06-20 2012-05-22 Google Inc. Systems and methods for adaptive transmission of data
US20130097566A1 (en) 2011-10-17 2013-04-18 Carl Fredrik Alexander BERGLUND System and method for displaying items on electronic devices
EP2776908A4 (en) 2011-11-09 2015-07-15 Blackberry Ltd INPUT DEVICE AND METHOD FOR ELECTRONIC APPARATUS
US9733707B2 (en) 2012-03-22 2017-08-15 Honeywell International Inc. Touch screen display user interface and method for improving touch interface utility on the same employing a rules-based masking system
US9423871B2 (en) 2012-08-07 2016-08-23 Honeywell International Inc. System and method for reducing the effects of inadvertent touch on a touch screen controller
US8732624B2 (en) * 2012-09-20 2014-05-20 Google Inc. Protection for unintentional inputs
WO2014089202A1 (en) * 2012-12-04 2014-06-12 L3 Communications Corporation Touch sensor controller responsive to environmental operating conditions
US9128580B2 (en) 2012-12-07 2015-09-08 Honeywell International Inc. System and method for interacting with a touch screen interface utilizing an intelligent stencil mask

Also Published As

Publication number Publication date
EP2741198A2 (en) 2014-06-11
US9128580B2 (en) 2015-09-08
KR20140074199A (ko) 2014-06-17
EP2741198A3 (en) 2017-11-08
KR102205251B1 (ko) 2021-01-20
CN103870059A (zh) 2014-06-18
CN103870059B (zh) 2018-06-05
TW201435675A (zh) 2014-09-16
US20140164983A1 (en) 2014-06-12

Similar Documents

Publication Publication Date Title
TWI597629B (zh) 用於利用智慧模板遮罩與觸控螢幕介面互動之系統及方法
US8766936B2 (en) Touch screen and method for providing stable touches
US8159464B1 (en) Enhanced flight display with improved touchscreen interface
US9916032B2 (en) System and method of knob operation for touchscreen devices
US20140240242A1 (en) System and method for interacting with a touch screen interface utilizing a hover gesture controller
US20140300555A1 (en) Avionic touchscreen control systems and program products having "no look" control selection feature
US20110187651A1 (en) Touch screen having adaptive input parameter
US9377852B1 (en) Eye tracking as a method to improve the user interface
US9785243B2 (en) System and method for providing an ergonomic three-dimensional, gesture based, multimodal interface for use in flight deck applications
US20140062893A1 (en) System and method for reducing the probability of accidental activation of control functions on a touch screen
KR101829694B1 (ko) 적응형 터치 스크린 키패드 상에 디스플레이된 문자를 확대하는 방법
US8456445B2 (en) Touch screen and method for adjusting screen objects
US9524142B2 (en) System and method for providing, gesture control of audio information
US20130033433A1 (en) Touch screen having adaptive input requirements
CN103576982A (zh) 减少触摸屏控制器上的无意中触摸的影响的系统和方法
US20150002403A1 (en) Touch screen and method for adjusting touch sensitive object placement thereon
EP2767891A2 (en) Slider control for graphical user interface and method for use thereof
EP2813920B1 (en) A system and method for volumetric computing

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees