TW201342121A - 用以提供關於計算系統指令手勢之視覺回授的機制 - Google Patents

用以提供關於計算系統指令手勢之視覺回授的機制 Download PDF

Info

Publication number
TW201342121A
TW201342121A TW101145913A TW101145913A TW201342121A TW 201342121 A TW201342121 A TW 201342121A TW 101145913 A TW101145913 A TW 101145913A TW 101145913 A TW101145913 A TW 101145913A TW 201342121 A TW201342121 A TW 201342121A
Authority
TW
Taiwan
Prior art keywords
user
representation
hand
hands
handed
Prior art date
Application number
TW101145913A
Other languages
English (en)
Other versions
TWI643091B (zh
Inventor
Rajiv Mongia
Achintya Bhowmik
Mark Yahiro
Dana Krieger
Ed Mangum
Diana Povieng
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of TW201342121A publication Critical patent/TW201342121A/zh
Application granted granted Critical
Publication of TWI643091B publication Critical patent/TWI643091B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • G06F3/04895—Guidance during keyboard input operation, e.g. prompting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一種機制用以提供關於計算系統指令手勢之視覺回授。一設備之一實施例包括用以感應該設備之使用者的存在或移動之感應元件，一處理器，其中該處理器之操作包括對使用者要提供輸入給該設備之指令手勢的解讀，以及一顯示螢幕，該設備要在該顯示螢幕上顯示一或更多圖符。該設備是要針對該設備之一使用者顯示視覺回授，視覺回授包括在該使用者之單或雙手處於該感應元件之一感應區域內時，該單或雙手之表示。

Description

用以提供關於計算系統指令手勢之視覺回授的機制 發明領域
本發明之實施例廣泛地有關計算系統的領域，更特定地有關用以提供關於計算系統指令手勢之視覺回授的一種機制。
發明背景
計算系統和相關的系統正被發展來提供使用者更自然的介面。特定地，計算系統可包括對該計算系統之一使用者的感應，其中使用者感應可包括手勢辨識，其中該系統嘗試要辨識使用者之一或更多指令手勢，更特定地是使用者之手姿勢。
舉例而言，使用者可執行數個手勢來操縱被顯示在該電腦系統之一顯示螢幕上的符號和其他圖像。
然而，使用者通常需要在無從得知手勢如何被該計算系統解讀之情況下執行指令手勢。由於這個原因，使用者無法得知一手勢將不被解讀成該使用者所欲的方式。
發明概要
一種設備包含：一感應元件，以感應該設備之一使用者的存在或移動；一處理器，其中該處理器之操作包括對使用者要提供輸入給該設備之指令手勢的解讀；以及一顯示螢幕，該設備在該顯示螢幕上顯示一或更多圖符，該一或更多圖符係關於該設備之操作；其中該設備是要針對該設備之使用者顯示視覺回授，視覺回授包括在該使用者單或雙手位於針對該感應元件之一感應區域以內時，對該單或雙手的解讀。
100‧‧‧計算系統
110‧‧‧顯示螢幕
120‧‧‧感應元件
130‧‧‧圖像
150‧‧‧使用者
210‧‧‧視覺回授
220‧‧‧視覺回授
230‧‧‧視覺回授
240‧‧‧視覺回授
250‧‧‧視覺回授
260‧‧‧視覺回授
310‧‧‧視覺回授
320‧‧‧視覺回授
330‧‧‧視覺回授
340‧‧‧視覺回授
410‧‧‧視覺回授
420‧‧‧視覺回授
430‧‧‧視覺回授
440‧‧‧視覺回授
450‧‧‧視覺回授
460‧‧‧視覺回授
470‧‧‧視覺回授
510‧‧‧視覺回授
520‧‧‧視覺回授
610‧‧‧視覺回授
620‧‧‧視覺回授
700‧‧‧步驟
705‧‧‧步驟
710‧‧‧步驟
715‧‧‧步驟
720‧‧‧步驟
725‧‧‧步驟
730‧‧‧步驟
735‧‧‧步驟
740‧‧‧步驟
745‧‧‧步驟
750‧‧‧步驟
800‧‧‧計算系統
805‧‧‧匯流排或其他連結
810‧‧‧處理器
820‧‧‧音頻子系統
830‧‧‧顯示子系統
832‧‧‧顯示介面
834‧‧‧使用者手勢回授
840‧‧‧I/O控制器
850‧‧‧電力管理系統
860‧‧‧記憶體子系統
862‧‧‧手勢檢測資料
870‧‧‧連結性
872‧‧‧蜂巢式連結性
874‧‧‧無線連結性
880‧‧‧周邊連結
882‧‧‧「到」
884‧‧‧「自」
890‧‧‧使用者感應元件
900‧‧‧計算系統
905‧‧‧互連/交叉開關
910‧‧‧處理器
911‧‧‧感知計算
912‧‧‧主要記憶體
916‧‧‧唯讀記憶體
918‧‧‧非揮發性記憶體元件
930‧‧‧輸入裝置
940‧‧‧輸出顯示器
945‧‧‧發射器/接收器
950‧‧‧連接埠
955‧‧‧全向或定向天線
960‧‧‧電力裝置或系統
本發明之實施例係透過範例而非限制地被繪示於隨附圖式中的圖畫裡，其中相似的標號意指類似的元件。
圖1繪示一計算系統之一實施例，其包括用以對使用者提供關於指令手勢之呈現之視覺回授的一機制；圖2繪示作為一計算系統之實施例，其提供關於指尖呈現之視覺回授；圖3繪示作為一計算系統之實施例，其提供關於用以縮小一元件之一指令手勢的回授；圖4繪示作為一計算系統之實施例，其提供關於用以選擇一圖符或其他符號之一手勢的回授；圖5繪示作為一計算系統之實施例，其提供關於一資訊功能之回授；圖6繪示作為一計算系統之實施例，其提供關於使用者手的方位之回授； 圖7係一流程圖，用以繪示一程序之一實施例，其在執行指令手勢的同時，對一使用者提供視覺回授；以及圖8係一方塊圖，用以繪示一計算系統實施例，其包括用以對使用者提供關於指令手勢之呈現之回授的一機制；以及圖9繪示用於感知計算之一計算系統的一實施例。
較佳實施例之詳細說明
本發明之實施例廣泛地係針對用以提供關於計算系統指令手勢之視覺回授的一種機制。
當使用於此時：「使用者感應」意思是用於感應一使用者之一電腦操作。對一使用者的感應可包括位置和動作檢測，諸如一計算系統對該計算系統之一使用者所作為該計算系統之輸入的手勢檢測和解讀。使用者感應可利用任何技術，透過其，該使用者可被該計算所感應，包括視覺感應(使用一或更多攝影機或類似的裝置)、音頻感應(包括聲音的檢測以及音反射的檢測)、熱能或紅外線感應、投射光圖案(可見或非可見)之感應與解讀、以及其他技術。使用者感應可包括一感知計算系統之用於感應使用者操作和意圖的操作，其中一感知計算系統係允許包括手勢辨識之輸入形態的增加或改變的系統。
「計算系統」意思是包括計算能力之任何裝置或系統。一計算系統包括單一單元以及多元件之系統。一計算系統係不限定於一通用電腦，而亦包括具備計算能力之專用裝置。一「計算系統」包括一桌上電腦、一遊戲機、一膝上型或筆記型電腦、一多用途(AIO)電腦、一平板電腦、包括一智慧型手機之一手持計算裝置、或者具有計算和顯示能力之其他設備或系統。
在一些實施例中，該使用者要與一計算系統互動的意圖係藉由該使用者之動作被判定，諸如藉由一使用者的單手或雙手朝向該計算系統之一元件的動作。雖然實施例係不限定於一使用者的雙手，但此可能是使用者最普遍的操作。
在利用使用者感應去檢測系統輸入之一計算系統中，由一使用者所作以與該計算系統溝通之手勢(其可被廣泛地稱為指令手勢)在隨著這種手勢正被作出時，可能很難讓該使用者估算(gauge)。因此，一使用者能夠從結果分辨，對於提供所欲結果，一特定手勢是否為有效的，但無法理解為何該手勢有效或者無效。
在一些情況中，手勢無效的一原因是使用者執行手勢不夠精準，諸如下列情況：該使用者實際上沒有以該使用者相信該使用者正在呈現的方式呈現該手勢，或者該使用者正以會在該計算系統感應該使用者的手勢方面產生困難的方式，例如以令該計算系統較難檢測到的方位，作出該手勢。因此，使用者可能會被迫在執行手勢時觀看使 用者自己的手，或者以誇大的方式執行該手勢，以確保該計算系統能登錄(register)所欲手勢。無論如何，該使用者係被阻止自然地與該計算系統互動。
在一些實施例中，一計算系統包括用以提供關於計算系統指令手勢之回授的一機制。在一些實施例中，一計算系統包括一螢幕上視覺回授機制，其可被使用來在一指令手勢正被執行時，對一感知計算(PerComp)系統的使用者提供回授。在一些實施例中，一自然回授機制係被提供給一中端使用者，以使該使用者能夠正確地使用系統工具。
在一些實施例中，一機制在一顯示螢幕上呈現使用者單手或雙手之某種視覺表示，以允許使用者去理解使用者雙手與顯示螢幕上符號之間的關係，在一些實施例中，一第一架構提供視覺回授，該視覺回授包括在一使用者手的位置的視覺表示中，手指坐落點上的亮光。在一些實施例中，一使用者手指在空間中的移動係被光線表示，該光線會追蹤指尖光在該顯示螢幕上的位置一段時間。在一些實施例中，該視覺回授呈現一圖像，其係類似於一根手指在一池水中移動的圖像，其中跟隨手指移動之一軌跡係可見的，不過此軌跡在一短暫的時間後便會消失。在一些實施例中，指尖光和拖曳光的圖像對終端使用者提供了有關於該使用者手的位置和動作之回授，而且更進一步地在視覺回授中產生了一完整手掌的假象而不需要依靠使用一完整的手骨架。在一些實施例中，該計算系統之進入可漸進式地發生，其中，隨著該使 用者進入指令手勢感應的適當區域，指尖光會越變越亮。在一些實施例中，該計算系統之進入可漸進式地發生，其中，隨著該使用者進入指令手勢感應的適當區域，指尖光會越變集中。在一些實施例中，當該使用者正在實施或已經完成一指令手勢時，指尖光的色彩或形狀可改變。
在一些實施例中，亮度的不同為使用者提供了有關該使用者的手相對該顯示螢幕之方位的回授。在一些實施例中，當手指指向該顯示螢幕時，指尖光比較亮，而當使用者單手的手指朝遠離該顯示螢幕的方向指時，則比較暗。在一些實施例中，一被顯示圖像的亮度可具有不同的定位(orientation)，諸如一顛倒的定位，其中，當手指朝遠離該顯示螢幕之方向指時，指尖光比較亮，而當一使用者單手的手指指向該顯示螢幕時，則比較暗。在一些實施例中，關於使用者手指亮度之回授可給予使用者動機去將使用者的手定位為朝向顯示螢幕和感應器，以讓使用者的手指在感應中不會難以理解。
在一些實施例中，一第二架構針對用於選擇一顯示螢幕之一元件的指令手勢提供了回授，其中该手勢涉及以單手形成一形狀以讓手指可以捏或掐來選擇一目標圖符或其他符號(在本文中，這可被稱為一「爪」手勢)。在一些實施例中，一電腦系統可藉由顯示被部分填滿之「C」形，針對一爪選擇功能提供回授。在一些實施例中，使用者藉由將手合上來完成圓圈，以選擇該物件。假如開著的爪維持在一特定位置一段長時間的話，該螢幕會藉由顯示使用 者可作甚麼來選擇該物件而響應。
在一些實施例中，在選擇一物件之後，光會旋轉，藉此鼓勵使用者去「轉動」該物件以預覽，或將該物件朝一投射光移動以觀看檔案。在一些實施例中，一「搜尋」窺鏡手勢回授係如圖所示之在螢幕上的放大鏡。
在一些實施例中，一「縮放」功能可被利用，其中，舉例而言，兩指尖光提供了關於由該使用者單手形成之縮小手勢的回授。
在一些實施例中，一第三架構包括一「放大鏡」或環狀圖符，以針對一環狀手勢提供視覺回授，該環狀手勢係由一使用者藉由以同一隻手的至少另一根手指的指尖去觸碰拇指的指尖而執行。在一些實施例中，該計算系統會提供資訊，該資訊係關於當該環狀表示至少部分地環繞該圖符時，該圖符代表甚麼。
在一些實施例中，一設備包括用以感應該設備之使用者的存在或移動之一感應元件，一處理器，其中該處理器之操作包括對一使用者要提供輸入至該設備之指令手勢的解讀；還有一顯示螢幕，該設備在該顯示螢幕上顯示一或更多圖符，該一或更多圖符係關於該設備的操作。該設備是要針對該設備之使用者顯示視覺回授，視覺回授包括當該使用者之單或雙手在該感應元件之一感應區域內時，該使用者之單或雙手的表示。
在一些實施例中，一方法包括開始在一使用者和一計算系統之間的一通信期(session)；由該設備之一感應元 件感應該使用者的存在或移動；判定該使用者之單或雙手的位置、移動和方位其中的一或更多者；以及針對該使用者顯示關於該使用者之單手或雙手的視覺回授，該視覺回授包括該使用者單手或雙手相對一顯示螢幕上之一或更多符號的表示。
圖1繪示包括一機制之一計算系統的實施例，該機制係用以針對使用者提供關於指令手勢之呈現的視覺回授。在一些實施例中，一計算系統100包括一顯示螢幕110，其針對一使用者150提供有關使用者正在執行之指令手勢的回授。在一些實施例中，該計算系統100包括一或更多感應元件120，用以感應該使用者150之位置和移動。感應元件可包括多個共同工作或依序工作或上述皆有之不同元件。舉例而言，感應元件可包括提供諸如光或聲投射之初始感應的元件，然後是藉由，例如，超音波飛行時間攝影機(ultrasonic time of flight camera)或圖形化光攝影機(patterned light camera)，來針對手勢檢測的感應。
特定地，該等感應元件120可檢測該使用者之單手或雙手的移動和位置。在一些實施例中，它提供該計算系統關於單手或雙手手勢之視覺回授，其中該視覺回授包括圖像130之呈現，該等圖像130代表該使用者的雙手在企圖為了該計算系統之操作執行指令手勢時的位置和移動。
圖2繪示作為一計算系統之實施例，其提供關於指尖呈現之視覺回授。在一些實施例中，一計算系統，諸如繪示於圖1之系統100，藉由產生代表該使用者雙手之圖 像，提供雙手的位置和移動之視覺回授，其中該等圖像照亮雙手或手指的某些部位。在一些實施例中，一計算系統在一顯示圖像中提供一光點以代表該使用者手的每根手指的指尖。在一些實施例中，該使用者手的手指的移動會導致跟隨指尖光的一拖曳圖像之繪示。
在一些實施例中，一計算系統透過顯示於210之指尖光的圖示來感應該使用者手指的位置和移動。在此實例中，手指係被顯示為互相靠近且未顯示有任何移動，表明該使用者最近還沒有移動雙手來企圖呈現一指令手勢。在一些實施例中，該使用者的手指從第一位置往外移動，其中針對每一根手指都有跟隨手指之軌跡來顯示相關手指的移動220。在一些實施例中，這個程序會持續230，隨著手指達到完全伸展位置240。
在一些實施例中，該計算系統100運作以使追蹤代表該使用者手指的指尖光的光線在一第一段時間後開始逐漸消失250，而且代表該使用者手指的移動之托曳光最終將完全消失，藉此將該回授顯示回復到代表該使用者的指尖的光是以一靜止表示的方式顯示，而無顯示任何拖曳光260。
圖3繪示作為一計算系統之實施例，其提供關於用來縮小一元件之指令手勢的回授。在一些實施例中，一計算系統提供兩指尖光，以提供關於該使用者單手所形成的縮小手勢之回授310。在一些實施例中，該手的拇指和另一根手指或另多根手指的移動會隨著該拇指和另一根手指 或另多根手指相互靠近而提供回授，320和330，而且會在該拇指和另一根手指或另多根手指彼此接觸340時顯示接觸。
圖4繪示作為一計算系統之實施例，其提供關於用以選擇一圖符或其他符號之手勢的回授。在一些實施例中，使用者手的指尖410可換成一「C」符號，以提供關於朝圖符移動之抓或爪手勢的回授420-430。在一些實施例中，隨著該使用者在空間中的手移動到抓取或選擇一圖符之位置上440，該計算系統提供回授，並在該使用者手的拇指和另一根手指或另多根手指靠近以選擇該圖符450時提供一完整圓圈。在一些實施例中，在選擇一圖符之後，以旋轉光為形式之回授可被提供460。在一些實施例中，以一選單為形式之回授係被提供，以挑選與被選擇圖符相關之動作470。
圖5繪示作為一計算系統之實施例，其提供關於一資訊功能之回授。在一些實施例中，一環狀手勢提供關於一圖符代表甚麼之進一步資訊，該環狀手勢係藉由一使用者的拇指接觸另一根手指而被執行，類似於一放大鏡或相似的實體物件510。在一些實施例中，520象徵一「指向手勢」，其中一旦該環狀手勢產生了選項，第二隻手可被使用來執行一指向手勢以選擇一特定選項。
圖6繪示作為一計算系統之實施例，其提供關於使用者手方位之回授。在一些實施例中，一計算系統提供關於該使用者雙手的方位之回授。在此實例中，該回授藉 由提供手的微暗表示來表明使用者手的手指之方位係朝向該顯示螢幕610，而且回授係藉由提供手的較亮表示來表明使用者手的手指之方位係遠離該顯示螢幕620。然而，實施例並不限定於雙手的任何特定方位。舉例而言，一計算系統可提供關於該使用者雙手的方位之相反回授，其中回授係藉由提供手的微暗表示來表明一使用者手的手指之方位係遠離該顯示螢幕，而回授係藉由雙手的較亮表示來表明一使用者手的手指之方位朝向該顯示螢幕。
圖7係一流程圖，其繪示用以對一使用者在執行指令手勢的同時提供視覺回授之程序的實施例。在一些實施例中，一計算系統著手開始與一使用者之通信期700，而使用者之存在係在該計算系統之一感應區域內被感應705。在一些實施例中，該使用者之單或雙手係被該計算系統檢測710，而該系統會檢測該使用者之單手或雙手的位置、方位和動作715。
在一些實施例中，該計算系統提供關於該使用者之單手或雙手的視覺回授，其中該顯示提供了關於該使用者單手或雙手與該顯示螢幕上的符號之間的關係之回授720。在一些實施例中，該回授包括下列之一或更多者：該使用者之單手或雙手的指尖(諸如指尖光)以及指尖的動作(諸如跟隨一指尖的光線軌跡)之視覺回授725；用於顯示一抓或「爪」手勢以選擇圖符之一「C」形的視覺回授730；以及，用以說明要獲取關於一圖幅代表甚麼的資訊之一環狀手勢的放大鏡或環狀物視覺回授735。
在一些實施例中，假如該使用者的手勢移動係被檢測到的話740，該計算系統提供一手勢辨識程序745，其可包括來自一手勢資料庫之資料的使用，該手勢資料庫係可被該計算系統存取者，750。
圖8係一方塊圖，以繪示一計算系統實施例，其包括用以對使用者提供關於指令手勢之呈現的回授之一機制。計算系統800代表任何利用使用者感應之計算裝置或系統，包括一行動計算裝置，諸如一膝上型電腦、計算平板、一行動電話或智慧型電話、一無線致能電子閱讀機、或其他無線行動裝置。將被理解的是組件中的某些係被廣泛地顯示，而這類計算系統之組件並非全部都有被顯示在計算系統800。該等組件可由一或更多匯流排或其他連結805被連接。
計算系統800包括處理器810，其執行計算系統800之主要處理操作。處理器810可包括一或更多實體裝置，諸如微處理器、應用處理器、微控制器、可程式化邏輯裝置、或其他處理手段。由處理器810執行之該等處理操作包括一操作平台或操作系統之執行，在該操作平台或操作系統上，應用程式、裝置功能或上述二者皆可被執行。該等處理操作包括，舉例而言，關於與一人類使用者或與其他裝置的I/O(輸入/輸出)之操作，關於電力管理之操作，以及關於將計算系統800連接至另一個系統或裝置之操作。該等處理操作亦可包括關於音頻I/O、顯示I/O或上述二者之操作。處理器810可包括一或更多圖形處理單元 (GPU)，其包括用於通用圖形處理器(GPGPU)的一GPU。
在一些實施例中，計算系統800包括音頻子系統820，其代表與對該計算系統提供音頻功能相關聯之硬體(諸如，音頻硬體和音頻電路)和軟體(諸如，驅動器和編碼譯碼器)組件。音頻功能可包括揚聲器輸出、頭戴耳機輸出或上述二者，還有麥克風輸入。用於這類功能之裝置可被整合於計算系統800中，或者連接至計算系統800。在一些實施例中，一使用者藉由提供可被處理器810接收和處理之音頻指令來與計算系統800互動。
顯示子系統830代表提供一視覺顯示器、一觸覺顯示器、或顯示器組合之硬體(例如，顯示裝置)和軟體(例如，驅動器)組件，用以讓一使用者與該計算系統800互動。顯示子系統830包括顯示介面832，其包括用以針對一使用者提供顯示之特定螢幕或硬體裝置。在一實施例中，顯示介面832包括自處理器810分離的邏輯，以執行關於該顯示之至少部份處理。在一實施例中，顯示子系統830包括一觸碰式螢幕裝置，其為一使用者提供輸出和輸入二者。
在一些實施例中，該計算系統800之該顯示子系統830包括使用者手勢回授834，用以針對該使用者提供關於由該使用者執行之該等手勢與該顯視器之該等元件間的關係之視覺回授。在一些實施例中，該回授包括下列之一或更多者：該使用者之單手或雙手的指尖(諸如指尖光)以及指尖的動作(諸如跟隨一指尖的光線軌跡)之視覺回授；用於顯示一抓或「爪」手勢以選擇圖符之一「C」形的視覺回授； 以及，用以說明要獲取關於一圖幅代表甚麼的資訊之一環狀手勢的放大鏡或環狀物視覺回授。
I/O控制器840代表與一使用者之互動相關的硬體裝置和軟體組件。I/O控制器840可操作來管理身為音頻子系統820一部分的硬體以及身為該顯示子系統830一部分的硬體。此外，I/O控制器840繪示針對連接至計算系統800之附加裝置的一連接點，透過該等附加裝置，一使用者或許可與該系統互動。舉例而言，可被安裝在計算系統800之裝置或許可包括麥克風裝置、揚聲器或立體聲系統、視頻系統或其他顯示裝置、鍵盤或鍵板裝置、或其他用於特定應用程式之I/O裝置，例如讀卡機或其他裝置。
如上所述，I/O控制器840可與音頻子系統820、顯示子系統830或上述二者互動。舉例而言，一麥克風或其他音頻裝置之輸入可提供輸入或指令給計算系統800之一或更多應用程式或功能。附加地，音頻輸出可被提供來取代顯示輸出或作為附加。在另一範例中，假如顯示子系統包括一觸碰式螢幕，那麼該顯示裝置亦可作為一輸入裝置，其可至少局部地由I/O控制器840管理。另外在計算系統800上也可有額外的按鈕或切換器，以提供由I/O控制器840管理之I/O功能。
在一實施例中，I/O控制器840管理裝置，例如加速度計、攝影機、光感測器或其他環境感測器、或者其他可被包括在計算系統800中的硬體。該輸入可為直接使用者互動之部分，也提供了環境輸入給該系統來影響它的操作 (諸如過濾雜訊、為了亮度檢測而調整顯示器、為攝影機施加閃光、或其他特性)。
在一實施例中，計算系統800包括電力管理系統850，其管理電池電力使用率、該電池之充電、以及有關省電操作之特性。記憶體子系統860包括用來在計算系統800中儲存資訊之記憶體裝置。記憶體可包括非揮發性(假如該記憶體裝置之電力被中斷的話，狀態不會改變)記憶體裝置以及揮發性(假如該記憶體裝置之電力被中斷的話，狀態係不確定的)記憶體裝置。記憶體860可儲存應用程式資料、使用者資料、音樂、相片、文件或其他資料，還有與該等應用程式之執行和系統800之功能有關的系統資料(不論是長期或暫時的)。特定地，記憶體可包括手勢檢測資料862，用於檢測和解讀該計算系統之一使用者800所作的手勢。
在一些實施例中，計算系統800包括一或更多使用者感應元件890，以感應存在與動作，其中可包括一或更多攝影機或其他視覺感應元件、一或更多麥克風或其他音頻感應元件、一或更多紅外線或其他溫度感應元件、或任何其他用以感應一使用者之存在或移動的元件。
連結性870包括硬體裝置(諸如無線和有線連接器以及通訊硬體)和軟體組件(諸如驅動器和協定堆疊)來致能計算系統800去與外部裝置通訊。該計算系統可以包括分離的裝置，諸如其他計算裝置、無線存取點或基地台，還有諸如耳機、印表機或其他裝置之周邊設備。
連結性870可包括多個不同種類的連結性。歸納 而論，計算系統800係被繪示來具有蜂巢式連結性872和無線連結性874。蜂巢式連結性872廣泛地意指由無線載體所提供之蜂巢式網路連結性，諸如由GSM(全球行動通信系統)或者變異或衍生物、CDMA(分碼多工多重存取)或者變異或衍生物、TDM(分時多工存取)或者變異或衍生物，或其他蜂巢式服務標準所提供者。無線連結性874意指非蜂巢式的無線連結性，並且可包括個人區域網路(諸如藍芽)、區域網路(諸如WiFi)、廣域網路(諸如WiMax)、或其他無線通訊。連結性870可包括一全向或定向天線，用以作資料傳輸、資料接收或上述二者。
周邊連結880包括硬體介面和連接器，還有軟體組件(舉例而言，驅動器和協定堆疊)，以建立周邊連結。將被理解的是計算系統800可以是對其他計算裝置而言的周邊裝置(「到」882)，也可以有周邊裝置(「自」884)被連接在它身上。計算系統800一般具有一「對接」連接器，以為了諸如管理(諸如下載、上傳、改變和同步化)計算系統800上的內容之目的而連接至其他計算裝置。此外，一對接連接器可允許計算系統800連接到某些周邊設備，其等允許計算系統800去控制內容輸出，例如，給視聽或其他系統。
除了一專屬對接連接器或其他專屬連接硬體之外，計算系統800可透過共用或以標準為基礎之連接器作周邊連結880。共用種類可包括一通用串列匯流排(USB)連接器(其可包括數個不同的硬體介面之任一者)、包括MiniDisplayPort(MDP)之DisplayPort、高清晰度多媒體介面 (HDMI)、火線、或其他種類。
圖9繪示作感知計算之一計算系統的實施例。該計算系統可包括一電腦、伺服器、遊戲機或其他計算設備。在此實例中，與當前的描述沒有密切關係之某些標準和眾所周知的組件未被顯示。在一些實施例底下，該計算系統900包含一互連或交叉開關905或其他通訊手段，以作資料傳輸。該計算系統900可包括一處理手段，例如與該互連905耦接以處理資訊的一或更多處理器910。該處理器910可包含一或更多實體處理器和一或更多邏輯處理器。為了簡化的目的，該互連905係被繪示為單一互連，但可代表多個不同的互連或匯流排，而且對此種互連之組件連結可呈多樣化。圖9所示之該互連905係一抽象概念，其代表任一或更多分離的實體匯流排、點對點連結、或者藉由恰當的電橋、轉接器或控制器所連接之上述二者。
由該一或更多處理器所作之處理包括針對感知計算911之處理，其中這類處理包括與該計算系統之一虛擬邊界相關之對手勢的感應和解讀。
在一些實施例中，該計算系統900更包含一隨機存取記憶體(RAM)或其他動態儲存裝置或元件，作為用以儲存資訊和將被該等處理器910執行之指令的主要記憶體912。RAM記憶體包括動態隨機存取記憶體(DRAM)，其需要記憶體內容之再新，以及靜態隨機存取記憶體(SRAM)，其不需要內容之再新，但價格較高。在一些實施例中，主要記憶體可包括對應用程式之主動儲存，該等應用程式包 括一瀏覽器應用程式，用以使用於讓該計算系統之一使用者作網路瀏覽活動。DRAM記憶體可包括同步動態隨機存取記憶體(SDRAM)，其包括用以控制信號之一時脈訊號，以及擴充資料輸出動態隨機存取記憶體(EDODRAM)。在一些實施例中，該系統之記憶體可包括某些暫存器或其他特殊用途記憶體。
該計算系統900亦可包含一唯讀記憶體(ROM)916或其他靜態儲存裝置，用以為該等處理器910儲存靜態資訊和指令。該計算系統900可包括一或更多非揮發性記憶體元件918，作某些元件之儲存。
在一些實施例中，該計算系統900包括一或更多輸入裝置930，其中該等輸入裝置包括一鍵盤、滑鼠、觸碰板、語音指令辨識、手勢辨識、或其他用以對一計算系統提供輸入之裝置的一或更多者。
該計算系統900亦可透過該互連905被耦接至一輸出顯示器940。在一些實施例中，該顯示器940可包括一液晶顯示器(LCD)或任何其他顯示技術，用以對一使用者顯示資訊或內容。在一些環境中，該顯示器940可包括一觸碰式螢幕，其亦係被利用來作為一輸入裝置之至少一部分。在一些環境中，該顯示器940可為或可包括一音頻裝置，諸如用來提供音頻資訊之一揚聲器。
一或更多發射器或接收器945亦可被耦接至該互連905。在一些實施例中，該計算系統900可包括一或更多連接埠950，以作資料之接收或傳輸。該計算系統900更可 包括一或更多全向或定向天線955，以透過無線電信號作資料的接收。
該計算系統900亦可包含一電力裝置或系統960，其可包含一電力供應器、一電池、一太陽能電池、一燃料電池、或其他用以提供或產生電力之系統或裝置。該電力裝置或系統960所提供之電力可依需求被分配給該計算系統900之元件。
在上文描述中，為了說明之目的，許多特定的細節係被陳述來提供對本發明之徹底理解。然而，對於熟知技藝者而言，將為明瞭的是，本發明可在沒有這些特定細節之部分的情形下被實現。在其他範例中，眾所周知的結構和裝置係被顯示為方塊圖的形式。在被繪示的組件之間可以有中間結構。被描述或繪示於此之該等組件可具備額外的沒有被繪示或描述之輸入或輸出。
各式各樣的實施例可包括各種程序。這些程序可被硬體組件執行或者可由電腦程式或機器可執行指令所實施，該等機器可執行指令可被使用來致使一通用或專用處理器或者可被程式化有該等指令之邏輯電路去執行該等程序。擇一地，該等程序可被硬體和軟體之組合執行。
各種實施例之部分可被提供為一電腦程式產品，其可包括儲存有電腦程式指令之一電腦可讀取媒體，該等電腦程式指令可被使用來將一電腦(或其他電子裝置)程式化，以受一或更多處理器執行去執行依據某些實施例的程序。該電腦可讀取媒體可包括，但不限定於，軟式磁 片、光碟片、唯讀光碟記憶體(CD-ROM)、以及磁光碟片、唯讀記憶體(ROM)、隨機存取記憶體(RAM)、可消除程式化唯讀記憶體(EPROM)、電子式可清除程式化唯讀記憶體(EEPROM)、磁或光學卡片、快閃記憶體、或者適合作電子指令之儲存的其他種類的電腦可讀取媒體。再者，實施例亦可被下載為一電腦程式產品，其中該程式可從一遠端電腦被轉移到一請求電腦。
該等方法多數以它們最基本的形式被描述，然而程序可被增加到或減少自該等方法之任何一者，而且資訊可被增加到或減少自所述訊息之任何一者，而不會背離本發明之基本範疇。對於熟知技藝者而言，將會明瞭的是許多進一步的修改和改寫可被實現。該等特定的實施例不是為了限制本發明，而是為了闡明本發明而被提供的。本發明之實施例的範疇不應由提供於上之特定範例判定，而應僅被下述的申請專利範圍判定。
假如一元件「A」係被講述為耦接至元件「B」或與元件「B」耦接，則元件A可為直接地耦接至元件B或者為透過，例如，元件C，間接地耦接。當說明書或申請專利範圍陳述說一組件、特性、結構、程序或特色A「導致」一組件、特性、結構、程序或特色B，它的意思是「A」係「B」的至少局部成因，但是可能還有至少一個其他組件、特性、結構、程序或特色輔助了「B」的起因。假如說明書表明說一組件、特性、結構、程序或特色「可」、「或許可」或「可以」被包括，則此特定組件、特性、結構、程序或 特色並不必要被包括。假如說明書或申請專利範圍論及「一」或「一個」元件，這不表示所述元件只有一個。
一實施例係本發明之一實現或範例。說明書中對於「一實施例」、「一個實施例」、「一些實施例」或「其他實施例」之參照的意思是關於該等實施例所描述之一特定特性、結構或特色係被包括在至少一些實施例中，但不見得是所有的實施例中。「一實施例」、「一個實施例」或「一些實施例」的各式出現不必然全部都是指相同的實施例。應被體恤的是在本發明之示範性實施例的前文描述中，為了簡化揭露並輔助各種發明面向之一或更多者的理解之目的，各種特性有時候會被集合在單一實施例、圖式或其描述中。然而，這種揭露方式不應被解讀成反映被主張的發明有需要比明確列舉在每個申請專利範圍更多的特性之意圖。反之，如下述申請專利範圍反映般，發明面向存在於較揭露於前文之單一實施例中的所有特性少的特性中。因此，申請專利範圍在此係被明確地結合於本敘述中，其中每一個申請專利範圍係獨立自主地作為本發明之一個別實施例。
700‧‧‧步驟
705‧‧‧步驟
710‧‧‧步驟
715‧‧‧步驟
720‧‧‧步驟
725‧‧‧步驟
730‧‧‧步驟
735‧‧‧步驟
740‧‧‧步驟
745‧‧‧步驟
750‧‧‧步驟

Claims (30)

  1. 一種設備，包含：一感應元件，用以感應該設備之一使用者的存在或移動；一處理器，其中該處理器之操作包括對使用者要提供輸入給該設備之指令手勢的解讀；以及一顯示螢幕，該設備在該顯示螢幕上顯示一或更多圖符，該一或更多圖符係與該設備之操作有關；其中該設備是要對該設備之一使用者顯示視覺回授，視覺回授包括在該使用者之單或雙手位於該感應元件之一感應區域內時，對該單或雙手的表示。
  2. 申請專利範圍第1項之設備，其中該表示是要提供相對於該顯示螢幕上之一或更多符號的該使用者之該單手或雙手的位置之闡明。
  3. 申請專利範圍第1項之設備，其中該使用者之該單或雙手的表示包括該使用者之該單手或雙手的一或更多根手指指尖之表示。
  4. 申請專利範圍第3項之設備，其中該使用者之該單或雙手的表示包括當該使用者該單手或雙手在空間中移動時，跟隨一或更多根手指指尖的軌跡。
  5. 申請專利範圍第3項之設備，其中該使用者之該單手或雙手之該一或更多根手指指尖的表示具有一亮度，該亮度係基於該單手或雙手相對於該顯示螢幕之方位。
  6. 申請專利範圍第3項之設備，其中該表示包括用以提供一圖像之放大或縮小的一隻手的拇指和另一根手指或另多根手指指尖之表示。
  7. 申請專利範圍第1項之設備，其中該使用者之該單手或雙手的表示包括一「C」形，其代表該使用者的第一隻手的一手勢，包括作彎曲姿勢的拇指和作彎曲姿勢的一或更多根其他手指，其中該拇指和該一或更多根其他手指之指尖並未彼此接觸。
  8. 申請專利範圍第7項之設備，其中該「C」形是要在該使用者之第一隻手處於用來選擇一圖符的位置時，圍繞該圖符之至少一部分。
  9. 申請專利範圍第1項之設備，其中該使用者之該單手或雙手的表示包括一形狀，該形狀代表要獲取資訊之該使用者第一隻手的一環狀手勢，其中該環狀手勢包括作彎曲姿勢的拇指和作彎曲姿勢的一或更多根其他手指，其中該拇指和該一或更多根其他手指的指尖彼此接觸。
  10. 申請專利範圍第9項之設備，其中該表示係一環狀物或放大鏡。
  11. 申請專利範圍第9項之設備，其中該表示是要至少局部地環繞一圖符，而且該設備是要顯示與由該圖符所代表之一元件相連的資訊。
  12. 申請專利範圍第11項之設備，其中該表示更包括要選擇關於與由該圖符所代表之該元件相連之被顯示資訊的選項。
  13. 一種方法，包含：由一設備之一感應元件，感應使用者的存在或移動；判定該使用者之單或雙手的位置、移動和方位之一或更多者；針對該使用者顯示關於該使用者之該單手或雙手的視覺回授；以及解讀該使用者要提供輸入給該設備之一或更多指令手勢。
  14. 申請專利範圍第13項之方法，其中顯示視覺回授的步驟包括提供相對於一顯示螢幕上之一或更多符號的該使用者之該單手或雙手的表示。
  15. 申請專利範圍第13項之方法，其中該使用者之該單或雙手的表示包括該使用者之該單手或雙手每根手指指尖的表示。
  16. 申請專利範圍第15項之方法，其中該使用者之該單或雙手的表示包括隨著一該使用者之該單手或雙手在空間移動，跟隨該使用者每根手指指尖的表示之軌跡。
  17. 申請專利範圍第13項之方法，其中該使用者之該單手或雙手的表示包括一「C」形，其代表該使用者第一隻手的一手勢，包括作彎曲姿勢的拇指和作彎曲姿勢的一或更多根其他手指，其中該拇指和該一或更多其他根手指的指尖並未彼此接觸。
  18. 申請專利範圍第16項之方法，其中該包括「C」形之該 第一隻手的表示是要在當該使用者之第一隻手係處於用來選擇一圖符的一位置時，圍繞該圖符之至少一部分。
  19. 申請專利範圍第13項之方法，其中該使用者之該單手或雙手的表示包括一形狀，該形狀代表要獲取資訊之該使用者的第一隻手的一環狀手勢，其中該環狀手勢包括作彎曲姿勢的拇指和作彎曲姿勢的一或更多其他根手指，其中該拇指和該一或更多其他根手指的指尖彼此接觸。
  20. 申請專利範圍第18項之方法，其中該表示係一環狀物或放大鏡。
  21. 申請專利範圍第19項之方法，其中該表示是要至少局部地環繞一圖符，而且該設備是要顯示與由該圖符所代表之一元件相連的資訊。
  22. 一非暫態電腦可讀取儲存媒體，其儲存有代表數列指令之資料，當該等指令被一處理器執行時會導致該處理器去執行操作，該等操作包含：由一設備之一感應元件，感應使用者之存在或移動；判定該使用者之單或雙手的位置、移動和方位之一或更多者；針對該使用者顯示關於該使用者之該單手或雙手的視覺回授；以及解讀該使用者要提供輸入給該設備之一或更多指令手勢。
  23. 申請專利範圍第22項之媒體，其中顯示視覺回授的操作 包括提供相對一顯示螢幕上之一或更多符號的該使用者之該單手或雙手的表示。
  24. 申請專利範圍第22項之媒體，其中該使用者之該單或雙手的表示包括該使用者之該單手或雙手之每根手指指尖的表示。
  25. 申請專利範圍第24項之媒體，其中該使用者之該單或雙手的表示包括隨著該使用者之該單手或雙手在空間移動，跟隨該使用者每根手指指尖之表示的軌跡。
  26. 申請專利範圍第22項之媒體，其中該使用者之該單手或雙手的表示包括一「C」形，其代表該使用者第一隻手的一手勢，包括作彎曲姿勢的拇指和作彎曲姿勢的一或更多其他根手指，其中該拇指和該一或更多其他根手指的指尖並未彼此接觸。
  27. 申請專利範圍第26項之媒體，其中該包括「C」形之該第一隻手的表示是要在當該使用者之第一隻手係處於用來選擇一圖符的一位置時，圍繞該圖符之至少一部分。
  28. 申請專利範圍第22項之媒體，其中該使用者之該單手或雙手的表示包括一形狀，該形狀代表要獲取資訊之該使用者的第一隻手的一環狀手勢，其中該環狀手勢包括作彎曲姿勢的拇指和作彎曲姿勢的一或更多其他根手指，其中該拇指和該一或更多其他根手指的指尖彼此接觸。
  29. 申請專利範圍第28項之媒體，其中該表示係一環狀物或放大鏡。
  30. 申請專利範圍第29項之媒體，其中該表示是要至少局部 地環繞一圖符，而且該設備是要顯示與由該圖符所代表之一元件相連的資訊。
TW101145913A 2011-12-23 2012-12-06 用以提供關於計算系統指令手勢之視覺回授的機制 TWI643091B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
PCT/US2011/067289 WO2013095678A1 (en) 2011-12-23 2011-12-23 Mechanism to provide feedback regarding computing system command gestures
??PCT/US11/67289 2011-12-23

Publications (2)

Publication Number Publication Date
TW201342121A true TW201342121A (zh) 2013-10-16
TWI643091B TWI643091B (zh) 2018-12-01

Family

ID=48669317

Family Applications (2)

Application Number Title Priority Date Filing Date
TW101145913A TWI643091B (zh) 2011-12-23 2012-12-06 用以提供關於計算系統指令手勢之視覺回授的機制
TW105122067A TWI659333B (zh) 2011-12-23 2012-12-06 用以處理與移動相關的資料之計算裝置及方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW105122067A TWI659333B (zh) 2011-12-23 2012-12-06 用以處理與移動相關的資料之計算裝置及方法

Country Status (3)

Country Link
US (4) US10345911B2 (zh)
TW (2) TWI643091B (zh)
WO (1) WO2013095678A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013095678A1 (en) 2011-12-23 2013-06-27 Intel Corporation Mechanism to provide feedback regarding computing system command gestures
US9230171B2 (en) 2012-01-06 2016-01-05 Google Inc. Object outlining to initiate a visual search
US9052804B1 (en) * 2012-01-06 2015-06-09 Google Inc. Object occlusion to initiate a visual search
US9122366B2 (en) * 2013-03-15 2015-09-01 Navico Holding As Residue indicators
DE102014202490A1 (de) * 2014-02-12 2015-08-13 Volkswagen Aktiengesellschaft Vorrichtung und Verfahren zur Signalisierung einer erfolgreichen Gesteneingabe
US10503968B2 (en) 2016-03-22 2019-12-10 Intel Corporation Identifying a local coordinate system for gesture recognition
US11868537B2 (en) 2019-07-26 2024-01-09 Google Llc Robust radar-based gesture-recognition by user equipment
CN118192796A (zh) * 2019-08-30 2024-06-14 谷歌有限责任公司 移动设备的输入方法
MX2022003336A (es) 2019-09-20 2022-05-06 Interdigital Ce Patent Holdings Sas Dispositivo y metodo para la interaccion manual de usuario en entornos de realidad virtual (vr) y realidad aumentada (ar).

Family Cites Families (89)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5581670A (en) 1993-07-21 1996-12-03 Xerox Corporation User interface having movable sheet with click-through tools
US5594469A (en) 1995-02-21 1997-01-14 Mitsubishi Electric Information Technology Center America Inc. Hand gesture machine control system
DE69626208T2 (de) 1996-12-20 2003-11-13 Hitachi Europ Ltd Verfahren und System zur Erkennung von Handgesten
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US6222465B1 (en) * 1998-12-09 2001-04-24 Lucent Technologies Inc. Gesture-based computer interface
SE0000850D0 (sv) 2000-03-13 2000-03-13 Pink Solution Ab Recognition arrangement
US7058204B2 (en) 2000-10-03 2006-06-06 Gesturetek, Inc. Multiple camera control system
US7030861B1 (en) 2001-02-10 2006-04-18 Wayne Carl Westerman System and method for packing multi-touch gestures onto a hand
US6869418B2 (en) 2001-08-17 2005-03-22 Hypoguard Usa Inc. Safety shield for a needle assembly
AU2003217587A1 (en) * 2002-02-15 2003-09-09 Canesta, Inc. Gesture recognition system using depth perceptive sensors
US7274803B1 (en) * 2002-04-02 2007-09-25 Videomining Corporation Method and system for detecting conscious hand movement patterns and computer-generated visual feedback for facilitating human-computer interaction
US7170492B2 (en) 2002-05-28 2007-01-30 Reactrix Systems, Inc. Interactive video display system
CN1672469A (zh) 2002-07-23 2005-09-21 皇家飞利浦电子股份有限公司 场致发光显示器,包括这种显示器的电子装置和场致发光显示器的制造方法
US20050003851A1 (en) 2003-06-05 2005-01-06 Visteon Global Technologies, Inc. Radio system with touch pad interface
US20050052427A1 (en) 2003-09-10 2005-03-10 Wu Michael Chi Hung Hand gesture interaction with touch surface
US8448083B1 (en) 2004-04-16 2013-05-21 Apple Inc. Gesture control of multimedia editing applications
US7519223B2 (en) 2004-06-28 2009-04-14 Microsoft Corporation Recognizing gestures and using gestures for interacting with software applications
US7728821B2 (en) 2004-08-06 2010-06-01 Touchtable, Inc. Touch detecting interactive display
US8560972B2 (en) 2004-08-10 2013-10-15 Microsoft Corporation Surface UI for gesture-based interaction
CN101536494B (zh) 2005-02-08 2017-04-26 奥布隆工业有限公司 用于基于姿势的控制系统的系统和方法
KR100687737B1 (ko) 2005-03-19 2007-02-27 한국전자통신연구원 양손 제스쳐에 기반한 가상 마우스 장치 및 방법
WO2006104132A1 (ja) 2005-03-28 2006-10-05 Matsushita Electric Industrial Co., Ltd. ユーザインタフェイスシステム
TWM294069U (en) 2006-01-19 2006-07-11 Univ Nat Kaohsiung Applied Sci Improved palm-print identification system
US20100045705A1 (en) 2006-03-30 2010-02-25 Roel Vertegaal Interaction techniques for flexible displays
JP4797752B2 (ja) 2006-03-31 2011-10-19 株式会社デンソー 移動体用操作物体抽出装置
US8086971B2 (en) 2006-06-28 2011-12-27 Nokia Corporation Apparatus, methods and computer program products providing finger-based and hand-based gesture commands for portable electronic device applications
US9696808B2 (en) * 2006-07-13 2017-07-04 Northrop Grumman Systems Corporation Hand-gesture recognition method
US7907117B2 (en) * 2006-08-08 2011-03-15 Microsoft Corporation Virtual controller for visual displays
JP4267648B2 (ja) * 2006-08-25 2009-05-27 株式会社東芝 インターフェース装置及びその方法
US9317124B2 (en) * 2006-09-28 2016-04-19 Nokia Technologies Oy Command input by hand gestures captured from camera
KR100851977B1 (ko) 2006-11-20 2008-08-12 삼성전자주식회사 가상 평면을 이용하여 전자 기기의 사용자 인터페이스를제어하는 방법 및 장치.
US7924271B2 (en) 2007-01-05 2011-04-12 Apple Inc. Detecting gestures on multi-event sensitive devices
US20080231926A1 (en) 2007-03-19 2008-09-25 Klug Michael A Systems and Methods for Updating Dynamic Three-Dimensional Displays with User Input
US8555207B2 (en) 2008-02-27 2013-10-08 Qualcomm Incorporated Enhanced input using recognized gestures
US9772689B2 (en) * 2008-03-04 2017-09-26 Qualcomm Incorporated Enhanced gesture-based image manipulation
US8259163B2 (en) 2008-03-07 2012-09-04 Intellectual Ventures Holding 67 Llc Display with built in 3D sensing
WO2009128064A2 (en) 2008-04-14 2009-10-22 Pointgrab Ltd. Vision based pointing device emulation
US8723795B2 (en) 2008-04-24 2014-05-13 Oblong Industries, Inc. Detecting, representing, and interpreting three-space input: gestural continuum subsuming freespace, proximal, and surface-contact modes
US20110115702A1 (en) * 2008-07-08 2011-05-19 David Seaberg Process for Providing and Editing Instructions, Data, Data Structures, and Algorithms in a Computer System
US20100031202A1 (en) 2008-08-04 2010-02-04 Microsoft Corporation User-defined gesture set for surface computing
DE112008004156B4 (de) 2008-12-15 2021-06-24 Hewlett-Packard Development Company, L.P. System und verfahren für einen gestenbasierten editiermodus und computerlesbares medium hierfür
US9569001B2 (en) 2009-02-03 2017-02-14 Massachusetts Institute Of Technology Wearable gestural interface
US20100251112A1 (en) 2009-03-24 2010-09-30 Microsoft Corporation Bimodal touch sensitive digital notebook
US9015638B2 (en) 2009-05-01 2015-04-21 Microsoft Technology Licensing, Llc Binding users to a gesture based system and providing feedback to the users
US8181123B2 (en) 2009-05-01 2012-05-15 Microsoft Corporation Managing virtual port associations to users in a gesture-based computing environment
US8744121B2 (en) 2009-05-29 2014-06-03 Microsoft Corporation Device for identifying and tracking multiple humans over time
US8693724B2 (en) * 2009-05-29 2014-04-08 Microsoft Corporation Method and system implementing user-centric gesture control
JP4701424B2 (ja) 2009-08-12 2011-06-15 島根県 画像認識装置および操作判定方法並びにプログラム
JP2011081480A (ja) * 2009-10-05 2011-04-21 Seiko Epson Corp 画像入力システム
US8843857B2 (en) 2009-11-19 2014-09-23 Microsoft Corporation Distance scalable no touch computing
WO2011066343A2 (en) 2009-11-24 2011-06-03 Next Holdings Limited Methods and apparatus for gesture recognition mode control
US8830227B2 (en) 2009-12-06 2014-09-09 Primesense Ltd. Depth-based gain control
TWI489317B (zh) 2009-12-10 2015-06-21 Tatung Co 電子裝置的操作方法及系統
US8320621B2 (en) 2009-12-21 2012-11-27 Microsoft Corporation Depth projector system with integrated VCSEL array
US8232990B2 (en) * 2010-01-05 2012-07-31 Apple Inc. Working with 3D objects
US8334842B2 (en) 2010-01-15 2012-12-18 Microsoft Corporation Recognizing user intent in motion capture system
KR101184460B1 (ko) * 2010-02-05 2012-09-19 연세대학교 산학협력단 마우스 포인터 제어 장치 및 방법
US8522308B2 (en) 2010-02-11 2013-08-27 Verizon Patent And Licensing Inc. Systems and methods for providing a spatial-input-based multi-user shared display experience
TW201128541A (en) 2010-02-12 2011-08-16 Suyin Optronics Corp Interactive apparatus for hand-gesture recognition
JP2013521576A (ja) 2010-02-28 2013-06-10 オスターハウト グループ インコーポレイテッド 対話式ヘッド取付け型アイピース上での地域広告コンテンツ
US8982182B2 (en) 2010-03-01 2015-03-17 Apple Inc. Non-uniform spatial resource allocation for depth mapping
US20110219340A1 (en) * 2010-03-03 2011-09-08 Pathangay Vinod System and method for point, select and transfer hand gesture based user interface
TW201203030A (en) 2010-03-16 2012-01-16 Intel Corp A gaming system with safety features
TWI431538B (zh) 2010-04-30 2014-03-21 Acer Inc 基於影像之動作手勢辨識方法及系統
JPWO2011142317A1 (ja) * 2010-05-11 2013-07-22 日本システムウエア株式会社 ジェスチャー認識装置、方法、プログラム、および該プログラムを格納したコンピュータ可読媒体
US20110283212A1 (en) 2010-05-13 2011-11-17 Nokia Corporation User Interface
US20110289455A1 (en) 2010-05-18 2011-11-24 Microsoft Corporation Gestures And Gesture Recognition For Manipulating A User-Interface
US20110298708A1 (en) * 2010-06-07 2011-12-08 Microsoft Corporation Virtual Touch Interface
WO2012020380A1 (en) 2010-08-11 2012-02-16 Primesense Ltd. Scanning projectors and image capture modules for 3d mapping
US9213890B2 (en) * 2010-09-17 2015-12-15 Sony Corporation Gesture recognition system for TV control
US8819571B2 (en) 2010-09-30 2014-08-26 Apple Inc. Manipulating preview panels in a user interface
US20120117514A1 (en) * 2010-11-04 2012-05-10 Microsoft Corporation Three-Dimensional User Interaction
KR101799270B1 (ko) * 2010-12-29 2017-11-21 엘지전자 주식회사 이동 단말기 및 이것의 터치 인식 방법
US9354804B2 (en) 2010-12-29 2016-05-31 Microsoft Technology Licensing, Llc Touch event anticipation in a computing device
US9430128B2 (en) * 2011-01-06 2016-08-30 Tivo, Inc. Method and apparatus for controls based on concurrent gestures
US9171200B2 (en) 2011-03-04 2015-10-27 Hewlett-Packard Development Company, L.P. Gestural interaction identification
US9189068B2 (en) 2011-03-14 2015-11-17 Lg Electronics Inc. Apparatus and a method for gesture recognition
EP2691935A1 (en) 2011-03-29 2014-02-05 Qualcomm Incorporated System for the rendering of shared digital interfaces relative to each user's point of view
US9189825B2 (en) 2011-04-12 2015-11-17 Lg Electronics Inc. Electronic device and method for displaying stereoscopic image
JP6074170B2 (ja) * 2011-06-23 2017-02-01 インテル・コーポレーション 近距離動作のトラッキングのシステムおよび方法
US9002099B2 (en) 2011-09-11 2015-04-07 Apple Inc. Learning-based estimation of hand and finger pose
US20130106898A1 (en) * 2011-10-26 2013-05-02 Google Inc. Detecting object moving toward or away from a computing device
WO2013077883A1 (en) 2011-11-23 2013-05-30 Intel Corporation Gesture input with multiple views, displays and physics
US8749485B2 (en) 2011-12-20 2014-06-10 Microsoft Corporation User control gesture detection
US9189073B2 (en) 2011-12-23 2015-11-17 Intel Corporation Transition mechanism for computing system utilizing user sensing
US9684379B2 (en) 2011-12-23 2017-06-20 Intel Corporation Computing system utilizing coordinated two-hand command gestures
WO2013095678A1 (en) 2011-12-23 2013-06-27 Intel Corporation Mechanism to provide feedback regarding computing system command gestures
WO2013095677A1 (en) 2011-12-23 2013-06-27 Intel Corporation Computing system utilizing three-dimensional manipulation command gestures
US9477303B2 (en) * 2012-04-09 2016-10-25 Intel Corporation System and method for combining three-dimensional tracking with a three-dimensional display for a user interface

Also Published As

Publication number Publication date
US10324535B2 (en) 2019-06-18
US20190087008A9 (en) 2019-03-21
TWI643091B (zh) 2018-12-01
US20200174574A1 (en) 2020-06-04
US20230119148A1 (en) 2023-04-20
WO2013095678A1 (en) 2013-06-27
US11941181B2 (en) 2024-03-26
US11360566B2 (en) 2022-06-14
US10345911B2 (en) 2019-07-09
US20140013279A1 (en) 2014-01-09
US20160091982A1 (en) 2016-03-31
TWI659333B (zh) 2019-05-11
TW201638728A (zh) 2016-11-01

Similar Documents

Publication Publication Date Title
US11599154B2 (en) Adaptive enclosure for a mobile computing device
TWI502405B (zh) 利用協調的雙手命令手勢之計算系統
CN105335001B (zh) 具有弯曲显示器的电子设备以及用于控制其的方法
TWI643091B (zh) 用以提供關於計算系統指令手勢之視覺回授的機制
JP6478181B2 (ja) 携帯端末と外部表示装置の連結運用方法及びこれを支援する装置
US9678574B2 (en) Computing system utilizing three-dimensional manipulation command gestures
US10248224B2 (en) Input based on interactions with a physical hinge
US10928948B2 (en) User terminal apparatus and control method thereof
US11054930B2 (en) Electronic device and operating method therefor
TW201419042A (zh) 多顯示設備及其控制方法
US20150063785A1 (en) Method of overlappingly displaying visual object on video, storage medium, and electronic device
US20160188021A1 (en) Method of receiving user input by detecting movement of user and apparatus therefor
US20180039371A1 (en) Electronic apparatus and controlling method thereof
TW201426410A (zh) 電子設備的外接按鍵管理方法及系統