TW201606567A - 手勢辨識方法 - Google Patents

手勢辨識方法 Download PDF

Info

Publication number
TW201606567A
TW201606567A TW103126374A TW103126374A TW201606567A TW 201606567 A TW201606567 A TW 201606567A TW 103126374 A TW103126374 A TW 103126374A TW 103126374 A TW103126374 A TW 103126374A TW 201606567 A TW201606567 A TW 201606567A
Authority
TW
Taiwan
Prior art keywords
gesture recognition
gesture
symbol
user
symbols
Prior art date
Application number
TW103126374A
Other languages
English (en)
Inventor
林宗賢
謝宗諺
王文俊
Original Assignee
勝華科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 勝華科技股份有限公司 filed Critical 勝華科技股份有限公司
Priority to TW103126374A priority Critical patent/TW201606567A/zh
Publication of TW201606567A publication Critical patent/TW201606567A/zh

Links

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

一種手勢辨識方法,其包括以下步驟。首先,提供手勢辨識系統,其中手勢辨識系統包括影像擷取裝置以及手勢辨識單元。其次,影像擷取裝置偵測使用者的手勢。接著,手勢辨識單元判別手勢為張開的手掌時,影像擷取裝置判別手掌及連接手掌的多個指節的位置,用以於這些指節及手掌的位置定義出多個不同的符號。當觸控物指向定義有這些符號的這些指節及手掌的位置的其中一者時,手勢辨識系統偵測並辨識出對應的符號。

Description

手勢辨識方法
本發明是有關於一種手勢辨識方法,且特別是有關於一種以手勢進行人機互動的方法。
傳統的人機互動介面為滑鼠、鍵盤和搖桿,隨著科技發展日新月異,近來觸控式螢幕也廣為應用於各項電子產品中,以作為人機介面。為了使人機互動可以更人性化,體感控制提供了一種全新的輸入方式,其中之一為手勢辨識。
辨識手勢的資訊主要有兩種:一種是動態手勢,另一種則是靜態手勢。動態手勢資訊包括手部移動軌跡、位置資訊與時序關係。靜態手勢資訊則主要為手形變化,藉由分析手勢資訊並根據不同的手勢,來達到人機互動的功能。
由於手勢是一種原始且自然的表示方式,其在日常生活裡為人與人之間常用的溝通方式之一,因此,如何透過手勢辨識進行人機介面的操作,以提供相對直觀且人性化的人機互動方法,實為未來之趨勢。
本發明提供一種手勢辨識方法,其提供相對直觀且人性化的人機互動方法。
本發明的一種手勢辨識方法,其包括以下步驟。首先,提供一手勢辨識系統,其中手勢辨識系統包括影像擷取裝置以及手勢辨識單元。其次,影像擷取裝置偵測使用者的手勢。接著,手勢辨識單元判別手勢為張開的手掌時,影像擷取裝置判別手掌及連接手掌的多個指節的位置,用以於這些指節及手掌的位置定義出多個不同的符號。當觸控物指向定義有這些符號的這些指節及手掌的位置的其中一者時,手勢辨識系統偵測並辨識出對應的符號。
本發明的一種手勢辨識方法,其包括以下步驟。首先,提供一手勢辨識系統,其中手勢辨識系統包括影像擷取裝置、手勢辨識單元以及投影裝置。其次,影像擷取裝置偵測使用者的手勢。接著,手勢辨識單元判別手勢為抬起的雙手,且雙手的掌背面向使用者時,投影裝置投影出虛擬鍵盤。當其中一手指指向虛擬鍵盤的符號時,影像擷取裝置偵測並辨識所選取的符號。
本發明的一種手勢辨識方法,其包括以下步驟。首先,提供一手勢辨識系統,其中手勢辨識系統包括影像擷取裝置、手勢辨識單元以及顯示裝置。其次,影像擷取裝置偵測使用者的手勢。接著,手勢辨識單元判別手勢為抬起的雙手,且雙手的掌背面向使用者時,顯示裝置對應雙手手掌的位置顯示出內建鍵盤。 當其中一手指指向鍵盤的符號時,影像擷取裝置偵測並辨識所選取的符號。
本發明的一種手勢辨識方法,其包括以下步驟。首先,提供一手勢辨識系統,其中手勢辨識系統包括影像擷取裝置、手勢辨識單元以及投影裝置。其次,影像擷取裝置偵測使用者的手勢。接著,手勢辨識單元判別手勢為抬起的手臂及連接手臂的手腕時,投影裝置投射出內建的圖案於手腕或手臂上。
本發明的一種手勢辨識方法,其包括以下步驟。首先,提供一手勢辨識系統,其中手勢辨識系統包括影像擷取裝置、手勢辨識單元以及顯示裝置。其次,影像擷取裝置偵測使用者的手勢。接著,手勢辨識單元判別手勢為抬起的手臂及連接手臂的手腕時,顯示裝置顯示出內建的圖案。
本發明的一種手勢辨識方法,其包括以下步驟。首先,提供手勢辨識系統,其中手勢辨識系統包括影像擷取裝置、手勢辨識單元以及顯示裝置。其次,影像擷取裝置偵測使用者的手勢。接著,手勢辨識單元判別手勢為抬起的手臂及連接手臂的手腕時,顯示裝置顯示出內建的圖案。
基於上述,本發明的手勢辨識方法利用一般慣用的手勢搭配虛擬的人機介面達到特定的功能,例如當手勢為張開的手掌時,將其設定為撥打電話功能或計算功能,當抬起雙手的掌背面向使用者而呈現如打鍵盤的手勢時,將其設定為打字功能,而手勢為抬起手臂及連接手臂的手腕時,則設定為手錶的顯示時間、 報時、計時功能等。由於這些手勢所對應的功能與一般操作實體介面以執行這些功能時的手勢相似,因此本發明的實施例能夠提供相對直觀且人性化的人機互動方法。
為讓本發明的上述特徵和優點能更明顯易懂,下文特舉實施例,並配合所附圖式作詳細說明如下。
S100、S100a、S100b、S100c、S102、S104、S104a、S104b、S104c、S104d、S104e、S104f、S104g、S106、S106a、S106b、S106c、S108、S108a、S108b、S110、S112、S112a、S114、S116、S116a、S200、S200a、S202、S204、S206、S208、S210、S210a‧‧‧步驟
12‧‧‧手掌
14‧‧‧指節
圖1是依照本發明的第一實施例的一種手勢辨識方法的流程圖。
圖2及圖3分別是對應第一實施例之手勢的兩種設定功能。
圖4至圖7是依照本發明的第一實施例的其他種手勢辨識方法的流程圖。
圖8是依照本發明的第二實施例的一種手勢辨識方法的流程圖。
圖9A及圖9B是對應第二實施例之手勢的一種設定功能。
圖10及圖11是依照本發明的第二實施例的其他種手勢辨識方法的流程圖。
圖12是依照本發明的第三實施例的一種手勢辨識方法的流程圖。
圖13A及圖13B是對應第三實施例之手勢的一種設定功能。
圖14是依照本發明的第三實施例的另一種手勢辨識方法的 流程圖。
圖1是依照本發明的第一實施例的一種手勢辨識方法的流程圖。圖2及圖3分別是對應第一實施例之手勢的兩種設定功能。請先參照圖1,本實施例的手勢辨識方法包括以下步驟。首先,提供一手勢辨識系統(步驟S100),其中手勢辨識系統包括一影像擷取裝置以及一手勢辨識單元。
手勢辨識系統例如是眼鏡及頭戴式顯示器等,但不以此為限。手勢辨識系統透過辨識使用者的手勢以執行特定的功能。影像擷取裝置例如包括一影像擷取元件,其可用以擷取二維(two-dimensional,2D)影像甚至是三維(three-dimensional,3D)影像。影像擷取裝置若是一深度影像擷取元件,則能夠判斷物體與影像擷取元件之間的距離,進而得出拍攝畫面中物體遠近的深度影像(depth image)資訊,而能夠提升辨識度。並且,為降低誤啟動的情況發生,手勢辨識系統可設定一臨界距離,當影像擷取裝置所偵測到的手勢與影像擷取裝置之間的距離超過臨界距離時,則設定為不啟動手勢辨識的功能。
手勢辨識單元耦接影像擷取裝置,以判別來自影像擷取裝置的影像資訊,其例如包括中央處理單元(Central Processing Unit,CPU),或是其他可程式化之一般用途或特殊用途的微處理器(Microprocessor)、數位訊號處理器(Digital Signal Processor,DSP) 等裝置,而可用以載入電腦可讀寫軟體以執行複數個指令。
在本實施例中,手勢辨識系統可進一步包括一顯示裝置。顯示裝置例如是可配置於使用者眼前的微型顯示器(Microdisplay),其可用以顯示人機互動時的相關資訊,以作為人機互動時的輔助。須說明的是,本發明不用以限定顯示裝置的大小或其配置位置,只要能夠作為人機互動時輔助的顯示裝置皆落入本案所欲保護的範圍內。
其次,影像擷取裝置偵測使用者的手勢(步驟S102)。依據手勢的不同,所啟動的功能也不相同。舉例而言,當手勢辨識單元判別手勢為張開的手掌時(如圖2所示),影像擷取裝置通過判別手掌12及連接手掌12的多個指節14的位置,用以於這些指節14及手掌12的位置定義出多個不同的符號(步驟S104),其中這些符號會因應手勢被設定的功能而有所不同。
如圖2所示,若張開的手掌被設定為撥打電話功能時,則這些指節14及手掌12的位置可分別定義有數字、米字、井字、撥打、掛斷等撥打電話時可能會用到的符號。另一方面,如圖3所示,若手勢被設定為計算機功能時,則這些指節14及手掌12的位置可分別定義有數字及加減乘除等計算符號。
在本實施例中,這些指節14及手掌12所對應的符號可以是預先設定於手勢辨識系統內,即手勢辨識系統內建有這些指節14及手掌12所對應的符號,所以使用者在操作時可以省去自行設定的步驟。
值得一提的是,本實施例的各符號分散地定義於手掌12及指節14的位置,且各符號間有明顯的分界(關節的褶痕)存在。因此,相較於將各符號集中定義於沒有明顯分界存在的特定區域(例如集中定義於手掌或手臂上)而需藉由投影裝置的設置將各符號投射在所述區域內以明顯區別各符號的所在位置來避免誤觸,本實施例除了可降低誤觸情況發生之外,還可省略投影裝置的設置,從而降低手勢辨識系統的成本、體積以及重量。
須說明的是,圖2及圖3雖將符號繪示於手上,然而,在本實施例的架構下(即省略投影裝置的設置),使用者在實際操作時是從顯示裝置的螢幕上看到符號,而非在手上看到符號的投影。具體地,顯示裝置對應這些指節14及手掌12的位置顯示所定義的符號,以協助使用者判別各指節14及手掌12所對應的符號。
當觸控物指向定義有這些符號的這些指節14及手掌12的位置的其中一者時,手勢辨識系統偵測並辨識出被選取符號(步驟S106)。由於本實施例省略投影裝置的設置,因此手勢辨識系統是根據影像擷取裝置偵測手指指向的位置判別所選取的符號。所述觸控物可以是使用者另一手的手指或是筆,但不限於此。任何可供影像擷取裝置偵測出觸控位置的物體皆可作為本實施例之觸控物。
在本實施例中,可進一步增加改變被選取符號的外觀形狀的步驟(步驟S108),以讓使用者得知其所選擇的符號,從而能 夠判別其所選擇的符號是否與其所欲選擇的符號一致(步驟S110)。詳言之,當顯示裝置顯示的符號在未選取時,顯示符號具有第一外觀形狀,而顯示的符號在被選取時,顯示符號具有第二外觀形狀。改變顯示符號的外觀形狀的具體實施方式可以是透過改變顯示裝置中對應被選取位置的符號的字體大小,或改變被選取符號的字體顏色,但不以此為限,以使顯示的符號具有不同於第一外觀形狀的第二外觀形狀,讓使用者察覺其所選取的符號。值得一提的是,當手勢辨識系統辨識出觸控物指向選取的符號時,顯示裝置會顯示被選取的符號,讓使用者確認其所選擇的符號是否與其所欲選擇的符號一致。具體地,觸控物指向選取符號時,觸控物與指節或手掌的距離為0到5公分,在此距離範圍內,手勢辨識系統有較佳的辨識度。詳言之,即觸控物可以直接碰觸到指節或手掌,或是觸控物與指節或手掌保持一距離。
當使用者所選擇的符號非其所欲選擇的符號時(可由顯示裝置得知),可透過晃動使用者的其中一手(如進行選擇的手或是定義有符號的手)或觸控物(如進行選擇的手的手指),以刪除輸入錯誤的符號(步驟S112),並且,透過接續進行步驟S106,以再次輸入所欲選擇的符號。當使用者所選擇的符號為其所欲選擇的符號時(可由顯示裝置得知),則接續判定是否完成所有輸入(步驟S114),若未完成所有輸入,則接續進行步驟S106,若完成所有輸入,則使用者可藉由放下至少一手以中止操作(步驟S116)。須說明的是,在完成上述任一步驟(如步驟S100、S102、S104、S106、 S108、S110、S112、S114)之後,使用者皆可藉由放下至少一手以中止操作(步驟S116)。換言之,使用者可在執行撥打電話功能或計算機功能之後或之前選擇終止操作。
上述實施例是藉由顯示裝置的設置讓使用者得以確認其所選擇的符號是否與其所欲選擇的符號一致,但本發明不限於此。圖4至圖7是依照本發明的第一實施例的其他種手勢辨識方法的流程圖。請先參照圖4,本實施例的手勢辨識方法大致相同於圖1的手勢辨識方法,且相同的步驟以相同的標號表示,於此便不再贅述同樣的步驟及效果。
主要的差異在於,本實施例透過投影裝置的設置,讓使用者確認其所選擇的符號是否與其所欲選擇的符號一致。詳言之,本實施例的手勢辨識系統除了影像擷取裝置以及手勢辨識單元之外,可進一步包括一投影裝置(步驟S100a)。在影像擷取裝置判別手掌及指節的位置之後(步驟S104a),投影裝置將這些符號投射到對應的這些指節及手掌的位置,以供使用者選取。換言之,在本實施例的架構下,使用者可在其指節及手掌的位置看到這些符號的投影。再者,當影像擷取裝置偵測並辨識出被選取符號(步驟S106a)之後,本實施例可透過改變被選取符號的外觀形狀(步驟S108a),以讓使用者得知其所選擇的符號,從而能夠判別其所選擇的符號是否與其所欲選擇的符號一致(步驟S110)。詳言之,當投影裝置投影的符號在未選取時,投影的符號具有第一外觀形狀,而投影的符號在被選取時,投影的符號具有第二外觀形狀。 改變投影符號的外觀形狀的具體實施方式可以是透過改變投射在使用者手上的被選取符號的字體大小,或改變被選取符號的字體顏色,但不以此為限,以使投影出的符號具有不同於第一外觀形狀的第二外觀形狀,讓使用者察覺其所選取的符號。值得一提的是,當手勢辨識系統辨識出觸控物指向選取的符號時,投影裝置會投影被選取的符號,讓使用者確認其所選擇的符號是否與其所欲選擇的符號一致。具體地,觸控物指向選取符號時,觸控物與指節或手掌的距離為0到5公分,在此距離範圍內,手勢辨識系統有較佳的辨識度。詳言之,即觸控物可以直接碰觸到指節或手掌,或是觸控物與指節或手掌保持一距離。
另一方面,如圖5所示,本發明亦可透過語音系統的設置,讓使用者確認其所選擇的符號是否與其所欲選擇的符號一致。詳言之,本實施例的手勢辨識系統可進一步包括一語音系統(步驟S100b)。由於本實施例沒有設置投影裝置及顯示裝置,因此在影像擷取裝置判別手掌及指節的位置(步驟S104b)之後,且在使用者選取符號(步驟S106)之前,使用者不會預先看到這些指節及手掌所對應的符號,但使用者可預先從其他管道,例如是購買手勢辨識系統時的操作手冊,得知這些指節及手掌所對應的符號。而在使用者選取符號(步驟S106)之後,使用者可從語音系統得知其所選取的符號(步驟S108b)。舉例而言,語音系統具有即時播報功能,在使用者選取任一符號之後,語音系統隨即通知使用者所選取的符號。
在另一實施例中,手勢辨識系統也可同時包括顯示裝置、投影裝置以及語音系統其中至少兩者,並且透過上述至少兩者的搭配,讓使用者確認其所選擇的符號是否與其所欲選擇的符號一致。
圖1、圖4及圖5的實施例是透過系統內建這些指節及手掌所對應的符號,但本發明不限於此。在其他實施例中,使用者也可自行設定這些指節及手掌所對應的符號。請參照圖6,本實施例的手勢辨識方法大致相同於圖4的手勢辨識方法且相同的步驟以相同的標號表示,於此便不再贅述同樣的步驟及效果。
主要的差異在於,本實施例在影像擷取裝置判別手掌及指節的位置(步驟S104c)之後,且在使用者執行特定的功能(如撥打電話功能或計算機功能)之前,會先進行使用者設定符號的步驟。首先,使用者以觸控物於這些指節及手掌的位置的其中一者寫入這個位置所欲定義的符號,且影像擷取裝置偵測這個符號對應到手的位置(步驟S200)。其次,投影裝置將寫入的符號投射到所對應的指節或手掌上(步驟S202),以讓使用者確認其所輸入的符號是否正確(步驟S204)。若輸入的符號不正確,則可透過晃動其中一手(如輸入符號的手)或觸控物(如手指)以刪除輸入錯誤的符號(步驟S206)。若輸入的符號正確,則確認是否完成所有符號的定義(步驟S208)。若尚未完成所有符號的定義,則回到步驟S200接續定義其他位置的符號。若完成所有符號的定義,則使用者做出一預定手勢。所述預定手勢可以是預先寫入於手勢辨識系統中用 以判定結束符號寫入的手勢。通過影像擷取裝置偵測使用者所做出的預定手勢,以結束這些符號的寫入。並且,在結束這些符號的寫入之後,投影裝置持續將這些符號投射到對應的這些指節及手掌的位置以供使用者選取(步驟S210)。至此,即完成符號的寫入,而使用者可接續步驟S106a以執行特定功能(如圖2的撥打電話功能或圖3的計算機功能)。
上述定義符號的方法是在每定義完一個符號後隨即進行確認輸入的正確與否,但本發明不限於此。舉例而言,在其他實施例中,也可在使用者完成所有符號的定義之後,再透過一次性顯示對應這些指節及手掌的位置的所有符號,以供使用者確認輸入的正確與否。
此外,如圖7所示,手勢辨識系統還可進一步包括語音系統(步驟S100c),如此,使用者在完成所有符號的定義(步驟S208)之後,也可選擇以語音方式結束這些符號的寫入(如圖7中的步驟S210a)。具體地,手勢辨識系統可內建有一結束符號寫入的指令,而這個指令可記載於使用手冊中。如此,使用者欲結束符號寫入時,可對語音系統下達一口頭指令,而語音系統接收使用者的口頭指令後判別這個指令是否與內建之結束符號寫入的指令相符。若相符,則結束符號的寫入。在這樣的架構下,語音系統除了具備上述的播報功能(如喇叭)之外,還具備麥克風功能。
另外,本發明還提供其他手勢所對應的功能。圖8是依照本發明的第二實施例的一種手勢辨識方法的流程圖。圖9A及圖 9B是對應第二實施例之手勢的一種設定功能。圖10及圖11是依照本發明的第二實施例的其他種手勢辨識方法的流程圖。請先參照圖8、圖9A及圖9B,本實施例的手勢辨識方法大致相同於圖4的手勢辨識方法且相同的步驟以相同的標號表示,於此便不再贅述同樣的步驟及效果。
主要差異在於,本實施例透過偵測抬起的雙手,以執行打字功能。詳言之,當手勢辨識單元判別手勢為抬起的雙手,且雙手的掌背如圖9A所示地面向使用者時,投影裝置如圖9B所示地投影出一虛擬鍵盤在使用者的前方(步驟S104d)。並且,當其中一手指指向鍵盤的符號時,影像擷取裝置偵測所選取的符號(步驟S106b)。在本實施例中,使用者可藉由十指進行打字,惟為了避免打字時其他手指連帶移動所造成的誤判,較佳是以單手的單指(其他手指未伸出)或雙手的單指進行打字。
在使用者打字後,可藉由投影裝置改變被選取符號的外觀形狀(步驟S108a),以供使用者確認符號是否正確(步驟S110)。若符號不正確時,使用者可透過晃動其中一手或觸控物以刪除錯誤的符號(步驟S112a)。此處所指其中一手可以是進行打字的手、未打字的手、打字的單指、打字的雙手的單指或其餘手指。步驟S114、S116的相關內容可參照前述,於此不再贅述。
請參照圖10,本實施例的手勢辨識方法大致相同於圖8的手勢辨識方法且相同的步驟以相同的標號表示,於此便不再贅述同樣的步驟及效果。主要差異在於,本實施例的手勢辨識系統 以顯示裝置取代投影裝置(步驟S100)。並且,當手勢辨識單元判別手勢為抬起的雙手,且雙手的掌背如圖9A所示地面向使用者時,顯示裝置於對應雙手手掌的位置顯示出內鍵鍵盤(步驟S104e)。相比於圖8的實施例,使用者在本實施例的架構下(即省略投影裝置的設置)是從顯示裝置的螢幕上看到符號,而非在手上看到符號的投影。因此,當其中一手指指向內鍵鍵盤的符號時,手勢辨識系統是根據影像擷取裝置偵測手指所指的位置判別所選取的符號(步驟S106c)。
另外,如圖11所示,手勢辨識系統可在圖9的架構下進一步包括語音系統(步驟S100c),如此,在影像擷取裝置偵測所選取的符號(步驟S106b)之後,使用者可從語音系統得知所選取的符號(步驟S108b)。值得一提的是,手勢辨識系統在圖10的架構下亦可進一步包括語音系統,如此,使用者亦可從語音系統得知所選取的符號(即以圖11中的步驟S108b取代圖10的步驟S108a)。
圖12是依照本發明的第三實施例的一種手勢辨識方法的流程圖。圖13A及圖13B是對應第三實施例之手勢的一種設定功能。請參照圖12、圖13A及圖13B,本實施例的手勢辨識方法主要是透過偵測抬起的手臂及連接手臂的手腕,以啟動顯示時間的功能。詳言之,本實施例的手勢辨識方法包括以下步驟。首先,提供手勢辨識系統。在本實施例中,手勢辨識系統包括影像擷取裝置、手勢辨識單元以及投影裝置(步驟S100a)。其次,影像擷取裝置偵測使用者的手勢(步驟S102)。當手勢辨識單元判別手勢為 抬起的手臂及連接手臂的手腕時(如圖13A所示),投影裝置投影出內建的圖案於所述抬起的手臂手腕或上(步驟S104f),如圖14B所示,所述內建的圖案可以是靜態圖案或動態圖案,例如是時間,但不限於此。最後,放下手臂以中止操作(步驟S116a)。在其他實施例中,投影裝置投射出的圖案也可以是計時器,並且通過影像擷取裝置偵測使用者手指指向計時器對應的符號以啟動計時功能。或者,手勢辨識系統還可進一步包括語音系統,並且語音系統可在投影裝置投射出時間的步驟中啟動語音報時功能。
圖14是依照本發明的第三實施例的另一種手勢辨識方法的流程圖。請參照圖14,本實施例的手勢辨識方法大致相同於圖12的手勢辨識方法且相同的步驟以相同的標號表示,於此便不再贅述同樣的步驟及效果。主要差異在於,本實施例的手勢辨識系統以顯示裝置取代投影裝置(步驟S100)。並且,當手勢辨識單元判別手勢為抬起的手臂及連接手臂的手腕時(如圖13A所示),顯示裝置顯示出內建的圖案,其中顯示裝置可以在對應抬起的手臂或連接手臂的手腕上顯示出內建的圖案。相比於圖12的實施例,使用者在本實施例的架構下(即省略投影裝置的設置)是從顯示裝置的螢幕上看到圖案,而非在手上看到圖案的投影。
綜上所述,本發明的手勢辨識方法利用一般慣用的手勢搭配虛擬的人機介面達到特定的功能,例如當手勢為張開的手掌時,將其設定為撥打電話功能或計算功能,當抬起雙手且雙手掌背面向使用者而呈現如打鍵盤的手勢時,將其設定為打字功能, 而手勢為抬起手臂及連接手臂的手腕時,則設定為手錶的顯示時間、報時、計時功能等。由於這些手勢所對應的功能與一般操作實體介面以執行這些功能時的手勢相似,因此本發明的實施例能夠提供相對直觀且人性化的人機互動方法。此外,在手勢為張開的手掌的實施例中,由於各符號是分散地定義於手掌及指節的位置,且各符號間有明顯的分界(關節的褶痕)存在,因此除了可降低誤觸情況發生之外,還可省略投影裝置的設置,從而降低手勢辨識系統的成本、體積以及重量。
雖然本發明已以實施例揭露如上,然其並非用以限定本發明,任何所屬技術領域中具有通常知識者,在不脫離本發明的精神和範圍內,當可作些許的更動與潤飾,故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
S100、S102、S104、S106、S108、S110、S112、S114、S116‧‧‧步驟

Claims (30)

  1. 一種手勢辨識方法,包括:提供一手勢辨識系統,該手勢辨識系統包括一影像擷取裝置以及一手勢辨識單元;該影像擷取裝置偵測一使用者的一手勢;該手勢辨識單元判別該手勢為一張開的手掌時,該影像擷取裝置判別該手掌及連接該手掌的多個指節的位置,用以於該些指節及該手掌的位置定義出多個不同的符號;以及當一觸控物指向定義有該些符號的該些指節及該手掌的位置的其中一者時,該手勢辨識系統偵測並辨識出對應的符號。
  2. 如申請專利範圍第1項所述的手勢辨識方法,其中該手勢辨識系統內建該些指節及該手掌對應的符號。
  3. 如申請專利範圍第2項所述的手勢辨識方法,其中該手勢辨識系統根據該影像擷取裝置偵測該觸控物指向的位置並辨識所選取的符號。
  4. 如申請專利範圍第1項所述的手勢辨識方法,其中該手勢辨識系統更包括一顯示裝置,該顯示裝置對應該些指節及該手掌的位置顯示一定義符號,且該定義符號具有一第一外觀形狀。
  5. 如申請專利範圍第4項所述的手勢辨識方法,其中當該觸控物指向並選取該顯示裝置顯示的該定義符號時,該定義符號具有一第二外觀形狀,且該第二外觀形狀不同於該第一外觀形狀。
  6. 如申請專利範圍第4項所述的手勢辨識方法,其中當該手 勢辨識系統辨識出該觸控物指向選取的該定義符號時,該顯示裝置顯示被選取的該定義符號,使該使用者得知所選取的符號。
  7. 如申請專利範圍第1項所述的手勢辨識方法,其中該手勢辨識系統更包括一投影裝置,該投影裝置對應該些指節及該手掌的位置投影一定義符號,且該定義符號具有一第一外觀形狀。
  8. 如申請專利範圍第7項所述的手勢辨識方法,其中當該觸控物指向並選取該投影裝置投影的該定義符號時,該定義符號具有一第二外觀形狀,且該第二外觀形狀不同於該第一外觀形狀。
  9. 如申請專利範圍第7項所述的手勢辨識方法,其中當該手勢辨識系統辨識出該觸控物指向選取的該定義符號時,該投影裝置投影出該定義符號,使該使用者得知所選取的符號。
  10. 如申請專利範圍第1項所述的手勢辨識方法,其中該手勢辨識系統更包括一語音系統,在該手勢辨識系統偵測並辨識出所選取的符號之後,該語音系統發出語音信號使該使用者得知所選取的符號。
  11. 如申請專利範圍第1項所述的手勢辨識方法,其中當所選取的符號錯誤時,該使用者藉由晃動其中一手或該觸控物以刪除錯誤的符號。
  12. 如申請專利範圍第1項所述的手勢辨識方法,其中於該些指節及該手掌的位置定義出該些符號的方法包括:以該觸控物於該些指節及該手掌的位置的其中一者寫入所欲定義的符號,且該影像擷取裝置偵測並辨識寫入的符號對應到該 手的位置。
  13. 如申請專利範圍第12項所述的手勢辨識方法,其中於該些指節及該手掌的位置定義出該些符號的方法更包括:通過該影像擷取裝置偵測並辨識一預定手勢,以結束該些符號的寫入。
  14. 如申請專利範圍第13項所述的手勢辨識方法,其中該手勢辨識系統更包括一投影裝置,且於該些指節及該手掌的位置定義出該些符號的方法更包括:在做出該預定手勢之前,將寫入的符號投射到所對應的指節或手掌上。
  15. 如申請專利範圍第14項所述的手勢辨識方法,其中在結束該些符號的寫入之後,該投影裝置持續將該些符號投射到該些指節及該手掌的位置以供選取,且當該觸控物指向定義有該些符號的該些指節及該手掌的位置的其中一者時,該影像擷取裝置偵測並辨識該觸控物指向的符號。
  16. 如申請專利範圍第12項所述的手勢辨識方法,其中該手勢辨識系統更包括一語音系統,且於該些指節及該手掌的位置定義出該些符號的方法更包括:該語音系統接收並辨識該使用者發出的語音信號以結束該些符號的寫入。
  17. 如申請專利範圍第16項所述的手勢辨識方法,其中該手勢辨識系統更包括一投影裝置,且於該些指節及該手掌的位置定 義出該些符號的方法更包括:結束該些符號的寫入之前,將寫入的符號投射到所對應的指節或手掌上。
  18. 如申請專利範圍第17項所述的手勢辨識方法,其中在結束該些符號的寫入之後,該投影裝置持續將該些符號投射到該些指節及該手掌的位置以供選取,且當該觸控物指向定義有該些符號的該些指節及該手掌的位置的其中一者時,該影像擷取裝置偵測並辨識該觸控物指向的符號。
  19. 如申請專利範圍第1項所述的手勢辨識方法,更包括:該使用者放下至少一手以中止操作。
  20. 一種手勢辨識方法,包括:提供一手勢辨識系統,該手勢辨識系統包括一影像擷取裝置、一手勢辨識單元以及一投影裝置;該影像擷取裝置偵測一使用者的一手勢;該手勢辨識單元判別該手勢為抬起的雙手,且雙手的掌背面向該使用者時,該投影裝置投影出一虛擬鍵盤;以及當其中一手指指向該虛擬鍵盤的符號時,該影像擷取裝置偵測並辨識所選取的符號。
  21. 如申請專利範圍第20項所述的手勢辨識方法,其中該手勢辨識系統更包括一語音系統,且在該影像擷取裝置偵測並辨識所選取的符號後,該語音系統發出語音信號使該使用者得知所選取的符號。
  22. 如申請專利範圍第20項所述的手勢辨識方法,更包括:該使用者放下至少一手以中止操作。
  23. 一種手勢辨識方法,包括:提供一手勢辨識系統,該手勢辨識系統包括一影像擷取裝置、一手勢辨識單元以及一顯示裝置;該影像擷取裝置偵測一使用者的一手勢;該手勢辨識單元判別該手勢為抬起的雙手,且雙手的掌背面向該使用者時,該顯示裝置於對應雙手手掌的位置顯示出一內建鍵盤;以及當其中一手指指向該內建鍵盤的符號時,該影像擷取裝置偵測並辨識所選取的符號。
  24. 如申請專利範圍第23項所述的手勢辨識方法,其中該手勢辨識系統更包括一語音系統,且在該影像擷取裝置偵測並辨識所選取的符號後,該語音系統發出語音信號使該使用者得知所選取的符號。
  25. 如申請專利範圍第23項所述的手勢辨識方法,更包括:該使用者放下至少一手以中止操作。
  26. 一種手勢辨識方法,包括:提供一手勢辨識系統,該手勢辨識系統包括一影像擷取裝置、一手勢辨識單元以及一投影裝置;該影像擷取裝置偵測一使用者的一手勢;以及該手勢辨識單元判別該手勢為抬起的一手臂及連接該手臂的 一手腕時,該投影裝置投影出內建的圖案於該手腕或該手臂上。
  27. 如申請專利範圍第26項所述的手勢辨識方法,其中該圖案為靜態圖案或動態圖案。
  28. 如申請專利範圍第26項所述的手勢辨識方法,更包括:該使用者放下該手臂以中止操作。
  29. 一種手勢辨識方法,包括:提供一手勢辨識系統,該手勢辨識系統包括一影像擷取裝置、一手勢辨識單元以及一顯示裝置;該影像擷取裝置偵測一使用者的一手勢;以及該手勢辨識單元判別該手勢為抬起的一手臂及連接該手臂的一手腕時,該顯示裝置顯示出內建的圖案。
  30. 如申請專利範圍第29項所述的手勢辨識方法,更包括:該使用者放下該手臂以中止操作。
TW103126374A 2014-08-01 2014-08-01 手勢辨識方法 TW201606567A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW103126374A TW201606567A (zh) 2014-08-01 2014-08-01 手勢辨識方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW103126374A TW201606567A (zh) 2014-08-01 2014-08-01 手勢辨識方法

Publications (1)

Publication Number Publication Date
TW201606567A true TW201606567A (zh) 2016-02-16

Family

ID=55810061

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103126374A TW201606567A (zh) 2014-08-01 2014-08-01 手勢辨識方法

Country Status (1)

Country Link
TW (1) TW201606567A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110334561A (zh) * 2018-03-31 2019-10-15 广州卓腾科技有限公司 一种控制对象旋转的手势控制方法
CN110443148A (zh) * 2019-07-10 2019-11-12 广州市讯码通讯科技有限公司 一种动作识别方法、系统和存储介质
TWI807955B (zh) * 2022-01-20 2023-07-01 宏達國際電子股份有限公司 用於輸入字母的方法、主機以及電腦可讀儲存媒體

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110334561A (zh) * 2018-03-31 2019-10-15 广州卓腾科技有限公司 一种控制对象旋转的手势控制方法
CN110443148A (zh) * 2019-07-10 2019-11-12 广州市讯码通讯科技有限公司 一种动作识别方法、系统和存储介质
CN110443148B (zh) * 2019-07-10 2021-10-22 广州市讯码通讯科技有限公司 一种动作识别方法、系统和存储介质
TWI807955B (zh) * 2022-01-20 2023-07-01 宏達國際電子股份有限公司 用於輸入字母的方法、主機以及電腦可讀儲存媒體
US11914789B2 (en) 2022-01-20 2024-02-27 Htc Corporation Method for inputting letters, host, and computer readable storage medium

Similar Documents

Publication Publication Date Title
CN105824559B (zh) 一种误触识别及处理方法和电子设备
US20200225756A9 (en) System and method for close-range movement tracking
JP6233314B2 (ja) 情報処理装置、情報処理方法およびコンピュータ読み取り可能な記録媒体
JP6195939B2 (ja) 複合的な知覚感知入力の対話
CN103339593B (zh) 用以在触摸屏上呈现多个框的系统和方法
CN105814522B (zh) 基于运动识别来显示虚拟输入设备的用户界面的设备和方法
WO2018076523A1 (zh) 手势识别的方法、装置及车载系统
US11360605B2 (en) Method and device for providing a touch-based user interface
US9354780B2 (en) Gesture-based selection and movement of objects
KR20160058117A (ko) 미래 사용자 입력을 예측한 상태 변화에 관한 정보를 사용하는 사용자 입력에 대한 반응을 제공하는 시스템 및 방법
JP2015132965A (ja) 複数のディスプレイに対するアプリケーション画像の表示方法、電子機器およびコンピュータ・プログラム
WO2012075821A1 (zh) 一种重叠书写的手写输入方法
TWI615747B (zh) 虛擬鍵盤顯示系統及方法
CN105824553A (zh) 一种触控方法及移动终端
WO2015131590A1 (zh) 一种控制黑屏手势处理的方法及终端
WO2014146516A1 (zh) 一种左右手交互装置及方法
TW201606567A (zh) 手勢辨識方法
US11144178B2 (en) Method for providing contents for mobile terminal on the basis of user touch and hold time
US10222866B2 (en) Information processing method and electronic device
US20160224111A1 (en) Method for controlling touch screen by detecting position of line of sight of user
TWI543068B (zh) 以單指操作行動裝置螢幕介面方法
KR101422447B1 (ko) 압력 모델링을 통한 전자책 페이지 전환 방법 및 그 장치
CN106775814A (zh) 移动终端及其操作方法
JP2016066254A (ja) タッチ検出装置を備えた電子装置
KR102480568B1 (ko) 동작인식을 기반으로 하는 가상 입력장치의 사용자 인터페이스(ui)를 표시하는 장치 및 방법