TWI465984B - 用於決定控制域中之控制輸出的方法與控制裝置 - Google Patents

用於決定控制域中之控制輸出的方法與控制裝置 Download PDF

Info

Publication number
TWI465984B
TWI465984B TW101129917A TW101129917A TWI465984B TW I465984 B TWI465984 B TW I465984B TW 101129917 A TW101129917 A TW 101129917A TW 101129917 A TW101129917 A TW 101129917A TW I465984 B TWI465984 B TW I465984B
Authority
TW
Taiwan
Prior art keywords
control
input
domain
output
value
Prior art date
Application number
TW101129917A
Other languages
English (en)
Other versions
TW201312418A (zh
Inventor
Ping Han Lee
Chia Ping Chen
Yu Ting Chen
Yu Pao Tsai
Shaw Min Lei
Original Assignee
Mediatek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mediatek Inc filed Critical Mediatek Inc
Publication of TW201312418A publication Critical patent/TW201312418A/zh
Application granted granted Critical
Publication of TWI465984B publication Critical patent/TWI465984B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Description

用於決定控制域中之控制輸出的方法與控制裝置
本發明所揭露之實施例是有關於藉由使用一低解析度輸入來達到高解析度控制,尤指一種用於決定控制域中之控制輸出的方法與控制裝置,其藉由使用一可變控制解析度技術來將一輸入域之一控制輸入(例如,一基於影像的物件追蹤域)轉換成一控制域之一控制輸出。
遠端控制已被慣用於控制電子裝置,像是電視機。雖然遠端控制使得電子裝置之控制更便利,然而,當電子裝置之後變得比以往更加複雜時,遠端控制之按鈕數目也會跟著增加,以便適當地控制該電子裝置,因此,要記住分配給個別按鈕之所有的功能是不容易的。
為解決此問題,先前技術已提出幾個方法來以一種簡單且方便的方式來控制一電子裝置。例如,一影像擷取裝置可附加於一顯示裝置(例如,一電視機),來擷取包含使用者在內之一場景,並據此產生一擷取影像來做更進一步的處理。接下來,藉由使用一適當之影像處理演算法來分析該擷取影像,使用者之手部位置可被偵測出來,在該手部位置被成功識別後,依據被偵測之手部位置來控制該顯示裝置之顯示螢幕所顯示之一游標的位置。
一般來說,該擷取影像(例如,640x480或320x240)之解析度會低於該顯示螢幕之解析度(例如,1920x1080),因此,高解析度的顯示螢幕與低解析度的擷取影像之間之像素層級(pixel-level)的精確映射實際上是不可能的。一個傳統的設計是將該手部位置線性映射至該游標位置,然而,由於該擷取影像與該顯示螢幕之間的解析度有著很大的差異,因此控制解析度(control resolution)是很低的,例如,使用者手部的一細微移動可讓該游標在該顯示螢幕上有很大的位移,因此,要精準地控制游標對使用者來說並不容易。
依據本發明之實施例,一種藉由使用動態控制解析度技術來將一輸入域(例如,一基於影像的物件追蹤域)之一控制輸入轉換成一控制域之一控制輸出的方法與相關控制裝置被提出來,以解決上述問題。
依據本發明之第一實施例,揭露了一種用以決定控制域中之控制輸出之一示範性的方法。該示範性的方法包含:得到一輸入域之一控制輸入,其中該控制輸入包含至少一先前輸入值與一目前輸入;以及動態調整一控制解析度設定,該控制解析度設定在該輸入域中之一單位被改變時,定義該控制域中之被改變的單位之一數目;並依據該控制解析度設定,將該輸入域之該控制輸入轉換成該控制域中之該控制輸出,其中該控制輸出包含分別對應於至少該先 前輸入值與該目前輸入值之至少一先前輸出值與一目前輸出值,該目前輸入值之該控制解析度設定是依據至少該先前輸入值來決定,並且在該目前輸入值與該先前輸入值是對應於同一使用者輸入而產生時,該目前輸出值相同於該先前輸出值。
依據本發明之第二實施例,揭露了一種用於決定控制域內之控制輸出之一示範性的控制裝置。該示範性的控制裝置包含一接收電路與一處理電路。該接收電路是用以得到輸入域之控制輸入,其中該控制輸入包含至少一先前輸入值與一目前輸入值。該處理電路是用以動態調整一控制解析度設定,該控制解析度設定在該輸入域中之一單位被改變時,定義該控制域中之被改變的單位之一數目,並且該處理電路依據該控制解析度設定以將該輸入域之該控制輸入轉換成該控制域中之該控制輸出,其中該控制輸出包含分別對應於至少該先前輸入值與該目前輸入值之至少一先前輸出值與一目前輸出值,該目前輸入值之該控制解析度設定是依據至少該先前輸入值來決定,並且在該目前輸入值與該先前輸入值是對應於同一使用者輸入而產生時,該目前輸出值相同於該先前輸出值。
依據本發明之第三實施例,揭露了一種用以決定控制域中之控制輸出之一示範性的方法。該示範性的方法包含:得到基於影像的物件追蹤域之控制輸入;動態調整一控制解析度設定,該控制解析度設定在該基於影像的物件追蹤域中之一單位被改變時,定義該控制域中之被改變的單位之一數目:以及依據該控制解析度設定,以 將該基於影像的物件追蹤域之該控制輸入轉換成該控制域中之該控制輸出。
本發明使用一可變控制解析度機制來以一低解析度域中之一使用者輸入來達成一高解析度域中之控制。舉例來說,本發明提出一動態虛擬面板來實現該可變控制解析度機制,如此一來,使用者可以方便地用手控制螢幕上的游標移動,因而大幅改善了使用者的操作體驗,另外,因為是使用低解析度輸入裝置來達到高解析度控制,所以運算量是很低的。
在說明書及後續的申請專利範圍當中使用了某些詞彙來指稱特定的元件。所屬領域中具有通常知識者應可理解,硬體製造商可能會用不同的名詞來稱呼同樣的元件。本說明書及後續的申請專利範圍並不以名稱的差異來作為區分元件的方式,而是以元件在功能上的差異來作為區分的準則。在通篇說明書及後續的請求項當中所提及的「包含」係為一開放式的用語,故應解釋成「包含但不限定於」。另外,「耦接」一詞在此係包含任何直接及間接的電氣連接手段。因此,若文中描述一第一裝置耦接於一第二裝置,則代表該第一裝置可直接電氣連接於該第二裝置,或透過其他裝置或連接手段間接地電氣連接至該第二裝置。
本發明之主要概念是使用一可變控制解析度機制來以一低解析 度域中之一使用者輸入來達成一高解析度域中之控制。舉例來說,本發明提出一動態虛擬面板來實現該可變控制解析度機制,如此一來,使用者可以方便地用手控制螢幕上的游標移動,因而大幅改善了使用者的操作體驗,另外,因為是使用低解析度輸入裝置來達到高解析度控制,所以運算量是很低的。
接下來,提供了一個具有基於影像之物件追蹤(image-based object tracking)的示範性的使用者輸入系統,來說明本發明所提出之控制裝置,該控制裝置可以使用一可變控制解析度技術來將輸入域(例如,基於影像的物件追蹤域)之控制輸入轉換成控制域之控制輸出。然而,使用基於影像的物件追蹤域作為輸入域只是作為範例說明之用,而非對本發明設限,也就是說,所提出之控制裝置並不侷限於該基於影像的物件追蹤應用,而要被所提出之控制裝置所處理之座標輸入並不侷限於一基於影像的物件追蹤裝置之輸出。舉例來說,所提出之控制裝置可被用於一個需要藉由使用任何輸入域所產生之低解析度輸入來尋求控制域中之高解析度控制的應用,例如,該輸入域可以是觸控面板域,該觸控面板之該控制輸入包含於該觸控面板域內之一觸碰物件(例如,一指尖或一觸控筆)的座標值,該控制域之該控制輸出包含該控制域內之一顯示螢幕之一螢幕座標值,而且該顯示螢幕之解析度高於該觸控面板之解析度。這些設計變化皆屬於本發明之範疇。簡單來說,無論該輸入域是否是基於影像的物件追蹤域,本發明所提出之控制裝置皆是可運行的。在另一設計變化中,本發明所提出之控制裝置是操作於輸入域為觸控面板 域之情形下。
第1圖是依據本發明之示範性實施例之一使用者輸入系統的方塊圖。示範性的使用者輸入系統100包含(但不侷限於)一影像擷取裝置102、一基於影像的物件追蹤裝置104與一控制裝置106,其中控制裝置106內含有一接收電路112與一處理電路114。影像擷取裝置102可由附加至或整合於一電子裝置(例如,一顯示裝置)之相機來實作,並且用以產生擷取影像IMG。基於影像的物件追蹤裝置104耦接於影像擷取裝置102,並用以產生基於影像的物件追蹤域內之擷取影像IMG中的目標追蹤物件(例如,使用者的手)之座標值CV1。例如,基於影像的物件追蹤裝置104使用一適合之影像處理演算法來處理/分析擷取影像IMG所提供之資訊,並識別出擷取影像IMG內之該目標追蹤物件。於決定出該目標追蹤物件的位置後,便可隨之獲得座標值CV1
在一設計變化中,影像擷取裝置102與基於影像的追蹤裝置104可用一觸控面板來加以取代,因此,該觸控面板會輸出位於一觸控面板域之一觸控面板區域內之一觸碰物件(例如,指尖或觸控筆)的座標值CV1,換句話說,基於影像的物件追蹤裝置所分析之該擷取影像係等同於該觸控面板的應用所偵測之該觸控面板區域。
在此示範性之實施例中,控制裝置106耦接於操作於一輸入域之一輸入裝置(例如,操作於基於影像的物件追蹤域中之基於影像的 物件追蹤裝置104,或操作於觸控面板域中之觸控面板),並且被用於依據該輸入域(例如,該基於影像的物件追蹤域或該觸控面板域)中之一控制輸入來決定一控制域中之一控制輸出。接收電路112是用於從前方之基於影像的物件追蹤裝置104來得到該控制輸入(例如,該目標追蹤物件之目標值CV1)。處理電路114耦接於接收電路112,並用於動態調整一控制解析度設定,而該控制解析度設定係定義於該基於影像的物件追蹤域中一單位被改變之時,在該控制域內之被改變的單位的數目,此外,處理電路114另將該基於影像的物件追蹤域中之該控制輸入(例如,該目標追蹤物件之座標值CV1)轉換成該控制域中之該控制輸出(例如,一顯示螢幕之螢幕座標值CV2)。應該要注意的是,使用控制裝置106來接收該基於影像的物件追蹤域中所產生之座標值CV1,只是本發明的一個可行的實施例,於其它實施例中,控制裝置106可被用於接收與處理從不同於該基於影像的物件追蹤域之一輸入域的使用者輸入所產生之座標值CV1,這也屬於本發明之範疇之內。例如,在一設計變化中,接收電路112是用於從前方之觸控面板來獲得該控制輸入(例如,該觸碰物件之座標值CV1),而處理電路114則是用於動態調整控制解析度設定,其中該控制解析度設定係定義在該觸控面板域中一單元被改變時,該控制域中會被改變之單元的數目,此外,處理電路114另將該觸控面板域之該控制輸入(例如,該觸碰物件之座標值CV1)轉換成該控制域之該控制輸出(例如,一顯示螢幕之螢幕座標值CV2)。
舉例來說,該控制解析度設定可包含一或多個控制解析度,每個 控制解析度係定義在該基於影像的物件追蹤域之一特定維度(dimension)中的一單元被改變時,該控制域之同一維度中之被改變的單元的數目。基於螢幕座標值CV2,該顯示螢幕上之游標位置可被決定出來,因此,因應該目標追蹤物件(例如,使用者的手)之移動,該游標將會被控制而在該顯示螢幕上移動。在擷取影像IMG之解析度低於該顯示螢幕之解析度的情形中,一高解析度控制輸出因此可藉由使用一低解析度控制輸入而達成。因為允許動態調整該控制解析度設定,使用者對使用者介面上的游標便能有更好的控制,舉例來說,當使用者的手在移動時,游標可以基於該可變控制解析度設定而快速移動或緩慢移動。控制裝置106的更進一步細節將描述如下。
如上所述,處理電路114可以動態地調整該控制解析度設定。舉例來說(但本發明並不以此為限),處理電路114可使用一動態虛擬面板(dynamic virtual panel)來決定該控制解析度設定。應該要注意的是,該控制域與該基於影像的物件追蹤域可以是一維域(one-dimensional domain)、二維域(two-dimensional domain)、三維域(three-dimensional domain)或更高維域(higher-dimensional domain),因此,應該依據該控制域/基於影像的物件追蹤域之維度數目來設定該動態虛擬面板,例如,當該控制域與該基於影像的物件追蹤域中的每一個都是N維域時,該動態虛擬面板便是N維的,其中N可以是任何正整數。
請參照第2圖,第2圖是依據本發明之示範性實施例之用來將一目標追蹤物件之一座標值映射至一顯示螢幕之一螢幕座標值之一動態模擬面板的示意圖。在此例子中,因為顯示螢幕201與擷取影像202是二維的,該控制域與該基於影像的物件追蹤域均是二維域,因此,所使用之動態虛擬面板203也因此是二維的。如第2圖所示,動態虛擬面板203之解析度高於顯示面板201之解析度,而顯示面板201之解析度高於擷取影像202之解析度。動態虛擬面板203中的座標可被映射至顯示面板201中之相對應座標。假設顯示螢幕201上之座標被正規化成[0,1],動態虛擬面板203之X軸上的左邊界值(亦即,較低的邊界值)BA與右邊界值(亦即,較高的邊界值)BB應分別被映射至顯示面板201上之X座標0與X座標1。擷取影像202中所識別的該目標追蹤物件之座標值有一X座標X1,因此,如第2圖所示,顯示螢幕201之螢幕座標值有一X座標X2,X2可由該目標追蹤物件之X座標X1與動態虛擬面板203之一映射函式(mapping function)來決定。特定地說,當動態虛擬面板203之大小(size)、位置(position)與映射函式其中之一或多個被調整時,該控制解析度便可被改變。
換句話說,該基於影像的物件追蹤域與該控制域之間之座標映射並不是固定不變的。例如,該基於影像的物件追蹤域之該控制輸入包含一先前輸入值(例如,一先前手部位置)與一目前輸入值(例如,一目前手部位置),其係依序地從基於影像的物件追蹤裝置104獲得。該動態虛擬面板/控制解析度設定會依據至少該先前輸入值來 進行調整。接下來,該調整過之動態虛擬面板/控制解析度設定被用於將該目前輸入值轉換成在該控制域內一相對應的目前輸出值(例如,一目前座標位置)。稍後將提供幾個例子來說明控制解析度的調整。
在一示範性之設計中,處理電路114可參考該基於影像的物件追蹤域內之該控制輸入的移動資訊(motion information),來動態地調整該控制解析度設定。當使用者想要快速且大幅度的游標移動時,他/她通常會快速地移動他/她的手。請參照第3圖,第3圖是減小該動態虛擬面板之大小來減低該控制解析度之一範例的示意圖。在時間點Tn,動態虛擬面板303之大小略小於擷取影像302之大小。處理電路114可經由分析連續的擷取影像中分別被識別到的該目標物件的座標值,來得到該基於影像的物件追蹤域中的該控制輸入之移動資訊。
例如,該移動資訊包含至少一移動特性值(motion characteristic value),其可以是一速度值、一加速度值或一高階微分(high-order difference)之測量值。當處理電路114偵測到目標追蹤物件快速移動時,代表使用者要快速且大幅度的游標移動,故處理電路114會運作以讓動態虛擬面板303之大小/解析度減小,因此,在時間點Tn+1,動態虛擬面板303’之大小會變的比擷取影像302之大小小很多(如第3圖所示)。因為動態虛擬面板303’內之座標被映射至一顯示面板(無圖示)中之座標,擷取影像302中之該目標追蹤物件之小幅度移動便 可造成該顯示螢幕中該游標的大幅度移動,換句話說,由於當該基於影像的物件追蹤域內一單元被改變時,該控制域內被改變之單元的數目會增加,所以該控制解析度設定中定義之該控制解析度是被減低的。
當使用者想要精確且小幅度的游標移動時,他/她通常會緩慢地移動他/她的手。請參照第4圖,第4圖是增大該動態虛擬面板之大小來提高該控制解析度之一範例的示意圖。在時間點Tn,動態虛擬面板403之大小略大於擷取影像402之大小。當處理電路114偵測該目標追蹤物件移動緩慢時,代表該使用者想要精確且小幅度的游標移動,故處理電路114會運作以讓動態虛擬面板403之大小/解析度增加。因此,在時間點Tn+1,動態虛擬面板403’的大小變得比擷取影像402的大小大很多(如第4圖所示)。因為動態虛擬面板403’內之座標被映射至一顯示面板(無圖示)中之座標,擷取影像402中之該目標追蹤物件之小幅度移動可造成該顯示螢幕中該游標的小幅度移動。換句話說,由於當該基於影像的物件追蹤域內一單元被改變時,該控制域內被改變之單元的數目會減少,所以該控制解析度設定中定義之該控制解析度便被提升了。
簡短總結,該控制解析度設定內至少一調整過之控制解析度與該移動資訊之一移動特性值成反比,如此一來,該控制解析度會因應使用者的不同游標控制需求而被動態地調整。
如果使用者的手在該動態虛擬面板之大小增加時接近該擷取影像之邊界,該使用者會發現要接近該動態虛擬面板之邊界並不容易。因此,當使用者的手靠近該擷取影像的邊界時,會啟用一防護機制。請參照第5圖,第5圖是一物件(例如,一目標追蹤物件,像是使用者的手)或一觸碰物件(像是觸控筆或使用者指尖)靠近該輸入域中一區域(例如,該擷取影像或該觸控區域)之邊界之一範例的示意圖。關於基於影像的物件追蹤應用,處理電路114可被設計來將該基於影像的物件追蹤域之該控制輸入(例如,第5圖所示的擷取影像502內之一目標追蹤物件之X座標X1)與擷取影像502之邊界(例如,第5圖所示的擷取影像502之右邊界/較高邊界CB)間之一差量D來與門檻值TH比較,並據此產生一比較結果,例如,門檻值TH可以是一事先設定之預定值。該比較結果可指出使用者的手是否接近擷取影像502之邊界,例如,當差量D小於門檻值TH(亦即,D<TH)時,處理電路114會啟用該防護機制來減慢動態虛擬面板503之大小改變速率(resizing rate)。換句話說,在處理電路114的控制下,定義於該控制解析度設定內之至少一控制解析度(例如,X軸的控制解析度)之改變速率會被減低,如此一來,使用者便有機會能夠觸及大小變更緩慢的該動態虛擬面板之邊界。
關於對該控制解析度設定之調整,該動態虛擬面板之位置及/或映射函式可被處理電路114改變。請參照第6圖,第6圖是依據本發明之示範性實施例而由一第一演算法所決定之該動態虛擬面板之面板位置的示意圖。為求簡潔,只圖示對一動態虛擬面板所做之 一個維度的調整。如第6圖所示,該動態虛擬面板依據該手部位置(亦即,該目標追蹤物件之X座標X1)被分成一左側部份與一右側部份。在時間點Tn,該左側部份之長度(亦即,該動態虛擬面板之左邊界/較低邊界A1與X座標X1之間的距離)為L1,而該右側部份之長度(亦即,該動態虛擬面板之該右邊界/較高邊界B1與X座標X1之間的距離)為M1,面板中心C1位於X座標X1的左側。處理電路114所使用之該第一演算法會基於該手部位置來決定調整過之動態虛擬面板的位置,因此,該動態虛擬面板之該左側部份與該右側部份是用相同之縮放因子(scaling factor)S來改變大小。如第6圖所示,由於手部位置固定不動,面板中心便從C1轉移至C2。特別來說,在時間點Tn+1時,大小改變之左側部份之長度(亦即,該被調整的動態虛擬面板之左邊界/較低邊界A2與X座標X1之間的距離)為L1*S,而大小改變之右側部份之長度(亦即,該被調整的動態虛擬面板之右邊界/較高邊界B2與X座標X1之間的距離)為M1*S。
應該要注意的是,手部位置是固定的,而該左側部份與該右側部份之比值相同於該大小改變之左側部份與該大小改變之右側部份之比值(亦即,),因此,該調整過之動態虛擬面板便可採用一線性映射函式(linear mapping function)。請參照第7圖,第7圖為依據本發明之示範性實施例而由該第一演算法所決定之該動態虛擬面板之映射函式的示意圖。假設該手部位置之X座標X1(亦即,包含於該基於影像的物件追蹤域之該控制輸入內之一先前輸入值) 在時間點Tn被映射至一顯示螢幕上一游標位置之X座標X2(亦即,包含於該控制域之該控制輸出內之一先前輸出值)。於該手部位置不在時間點Tn+1發生改變的情形下(亦即,該先前輸入值與該目前輸入值是因應手部位置不變之同一使用者輸入而產生),該調整過之動態虛擬面板之線性映射函式仍將該手部位置之X座標X1(亦即,包含於該基於影像的物件追蹤域之該控制輸入內之一目前輸入值)映射至該游標位置之X座標X2(亦即,包含於該控制域之該控制輸出內之一目前輸出值),因此,假如使用者的手完全沒動,在該面板大小改變後會仍會讓所映射之游標位置不變。
在另一例子中,被改變之手部位置之X座標(亦即,該基於影像的物件追蹤域內之該目前輸入值)為X1-K,在A2與X1所定義之一第一輸入範圍R1內,處理電路114依據線性映射函式所定義之一調整過之控制解析度,來將該目前手部位置之X座標X1-K轉換成該游標位置之X座標X2-J(亦即,該控制域內之該目前輸出值)。在另一情形中,被改變之該手部位置之X座標(亦即,該基於影像的物件追蹤域內之該目前輸入值)為X1+K,在B2與X1所定義之一第二輸入範圍R2內,處理電路114依據線性映射函式所定義之該相同的調整過之控制解析度,來將該目前手部位置之X座標X1+K轉換成該游標位置之X座標X2+J(亦即,該控制域內之一目前輸出值)。應要注意的是,該調整過之控制解析度是由線性映射函式之映射斜率(mapping slope)來設定。
請參照第8圖,第8圖是依據本發明之示範性實施例而由一第二演算法所決定之該動態虛擬面板之面板位置的示意圖。為求簡潔,只圖示對一動態虛擬面板所做之一個維度的調整。如第8圖所示,該動態虛擬面板依據一參考位置(例如,一預定位置,像是當處理電路114開始執行該第二演算法時的一初始面板中心或一初始手部位置)而被分成一左側部份與一右側部份。在此實施例中,面板中心C1是當作該參考位置。該目前手部位置(亦即,該目標追蹤物件之X座標X1)是位於該參考位置之左側。在時間點Tn,該左側部份之長度(亦即,該動態虛擬面板之左邊界/較低邊界A1與面板中心C1之間的距離)為L2,而該右側部份之長度(亦即,該動態虛擬面板之右邊界/較高邊界B1與面板中心C1之間的距離)為M2。處理電路114所使用之該第二演算法會基於該參考位置來決定該調整過之動態虛擬面板之位置,因此,該動態虛擬面板之該左側部份與該右側部份是用相同之縮放因子S來改變大小。如第8圖所示,在面板大小改變後,該動態虛擬面板之面板中心C1不會被改變。特別來說,在時間點Tn+1時,該大小改變之左側部份之長度(亦即,該被調整的動態虛擬面板之左邊界/較低邊界A2與面板中心C1之間的距離)為L2*S,而該大小改變之右側部份之長度(亦即,該被調整的動態虛擬面板之右邊界/較高邊界B2與面板中心C1之間的距離)為M2*S。
應該要注意的是,該參考位置(例如,面板中心)是固定的,而該左側部份與該右側部份之比值相同於該大小改變之左側部份與該 大小改變之右側部份之比值(亦即,),這意味了A1與X1之間的距離與B1與X1之間的距離之比值不同於A2與X1之間的距離與B2與X1之間的距離之比值(除非X1=C1)。因此,該調整過之動態虛擬面板使用一分段映射函式(piece-wise mapping function)。請參照第9圖,第9圖為依據本發明之示範性實施例而由該第二演算法所決定之該動態虛擬面板之映射函式的示意圖。假設該手部位置之X座標X1(亦即,包含於該基於影像的物件追蹤域之該控制輸入內之一先前輸入值)在時間點Tn被映射至一顯示螢幕上一游標位置之X座標X2(亦即,包含於該控制域之該控制輸出內之一先前輸出值)。於該手部位置不在時間點Tn+1發生改變的情形下(亦即,該先前輸入值與該目前輸入值是因應手部位置不變之同一使用者輸入而產生),該調整過之動態虛擬面板之分段映射函式仍將該手部位置之X座標X1(亦即,包含於該基於影像的物件追蹤域之該控制輸入內之一目前輸入值)映射至該游標位置之X座標X2(亦即,包含於該控制域之該控制輸出內之一目前輸出值),因此假如使用者的手完全沒動,在該面板大小改變之後,會讓所映射之游標位置保持不變。在另一情形中,被改變之手部位置之X座標(亦即,該基於影像的物件追蹤域內之該目前輸入值)為X1-K,在A2與X1所定義之一第一輸入範圍R1’內,處理電路114依據分段映射函式之一第一映射斜率所定義之一第一調整過之控制解析度,來將該目前手部位置之X座標X1-K轉換成該游標位置之X座標X2-J(亦即,該控制域內之一目前輸出值)。
在另一情形中,被改變之手部位置之X座標(亦即,該基於影像的物件追蹤域內之該目前輸入值)為X1+K,在B2與X1所定義之一第二輸入範圍R2’內,處理電路114依據分段映射函式之一第二映射斜率所定義之一第二調整過之控制解析度,來將該目前手部位置之X座標X1+K轉換成該游標位置之X座標X2+J1(亦即,該控制域內之一目前輸出值),其中J1≠J2並且該第一調整過之控制解析度不同於該第二調整過之控制解析度。應要注意的是,該調整過之控制解析度是由該線性映射函式之該第一/第二映射斜率來設定。
關於上述之該第一演算法,由於該線性映射函式使用一單一映射斜率,對於不同移動方向之同一手部位移量而言,游標位移量是一致的;然而,該動態虛擬面板之位置(例如,該動態虛擬面板之面板中心)將會隨著時間而偏移,因而造成使用者即使伸直他/她的手臂也無法再移動游標。請參照第10圖,第10圖是動態虛擬面板遠離使用者之一範例的示意圖。使用者的手部從目前位置P1緩慢地移動至下一位置P2,因此讓該動態虛擬面板的大小減小,接下來,使用者的手部從目前位置P2快速地移動至下一位置P3,因此讓該動態虛擬面板的大小增大;同樣地,該使用者的手從目前位置P3緩慢地移動至下一位置P4,因此讓該動態虛擬面板的大小減小,接下來,該使用者的手部從目前位置P4快速地移動至下一位置P5。如第10圖所示,由一三角記號所代表之面板中心將會往右移。
關於上述之該第二演算法,該動態虛擬面板之位置(例如,該動態虛擬面板之面板中心)並不會隨時間轉移;然而,由於該分段映射函是使用不同的映射斜率,對於不同移動方向之同一手部位移量來說,游標位移量會不同。
因此,本發明另提供一第三演算法,其可以得到該第一演算法與第二演算法所提供的前述優點,並減少該第一演算法與該第二演算法所擁有之前述缺點。請參照第11圖,第11圖是依據本發明之示範性實施例而由一第三演算法所決定之該動態虛擬面板之面板位置的示意圖。為求簡潔,只圖示對一動態虛擬面板所做之一個維度的調整。如第11圖所示,該動態虛擬面板基於該手部位置(亦即,該目標追蹤物件之X座標X1)與一參考位置(例如,一預定位置,像是當處理電路114開始執行該第三演算法時之一初始面板中心或一初始手部位置)之一加權平均WA來將該動態虛擬面板劃分為一左側部分以及一右側部分,以及該手部位置(亦即,該目標追蹤物件之X座標X1)會位於該參考位置(例如,此實施例中之面板中心C1)之左側。
在第11圖之示範性實施例中,X座標X1之加權因子(weighting factor)W1被設為0.5,而面板中心C1之加權因子W2被設為0.5,因此,加權平均WA等於0.5*X1+0.5*C1。然而,這只用於例示目的,而非對本發明設限。在時間點Tn,該左側部份之長度(亦即,該動態虛擬面板之左邊界/較低邊界A1與加權平均WA之間的距離)為 L3,而該右側部份之長度(亦即,該動態虛擬面板之右邊界/較高邊界B1與加權平均WA之間的距離)為M3。處理電路114所使用之該第三演算法基於該加權平均來決定該調整過之動態虛擬面板的位置,因此,該動態虛擬面板之該左側部份與該右側部份是用相同縮放因子S來改變大小。如第11圖所示,在面板大小改變後,該動態虛擬面板之面板中心會轉移至C3。特別來說,在時間點Tn+1,該大小改變之左側部份的長度(亦即,該調整過之動態虛擬面板之左邊界/較低邊界A2與加權平均WA之間的距離)為L3*S,而該大小改變之右側部份的長度(亦即,該調整過之動態虛擬面板之右邊界/較高邊界B2與加權平均WA之間的距離)為M3*S。
應要注意的是,加權平均WA是固定的,而該左側部份與該右側部份之比值相同於該大小改變之左側部份與該大小改變之右側部份之比值(亦即,),這意味了A1與X1之間的距離與B1與X1之間的距離之比值會不同於A2與X1之間的距離與B2與X1之間的距離之比值(除非X1=WA),因此,該調整過之動態虛擬面板便使用了一個具有不同映射斜率之分段映射函式。請參照第12圖,第12圖是依據本發明之示範性實施例而由該第三演算法所決定之該動態虛擬面板之映射函式的示意圖。因為處理電路114使用一加權平均,藉由該第三演算法所決定之一分段映射函式可被視為該第一演算法所決定之一線性映射函式與該第二演算法所決定之一分段映射函式的加權平均結果。
相較於第9圖所示之分段映射函式,第12圖所示之分段映射函式會更類似於一線性函式。請參照第13圖,第13圖是用來決定出該動態虛擬面板之面板位置與映射函式而使用之不同演算法之間的比較的示意圖。相較於該第一演算法,該第三演算法在該虛擬面板隨時間移動之時,讓面板中心靠近一初始參考位置。相較於該第二演算法,該第三演算法讓不同移動方向之游標位移量之間的差量變小。
應該要注意是,加權因子W1與加權因子W2是可調整的。例如,當加權因子W1被設為1而加權因子W2被設為0時,該第三演算法所決定之面板位置與映射函式相同於該第一演算法所決定之面板位置與映射函式。當加權因子W1被設為0而加權因子W2被設為1時,該第三演算法所決定之面板位置與映射函式相同於該第二演算法所決定之面板位置與映射函式。較佳地,加權因子W1與加權因子W2會動態地進行調整,例如,在該虛擬面板遠離使用者手部之情形中,指定給加權因子W1之值較小,而指定給加權因子W2之值較大,因此讓該虛擬面板能朝一參考位置更快地移動。
請注意,使用上述的複數個演算法之一來決定該動態虛擬面板之大小、位置及/或映射函式只是本發明之示範性實施例,實際上,處理電路114可基於其它因素來決定該動態虛擬面板之大小、位置及/或映射函式。例如,當處理電路114正在調整該動態虛擬面板以 改變該控制解析度設定時,映射斜率可被納入考慮。請參照第14圖,第14圖是藉由一第四演算法之一示範性實作所決定之該動態虛擬面板之面板位置與映射函式的示意圖。在決定該動態虛擬面板之一面板位置與一分段映射函式之後,該左側部份會進一步地改變大小,來將該左邊界/較低邊界從A2移動至A2’,因而使得該調整過之左側部份中之映射斜率相同於該右側部份中之映射斜率。換句話說,該第四演算法決定一初步的分段映射函式,並接著改變該左側部份之大小來將該初步分段映射函式轉換成一最終的線性映射函式。
請參照第15圖,第15圖是藉由該第四演算法之另一示範性實作所決定之該動態虛擬面板之面板位置與映射函式的示意圖。在決定該動態虛擬面板之一面板位置與一分段映射函式之後,該右側部份會進一步地改變大小,來將該右邊界/較高邊界從B2移動至B2’,因而使得該調整過之右側部份中之映射斜率相同於該右側部份中之映射斜率。換句話說,該第四演算法決定一初步的分段映射函式,並接著改變該右側部份之大小來將該初步分段映射函式轉換成一最終的線性映射函式。
在上面的例子中,依據一手部位置(例如,目標追蹤物件之X座標)、一參考位置(例如,面板中心之X座標)或該手部位置與該參考位置之加權平均,該動態虛擬面板被水平分割成一左側部份與一右側部份。然而,每個被提出之演算法也可應用於依據一手部位置 (例如,目標追蹤物件之Y座標)、一參考位置(例如,面板中心之Y座標)或該手部位置與該參考位置之加權平均而被垂直分割成一上部份與一下部份的動態虛擬面板,如此一來,可實現該動態虛擬面板之二個維度的大小改變(two-dimensional resizing)。
另外,處理電路114可視情況來適應性地改變目前所使用之演算法,也就是說,處理電路114可在一時段中使用一種演算法,而在另一時段中使用另一種演算法,如此一來,可大大改善控制裝置106之靈活性。此外,將一線性映射函式或一分段映射函式指定給該動態虛擬面板並非用以作為本發明的限制條件,只要符合動態地調整該控制解析度來將低解析度域中之控制輸入映射至高解析度域中之控制輸出的宗旨,那麼使用其它的映射函式亦是可行的。
在一設計變化中,當處理電路114正在調整該動態虛擬面板來改變該控制解析度設定時,可觸及性(reachability)可納入考量。請連同第17圖來一併參照第16圖。第16圖是依據本發明之示範性實施例而繪示手部位置位於一內部可觸及區域之內的示意圖。第17圖是依據本發明之示範性實施例而繪示手部位置位於該內部可觸及區域之外的示意圖。一可觸及區域1602係定義可被使用者的手所觸及之一區域,換句話說,當一動態虛擬面板在可觸及區域1602內時,該使用者可將游標移動至螢幕上之任一位置;然而,當一動態虛擬面板在可觸及區域1602之外時,該使用者就算伸直手臂也無法移動游標至任何地方。在此一示範性的實施例中,當該手部位置位於一內 部可觸及區域1604之內時,動態虛擬面板1603之面板大小改變(panel resizing)會被允許來自由地改變該控制解析度設定。
例如,控制電路114將該基於影像的物件追蹤域之該控制輸入(例如,目標追蹤物件(像是使用者的手)之座標值)與該基於影像的物件追蹤域之一邊界(例如,可觸及區域1602之邊界)間之一差量與一門檻值TH’比較,並據此產生一比較結果。例如,門檻值TH’可以是一預先設定之預定值。該比較結果會指出該手部位置是否位於內部可觸及區域1604內。例如,門檻值TH’等於內部可觸及區域1604之邊界與可觸及區域1602之邊界之間的距離。如第16圖所示,距離D’大於門檻值TH’,因此,由於處理電路114得知該手部位置位於內部可觸及區域1604內,所以動態虛擬面板1603可任意改變大小。然而,如第17圖所示,差量D’小於門檻值TH’,因此,處理電路114決定該手部位置是在內部可觸及區域1604之外,並限制面板大小改變的操作,例如,動態虛擬面板1603之該右側部份不允許增大,以免動態虛擬面板1603之右邊界會超過可觸及區域1602之右邊界,而相對應的控制解析度(亦即相對應的映射斜率)也因此受限。
在另一設計變化中,當處理電路114正在調整該動態虛擬面板來改變該控制解析度設定時,可將解析度不足(insufficient resolution)納入考量。當該控制輸出遠離該控制域之較高/較低邊界,而該控制輸入接近該基於影像的物件追蹤域之較高/較低邊界時,該動態虛擬 面板在該目前手部位置與該較高/較低邊界之間只有一個小區域可供控制游標在該顯示螢幕上的目前游標位置與較高/較低邊界之間的一個大區域內移動,因而造成解析度不足。
請參照第18圖,第18圖為解析度不足之偵測狀況的示意圖。處理電路114將該基於影像的物件追蹤域之控制輸入Pinput(例如,目標追蹤物件(像是使用者的手)之座標值)與該基於影像的物件追蹤域之一邊界(例如,前述之可觸及區域1602之邊界)間之一第一差量D1與一第一門檻值TH1比較,並據此產生一第一比較結果。例如,第一門檻值TH1可以是一預先設定之預定值。另外,處理電路114將該控制域之控制輸出Pcursor(例如,顯示螢幕1802內之一游標的座標值)與該控制域之一邊界(例如,顯示螢幕1802之邊界)間之一第二差量D2與一第二門檻值TH2比較,並據此產生一第二比較結果。因為D1代表可使用之控制輸入解析度,以及D2代表可使用之控制輸出解析度,為了避免解析度不足,因而需要使D1>D2。為了讓解析度不足的偵測與該控制輸入域之大小(亦即L1)以及與該控制輸出域之大小(亦即L2)無關,需要使D1/L1>=D2/L2。實際上,需要維持著D1/L1>=1/k*D2/L2之關係,這意味著D2=<[(D1/L1)*L2]*K,其中K是一常數,並且可將第二門檻值TH2設定為(D1/L1)*L2,換句話說,此實施例中之第二門檻值TH2不是一個固定/預定值,此外,每當第一差量D1因為使用者的手部移動而改變時,第二門檻值TH2均會被更新。
因此,前述之第一比較結果能指出該控制輸入(例如,手部位置)是否靠近該基於影像的物件追蹤域之較高/較低邊界,例如,當第一比較結果指出第一差量D1小於第一門檻值TH1時,這代表該控制輸入靠近該基於影像的物件追蹤域之較高/較低邊界。應該要注意的是,因為動態虛擬面板1603之動態調整的大小及/或位置,該控制輸出在其位於該控制域內之座標與該控制域之邊界之間有一可變距離。考量一特殊案例,其中控制輸入Pinput(其位於該基於影像的物件追蹤域中之座標與該基於影像的物件追蹤域之邊界之間有一距離D1)被映射至一控制輸出(其於該控制域中之座標與該控制域之邊界間有一距離(D1/L1)*L2),因此,前述之該第二比較結果可指出該控制域中之該控制輸出的相對位置是否遠離該基於影像的物件追蹤域中之該控制輸入的相對位置。
例如,當該第二比較結果指出第二差量D2大於第二門檻值TH2時,這代表該控制域中之該控制輸出的相對位置遠離於該基於影像的物件追蹤域中之該控制輸入的相對位置(亦即,事實上第二門檻值(也就是(D1/L1)*L2)指出之一特定游標位置是靠近該控制域之較高/較低邊界,第二差量D2所指出之該控制輸出可被視為遠離該控制域之較高/較低邊界)。當該第一比較結果指出第一差量D1小於第一門檻值TH1,而第二比較結果指出第二差量D2大於第二門檻值TH2時,處理電路114因此會得知有解析度不足的情形發生。
在一示範性的實作中,處理電路114可減低該動態虛擬面板的 大小,進而減少該控制解析度設定中定義之至少一控制解析度,如此一來,由於減少之控制解析度,使用者便可藉由使用該動態虛擬面板中可供使用之一小區域,來在該顯示螢幕之一大區域中控制游標的移動。在另一示範性的實作中,處理電路114可調整該動態虛擬面板之位置(亦即,面板中心)來減輕解析度不足之情形。
以上所述僅為本發明之較佳實施例,凡依本發明申請專利範圍所做之均等變化與修飾,皆應屬本發明之涵蓋範圍。
100‧‧‧使用者輸入系統
102‧‧‧影像擷取裝置
104‧‧‧基於影像的物件追蹤裝置
106‧‧‧控制裝置
112‧‧‧接收電路
114‧‧‧處理電路
201、1802‧‧‧顯示螢幕
202、302、402、502‧‧‧擷取影像
203、303、403、503、1603‧‧‧動態虛擬面板
1602‧‧‧可觸及區域
1604‧‧‧內部可觸及區域
第1圖是依據本發明之示範性實施例之一使用者輸入系統的方塊圖。
第2圖是依據本發明之示範性實施例之用於將一目標追蹤物件之一座標值映射至一顯示螢幕之一螢幕座標值之動態虛擬面板的示意圖。
第3圖是減小該動態虛擬面板之大小之一範例的示意圖。
第4圖是增大該動態虛擬面板之大小之一範例的示意圖。
第5圖是一物件(例如,一目標追蹤物件,像是使用者的手)或一觸碰物件(像是觸控筆或使用者指尖)靠近該輸入域中一區域(例如,該擷取影像或該觸控區域)之邊界之一範例的示意圖。
第6圖是依據本發明之示範性實施例而由一第一演算法所決定之該動態虛擬面板之面板位置的示意圖。
第7圖是依據本發明之示範性實施例而由該第一演算法所來決定之 該動態虛擬面板之映射函式的示意圖。
第8圖是依據本發明之示範性實施例而由一第二演算法所決定之該動態虛擬面板之面板位置的示意圖。
第9圖是依據本發明之示範性實施例而由該第二演算法所決定之該動態虛擬面板之映射函式的示意圖。
第10圖是動態虛擬面板遠離使用者之一範例的示意圖。
第11圖是依據本發明之示範性實施例而由一第三演算法所決定之該動態虛擬面板之面板位置的示意圖。
第12圖是依據本發明之示範性實施例而由該第三演算法所決定之該動態虛擬面板之映射函式的示意圖。
第13圖是用來決定出該動態虛擬面板之面板位置與映射函式而使用之不同演算法之間的比較的示意圖。
第14圖是藉由一第四演算法之一示範性實作所決定之該動態虛擬面板之面板位置與映射函式的示意圖。
第15圖是藉由該第四演算法之另一示範性實作所決定之該動態虛擬面板之面板位置與映射函式的示意圖。
第16圖是依據本發明之示範性實施例而繪示手部位置位於一內部可觸及區域之內的示意圖。
第17圖是依據本發明之示範性實施例而繪示手部位置位於該內部可觸及區域之外的示意圖。
第18圖是解析度不足之偵測狀況的示意圖。
100‧‧‧使用者輸入系統
102‧‧‧影像擷取裝置
104‧‧‧基於影像的物件追蹤裝置
106‧‧‧控制裝置
112‧‧‧接收電路
114‧‧‧處理電路

Claims (30)

  1. 一種用於決定一控制域中之一控制輸出之方法,包含:得到一輸入域之一控制輸入,其中該控制輸入包含至少一先前輸入值與一目前輸入值;以及動態調整一控制解析度設定,並依據該控制解析度設定來將該輸入域之該控制輸入轉換為該控制域中之該控制輸出,其中該控制解析度設定係定義該輸入域中之一單位被改變時,該控制域中被改變之單位之一數目;其中該控制輸出包含分別對應於至少該先前輸入值與該目前輸入值之至少一先前輸出值與一目前輸出值;該目前輸入值之該控制解析度設定是依據至少該先前輸入值來決定,其中該先前輸入值依據該目前輸入值而更新,並且當該目前輸入值與該先前輸入值是因應同一使用者輸入而產生時,該目前輸出值相同於該先前輸出值。
  2. 如申請專利範圍第1項所述之用於決定一控制域中之一控制輸出之方法,其中該輸入域是一基於影像的物件追蹤域,該基於影像的物件追蹤域之該控制輸入包含該基於影像的物件追蹤域中之一所擷取影像中的一目標追蹤物件之一座標值,該控制域之該控制輸出包含該控制域中之一顯示螢幕之一螢幕座標值,並且該顯示螢幕之一解析度是高於該所擷取影像之一解析度。
  3. 如申請專利範圍第1項所述之用於決定一控制域中之一控制輸出 之方法,其中該輸入域是一觸控面板域,該觸控面板域之該控制輸入包含該觸控面板域中之一觸碰物件之一座標值,該控制域之該控制輸出包含該控制域中之一顯示螢幕之一螢幕座標值,並且該顯示螢幕之一解析度是高於該觸控面板之一解析度。
  4. 如申請專利範圍第1項所述之用於決定一控制域中之一控制輸出之方法,其中動態調整該控制解析度設定之步驟包含:參照該輸入域中之該控制輸入之一移動資訊,來動態調整該控制解析度設定。
  5. 如申請專利範圍第4項所述之用於決定一控制域中之一控制輸出之方法,其中定義於該控制解析度設定中之至少一調整過之控制解析度與該移動資訊之一移動特徵值成反比。
  6. 如申請專利範圍第1項所述之用於決定一控制域中之一控制輸出之方法,其中該控制解析度設定包含一調整過之控制解析度;並且將該輸入域之該控制輸入轉換成該控制域之該控制輸出之步驟包含:當該目前輸入值落在一第一輸入範圍內時,依據該調整過之控制解析度,將該目前輸入值轉換成該控制域中之該目前輸出值;以及當該目前輸入值落在一第二輸入範圍內時,依據該調整過之控制解析度,將該目前輸入值轉換成該控制域中之該目前輸出 值,其中該先前輸入值係將該第一輸入範圍與該第二輸入範圍分開。
  7. 如申請專利範圍第1項所述之用於決定一控制域中之一控制輸出之方法,其中該控制解析度設定包含彼此不相同之一第一調整過之控制解析度與一第二調整過之控制解析度;並且將該輸入域之該控制輸入轉換成該控制域中之該控制輸出之步驟包含:當該目前輸入值落在一第一輸入範圍內時,依據該第一調整過之控制解析度,將該目前輸入值轉換成該控制域中之該目前輸出值;以及當該目前輸入值落在一第二輸入範圍內時,依據該第二調整過之控制解析度,將該目前輸入值轉換成該控制域中之該目前輸出值,其中該先前輸入值係將該第一輸入範圍與該第二輸入範圍分開。
  8. 如申請專利範圍第1項所述之用於決定一控制域中之一控制輸出之方法,其中動態調整該控制解析度設定之步驟包含:將該輸入域之該控制輸入與該輸入域之一邊界之間之一第一差量與一第一門檻值比較,並據此產生一第一比較結果;以及依據至少該第一比較結果,來動態調整定義於該控制解析度設定中之至少一控制解析度。
  9. 如申請專利範圍第8項所述之用於決定一控制域中之一控制輸出 之方法,其中動態調整定義於該控制解析度設定中之該至少一控制解析度之步驟包含:當該第一比較結果指出該第一差量小於該第一門檻值時,限制該至少一控制解析度之改變。
  10. 如申請專利範圍第8項所述之用於決定一控制域中之一控制輸出之方法,其中動態調整該控制解析度設定之步驟另包含:將該控制域之該控制輸出與該控制域之一邊界之間之一第二差量與一第二門檻值比較,並據此產生一第二比較結果;以及動態調整定義於該控制解析度設定中之該至少一控制解析度之步驟包含:參照該第一比較結果與該第二比較結果來動態調整該至少一控制解析度。
  11. 如申請專利範圍第10項所述之用於決定一控制域中之一控制輸出之方法,其中參照該第一比較結果與該第二比較結果來調整該至少一控制解析度之步驟包含:當該第一比較結果指出該第一差量小於該第一門檻值並且該第二比較結果指出該第二差量大於該第二門檻值時,減低該至少一控制解析度。
  12. 如申請專利範圍第1項所述之用於決定一控制域中之一控制輸 出之方法,其中動態調整該控制解析度設定之步驟包含:設定一動態虛擬面板以決定該控制解析度設定;以及將該輸入域之該控制輸入轉換成該控制域中之該控制輸出之步驟包含:使用該動態虛擬面板以將該輸入域之該控制輸入映射至該控制域中之該控制輸出。
  13. 如申請專利範圍第12項所述之用於決定一控制域中之一控制輸出之方法,其中設定該動態虛擬面板之步驟包含:參照該輸入域中之該控制輸入之一移動資訊,來動態調整該動態虛擬面板之一大小。
  14. 如申請專利範圍第13項所述之用於決定一控制域中之一控制輸出之方法,其中該動態虛擬面板之該大小與該移動資訊是成反比的。
  15. 如申請專利範圍第12項所述之用於決定一控制域中之一控制輸出之方法,其中設定該動態虛擬面板之步驟包含:將該輸入域之該控制輸入與該輸入域內一區域之一邊界之間之一差量與一門檻值比較,並據此產生一比較結果;以及依據該比較結果,調整該動態虛擬面板之一大小。
  16. 如申請專利範圍第15項所述之用於決定一控制域中之一控制輸出之方法,其中調整該動態虛擬面板之該大小之步驟包含: 當該比較結果指出該差量小於該門檻值時,減低該動態虛擬面板之一大小改變速率。
  17. 如申請專利範圍第12項所述之用於決定一控制域中之一控制輸出之方法,其中設定該動態虛擬面板之步驟包含:依據該輸入域之該控制輸入與該控制域之該控制輸出,來動態調整該動態虛擬面板之一大小。
  18. 如申請專利範圍第17項所述之用於決定一控制域中之一控制輸出之方法,其中動態調整該動態虛擬面板之該大小之步驟包含:將該輸入域之該控制輸入與該輸入域之一邊界之間之一第一差量與一第一門檻值比較,並據此產生一第一比較結果;以及將該控制域之該控制輸出與該控制域之一邊界之間之一第二差量與一第二門檻值比較,並據此產生一第二比較結果;以及依據該第一比較結果與該第二比較結果來動態調整該動態虛擬面板之該大小。
  19. 如申請專利範圍第18項所述之用於決定一控制域中之一控制輸出之方法,其中依據該第一比較結果與該第二比較結果來動態調整該動態虛擬面板之該大小之步驟包含:當該第一比較結果指出該第一差量小於該第一門檻值,而該第二比較結果指出該第二差量大於該第二門檻值時,減小該動態虛擬面板之該大小。
  20. 如申請專利範圍第12項所述之用於決定一控制域中之一控制輸出之方法,其中設定該動態虛擬面板之步驟包含:基於至少該輸入域中之該控制輸入,動態調整該動態虛擬面板之一位置。
  21. 如申請專利範圍第20項所述之用於決定一控制域中之一控制輸出之方法,其中動態調整該動態虛擬面板之該位置之步驟包含:將該輸入域之該控制輸入與該輸入域之一邊界間之一差量與一門檻值比較,並據此產生一比較結果;以及依據該比較結果來動態調整該動態虛擬面板之該位置。
  22. 如申請專利範圍第20項所述之用於決定一控制域中之一控制輸出之方法,其中動態調整該動態虛擬面板之該位置之步驟包含:基於該輸入域內之該控制輸入與該控制域內之該控制輸出來動態調整該動態虛擬面板之該位置。
  23. 如申請專利範圍第22項所述之用於決定一控制域中之一控制輸出之方法,其中基於該輸入域內之該控制輸入與該控制域內之該控制輸出來動態調整該動態虛擬面板之該位置之步驟包含:將該輸入域之該控制輸入與該輸入域之一邊界間之一第一差量與一第一門檻值比較,並據此產生一第一比較結果;將該控制域之該控制輸出與該控制域之一邊界間之一第二差量 與一第二門檻值比較,並據此產生一第二比較結果;以及依據該第一比較結果與該第二比較結果動態調整該動態虛擬面板之該位置。
  24. 如申請專利範圍第12項所述之用於決定一控制域中之一控制輸出之方法,其中設定該動態虛擬面板之步驟包含:基於一參考位置,動態調整該動態虛擬面板之一位置。
  25. 如申請專利範圍第12項所述之用於決定一控制域中之一控制輸出之方法,其中設定該動態虛擬面板之步驟包含:基於該輸入域中之該控制輸入之一加權平均與一參考位置,動態調整該動態虛擬面板之一位置。
  26. 如申請專利範圍第12項所述之用於決定一控制域中之一控制輸出之方法,其中設定該動態虛擬面板之步驟包含:基於該輸入域中之該控制輸入,以動態調整該動態虛擬面板之一映射函式。
  27. 如申請專利範圍第26項所述之用於決定一控制域中之一控制輸出之方法,其中該控制域之該控制輸出包含一先前輸出值與一目前輸出值;並且該輸入域之該控制輸入包含經由一先前映射函式而被映射至該先前輸出值之一先前輸入值,與經由不同於該先前映射函式之一目前映射函式而被映射至該目前輸出值之一目前輸入值,其 中當該目前輸入值相同於該先前輸入值時,該目前輸出值會相同於該先前輸出值。
  28. 如申請專利範圍第27項所述之用於決定一控制域中之一控制輸出之方法,其中該目前映射函式係為一分段映射函式。
  29. 一種用於決定一控制域中之一控制輸出之控制裝置,包含:一接收電路,用以得到一輸入域之一控制輸入,其中該控制輸入包含至少一先前輸入值與一目前輸入值;以及一處理電路,用以動態調整一控制解析度設定,並將依據該控制解析度設定來將該輸入域之該控制輸入轉換成該控制域之該控制輸出;其中該控制解析度設定係定義該輸入域中之一單位被改變時,該控制域中被改變之單位之一數目;該控制輸出包含分別對應於至少該先前輸入值與該目前輸入值之至少一先前輸出值與一目前輸出值;該目前輸入值之該控制解析度設定是依據至少該先前輸入值來決定,其中該先前輸入值依據該目前輸入值而更新,並且當該目前輸入值與該先前輸入值是因應同一使用者輸入而產生時,該目前輸出值相同於該先前輸出值。
  30. 一種用於決定一控制域中之一控制輸出之方法,包含:得到一基於影像的物件追蹤域之一控制輸入;以及動態調整一控制解析度設定,並依據該控制解析度設定來將該基 於影像的物件追蹤域之該控制輸入轉換成該控制域中之該控制輸出,其中該控制解析度設定係定義該輸入域中之一單位被改變時,該控制域中被改變之單位之一數目;其中該基於影像的物件追蹤域之該控制輸入是藉由分析包含該基於影像的物件追蹤域中之一所擷取影像中的一目標追蹤物件的位置而獲得,該控制域之該控制輸出應用於一顯示屏幕。
TW101129917A 2011-09-12 2012-08-17 用於決定控制域中之控制輸出的方法與控制裝置 TWI465984B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201161533760P 2011-09-12 2011-09-12
US13/439,862 US9817494B2 (en) 2011-09-12 2012-04-05 Method for converting control input of input domain into control output of control domain using variable control resolution technique, and related control apparatus thereof

Publications (2)

Publication Number Publication Date
TW201312418A TW201312418A (zh) 2013-03-16
TWI465984B true TWI465984B (zh) 2014-12-21

Family

ID=47829400

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101129917A TWI465984B (zh) 2011-09-12 2012-08-17 用於決定控制域中之控制輸出的方法與控制裝置

Country Status (3)

Country Link
US (1) US9817494B2 (zh)
CN (1) CN102999308B (zh)
TW (1) TWI465984B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8782565B2 (en) * 2012-01-12 2014-07-15 Cisco Technology, Inc. System for selecting objects on display
JP5427911B2 (ja) * 2012-04-11 2014-02-26 Eizo株式会社 カーソル移動制御方法、コンピュータプログラム、カーソル移動制御装置及び画像表示システム
TWI467467B (zh) * 2012-10-29 2015-01-01 Pixart Imaging Inc 畫面物件移動控制方法及裝置
US20140297485A1 (en) * 2013-03-29 2014-10-02 Lexmark International, Inc. Initial Calibration of Asset To-Be-Tracked
EP2887184A1 (en) * 2013-12-23 2015-06-24 Movea Air pointer with improved user experience
CN111381791B (zh) * 2020-03-03 2023-03-21 安徽文香科技有限公司 一种交互系统、方法、设备和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5424756A (en) * 1993-05-14 1995-06-13 Ho; Yung-Lung Track pad cursor positioning device and method
US20030222856A1 (en) * 2002-01-29 2003-12-04 Fedorak Mark V. Computer pointer control
US20080007519A1 (en) * 2006-05-24 2008-01-10 Stmicroelectronics Sa Variable gain mouse
US20080120577A1 (en) * 2006-11-20 2008-05-22 Samsung Electronics Co., Ltd. Method and apparatus for controlling user interface of electronic device using virtual plane

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5314462A (en) * 1992-05-27 1994-05-24 Cardiac Pacemakers, Inc. Positive fixation device
JP4269155B2 (ja) * 2003-06-25 2009-05-27 日本電気株式会社 ポインティングデバイス制御システムおよび電子機器
TWI450137B (zh) 2006-12-11 2014-08-21 Elo Touch Solutions Inc 用於校準觸控螢幕上之目標之方法及設備
US20110102570A1 (en) * 2008-04-14 2011-05-05 Saar Wilf Vision based pointing device emulation
US9652030B2 (en) 2009-01-30 2017-05-16 Microsoft Technology Licensing, Llc Navigation of a virtual plane using a zone of restriction for canceling noise
JP4783456B2 (ja) 2009-12-22 2011-09-28 株式会社東芝 映像再生装置及び映像再生方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5424756A (en) * 1993-05-14 1995-06-13 Ho; Yung-Lung Track pad cursor positioning device and method
US20030222856A1 (en) * 2002-01-29 2003-12-04 Fedorak Mark V. Computer pointer control
US20080007519A1 (en) * 2006-05-24 2008-01-10 Stmicroelectronics Sa Variable gain mouse
US20080120577A1 (en) * 2006-11-20 2008-05-22 Samsung Electronics Co., Ltd. Method and apparatus for controlling user interface of electronic device using virtual plane

Also Published As

Publication number Publication date
US9817494B2 (en) 2017-11-14
TW201312418A (zh) 2013-03-16
US20130063374A1 (en) 2013-03-14
CN102999308B (zh) 2016-06-08
CN102999308A (zh) 2013-03-27

Similar Documents

Publication Publication Date Title
TWI465984B (zh) 用於決定控制域中之控制輸出的方法與控制裝置
CN103116432B (zh) 一种触摸屏的三维操作控制方法、装置及其移动终端
TWI543610B (zh) 電子裝置及其影像選擇方法
US9619105B1 (en) Systems and methods for gesture based interaction with viewpoint dependent user interfaces
US20130257736A1 (en) Gesture sensing apparatus, electronic system having gesture input function, and gesture determining method
US20210390721A1 (en) Display control apparatus, display control method, and storage medium
KR101608423B1 (ko) 모바일 디바이스상의 풀 3d 상호작용
CN103970264B (zh) 手势辨识与控制方法及其装置
KR20070036075A (ko) 3-d 터치 상호작용에서의 터치-다운 피드-포워드
US9285885B2 (en) Gesture recognition module and gesture recognition method
CN103760980A (zh) 根据双眼位置进行动态调整的显示方法、系统及显示设备
US8416189B2 (en) Manual human machine interface operation system and method thereof
JP2012238293A (ja) 入力装置
CN112367559B (zh) 视频展示方法、装置、电子设备、服务器及存储介质
WO2013104315A1 (zh) 一种为发射光源的运动轨迹映射其应用轨迹的方法与系统
KR20210010930A (ko) 헤드 제스처들을 통해 디스플레이 디바이스를 원격 제어하기 위한 방법, 시스템 및 컴퓨터 프로그램
CN104978018B (zh) 触控系统及触控方法
WO2011096571A1 (ja) 入力装置
JP6447521B2 (ja) 情報処理装置、情報処理方法、およびプログラム
CN103543824B (zh) 手势输入系统及方法
US8723819B2 (en) Method for analyzing two-dimensional track to generate at least one non-linear index and touch control module using the same
CN104102332B (zh) 显示设备及其控制系统和方法
JP6103942B2 (ja) 画像データ処理装置及び画像データ処理プログラム
WO2013175341A2 (en) Method and apparatus for controlling multiple devices
Yan et al. A System for Operating Home Appliances with Hand Positioning in a User-definable Command Space

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees