TW200415527A - Method and apparatus for real time motion capture - Google Patents
Method and apparatus for real time motion capture Download PDFInfo
- Publication number
- TW200415527A TW200415527A TW092127982A TW92127982A TW200415527A TW 200415527 A TW200415527 A TW 200415527A TW 092127982 A TW092127982 A TW 092127982A TW 92127982 A TW92127982 A TW 92127982A TW 200415527 A TW200415527 A TW 200415527A
- Authority
- TW
- Taiwan
- Prior art keywords
- depth
- image
- model
- control
- video
- Prior art date
Links
- 230000033001 locomotion Effects 0.000 title claims abstract description 92
- 238000000034 method Methods 0.000 title claims abstract description 58
- 230000008859 change Effects 0.000 claims abstract description 12
- 239000003550 marker Substances 0.000 claims abstract description 10
- 230000009471 action Effects 0.000 claims description 44
- 230000007246 mechanism Effects 0.000 claims description 17
- 239000000463 material Substances 0.000 claims description 9
- 238000012790 confirmation Methods 0.000 claims 3
- 238000012545 processing Methods 0.000 abstract description 37
- 230000001276 controlling effect Effects 0.000 description 23
- 238000010586 diagram Methods 0.000 description 14
- 210000003414 extremity Anatomy 0.000 description 10
- 230000000875 corresponding effect Effects 0.000 description 7
- 210000000707 wrist Anatomy 0.000 description 7
- 230000006870 function Effects 0.000 description 5
- 210000000245 forearm Anatomy 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 210000004709 eyebrow Anatomy 0.000 description 2
- 210000002683 foot Anatomy 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 210000003127 knee Anatomy 0.000 description 2
- 210000002414 leg Anatomy 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 210000002303 tibia Anatomy 0.000 description 2
- 241000288673 Chiroptera Species 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 229920001410 Microfiber Polymers 0.000 description 1
- 239000000654 additive Substances 0.000 description 1
- 230000000996 additive effect Effects 0.000 description 1
- 210000003423 ankle Anatomy 0.000 description 1
- 210000000617 arm Anatomy 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 235000019800 disodium phosphate Nutrition 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 210000004209 hair Anatomy 0.000 description 1
- 238000002329 infrared spectrum Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000003658 microfiber Substances 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
- G06T7/248—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments involving reference images or patches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
- G06T7/251—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments involving models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/23—Recognition of whole body movements, e.g. for sport training
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30204—Marker
- G06T2207/30208—Marker matrix
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30241—Trajectory
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2215/00—Indexing scheme for image rendering
- G06T2215/16—Using real world measurements to influence rendering
Description
200415527 (1) 玖、發明說明 【發明所屬之技術領域】 本發明一般係關於視頻處理,及更特定於追蹤一影像 的景深及/或其相關的標記,以提供用於視頻遊戲應用的 即時動態影像捕捉。 【先前技術】 電影 '視頻遊戲與其他有關的視頻產品係捕捉距離與 空間資訊。關於電影,可以分開捕捉一個演員或運動人物 的動作。例如,當表演一個動作時,可以由數台攝影機拍 攝一個運動人物。連接於該運動人物的物體(例如,圓點 )可追蹤該動作。該追蹤的動作被儲存於資料庫中以便稍 後電影或視頻遊戲中的使用。這些動作可以藉執行儲存在 資料庫中的動作之畫框而重新播放。 圖1係一個人的槪略圖,其身體上佈滿數個圓點以儲 存此人的動作。人1 0 0具有數個圓點丨〇 2分配於其整個身 體上。然後人1 0 0將執行由數個攝影機丨04捕捉的某動作 。然後該捕捉的視頻資料可以依需求編輯以定義視頻資料 1 0 6。然後儲存視頻資料1 〇 6於資料庫1 〇 8中以稍後取出 用於插入一個電影中。 呈不情要即日寸動%影像捕捉時’例如電影編輯,圖1 所不的設計在一個被控制的環境中工作得很好。此外,既 然人的動作被捕捉及儲存,此人只須穿戴該圓點一次。然 而,圖]所示的動態影像捕捉係用於被動方式中,例如, -4 - (2) (2)200415527 編輯者在編輯該電影時將此儲存的動作插入電影中。因此 ’所捕捉的動作並無法控制該電影其他任何角度而在稍後 插入電影中。同樣的情況對於視頻遊戲也成立,例如,所 捕捉的動態影像並無法用於控制視頻遊戲任何部份。部份 地’複雜的計算能力以及需要一點一點地掃描造成無法使 用所捕捉的動態影像於即時之控制之用。 結果,需要提供一個方法及裝置以解決先前技術的問 題,該方法及裝置提供足以控制視頻遊戲各個角度(如物 體與角色動作)的即時動態影像捕捉。 【發明內容】 廣泛地說,本發明藉由提供一個方法及裝置以補滿這 些需要’該方法及裝置錯玩此視頻遊戲之人的即時動態影 像捕捉可以控制視頻遊戲角色與物體。本發明的價値在於 可以數種方式執行,包括作爲一種方法、一種系統、電腦 可讀取媒體或一種裝置。以下描述本發明幾種發明的實施 例。 在一個實施例中,提供一種即時動態影像捕捉方法以 便控制視頻遊戲角色。該方法以定義一個控制物體的模型 開始。然後,確認該模型上標記的位置。接著,捕捉該控 制物體相關的動作。然後,解譯該控制物體相關的動作以 改變該模型的狀態。接著,根據該模型狀態的改變控制展 示螢幕上所呈現的角色動作。 在另一個實施例中,提供一個經由即時動態影像捕捉 (3) (3)200415527 控制展示螢幕(與一電腦裝置溝通)上所呈現之物體的方 法。該方法以確認所追蹤之物體相關的景深影像開始。然 後,確認與展示螢幕上所呈現物體及所追蹤物體二者相關 的模型。接著,安裝該模型至景深影像以捕捉所追蹤物體 相關的動態影像。然後,根據安裝於景深影像的模型即時 控制展示螢幕上所呈現的物體。 然而在另一個實施例中,提供一個經由即時動態影像 捕捉控制展示螢幕上所呈現物體影像之動作的方法。該方 法以定義一個人的模型開始。然後,確認此人之模型上標 記的位置。接著,提供一對應於此人之模型某部份的景深 影像。該模型部份包括標記。然後,結合該標記的位置於 景深影像上的點。接著,以該景深影像架構爲基礎將該模 型部份定位於其上。然後,根據該模型部份之定位控制展 示螢幕上所呈現的視頻角色。 然而在另一個實施例中,提供具有程式指令的電腦可 讀取媒體,該媒體經由即時動態影像捕捉與一電腦裝置溝 通以控制展示螢幕上所呈現的物體。該電腦可讀取媒體包 括確認所追蹤物體景深影像的程式指令及確認與展示螢幕 上所呈現物體及所追蹤物體二者相關之模型的程式指令。 亦包括安裝該模型至景深影像以捕捉所追蹤物體相關之動 態影像的程式指令。並提供根據安裝於景深影像的模型即 時控制展示螢幕上所呈現之物體的程式指令。 在另一個實施例中,提供一個可以控制物體的系統, 該系統係經由與一控制影像相關的即時動態影像捕捉而控 -6- (4) (4)200415527 制。該系統包括一電腦裝置。提供一與該電腦裝置溝通的 展示螢幕。該展示螢幕被建構成用以展示物體的影像,其 中藉該電腦裝置提供該物體影像的相關資料至該展示螢幕 。亦包括一與該電腦裝置溝通的視頻捕捉裝置。該視頻捕 捉裝置可以追蹤一控制物體。該視頻捕捉裝置被建構成當 該控制物體動作時,轉換該控制物體相關的動態影像以控 制展不螢幕上所展不物體的動態影像。 然而在另一個實施例中,提供一可以控制視頻角色的 系統,該系統係經由與一控制影像相關的即時動態影像捕 捉而控制。該系統包括一電腦裝置。提供展示來自該電腦 裝置所接收資料之視頻角色影像的機構與捕捉與控制物體 相關之景深影像的機構。包括安裝一模型於該景深影像以 定義該控制物體動作的機構。也包括當該控制物體動作時 ,轉換該控制物體之動作以控制展示螢幕上視頻角色相關 之動態影像的機構。 本發明的其它角度與優點將藉與相關圖共同參照及舉 例說明本發明原理,在以下的詳細描述中變得更爲明確, 【實施方式】 描述一項可以即時動態影像捕捉以便控制視頻遊戲角 色或物體之系統、裝置與方法的發明。然而明顯地,對於 先前技術中的技巧,本發明可以在沒有某些或全部該等特 定細節下實行。在其他例証中’並不詳細描述已知的處理 (5) (5)200415527 操作以避免非必要地混淆本發明。圖1描述於章節''先前 技術〃中。 本發明的實施例提供允許即時動態影像捕捉以便控制 視頻遊戲角色或物體的系統與方法。玩視頻遊戲者的動作 用來控制該視頻遊戲展示螢幕上的角色。因此,玩此視頻 遊戲者的即時動態影像捕捉用以控制展示螢幕上的角色。 在此’相反於離線編輯動作捕捉及在稍後的時間點上插入 電影中’捕捉玩此視頻遊戲者的原始動作資料及用於即時 控制的目的。 在一個實施例中,展示螢幕上所呈現的人物角色之動 作受控於作爲控制物體之使用者或人的動作。該使用者的 動作可以由一個視頻捕捉裝置捕捉,也被視爲一個影像捕 捉裝置,如網路攝影機或某些其它適合的攝影機型態。在 一個實施例中,該視頻捕捉裝置被建構成捕捉該控制物體 的景深影像。該控制物體的景深影像提供的資料係關於與 該視頻捕捉裝置相關之每個像素的距離或景深。因此,該 控制物體相關的骨架與定義關節角度的位置可以映射出一 個人物角色或甚至一個非人物角色。在另一個實施例中, 該控制物體所穿戴的標記可以用來表示關節角度的位置。 結合該景深影像與使用標記定義位置的骨架以創造一個控 制物體。接著,該控制物體的動態影像用於控制展示螢幕 上的角色影像。例如,該角色影像可能是來自視頻遊戲的 影像。因此,玩此視頻遊戲者可以控制顯示於展示螢幕上 的角色影像。以下將更詳細地描述,此處所描述本發明的 >8- (6) (6)200415527 數個實施例,包括藉標記控制視頻角色的即時動態影像捕 捉。在另一個實施例中,被建構成提供景深資訊的視頻捕 捉裝置於控制視頻角色的即時動態影像捕捉時可以使用標 記或不使用標記。如以下所描述,該標記可以包括顏色、 樣式、反反射材質、光源等等。 圖2係根據本發明一個實施例的簡化槪略圖,說明使 用即時動態影像捕捉控制一視頻遊戲的角色。動態影像捕 捉輸入1 2 0儲存於動態影像捕捉資料庫1 2 4中。控制物體 動態影像1 22經由一捕捉裝置捕捉,如網路攝影機,及與 資料庫1 24中所儲存相對應的動態影像捕捉輸入1 20結合 。然後所結合的動態影像捕捉輸入依資料庫1 26所表示的 輸出動態影像呈現於展示螢幕上。例如,控制物體動態影 像1 22可以捕捉玩視頻遊戲者的某些動態影像或動作。在 一個實施例中,動態影像捕捉資料庫1 24儲存數個捕捉專 業運動員動態影像的動態影像捕捉輸入檔1 2 0。因此,控 制物體動態影像1 22與一對應於該控制物體動態影像的類 似動態影像捕捉輸入1 2 0結合,及該相似的動態影像捕捉 輸入即時呈現於展示螢幕上。因此,提供該控制物體(例 如,玩視頻遊戲者)即時控制該專業運動員之動態影像或 動作的效能。本發明的價値在於該動態影像捕捉輸入也可 以是動晝資料’例如非人物遊戲角色、動畫角色影像等等 。在另一個實施例中,控制物體動態影像1 2 2被用作限制 資訊。此處’該限制資訊驅動一角色影像的動畫,因此, 控制物體動態影像]2 2直接控制遊戲角色的動態影像。其 (7) (7)200415527 價値在於一實際的模擬系統可以完成此特性。在一個實施 例中,該遊戲角色反映出該控制物體的動態影像。在另一 個實施例中,映射該控制物體特定的動作引發遊戲角色不 同的動作。例如,當該控制物體移動一肢體,手臂或腿, 可以映射該肢體動作引發視頻遊戲角色的眉毛動作。其價 値在於控制物體任何型態的動作可以映射出角色影像(如 視頻遊戲角色)任何不同型態的動作。 仍舊參照圖2,在一個更特定的例子中,控制物體動 態影像1 22可以描述一玩籃球視頻遊戲者,其中此人表演 一射球動態影像描述於方塊1 2 2 a中。方塊1 2 2 a的射球動 態影像與儲存於資料庫1 24中專業籃球員的射球動態影像 結合。方塊1 2 6 a描述展示該專業籃球員的射球動態影像 於可見螢幕上。因此,玩此視頻遊戲者的動態影像捕捉被 用於即時控制該專業角色表演類似的動態影像。其價値在 於所顯示的籃球例子係提出作爲說明之用而非限制。也就 是說’玩此視頻遊戲者的動態影像可以對應到任何運動的 動態影像。更進一步,玩此視頻遊戲者的動態影像可以與 非運動動作結合。例如,玩此視頻遊戲者捕捉的動態影像 可以被用來控制動物或其它非人類生物物體(由該視頻遊 戲或甚至無生命物體所展示)的動作 圖3係根據本發明一個實施例之人的模型槪略圖,其 中該模型包括描述關節角度的標記。在一個實施例中,該 模型係一骨架影像。如此處所使用,一骨架影像參照到任 何所追蹤結構的模型及不受限於有關節的模型(其中該模 -10- (8) (8)200415527 型僵硬但具有關節)。更進一步,該骨架影像可以各種的 精確度定義’例如各種的關節限制。當然,越多關節與肢 體結合於骨架影像或模型,需要追蹤越多的相關資料。此 處,標記1 4 0 a - 1 4 0 i佈滿於骨架影像} 4 2。標記1 4 〇 a與 1 4 0 d相當於手腕位置,標記1 4 〇 b與M 〇 ^相當於眉毛位 置而標記1 4 0 e相當於軀幹位置。標記1 4 〇 g與} 4 〇 f相當 於膝蓋及位置標記1 4 0 h與1 4 0 i相當於腳踝位置。當然, 此處所描述的實施例並不限制圖3中標記的放置位置或數 量,可以使用較多或較少的標記。例如,可以使用耳機 1 4 1作爲表示該控制物體頭部位置的標記。此項技術中一 個重要的技巧乃係可以使用髮帶作爲標記。此處,可以提 供耳朵可插入式裝置,其中該耳朵可插入式裝置作爲標記 及提供該控制物體聲音。因此,一個視頻捕捉裝置,例如 攝影機,提供玩此視頻遊戲者的影像,其中玩此視頻遊戲 者穿戴該等標記。例如,該等標記可以被建構成人能穿戴 的皮帶或該等標記可以倂入此人(例如,控制物體)的衣 服。然後軟體可以標記分析此人捕捉的影像而產生骨架影 像142 (由標記]40a-140i所提供、具已知關節角度位置 )° 在一個實施例中,該視頻捕捉裝置被建構成提供可用 於塡入骨架影像部份的景深影像與在三度空間中定位該骨 架影像。因此,標記1 40a-14 0i提供作爲附加物或肢體起 始位置的資料,及來自視頻捕捉裝置的景深影像在三度空 間中塡入該附加物或肢體。如此處所使用,該附加物或肢 -11 _ (9) (9)200415527 體的名稱並不限制爲人,例如,控制物體,可以控制一同 樣藉由景深影像捕捉的物體。因此,該附加物或肢體可以 包括作爲控制物體者所控制的物體。在另一個實施例中, 視頻捕捉裝置不具備景深捕捉能力,及標記將表示出附加 物或肢體起始點在空間中的已知位置。此處,一個手臂、 手、腿、腳、或某些其它附加物可以從儲存相關附加物之 典型架構的資料庫塡入。例如,可以在起始遊戲之前取出 控制物體的景深影像,及該景深影像可以儲存於資料庫中 作爲模型’以在需要時使用該模型即時控制視頻遊戲角色 。然而在另一個實施例中,用於捕捉玩此視頻遊戲者動態 影像的視頻捕捉裝置沒有標記。此處,爲了轉換用於控制 視頻遊戲角色所捕捉的動態影像,制定關於該物體位置的 特定假設(例如哪一隻手、腳等等係來自左側或右側)。 因此,在以上所描述的每個實施例中,使用所捕捉的動態 影像即時控制視頻遊戲角色相關的動態影像。 其價値在於標記可以各種型式使用。例如,可以使用 具有特定形狀、顏色、樣式、反射能力、或某些其它可分 辨性質的材質致使視頻捕捉裝置可以在空間中藉由標記確 認一個點。在此項技術中一個重要的技巧係使用反反射材 質提供分辨反射的能力。此外,可以合倂使用一個視頻影 像捕捉器光源與反反射帶以提供控制物體特定附加物起始 點在空間中的位置。在一個實施例中,標記可以爲閃光光 源型式。此處,該光源可以是不可見光,如紅外線光源。 該光源可以在一頻率上閃光,其中該組頻率相對於特定 -12 - (10) (10)200415527 的人或團隊。 圖4 A至圖4 C說明根據本發明一個實施例,可由該 控制物體穿戴作爲標記的典型樣式。該典型樣式包括圖 4 A的斜紋樣式,圖4 B的方塊樣式與圖4 C的網目樣式。 此項技術中一個明顯的技巧,圖4A4C所例舉的樣式並 非限制可以被視頻捕捉裝置確認之樣式的任何型態。其價 値在於在一個實施例中,可以使用不同樣式以區分左肢與 右肢。例如,圖3的標記1 4 0 d可以包括圖4 A的樣式, 然而圖3的標記1 4 0 a可以包括圖4 B的樣式。因此,可以 區分左腕與右腕。此外,可以使用形狀、顏色等等與樣式 合倂以定義一個標記。因此,就算樣式因動作而變形,標 記仍可使用一個備用指示者。 圖5係根據本發明一個實施例之控制物體即時動態影 像捕捉的槪略圖,該控制物體用於控制展示螢幕上所呈現 之角色的動作。骨架影像1 42,相當於玩視頻遊戲者,藉 由視頻捕捉裝置1 4 8追蹤。在一個實施例中,視頻捕捉裝 置1 4 8被建構成捕捉每個像素的景深影像。例如,可使用 3DV STSTEMS或CANESTA所提供的景深攝影機作爲此 處所描述之實施例捕捉景深資料的視頻捕捉裝置1 4 8。當 玩此視頻遊戲者穿戴反反射帶作爲標記,攝影機丨4 8包括 光源1 5 0。在一個實施例中,光源〗5 〇可以是紅外線光源 。在力 個貫施例中,光源1 5 0係閃光致使可以區分場景 中的固定光源與所追蹤的標記,例如,反射來自反反射帶 的閃光光源。反反射帶反射所有來自光源]5 〇的光,因此 -13 - (11) (11)200415527 ,反反射帶在視頻捕捉裝置]4 8所提供的影像資料中將成 爲一個売點。該売點或空缺將表示一結合於標記之附加物 的起始點。例如,標記1 4 0 d結合於右腕及表示包括該右 腕(也可以包括手或前臂)之景深影像的起始點。當然如 上所述,該手可以控制一物體。其價値在於攝影機1 4 8可 以包括數個不同顏色的閃光光源。此處,可以設計反反射 帶、或任何適合的反射標記成反射不同的顏色,因而允許 區分數個反射標記。 圖5的標記1 40c表示軀幹的位置。如上所述,控制 物體可以在所定義的位置上穿戴任何數量的標記。此項技 術中一個明顯的技巧乃係捕捉裝置可以確認結合於特定附 加物(例如,圖5的手腕或軀幹)的特定標記。當視頻捕 捉裝置1 4 8被建構成提供景深影像,該視頻捕捉裝置提供 資料以便用圖8所示之景深資訊塡入骨架影像1 4 0軀幹的 其餘部份。攝影機1 4 8包括被建構成合倂景深資訊與標記 位置的微處理器1 5 2以產生及追蹤該控制物體(例如,玩 此視頻遊戲者)的影像。微處理器1 5 2可以完成圖9所示 的處理功能。攝影機1 4 8與電腦裝置1 5 4溝通,接著再與 展示裝置1 5 6溝通。在一個實施例中,電腦裝置1 5 4係一 視頻遊戲控制台(如索尼電腦娛樂公司所製造的'' PLAYSTATION ® 〃 )。在另一個實施例中,光源1 5 0可 以被建構成紅外線光譜中的放射光源以使得直接在控制物 體上的可見光降至最低。 圖6 A係根據本發明一個實施例之連身服的槪略圖, -14 - (12) (12)200415527 該連身服包括標記在其中。標記1 6 2 a到1 6 2 i可以整合於 連身服1 6 0中相當於圖3所討論位置的關節處。在一個實 施例中,可以資料(藉特定運動人物、知名者、團隊識別 寺寺確認芽威此服裝者)編碼驅幹標記1 6 2 e。此外’可 以編碼標§5以便在視頻遊戲期間提供穿戴此服裝者進一步 的特徵。例如,該連身服可經由更多身體的盔甲或其它強 化提供使用者額外的保護以誘使消費者購買視頻遊戲所使 用的連身服。 圖6 B係圖6 A之連身服的替代實施例。此處,反反 射材質的超 纖維可織入連身服中,例如,倂入連身服 1 6 0的整個織布。因此,反反射材質佈滿整個連身服。此 處,對景深攝影機該連身服將儘可能顯得最大,但較適用 於攝影機無法捕捉景深資料的實施例。也就是說,當視頻 捕捉裝置被建構成提供二度空間影像資料,最好儘可能具 有大量控制物體作爲反射之用,以便更容易追蹤用於即時 控制視頻遊戲角色的控制物體。當然,控制物體並不需要 被反射材質如戰略地放置皮帶覆蓋以滿足如上所討論的。 圖7係根據本發明一個實施例,說明監視標記畫框最 佳技術的槪略圖。此處,區域1 7 〇定義圍繞骨架影像1 4 2 的範圍。因此,爲了連續的畫框只搜尋圍繞骨架影像1 42 所定義的部份畫框,而不搜尋標記資料整個畫框。此處, 將會搜尋部份畫框1 7 4 - 2到1 7 4 - η以增強效能。所顯示的 骨架影像1 4 2控制物體1 7 2,其中物體1 7 2是一把劍。其 價値在於當控制物體主要被視爲人時,此人可以控制如劍 - 15 - (13) (13)200415527 、球、球棒等等的物體。因此,也可以捕捉與所控制物體 相關的動態影像以便即時控制在展示螢幕上類似的物體, 例如,其中視頻角色控制一把劍。 圖8係根據本發明一個實施例模型的槪略圖,描述藉 景深影像塡入的區域。如圖3所示,視頻捕捉裝置(如攝 影機)提供玩此視頻遊戲者的影像,其中玩此視頻遊戲者 穿戴標記。所捕捉此人的影像藉標記分析以便產生骨架影 像142,同樣也藉標記140a-140i所提供已知的關節角度 位置被視爲一個模型。在一個實施例中,穿戴標記者站在 視頻捕捉裝置前以定義一個控制物體的模型或身體網(以 上述所提之方式儲存)。也就是說,在起始先執行一個校 準步驟以定義控制物體的模型景深影像。然後,使用該景 深影像或部份景深影像塡入骨架影像1 42以便產生一個三 度空間影像。分別的標記定義相對景深影像區域所配置的 位置。例如,左前臂與右前臂分別定義於區域1 80c與 180e中。上半身與下半身分別定義於區域i80d與]80b 中,而左脛骨與右脛骨分別定義於區域180a與180f中。 此外,以下分別以標記140a、140d、140i與140h定義手 與腦1 °因此,爲了即時控制視頻遊戲角色的動態影像,該 等標記定義起始位置及使用景深影像塡入其餘部份以便提 供三度空間的控制物體。 圖9係可用於執行本發明實施例,與圖形展示上物體 互動之典型使用者輸入系統的方塊圖。如圖9中所示,該 使用考輸入系統包含一視頻捕捉裝置2 00、一輸入影像處 (14) (14)200415527 理器2 0 2、一輸出影像處理器2 0 4、與一視頻展示裝置 2 0 6。視頻捕捉裝置2 0 0可以是任何能夠捕捉連續視頻影 像的裝置,及在一個實施例中,是一數位視頻攝影機(如 網路攝影機)、或類似的影像捕捉裝置。如上所述,該視 頻捕捉裝置可以被建構成提供景深影像。輸入影像處理器 2 0 2轉換所捕捉的控制物體視頻影像成傳送至輸出影像處 理器的信號。在一個實施例中,輸入影像處理器2 0 2被規 劃成藉由景深影像在所捕捉的視頻影像中從背景分離出控 制物體及產生一回應於控制物體位置及/或動作的輸出信 號。輸出影像處理器2 0 4 (原稿1 〇 6 )被規劃成回應從輸 入影像處理窃2 0 2 (原稿1 〇 4 )接收的信號,在視頻展示 裝置206 (原稿108 )上引起物體的平移及/或旋轉^ 本發明以上及額外角度可以藉由執行軟體指令的一或 多個處理器執行。根據本發明一個實施例,一執行輸入影 像處理與輸出影像處理的單處理器如圖5所示。然而,如 圖中所示及爲了便於說明,所顯示的處理操作在輸入影像 處理益202與輸出影像處理器204·間分開。請注意,本發 明無法作爲限制任何特定處理器架構的解釋,如超過一個 處理器。圖9中所不多種處理方塊只是爲了便於描述。 圖1 〇係根據本發明實施例,說明用於使用者與圖形 展示上物體互動之輸入系統。該輸入系統環境包括控制物 體2 ] 2、視頻捕捉裝置2 1 4、視頻展示裝置2 1 6、與包含 處理器功能的控制台2 0 8,如一個視頻遊戲機。輸入系統 環境中的控制物體2 ] 2應該配置於視頻捕捉裝置2丨4視野 -17 - (15) (15)200415527 2 1 0的範圍內。處理系統2〇8可以由一娛樂系統或遊戲控 制□執 fT ’ 如 S 〇 n y ® P 1 a y s t a t i ο 11 11 或 Sony ® PlaystaUon ™ I處理型態與電腦娛樂系統。然而請注意, 處理系統2 0 8可以執行於其它電腦系統型態,如個人電腦 、工作站、筆記型電腦 '無線電腦裝置、或任何其它能夠 接收及處理圖形影像資料的電腦裝置型態。當然,控制物 體’ 2 1 2可以與上述之標記共同作用及/或視頻捕捉裝置 2 1 4可以包括景深捕捉能力。 圖1 1係一簡化的電腦處理系統方塊圖,該系統被建 構成執行本發明此處所描述之實施例。該處理系統可以呈 現一電腦化娛樂系統實施例,該實施例包括耦合於主記憶 體220與圖形處理單元('、GPU〃 )226的中央處理單元 (''CPU〃 )224。CPU224也耦合於輸入/輸出處理器( Μ·〇Ρ〃 )匯流排22 8。在一個實施例中,GPU2 2 6包括一 快速處理像素化圖形資料的內部暫存器。此外,GPU2 2 6 可以包括一輸出處理區或功能以轉換所處理的影像資料成 標準電視頻號,例如NTSC或PAL,而傳輸到連於該娛樂 系統或其元件外部的展示裝置227。或者,可以提供資料 輸出信號至電視顯示器之外的展示裝置,如電腦顯示器、 LCD (液晶展示)裝置、或其它型態的展示裝置。 IOP匯流排22 8耦合CPU224到各種的輸入/輸出裝 置及其它匯流排或裝置。I0P匯流排22 8連接於輸入/輸 出處理器記憶體2 3 0、控制器2 3 2、記憶卡2 3 4、通用序 列連接(USB )埠 2 3 6、IEEE 1 3 94 (也被視爲火線介面) (16) (16)200415527 ί阜2 j) 8、與匯流排2 5 0。匯流排2 5 0耦!合數種其它系統元 件到CPU224,包括作業系統('、0S〃 )R〇M24〇、快閃 I己憶體2 4 2、聲音處理單元(、、s P U ” )2 4 4、光碟控制單 兀2 4 6、與硬碟機('、η D D ” )2 4 8。在本實施例的一個 角度中,視頻捕捉裝置可以直接連接於I 〇 Ρ匯流排2 2 8以 便經由其傳輸到CPU224 ;其中,可以使用來自視頻捕捉 裝置的資料在GpU2 2 6中改變或更新用於產生圖形影像的 値。更進一步,本發明的實施例可以使用數種影像處理架 構與技術,如2 0 0 0年5月1 7日發表於美國專利申請案號 第 0 9 / 5 7 3,1 0 5 號、標題爲 OUTLINE GENERATING DATA, GENERATING METHOD AND APPARTUS 所描述之 內容全部於此參考之。 具體表現本發明之各個角度的程式或電腦指令可由數 種不同方法提供。例如,可用將程式儲存於HD D 2 4 8、快 閃記憶體242、OS ROM 24 0、或記憶卡2 3 4 (原稿23 2 ) 中的型式提供與圖形影像互動的使用者輸入方法。或者, 該程式可經由一或多個耦合於C P U 2 2 4的輸入埠下載到處 理單元。該定義輸入方法的程式模組設有CPU224所執行 的遊戲或應用程式提供及展示於展示裝置22 7上,或者它 們可分別由如來自區域主記憶體220執行的應用程式提供 〇 本發明的實施例也考慮分散的影像處理架構。例如, 本發明不限於所捕捉的影像及於一或超過兩個位置處理展 示影像,如在CPU中或在CPU與另一個元件中。例如, (17) (17)200415527 可以同樣容易地於一可完成處理的相關c P u、處理器或裝 置中處理輸入影像;本質上所有的影像處理可以經由聯網 系統而分散。因此,本發明不限於任何特定的影像處理硬 體電路及/或軟體。此處所描述的實施例也不限於任何一 般硬體電路及/或軟體的特定組合,處理元件所執行的指 令也不限於任何特定來源。 圖1 2係根據本發明一個實施例之操作方法的流程圖 ,該即時捕捉動態影像的操作方法用於控制展示螢幕上所 呈現的角色。此方法起始於定義控制物體之骨架影像或模 型的操作2 6 0。該控制物體可以是與呈現於展示螢幕上之 角色相關的玩視頻遊戲者。其價値在於此人可以在該視頻 捕捉裝置視野範圍內站在視頻捕捉裝置前,以便定義上述 的人模型。因此,該骨架影像或模型可以藉由自我校準處 理而定義,其中此人站在視頻捕捉裝置前。然後此方法進 一步到確認骨架影像或模型上標記位置的操作262,。例 如,如圖3、5與8所示,該等標記可以表示骨架影像或 模型上關節角度的位置。其價値在於此等標記可如此處所 述以各種的格式取用。 然後圖1 2的方法繼續進行捕捉控制物體相關動作的 操作264。在一個實施例中,該動作藉由被建構成提供景 深影像的攝影機所捕捉,例如,影像資料與z軸的相關如 同與X軸及y軸一樣。在另一個竇施例中,在二度空間中 捕捉該動作係藉由數位視頻攝影機,如網路攝影機。然後 本方法移至操作266,該操作回應控制物體的動作,改變 -20- (18) (18)200415527 骨架影像或模型的狀態。也就是說,移動骨架影像以配合 控制物體的動作。其價値在於當使用景深攝影機作爲視頻 捕捉裝置,此處可以提供一與骨架影像相對應的景深影像 。定位該骨架影像以配合景深影像的狀態。 爲了舉例與說明的目的,骨架影像可被視爲一配合景 深影像狀態所定位的布娃娃。當控制物體移動時,景深影 像追蹤控制物體的動作,接著,也同樣地移動骨架影像以 便追隨景深影像。因此,控制物體的動作藉由骨架影像重 複。如上所述,可以在沒有景深攝影機的狀況下使用標記 。同樣地,可以在沒有標記的狀況下使用景深攝影機。其 價値在於景深攝影機捕捉三度空間資料,然而,景深攝影 機不具備映射三度空間資料到骨架的能力。標記在空間中 提供已知的資料點,因而標記可以映射景深資料到骨架。 當然,在不使用標記的狀況下,可以宣告特定假設致使景 深資料能映射到骨架。也就是說,標記去除假設實際點, 如關節角度,由標記標示的需求,及相對應的景深資料可 以藉由標記所確認之點的型式塡入。然後本方法進一步到 操作2 6 8,該操作根據骨架影像狀態的改變控制展示螢幕 上所呈現角色的動作。此處,該角色的動作係即時控制。 也就是說,當控制物體移動時,根據使用具景深資訊及/ 或標記的影像資料定位骨架影像。 在一個實施例中,一經由即時動態影像捕捉相關之控 制影像控制物體的系統包含數種以其功能定義名稱的元件 。該系統包括一電腦裝置,例如一遊戲控制台。該系統可 -21 - (19) (19)200415527 以包括展示自電腦裝置所接收資料之展示物體影像的機構 。此處,展示影像的機構可以是包括電視顯示器之任何適 合的展示螢幕。該系統包括捕捉控制物體相關之景深影像 的機構。在一個實施例中,捕捉景深影像的機構可以由能 夠提供景深資料的攝影機提供’如來自上述可用於3 DV SYSTEMS或CANESTA的攝影機。該系統提供安裝骨架 影像或模型到景深影像的機構以定義控制物體的動作。例 如,微處理器可提供安裝骨架影像或模型到景深影像以定 義控制物體動作的機構。如上所述,這項處理可經由一或 多個微處理器提供。當控制物體移動時,機構轉換控制物 體之動作成展示螢幕上展示物體相關的控制動態影像。此 處再次可用一微處理器(如圖形處理單元)完成轉換控制 物體的動作成展示物體相關之控制動態影像的機構。當然 ’執行上述功能的微處理器可以被包括於一個晶片組內。 總之’上述發明描述了提供用於控制視頻遊戲角色之 即時動態影像捕捉的方法與系統。上述的實施例允許可用 於控制視頻遊戲角色或物體的即時動態影像捕捉。追蹤與 標15合倂之景深的能力可以提供用於確認所追蹤者(控制 物體)肢體/身體的起始點。然後可以塡入此人如同真實 的角色或人。因此,一旦確認出景深影像,可從具景深影 像的資料庫或視頻捕捉裝置所捕捉的景深影像塡入與景深 影像相關的骨架影像。可以使用各種型式的標記與視頻捕 捉裝置(可以或不可以捕捉景深影像)結合。可穿戴反反 射w的放置位置範例可包括如手腕、膝蓋、頭上等等。或 -22 - (20) (20)200415527 者’可提供連身服或合倂不同標記型式(補釘、可確認的 線等等)的衣服。在一個實施例中,一旦確認(偵測)出 動作,一動作資料庫的參考可以在資料庫中找出一個相對 應的動作。例如,如果遊戲使用者選擇一特定的角色,如 著名的球員,該動作可以像是真的由該著名的球員表演。 這些動作儲存於資料庫中。所得到的資料庫動作將因此用 於控制遊戲中的角色(人/骨架)。在一個實施例中,攝 影機或被建構成追蹤景深影像的硬體可以包括一處理器, 特定電路或被建構成用作塡入的DSP,資料庫尋找及轉換 使用者動作成 ''螢幕上〃的動作。如以上所討論,稱爲骨 架影像者可廣泛地定義爲任何被追蹤物體的任何模型,不 論此物體是否爲人、有生命或無生命的物體。 回想上述的實施例,應了解本發明可以使用各種包含 儲存於電腦系統中資料的電腦執行操作。這些操作包括需 要實際處理實際量的操作。雖然不是必要,通常以電子或 磁信號的型式儲存、轉換、合倂、比較與其它處理這些量 。更進一步,所執行的處理通常以如產生、確認、決定、 或比較的名稱參照之。 上述的發明可以與其它電腦系統架構一起實現,包括 攜帶式裝置、微處理器系統、微處理器式或可程式消費電 子、迷你電腦、大型電腦與其類似產品。本發明亦可於分 散式電腦環境中實現,其中藉遠端處理裝置(經通訊網路 相連)執行工作。 本發明亦可具體化爲電腦可讚媒體上的電腦可讀碼。 -23- (21) (21)200415527 電腦可讀媒體係任何可儲存電腦系統稍後可讀取之資料的 資料儲存裝置。電腦可讀媒體的範例包括硬碟機、網路附 加儲存(NAS )、唯讀記憶體、隨機存取記憶體、0]3_ ROM、CD、CD-RW、磁帶、及其它光學與非光學資料 儲存裝置。該電腦可讀媒體亦可分佈於耦合電腦系統的網 路’致使電腦可讀碼可以分散的方式儲存與執行。 雖然爲了淸楚了解的目的,前面已經詳細描述了發明 ,明顯的特定改變與調整可以在附加的申請專利範圍中實 現。因此,所提出的實施例被視爲舉例而非限制,及本發 明並不受限於此處所給的細節,但可在附加之申請專利的 範圍與同等物中調整。除非在申請專利範圍中明確說明, 在申請專利範圍中,元件及/或步驟並不意味任何特定的 操作順序。 【圖式簡單說明】 本發明將藉由以下參照相關圖的詳細描述而易於了解 ’及同類的參照數字指定給同類的結構元件。 圖1係一個人的槪略圖,其身體上佈滿數個圓點以儲 存此人的動作。 圖2係根據本發明一個實施例的簡化槪略圖,說明用 於控制視頻遊戲角色的即時動態影像捕捉。 圖3係根據本發明一個實施例之一個人的模型槪略圖 ,其中該模型包括描述關節角度的標記。 圖4 A至圖4 C說明根據本發明一個實施例,可由該 -24 - (22) (22)200415527 控制物體穿戴作爲標記的典型樣式。 圖5係根據本發明一個實施例之控制物體即時動態影 像捕捉的槪略圖,該控制物體用於控制展示螢幕上所呈現 之角色的動作。 圖6 A係根據本發明一個實施例包括標記在其中之連 身服的槪略圖。 圖6B係圖6A之連身服的替代實施例。 圖7係根據本發明一個實施例說明監視標記影像畫框 最佳技術的槪略圖。 圖8係根據本發明一個實施例模型的槪略圖,描述藉 景Ά影像桃入的區域。 圖9係可用於執行本發明之實施例,與圖形展示上物 體互動之典型使用者輸入系統的方塊圖。 圖1 〇係根據本發明實施例說明用於使用者與圖形展 示上物體互動的輸入系統。 圖 U係一簡化的電腦處理系統方塊圖,該系統被建 構成執行本發明此處所描述之實施例。 圖1 2係根據本發明實施例之操作方法的流程圖,該 即時捕捉動態影像的操作方法可控制展示螢幕上所呈現的 角色。 主要元件對照表 ]00 人 102 圓點 >25- (23) 200415527 1 04 攝影機 1 06 視頻貪料 1 08 資料庫 120 動態影像捕捉輸 1 22 控制物體動態影 122a 方塊 1 24 動態影像捕捉資 126 資料庫 126a 方塊 140a〜140i 標記 14 1 耳機 142 骨架影像 148 視頻捕捉裝置 1 50 光源 1 52 微處理器 1 54 電腦裝置 15 6 展示裝置 1 60 連身服 1 62a- 1 62i 標記 ]70 區域 1 72 物體 174-1〜n 畫框 180a-180f 區域 200 視頻捕捉裝置 入檔 像 料庫 -26- (24) 輸入影像處理器 輸出影像處理器 視頻展示裝置 控制台 視野 控制物體 視頻捕捉裝置 視頻展示裝置 主記憶體 中央處理單元 圖形處理單元 展示裝置 輸入/輸出處理器匯流排 輸入/輸出處理器記憶體 控制器 記憶卡 通用序列連接埠 IE E E 1 3 9 4 埠 作業系統唯讀記憶體 快閃記憶體 聲音處理單元 光碟控制單元 硬碟機 匯流排 > 27 - (25)200415527 260 操 作 262 操 作 264 操 作 266 操 作 268 操 作
-28-
Claims (1)
- 200415527 Π) 拾、申請專利範圍 1. 一種用於控制視頻遊戲角色的即時動態影像捕捉 方法,包含: 定義一控制物體的模型; 確認該模型上標記的位置; 捕捉該控制物體相關的動作; 解譯該控制物體相關的動作以改變該模型的狀態;及 根據該模型位置的改變控制展示螢幕上所呈現角色的 動作。 2. 如申請專利範圍第1項之方法,其中該控制物體 是一人及該模型是此人的骨架影像。 3 .如申請專利範圍第1項之方法,其中該捕捉該控 制物體相關動作的操作包括, 捕捉該控制物體所控制之物體的動作。 4. 如申請專利範圍第1項之方法,其中解譯該控制 物體相關動作以改變該模型狀態的操作包括, 存取具對應於該模型之景深影像的資料庫。 5. 如申請專利範圍第1項之方法,進一步包含: 繼續捕捉該控制物體相關的動作,解譯該控制物體相 關的動作以便改變該模型的位置及根據該模型位置的改變 控制展不營幕上所呈現角色的動作。 6 · —種經由即時動態影像捕捉與電腦裝置通訊以控 制展示螢幕上所呈現之物體的方法,包含: 確認所追蹤之物體相關的景深影像; -29 - (2) (2)200415527 確認與展示螢幕上所呈現物體及所追蹤物體二者相關 的模型; 安裝該模型至景深影像以捕捉所追蹤物體相關的動態 影像; 根據安裝於景深影像的模型即時控制展示螢幕上所呈 現的物體。 7 .如申請專利範圍第6項之方法,其中所追蹤之物 體係一與該電腦裝置互動的人及該模型係此人之骨架影像 〇 8 .如申請專利範圍第6項之方法,其中該電腦裝置 係一視頻遊戲控制台。 9. 如申請專利範圍第6項之方法,其中展示螢幕上 所呈現之物體係一視頻遊戲角色。 10. 如申請專利範圍第6項之方法,其中該方法確認 所追蹤物體相關之景深影像的操作包括, 經由可以提供景深資料的視頻捕捉裝置捕捉景深影像 〇 11. 如申請專利範圍第6項之方法,其中該方法確認 所追蹤物體相關之景深影像的操作包括, 從與電腦裝置相關的資料庫取出該景深影像。 1 2 . —種經由即時動態影像捕捉控制展示螢幕上所呈 現影像之動作的方法,包含: 定義一人的模型; 確認此人之模型上標記的位置; -30- (3) (3)200415527 提供一對應於此人之模型某部份的景深影像,該部份 包括該標記; 結合該標記的位置於該景深影像的點; 以該景深影像架構爲基礎將該模型部份定位於其上; 及 根據該模型部份定位控制展示螢幕上所呈現的視頻角 色。 1 3 .如申請專利範圍第1 2項之方法,其中從包含顏 色、樣式、反反射材質、與光源裝置的群組中選擇該標記 〇 1 4 .如申請專利範圍第1 2項之方法,其中該景深影 像由被建構成確認景深資料的視頻捕捉裝置提供。 1 5 .如申請專利範圍第1 2項之方法,其中該標記係 一反反射材質,該反反射材質在景深影像上以一個空缺出 現。 16. —種具有程式指令的電腦可讀取媒體,經由即時 動態影像捕捉與一電腦裝置溝通以控制展示螢幕上所呈現 的物體,包含: 確認所追蹤物體景深影像的程式指令; 確認與展示螢幕上所呈現物體及所追蹤物體二者相關 之模型的程式指令; 安裝該模型至景深影像以捕捉所追蹤物體相關之動態 影像的程式指令; 根據安裝於景深影像的模型即時控制展示螢幕上所呈 -31 - (4) (4)200415527 現之物體的程式指令。 17. 如申請專利範圍第1 6項之電腦可讀取媒體,其 中所追蹤的物體是一人。 18. 如申請專利範圍第1 6項之電腦可讀取媒體,其 中展示螢幕上所呈現的物體係一視頻遊戲角色。 1 9 .如申請專利範圍第1 6項之電腦可讀取媒體,其 中景深影像藉由一能夠提供景深資料的視頻捕捉裝置所捕 捉。 2 0. —種藉控制影像相關之即時動態影像捕捉而控制 物體的系統,包含= 一電腦裝置; 一與該電腦裝置溝通的展示螢幕,該展示螢幕被建構 成用以展示物體的影像,對應於該物體影像的資料由該電 腦裝置提供; 一與該電腦裝置溝通的視頻捕捉裝置,該視頻捕捉裝 置可以追蹤一控制物體,該視頻捕捉裝置被建構成當該控 制物體移動時,轉換該控制物體相關的動態影像以控制展 示螢幕上所展示物體的動態影像。 2 1.如申請專利範圍第2 0項之系統,其中該電腦裝 置係一視頻遊戲控制台。 22.如申請專利範圍第20項之系統,進一步包含: 被建構成該控制物體所穿戴的標記,該標記表示展示 螢幕上所展示物體相關之模型上景深影像的位置,該景深 影像由該視頻捕捉裝置提供。 -32 - (5) (5)200415527 23.如申請專利範圍第 2 0項之系統,其中該控制物 體是一人。 2 4.如申請專利範圍第2 0項之系統,其中該視頻捕 捉裝置可以提供該控制物體影像相關的景深資料。 25. 一種藉控制影像相關的即時動態影像捕捉而控制 視頻角色的系統,包含: 一電腦裝置; 展示來自該電腦裝置所接收資料之視頻角色影像的機 構; 捕捉控制物體相關之景深影像的機構; 安裝模型至該景深影像以定義該控制物體動作的機構 •’及 於該控制物體移動時轉換該控制物體之動作以控制展 示螢幕上該視頻角色相關之.動態影像的機構。 2 6.如申請專利範圍第 2 5項之系統,其中該電腦裝 置係一遊戲控制台。 2 7.如申請專利範圍第2 5項之系統,其中該控制物 體係一與該電腦裝置互動的人。 2 8.如申請專利範圍第2 5項之系統,其中安裝模型 至該景深影像以定義該控制物體動作的機構包括’ 確認標記的機構,該標記表示對應於該景深影像與該 模型二者之點的位置。 2 9.如申請專利範圍第2 8項之系統,其中從包含顏 色 '樣式、反反射材質、與光源裝置的群組中選擇該標記 -33- (6)200415527 3 〇 ·如申請專利範圍第2 8項之系統,其中該模型係一 骨架影像。-34 -
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US10/365,120 US9177387B2 (en) | 2003-02-11 | 2003-02-11 | Method and apparatus for real time motion capture |
Publications (2)
Publication Number | Publication Date |
---|---|
TW200415527A true TW200415527A (en) | 2004-08-16 |
TWI274295B TWI274295B (en) | 2007-02-21 |
Family
ID=32824565
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW092127982A TWI274295B (en) | 2003-02-11 | 2003-10-08 | Method and apparatus for real time motion capture |
Country Status (10)
Country | Link |
---|---|
US (3) | US9177387B2 (zh) |
EP (1) | EP1593096B1 (zh) |
JP (1) | JP4723863B2 (zh) |
KR (1) | KR100965348B1 (zh) |
CN (1) | CN100409261C (zh) |
AT (1) | ATE443903T1 (zh) |
AU (1) | AU2003279810B2 (zh) |
DE (1) | DE60329424D1 (zh) |
TW (1) | TWI274295B (zh) |
WO (1) | WO2004072909A1 (zh) |
Families Citing this family (245)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10360685B2 (en) * | 2007-05-24 | 2019-07-23 | Pillar Vision Corporation | Stereoscopic image capture with performance outcome prediction in sporting environments |
US8409024B2 (en) | 2001-09-12 | 2013-04-02 | Pillar Vision, Inc. | Trajectory detection and feedback system for golf |
US8617008B2 (en) | 2001-09-12 | 2013-12-31 | Pillar Vision, Inc. | Training devices for trajectory-based sports |
US6990639B2 (en) | 2002-02-07 | 2006-01-24 | Microsoft Corporation | System and process for controlling electronic components in a ubiquitous computing environment using multimodal integration |
US8947347B2 (en) | 2003-08-27 | 2015-02-03 | Sony Computer Entertainment Inc. | Controlling actions in a video game unit |
US8797260B2 (en) | 2002-07-27 | 2014-08-05 | Sony Computer Entertainment Inc. | Inertially trackable hand-held controller |
US7646372B2 (en) | 2003-09-15 | 2010-01-12 | Sony Computer Entertainment Inc. | Methods and systems for enabling direction detection when interfacing with a computer program |
US8686939B2 (en) | 2002-07-27 | 2014-04-01 | Sony Computer Entertainment Inc. | System, method, and apparatus for three-dimensional input control |
US9174119B2 (en) | 2002-07-27 | 2015-11-03 | Sony Computer Entertainement America, LLC | Controller for providing inputs to control execution of a program when inputs are combined |
US9393487B2 (en) | 2002-07-27 | 2016-07-19 | Sony Interactive Entertainment Inc. | Method for mapping movements of a hand-held controller to game commands |
US8233642B2 (en) | 2003-08-27 | 2012-07-31 | Sony Computer Entertainment Inc. | Methods and apparatuses for capturing an audio signal based on a location of the signal |
US7850526B2 (en) * | 2002-07-27 | 2010-12-14 | Sony Computer Entertainment America Inc. | System for tracking user manipulations within an environment |
US7803050B2 (en) * | 2002-07-27 | 2010-09-28 | Sony Computer Entertainment Inc. | Tracking device with sound emitter for use in obtaining information for controlling game program execution |
US8313380B2 (en) * | 2002-07-27 | 2012-11-20 | Sony Computer Entertainment America Llc | Scheme for translating movements of a hand-held controller into inputs for a system |
US8160269B2 (en) | 2003-08-27 | 2012-04-17 | Sony Computer Entertainment Inc. | Methods and apparatuses for adjusting a listening area for capturing sounds |
US8139793B2 (en) | 2003-08-27 | 2012-03-20 | Sony Computer Entertainment Inc. | Methods and apparatus for capturing audio signals based on a visual image |
US7918733B2 (en) * | 2002-07-27 | 2011-04-05 | Sony Computer Entertainment America Inc. | Multi-input game control mixer |
US7854655B2 (en) * | 2002-07-27 | 2010-12-21 | Sony Computer Entertainment America Inc. | Obtaining input for controlling execution of a game program |
US8570378B2 (en) | 2002-07-27 | 2013-10-29 | Sony Computer Entertainment Inc. | Method and apparatus for tracking three-dimensional movements of an object using a depth sensing camera |
US8745541B2 (en) | 2003-03-25 | 2014-06-03 | Microsoft Corporation | Architecture for controlling a computer using hand gestures |
US7665041B2 (en) * | 2003-03-25 | 2010-02-16 | Microsoft Corporation | Architecture for controlling a computer using hand gestures |
US7038661B2 (en) * | 2003-06-13 | 2006-05-02 | Microsoft Corporation | Pointing device and cursor for use in intelligent computing environments |
US20070223732A1 (en) * | 2003-08-27 | 2007-09-27 | Mao Xiao D | Methods and apparatuses for adjusting a visual image based on an audio signal |
US7874917B2 (en) * | 2003-09-15 | 2011-01-25 | Sony Computer Entertainment Inc. | Methods and systems for enabling depth and direction detection when interfacing with a computer program |
US7663689B2 (en) * | 2004-01-16 | 2010-02-16 | Sony Computer Entertainment Inc. | Method and apparatus for optimizing capture device settings through depth information |
US9826537B2 (en) | 2004-04-02 | 2017-11-21 | Rearden, Llc | System and method for managing inter-cluster handoff of clients which traverse multiple DIDO clusters |
US10277290B2 (en) | 2004-04-02 | 2019-04-30 | Rearden, Llc | Systems and methods to exploit areas of coherence in wireless systems |
US8542763B2 (en) | 2004-04-02 | 2013-09-24 | Rearden, Llc | Systems and methods to coordinate transmissions in distributed wireless systems via user clustering |
US8654815B1 (en) | 2004-04-02 | 2014-02-18 | Rearden, Llc | System and method for distributed antenna wireless communications |
US10425134B2 (en) | 2004-04-02 | 2019-09-24 | Rearden, Llc | System and methods for planned evolution and obsolescence of multiuser spectrum |
US9819403B2 (en) | 2004-04-02 | 2017-11-14 | Rearden, Llc | System and method for managing handoff of a client between different distributed-input-distributed-output (DIDO) networks based on detected velocity of the client |
US8681100B2 (en) | 2004-07-30 | 2014-03-25 | Extreme Realty Ltd. | Apparatus system and method for human-machine-interface |
KR101183000B1 (ko) | 2004-07-30 | 2012-09-18 | 익스트림 리얼리티 엘티디. | 이미지 프로세싱을 기반으로 한 3d 공간 차원용 시스템 및방법 |
US8872899B2 (en) * | 2004-07-30 | 2014-10-28 | Extreme Reality Ltd. | Method circuit and system for human to machine interfacing by hand gestures |
US8432390B2 (en) * | 2004-07-30 | 2013-04-30 | Extreme Reality Ltd | Apparatus system and method for human-machine interface |
US8560972B2 (en) * | 2004-08-10 | 2013-10-15 | Microsoft Corporation | Surface UI for gesture-based interaction |
US20060055706A1 (en) * | 2004-09-15 | 2006-03-16 | Perlman Stephen G | Apparatus and method for capturing the motion of a performer |
US7554549B2 (en) * | 2004-10-01 | 2009-06-30 | Sony Corporation | System and method for tracking facial muscle and eye motion for computer graphics animation |
US20060072009A1 (en) * | 2004-10-01 | 2006-04-06 | International Business Machines Corporation | Flexible interaction-based computer interfacing using visible artifacts |
US20060192852A1 (en) * | 2005-02-09 | 2006-08-31 | Sally Rosenthal | System, method, software arrangement and computer-accessible medium for providing audio and/or visual information |
GB2438783B8 (en) * | 2005-03-16 | 2011-12-28 | Lucasfilm Entertainment Co Ltd | Three-dimensional motion capture |
WO2006108279A1 (en) * | 2005-04-11 | 2006-10-19 | Martin Lizee | Method and apparatus for virtual presence |
US8698899B2 (en) * | 2005-04-15 | 2014-04-15 | The University Of Tokyo | Motion capture system and method for three-dimensional reconfiguring of characteristic point in motion capture system |
US20110256914A1 (en) * | 2005-07-25 | 2011-10-20 | Ahdoot Ned M | Interactive games with prediction and plan with assisted learning method |
US20070030343A1 (en) * | 2005-08-06 | 2007-02-08 | Rohde Mitchell M | Interactive, video-based content for theaters |
US8780119B2 (en) * | 2005-08-26 | 2014-07-15 | Sony Corporation | Reconstruction render farm used in motion capture |
US8054312B2 (en) * | 2005-08-26 | 2011-11-08 | Sony Corporation | Material for motion capture costumes and props |
US8659668B2 (en) | 2005-10-07 | 2014-02-25 | Rearden, Llc | Apparatus and method for performing motion capture using a random pattern on capture surfaces |
US20070285554A1 (en) | 2005-10-31 | 2007-12-13 | Dor Givon | Apparatus method and system for imaging |
US9046962B2 (en) | 2005-10-31 | 2015-06-02 | Extreme Reality Ltd. | Methods, systems, apparatuses, circuits and associated computer executable code for detecting motion, position and/or orientation of objects within a defined spatial region |
US8224025B2 (en) * | 2005-12-23 | 2012-07-17 | Sony Corporation | Group tracking in motion capture |
US7570250B2 (en) * | 2006-05-04 | 2009-08-04 | Yi-Ming Tseng | Control device including a ball that stores data |
US7667767B2 (en) * | 2006-06-07 | 2010-02-23 | Onlive, Inc. | System and method for three dimensional capture of stop-motion animated characters |
US7548272B2 (en) * | 2006-06-07 | 2009-06-16 | Onlive, Inc. | System and method for performing motion capture using phosphor application techniques |
CA2657309C (en) * | 2006-06-07 | 2018-07-10 | Onlive, Inc. | System and method for performing motion capture using phosphor application techniques |
US7567293B2 (en) * | 2006-06-07 | 2009-07-28 | Onlive, Inc. | System and method for performing motion capture by strobing a fluorescent lamp |
WO2008008847A2 (en) * | 2006-07-11 | 2008-01-17 | Sony Corporation | Using quantum nanodots in motion pictures or video games |
US8888592B1 (en) | 2009-06-01 | 2014-11-18 | Sony Computer Entertainment America Llc | Voice overlay |
US7907117B2 (en) * | 2006-08-08 | 2011-03-15 | Microsoft Corporation | Virtual controller for visual displays |
US7725547B2 (en) * | 2006-09-06 | 2010-05-25 | International Business Machines Corporation | Informing a user of gestures made by others out of the user's line of sight |
US8781151B2 (en) | 2006-09-28 | 2014-07-15 | Sony Computer Entertainment Inc. | Object detection using video input combined with tilt angle information |
USRE48417E1 (en) | 2006-09-28 | 2021-02-02 | Sony Interactive Entertainment Inc. | Object direction using video input combined with tilt angle information |
US8310656B2 (en) * | 2006-09-28 | 2012-11-13 | Sony Computer Entertainment America Llc | Mapping movements of a hand-held controller to the two-dimensional image plane of a display screen |
WO2008052331A1 (en) * | 2006-10-30 | 2008-05-08 | Jerry Moscovitch | System and method for producing and displaying images |
US8330823B2 (en) * | 2006-11-01 | 2012-12-11 | Sony Corporation | Capturing surface in motion picture |
US20080170750A1 (en) * | 2006-11-01 | 2008-07-17 | Demian Gordon | Segment tracking in motion picture |
GB0622451D0 (en) * | 2006-11-10 | 2006-12-20 | Intelligent Earth Ltd | Object position and orientation detection device |
US8542236B2 (en) * | 2007-01-16 | 2013-09-24 | Lucasfilm Entertainment Company Ltd. | Generating animation libraries |
US8199152B2 (en) | 2007-01-16 | 2012-06-12 | Lucasfilm Entertainment Company Ltd. | Combining multiple session content for animation libraries |
US8130225B2 (en) | 2007-01-16 | 2012-03-06 | Lucasfilm Entertainment Company Ltd. | Using animation libraries for object identification |
KR20090130003A (ko) * | 2007-03-02 | 2009-12-17 | 오가닉 모션 | 삼차원 물체를 트래킹하기 위한 시스템 및 방법 |
JP5147933B2 (ja) * | 2007-04-15 | 2013-02-20 | エクストリーム リアリティー エルティーディー. | 人−機械インターフェース装置システム及び方法 |
US8408982B2 (en) * | 2007-05-24 | 2013-04-02 | Pillar Vision, Inc. | Method and apparatus for video game simulations using motion capture |
TWI377055B (en) * | 2007-08-10 | 2012-11-21 | Ind Tech Res Inst | Interactive rehabilitation method and system for upper and lower extremities |
US20090062693A1 (en) * | 2007-08-29 | 2009-03-05 | Lancastria Limited | System for determining individual user anthropometric characteristics related to mattress preference |
AU2008299883B2 (en) | 2007-09-14 | 2012-03-15 | Facebook, Inc. | Processing of gesture-based user interactions |
US8159682B2 (en) | 2007-11-12 | 2012-04-17 | Intellectual Ventures Holding 67 Llc | Lens system |
US8144153B1 (en) | 2007-11-20 | 2012-03-27 | Lucasfilm Entertainment Company Ltd. | Model production for animation libraries |
US9782660B2 (en) * | 2007-11-30 | 2017-10-10 | Nike, Inc. | Athletic training system and method |
US8968087B1 (en) | 2009-06-01 | 2015-03-03 | Sony Computer Entertainment America Llc | Video game overlay |
US8613673B2 (en) | 2008-12-15 | 2013-12-24 | Sony Computer Entertainment America Llc | Intelligent game loading |
US8147339B1 (en) | 2007-12-15 | 2012-04-03 | Gaikai Inc. | Systems and methods of serving game video |
DE102007062843A1 (de) * | 2007-12-21 | 2009-06-25 | Amedo Smart Tracking Solutions Gmbh | Verfahren zur Bewegungserfassung |
US9035876B2 (en) | 2008-01-14 | 2015-05-19 | Apple Inc. | Three-dimensional user interface session control |
US8933876B2 (en) | 2010-12-13 | 2015-01-13 | Apple Inc. | Three dimensional user interface session control |
US8024316B2 (en) | 2008-01-30 | 2011-09-20 | Google Inc. | Providing content using stored query information |
US8259163B2 (en) | 2008-03-07 | 2012-09-04 | Intellectual Ventures Holding 67 Llc | Display with built in 3D sensing |
US8368753B2 (en) * | 2008-03-17 | 2013-02-05 | Sony Computer Entertainment America Llc | Controller with an integrated depth camera |
CN101618277A (zh) * | 2008-07-04 | 2010-01-06 | 英属维京群岛速位互动股份有限公司 | 可感测使用者身体影像的电子游戏操控装置及方法 |
GB2465538B (en) | 2008-08-01 | 2013-03-13 | Sony Corp | Method and apparatus for generating an event log |
EP2342642A1 (en) * | 2008-09-04 | 2011-07-13 | Extreme Reality Ltd. | Method system and software for providing image sensor based human machine interfacing |
JP5540002B2 (ja) | 2008-10-24 | 2014-07-02 | エクストリーム リアリティー エルティーディー. | 画像センサ式ヒューマンマシンインターフェイスを提供するための方法、システムと関連モジュール、およびソフトウエアコンポーネント |
US8926435B2 (en) | 2008-12-15 | 2015-01-06 | Sony Computer Entertainment America Llc | Dual-mode program execution |
US9142024B2 (en) | 2008-12-31 | 2015-09-22 | Lucasfilm Entertainment Company Ltd. | Visual and physical motion sensing for three-dimensional motion capture |
US20120202569A1 (en) * | 2009-01-13 | 2012-08-09 | Primesense Ltd. | Three-Dimensional User Interface for Game Applications |
US8682028B2 (en) * | 2009-01-30 | 2014-03-25 | Microsoft Corporation | Visual target tracking |
US8565476B2 (en) * | 2009-01-30 | 2013-10-22 | Microsoft Corporation | Visual target tracking |
US8577085B2 (en) * | 2009-01-30 | 2013-11-05 | Microsoft Corporation | Visual target tracking |
US8565477B2 (en) * | 2009-01-30 | 2013-10-22 | Microsoft Corporation | Visual target tracking |
US8294767B2 (en) * | 2009-01-30 | 2012-10-23 | Microsoft Corporation | Body scan |
US8267781B2 (en) * | 2009-01-30 | 2012-09-18 | Microsoft Corporation | Visual target tracking |
US8487938B2 (en) * | 2009-01-30 | 2013-07-16 | Microsoft Corporation | Standard Gestures |
US8295546B2 (en) | 2009-01-30 | 2012-10-23 | Microsoft Corporation | Pose tracking pipeline |
US8588465B2 (en) | 2009-01-30 | 2013-11-19 | Microsoft Corporation | Visual target tracking |
US8577084B2 (en) * | 2009-01-30 | 2013-11-05 | Microsoft Corporation | Visual target tracking |
US20100235786A1 (en) * | 2009-03-13 | 2010-09-16 | Primesense Ltd. | Enhanced 3d interfacing for remote devices |
US8988437B2 (en) * | 2009-03-20 | 2015-03-24 | Microsoft Technology Licensing, Llc | Chaining animations |
CN101533528B (zh) * | 2009-04-18 | 2014-11-26 | 大连大学 | 基于模块分段线性模型的光学运动捕捉数据处理方法 |
US9898675B2 (en) | 2009-05-01 | 2018-02-20 | Microsoft Technology Licensing, Llc | User movement tracking feedback to improve tracking |
US20100277470A1 (en) * | 2009-05-01 | 2010-11-04 | Microsoft Corporation | Systems And Methods For Applying Model Tracking To Motion Capture |
US9015638B2 (en) * | 2009-05-01 | 2015-04-21 | Microsoft Technology Licensing, Llc | Binding users to a gesture based system and providing feedback to the users |
US8181123B2 (en) * | 2009-05-01 | 2012-05-15 | Microsoft Corporation | Managing virtual port associations to users in a gesture-based computing environment |
US9377857B2 (en) * | 2009-05-01 | 2016-06-28 | Microsoft Technology Licensing, Llc | Show body position |
US8379101B2 (en) | 2009-05-29 | 2013-02-19 | Microsoft Corporation | Environment and/or target segmentation |
US8803889B2 (en) * | 2009-05-29 | 2014-08-12 | Microsoft Corporation | Systems and methods for applying animations or motions to a character |
US20100302365A1 (en) * | 2009-05-29 | 2010-12-02 | Microsoft Corporation | Depth Image Noise Reduction |
US20100306685A1 (en) * | 2009-05-29 | 2010-12-02 | Microsoft Corporation | User movement feedback via on-screen avatars |
US8320619B2 (en) * | 2009-05-29 | 2012-11-27 | Microsoft Corporation | Systems and methods for tracking a model |
US20100302253A1 (en) * | 2009-05-29 | 2010-12-02 | Microsoft Corporation | Real time retargeting of skeletal data to game avatar |
US8334872B2 (en) * | 2009-05-29 | 2012-12-18 | Two Pic Mc Llc | Inverse kinematics for motion-capture characters |
US8418085B2 (en) * | 2009-05-29 | 2013-04-09 | Microsoft Corporation | Gesture coach |
US8506402B2 (en) | 2009-06-01 | 2013-08-13 | Sony Computer Entertainment America Llc | Game execution environments |
US20100311512A1 (en) * | 2009-06-04 | 2010-12-09 | Timothy James Lock | Simulator with enhanced depth perception |
EP2480951A4 (en) | 2009-09-21 | 2014-04-30 | Extreme Reality Ltd | METHOD, CIRCUITS, DEVICES AND SYSTEMS FOR A HUMAN MACHINE INTERFACE WITH AN ELECTRONIC DEVICE |
US8878779B2 (en) | 2009-09-21 | 2014-11-04 | Extreme Reality Ltd. | Methods circuits device systems and associated computer executable code for facilitating interfacing with a computing platform display screen |
US8867820B2 (en) | 2009-10-07 | 2014-10-21 | Microsoft Corporation | Systems and methods for removing a background of an image |
US8564534B2 (en) | 2009-10-07 | 2013-10-22 | Microsoft Corporation | Human tracking system |
US8963829B2 (en) | 2009-10-07 | 2015-02-24 | Microsoft Corporation | Methods and systems for determining and tracking extremities of a target |
US7961910B2 (en) * | 2009-10-07 | 2011-06-14 | Microsoft Corporation | Systems and methods for tracking a model |
US20110164032A1 (en) * | 2010-01-07 | 2011-07-07 | Prime Sense Ltd. | Three-Dimensional User Interface |
US8284157B2 (en) | 2010-01-15 | 2012-10-09 | Microsoft Corporation | Directed performance in motion capture system |
US8334842B2 (en) * | 2010-01-15 | 2012-12-18 | Microsoft Corporation | Recognizing user intent in motion capture system |
JP5491217B2 (ja) * | 2010-01-27 | 2014-05-14 | 株式会社バンダイナムコゲームス | プログラム、情報記憶媒体、ゲームシステム |
US8659658B2 (en) * | 2010-02-09 | 2014-02-25 | Microsoft Corporation | Physical interaction zone for gesture-based user interfaces |
US8633890B2 (en) | 2010-02-16 | 2014-01-21 | Microsoft Corporation | Gesture detection based on joint skipping |
US9124651B2 (en) | 2010-03-30 | 2015-09-01 | Microsoft Technology Licensing, Llc | Controlling media consumption privacy settings |
US9098873B2 (en) * | 2010-04-01 | 2015-08-04 | Microsoft Technology Licensing, Llc | Motion-based interactive shopping environment |
US9646340B2 (en) | 2010-04-01 | 2017-05-09 | Microsoft Technology Licensing, Llc | Avatar-based virtual dressing room |
US11117033B2 (en) | 2010-04-26 | 2021-09-14 | Wilbert Quinc Murdock | Smart system for display of dynamic movement parameters in sports and training |
JP5148660B2 (ja) * | 2010-06-11 | 2013-02-20 | 株式会社バンダイナムコゲームス | プログラム、情報記憶媒体及び画像生成システム |
US8560331B1 (en) | 2010-08-02 | 2013-10-15 | Sony Computer Entertainment America Llc | Audio acceleration |
KR102126910B1 (ko) | 2010-09-13 | 2020-06-25 | 소니 인터랙티브 엔터테인먼트 아메리카 엘엘씨 | 부가기능의 관리 |
KR101956639B1 (ko) | 2010-09-13 | 2019-03-11 | 소니 인터랙티브 엔터테인먼트 아메리카 엘엘씨 | 비디오 서버 및 게임 서버를 포함하는 컴퓨터 게임 시스템에서 컴퓨터 게임을 제공하는 방법 및 시스템 |
CN101930628A (zh) * | 2010-09-21 | 2010-12-29 | 北京大学 | 基于单目摄像机和多平面镜折反射装置的运动捕捉方法 |
US9477302B2 (en) * | 2012-08-10 | 2016-10-25 | Google Inc. | System and method for programing devices within world space volumes |
US8872762B2 (en) | 2010-12-08 | 2014-10-28 | Primesense Ltd. | Three dimensional user interface cursor control |
US20120150650A1 (en) * | 2010-12-08 | 2012-06-14 | Microsoft Corporation | Automatic advertisement generation based on user expressed marketing terms |
US9171264B2 (en) | 2010-12-15 | 2015-10-27 | Microsoft Technology Licensing, Llc | Parallel processing machine learning decision tree training |
US8488888B2 (en) * | 2010-12-28 | 2013-07-16 | Microsoft Corporation | Classification of posture states |
KR101758058B1 (ko) | 2011-01-20 | 2017-07-17 | 삼성전자주식회사 | 깊이 정보를 이용한 카메라 모션 추정 방법 및 장치, 증강 현실 시스템 |
WO2012100080A2 (en) * | 2011-01-21 | 2012-07-26 | The Regents Of The University Of California | Systems for and methods of detecting and reproducing motions for video games |
CA2806520C (en) | 2011-01-23 | 2016-02-16 | Extreme Reality Ltd. | Methods, systems, devices and associated processing logic for generating stereoscopic images and video |
CN106943743B (zh) * | 2011-02-11 | 2024-04-26 | 漳州市阿思星谷电子科技有限公司 | 一种人机互动控制方法 |
US8761437B2 (en) * | 2011-02-18 | 2014-06-24 | Microsoft Corporation | Motion recognition |
US9533228B2 (en) | 2011-03-28 | 2017-01-03 | Brian M. Dugan | Systems and methods for fitness and video games |
US9610506B2 (en) | 2011-03-28 | 2017-04-04 | Brian M. Dugan | Systems and methods for fitness and video games |
KR101804848B1 (ko) | 2011-04-22 | 2017-12-06 | 삼성전자주식회사 | 비디오 객체 탐색 장치, 비디오 객체 변형 장치 및 그 방법 |
US8620113B2 (en) | 2011-04-25 | 2013-12-31 | Microsoft Corporation | Laser diode modes |
US10671841B2 (en) | 2011-05-02 | 2020-06-02 | Microsoft Technology Licensing, Llc | Attribute state classification |
US8760395B2 (en) | 2011-05-31 | 2014-06-24 | Microsoft Corporation | Gesture recognition techniques |
US8740702B2 (en) | 2011-05-31 | 2014-06-03 | Microsoft Corporation | Action trigger gesturing |
US8845431B2 (en) | 2011-05-31 | 2014-09-30 | Microsoft Corporation | Shape trace gesturing |
US8657683B2 (en) * | 2011-05-31 | 2014-02-25 | Microsoft Corporation | Action selection gesturing |
US9724600B2 (en) | 2011-06-06 | 2017-08-08 | Microsoft Technology Licensing, Llc | Controlling objects in a virtual environment |
US9377865B2 (en) | 2011-07-05 | 2016-06-28 | Apple Inc. | Zoom-based gesture user interface |
US9459758B2 (en) | 2011-07-05 | 2016-10-04 | Apple Inc. | Gesture-based interface with enhanced features |
US8881051B2 (en) | 2011-07-05 | 2014-11-04 | Primesense Ltd | Zoom-based gesture user interface |
US8948447B2 (en) * | 2011-07-12 | 2015-02-03 | Lucasfilm Entertainment Companyy, Ltd. | Scale independent tracking pattern |
US9030498B2 (en) | 2011-08-15 | 2015-05-12 | Apple Inc. | Combining explicit select gestures and timeclick in a non-tactile three dimensional user interface |
US9218063B2 (en) | 2011-08-24 | 2015-12-22 | Apple Inc. | Sessionless pointing user interface |
KR20130030117A (ko) * | 2011-09-16 | 2013-03-26 | 한국전자통신연구원 | 실시간 캐릭터 애니메이션에서의 발 미끄러짐 제거를 위한 캐릭터 영상 처리 장치 및 방법 |
EP2768607B1 (en) | 2011-09-26 | 2021-08-18 | Thermo Fisher Scientific GENEART GmbH | Multiwell plate for high efficiency, small volume nucleic acid synthesis |
US20130093751A1 (en) * | 2011-10-12 | 2013-04-18 | Microsoft Corporation | Gesture bank to improve skeletal tracking |
US9508176B2 (en) | 2011-11-18 | 2016-11-29 | Lucasfilm Entertainment Company Ltd. | Path and speed based character control |
US8635637B2 (en) | 2011-12-02 | 2014-01-21 | Microsoft Corporation | User interface presenting an animated avatar performing a media reaction |
US9100685B2 (en) | 2011-12-09 | 2015-08-04 | Microsoft Technology Licensing, Llc | Determining audience state or interest using passive sensor data |
US8811938B2 (en) | 2011-12-16 | 2014-08-19 | Microsoft Corporation | Providing a user interface experience based on inferred vehicle state |
US9229534B2 (en) | 2012-02-28 | 2016-01-05 | Apple Inc. | Asymmetric mapping for tactile and non-tactile user interfaces |
US8898687B2 (en) | 2012-04-04 | 2014-11-25 | Microsoft Corporation | Controlling a media program based on a media reaction |
CA2775700C (en) | 2012-05-04 | 2013-07-23 | Microsoft Corporation | Determining a future portion of a currently presented media program |
US9690465B2 (en) * | 2012-06-01 | 2017-06-27 | Microsoft Technology Licensing, Llc | Control of remote applications using companion device |
EP2711806B1 (en) * | 2012-07-13 | 2018-09-26 | Sony Interactive Entertainment Inc. | Input device, information processing system, information processing device and information processing method |
US20140018169A1 (en) * | 2012-07-16 | 2014-01-16 | Zhong Yuan Ran | Self as Avatar Gaming with Video Projecting Device |
JP2014068714A (ja) * | 2012-09-28 | 2014-04-21 | Kitasato Institute | 関節角度測定システム |
JP5620449B2 (ja) * | 2012-09-28 | 2014-11-05 | エクストリーム リアリティー エルティーディー. | 人−機械インターフェース装置システム及び方法 |
US11189917B2 (en) | 2014-04-16 | 2021-11-30 | Rearden, Llc | Systems and methods for distributing radioheads |
US10488535B2 (en) | 2013-03-12 | 2019-11-26 | Rearden, Llc | Apparatus and method for capturing still images and video using diffraction coded imaging techniques |
US9923657B2 (en) | 2013-03-12 | 2018-03-20 | Rearden, Llc | Systems and methods for exploiting inter-cell multiplexing gain in wireless cellular systems via distributed input distributed output technology |
US9973246B2 (en) | 2013-03-12 | 2018-05-15 | Rearden, Llc | Systems and methods for exploiting inter-cell multiplexing gain in wireless cellular systems via distributed input distributed output technology |
RU2767777C2 (ru) | 2013-03-15 | 2022-03-21 | Риарден, Ллк | Системы и способы радиочастотной калибровки с использованием принципа взаимности каналов в беспроводной связи с распределенным входом - распределенным выходом |
US8948457B2 (en) | 2013-04-03 | 2015-02-03 | Pillar Vision, Inc. | True space tracking of axisymmetric object flight using diameter measurement |
CN109521397B (zh) | 2013-06-13 | 2023-03-28 | 巴斯夫欧洲公司 | 用于光学地检测至少一个对象的检测器 |
US9063578B2 (en) * | 2013-07-31 | 2015-06-23 | Microsoft Technology Licensing, Llc | Ergonomic physical interaction zone cursor mapping |
JP2015088096A (ja) * | 2013-11-01 | 2015-05-07 | 株式会社ソニー・コンピュータエンタテインメント | 情報処理装置および情報処理方法 |
CN103777753A (zh) * | 2013-11-12 | 2014-05-07 | 广州新节奏智能科技有限公司 | 新型便携式肢体感应操控装置及其应用方法 |
JP2017504796A (ja) * | 2013-12-18 | 2017-02-09 | ビーエーエスエフ ソシエタス・ヨーロピアBasf Se | 対象物の光学的検出に使用するターゲットデバイス |
US9536138B2 (en) | 2014-06-27 | 2017-01-03 | Microsoft Technology Licensing, Llc | Dynamic remapping of components of a virtual skeleton |
CN106662636B (zh) | 2014-07-08 | 2020-12-25 | 巴斯夫欧洲公司 | 用于确定至少一个对象的位置的检测器 |
EP3230841B1 (en) | 2014-12-09 | 2019-07-03 | Basf Se | Optical detector |
JP6841769B2 (ja) | 2015-01-30 | 2021-03-10 | トリナミクス ゲゼルシャフト ミット ベシュレンクテル ハフツング | 少なくとも1個の物体を光学的に検出する検出器 |
US9690984B2 (en) * | 2015-04-14 | 2017-06-27 | Microsoft Technology Licensing, Llc | Two-dimensional infrared depth sensing |
US9836118B2 (en) | 2015-06-16 | 2017-12-05 | Wilson Steele | Method and system for analyzing a movement of a person |
US10955936B2 (en) | 2015-07-17 | 2021-03-23 | Trinamix Gmbh | Detector for optically detecting at least one object |
KR102539263B1 (ko) | 2015-09-14 | 2023-06-05 | 트리나미엑스 게엠베하 | 적어도 하나의 물체의 적어도 하나의 이미지를 기록하는 카메라 |
GB201520367D0 (en) * | 2015-11-19 | 2016-01-06 | Bespoke Vr Ltd | Editing interactive motion capture data for creating the interaction characteristics of non player characters |
US10403019B2 (en) * | 2015-12-16 | 2019-09-03 | Lucasfilm Entertainment Company | Multi-channel tracking pattern |
US10717001B2 (en) * | 2016-03-25 | 2020-07-21 | Zero Latency PTY LTD | System and method for saving tracked data in the game server for replay, review and training |
CN105872477B (zh) * | 2016-05-27 | 2018-11-23 | 北京旷视科技有限公司 | 视频监控方法和视频监控系统 |
FR3054358B1 (fr) * | 2016-07-25 | 2018-08-31 | Commissariat Energie Atomique | Procede et systeme de reconstruction de posture par suivi spatial du haut d'un corps et suivi du bas du corps au moyen d'un tapis de detection |
JP2019523562A (ja) | 2016-07-29 | 2019-08-22 | トリナミクス ゲゼルシャフト ミット ベシュレンクテル ハフツング | 光学的検出のための光センサおよび検出器 |
US10751609B2 (en) | 2016-08-12 | 2020-08-25 | Zero Latency PTY LTD | Mapping arena movements into a 3-D virtual world |
KR102575104B1 (ko) | 2016-10-25 | 2023-09-07 | 트리나미엑스 게엠베하 | 집적 필터를 가진 적외선 광학 검출기 |
JP7241684B2 (ja) | 2016-10-25 | 2023-03-17 | トリナミクス ゲゼルシャフト ミット ベシュレンクテル ハフツング | 少なくとも1個の対象物の光学的な検出のための検出器 |
US11415661B2 (en) | 2016-11-17 | 2022-08-16 | Trinamix Gmbh | Detector for optically detecting at least one object |
US11860292B2 (en) | 2016-11-17 | 2024-01-02 | Trinamix Gmbh | Detector and methods for authenticating at least one object |
CN106710351A (zh) * | 2016-12-28 | 2017-05-24 | 新支点数字科技(宜昌)有限公司 | 虚拟实境警务培训装置及方法 |
US11060922B2 (en) | 2017-04-20 | 2021-07-13 | Trinamix Gmbh | Optical detector |
JP7237024B2 (ja) | 2017-06-26 | 2023-03-10 | トリナミクス ゲゼルシャフト ミット ベシュレンクテル ハフツング | 少なくとも1つの物体の位置を決定するための検出器 |
US11660521B2 (en) | 2018-01-21 | 2023-05-30 | Stats Llc | Method and system for interactive, interpretable, and improved match and player performance predictions in team sports |
EP3740841A4 (en) | 2018-01-21 | 2021-10-20 | Stats Llc | SYSTEM AND METHOD FOR MOVEMENT PREDICTION OF MULTIPLE FINE GRANULARITY ADVERSARY AGENTS |
US11521326B2 (en) | 2018-05-23 | 2022-12-06 | Prove Labs, Inc. | Systems and methods for monitoring and evaluating body movement |
US11054638B2 (en) | 2018-06-13 | 2021-07-06 | Reavire, Inc. | Tracking pointing direction of device |
GB201813450D0 (en) * | 2018-08-17 | 2018-10-03 | Hiltermann Sean | Augmented reality doll |
CN110941977A (zh) * | 2018-09-25 | 2020-03-31 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN110942479B (zh) * | 2018-09-25 | 2023-06-02 | Oppo广东移动通信有限公司 | 虚拟对象控制方法、存储介质及电子设备 |
CN109407840A (zh) * | 2018-10-18 | 2019-03-01 | 看见故事(苏州)影视文化发展有限公司 | 一种动作捕捉技术的视角转换方法 |
TWI715903B (zh) * | 2018-12-24 | 2021-01-11 | 財團法人工業技術研究院 | 動作追蹤系統及方法 |
JP2022501732A (ja) * | 2019-01-18 | 2022-01-06 | 北京市商▲湯▼科技▲開▼▲發▼有限公司Beijing Sensetime Technology Development Co., Ltd. | 画像処理方法及び装置、画像デバイス並びに記憶媒体 |
KR20200089826A (ko) | 2019-01-18 | 2020-07-28 | (주)모션테크놀로지 | 모션 캡쳐 데이터 정밀도 향상을 위한 시스템 및 방법 |
CN111460870A (zh) | 2019-01-18 | 2020-07-28 | 北京市商汤科技开发有限公司 | 目标的朝向确定方法及装置、电子设备及存储介质 |
CN113544697A (zh) | 2019-03-01 | 2021-10-22 | 斯塔特斯公司 | 用数据和身体姿态分析运动表现以对表现进行个性化预测 |
US11238604B1 (en) * | 2019-03-05 | 2022-02-01 | Apple Inc. | Densifying sparse depth maps |
US11287505B2 (en) | 2019-05-13 | 2022-03-29 | Cast Group Of Companies Inc. | Electronic tracking device and related system |
JP7285703B2 (ja) * | 2019-06-17 | 2023-06-02 | 株式会社ソニー・インタラクティブエンタテインメント | ロボット制御システム |
US11599257B2 (en) * | 2019-11-12 | 2023-03-07 | Cast Group Of Companies Inc. | Electronic tracking device and charging apparatus |
US20230012053A1 (en) * | 2019-12-24 | 2023-01-12 | Sony Group Corporation | Information processing device and information processing method |
CN111260967A (zh) * | 2020-02-25 | 2020-06-09 | 湖南科技学院 | 一种基于图像处理的武术教学用姿势纠正系统 |
US11011071B1 (en) | 2020-03-30 | 2021-05-18 | Mobilizar Technologies Pvt Ltd | Interactive learning system and a method |
US11935298B2 (en) | 2020-06-05 | 2024-03-19 | Stats Llc | System and method for predicting formation in sports |
US11232595B1 (en) | 2020-09-08 | 2022-01-25 | Weta Digital Limited | Three-dimensional assembly for motion capture calibration |
US11282233B1 (en) * | 2020-09-08 | 2022-03-22 | Weta Digital Limited | Motion capture calibration |
CN111968207B (zh) * | 2020-09-25 | 2021-10-29 | 魔珐(上海)信息科技有限公司 | 动画生成方法、装置、系统及存储介质 |
CN116324668A (zh) * | 2020-10-01 | 2023-06-23 | 斯塔特斯公司 | 从非职业跟踪数据预测nba天赋和质量 |
WO2022251671A1 (en) * | 2021-05-27 | 2022-12-01 | Ai Thinktank Llc | 3d avatar generation and robotic limbs using biomechanical analysis |
US11615648B2 (en) | 2021-05-28 | 2023-03-28 | Sportsbox.ai Inc. | Practice drill-related features using quantitative, biomechanical-based analysis |
Family Cites Families (325)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US195104A (en) * | 1877-09-11 | Improvement in fire-place stoves | ||
US3943277A (en) * | 1969-02-20 | 1976-03-09 | The United States Of America As Represented By The Secretary Of The Navy | Digital memory area correlation tracker |
US4313227A (en) * | 1979-01-29 | 1982-01-26 | Texas Instruments Incorporated | Light energy information transmission system |
US4263504A (en) * | 1979-08-01 | 1981-04-21 | Ncr Corporation | High density matrix code |
US6772057B2 (en) | 1995-06-07 | 2004-08-03 | Automotive Technologies International, Inc. | Vehicular monitoring systems using image processing |
US4565999A (en) * | 1983-04-01 | 1986-01-21 | Prime Computer, Inc. | Light pencil |
US4558864A (en) | 1984-06-13 | 1985-12-17 | Medwedeff Marion C | Handgrip exercising, computer game controller |
US5195179A (en) * | 1986-01-29 | 1993-03-16 | Hitachi, Ltd. | Coordinate input apparatus |
US4843568A (en) | 1986-04-11 | 1989-06-27 | Krueger Myron W | Real time perception of and response to the actions of an unencumbered participant/user |
US4787051A (en) | 1986-05-16 | 1988-11-22 | Tektronix, Inc. | Inertial mouse system |
JPS6347616A (ja) * | 1986-08-15 | 1988-02-29 | Ricoh Co Ltd | 移動量測定方法 |
AU1547488A (en) | 1987-02-04 | 1988-08-24 | Mayo Foundation For Medical Education And Research | Joystick apparatus having six degrees freedom of motion |
US4802227A (en) * | 1987-04-03 | 1989-01-31 | American Telephone And Telegraph Company | Noise reduction processing arrangement for microphone arrays |
GB2206716A (en) | 1987-07-06 | 1989-01-11 | Gen Electric Plc | Apparatus for monitoring the presence or movement of an object |
US4963858A (en) | 1987-09-08 | 1990-10-16 | Chien Fong K | Changeable input ratio mouse |
IT1219405B (it) | 1988-06-27 | 1990-05-11 | Fiat Ricerche | Procedimento e dispositivo per la visione strumentale in condizioni di scarsa visibilita in particolare per la guida nella nebbia |
JPH05501020A (ja) | 1988-12-20 | 1993-02-25 | ミート リサーチ コーポレーション | 光学的に読取り可能なコード化された物標 |
US5034986A (en) | 1989-03-01 | 1991-07-23 | Siemens Aktiengesellschaft | Method for detecting and tracking moving objects in a digital image sequence having a stationary background |
US5055840A (en) | 1990-01-16 | 1991-10-08 | Carroll Touch Incorporated | Infrared touch input device and light emitted activation circuit |
US5128671A (en) | 1990-04-12 | 1992-07-07 | Ltv Aerospace And Defense Company | Control device having multiple degrees of freedom |
WO1991017522A1 (en) | 1990-05-01 | 1991-11-14 | Wang Laboratories, Inc. | Hands-free hardware keyboard |
US5662111A (en) * | 1991-01-28 | 1997-09-02 | Cosman; Eric R. | Process of stereotactic optical navigation |
US5485273A (en) * | 1991-04-22 | 1996-01-16 | Litton Systems, Inc. | Ring laser gyroscope enhanced resolution system |
US5534917A (en) | 1991-05-09 | 1996-07-09 | Very Vivid, Inc. | Video image based control system |
US5144594A (en) | 1991-05-29 | 1992-09-01 | Cyber Scientific | Acoustic mouse system |
US5455685A (en) | 1991-09-04 | 1995-10-03 | Fuji Photo Film Co., Ltd. | Video camera exposure control apparatus for controlling iris diaphragm and automatic gain control operating speed |
US5889670A (en) * | 1991-10-24 | 1999-03-30 | Immersion Corporation | Method and apparatus for tactilely responsive user interface |
US5444462A (en) | 1991-12-16 | 1995-08-22 | Wambach; Mark L. | Computer mouse glove with remote communication |
US5453758A (en) | 1992-07-31 | 1995-09-26 | Sony Corporation | Input apparatus |
US5790834A (en) | 1992-08-31 | 1998-08-04 | Intel Corporation | Apparatus and method using an ID instruction to identify a computer microprocessor |
JP3244798B2 (ja) | 1992-09-08 | 2002-01-07 | 株式会社東芝 | 動画像処理装置 |
US5982352A (en) * | 1992-09-18 | 1999-11-09 | Pryor; Timothy R. | Method for providing human input to a computer |
US7098891B1 (en) | 1992-09-18 | 2006-08-29 | Pryor Timothy R | Method for providing human input to a computer |
US5394168A (en) * | 1993-01-06 | 1995-02-28 | Smith Engineering | Dual-mode hand-held game controller |
US5335011A (en) | 1993-01-12 | 1994-08-02 | Bell Communications Research, Inc. | Sound localization system for teleconferencing using self-steering microphone arrays |
EP0613294B1 (en) | 1993-02-24 | 1998-10-28 | Matsushita Electric Industrial Co., Ltd. | Gradation correction device and image sensing device therewith |
US5435554A (en) | 1993-03-08 | 1995-07-25 | Atari Games Corporation | Baseball simulation system |
JP3679426B2 (ja) | 1993-03-15 | 2005-08-03 | マサチューセッツ・インスティチュート・オブ・テクノロジー | 画像データを符号化して夫々がコヒーレントな動きの領域を表わす複数の層とそれら層に付随する動きパラメータとにするシステム |
US5677710A (en) | 1993-05-10 | 1997-10-14 | Apple Computer, Inc. | Recognition keypad |
US5297061A (en) * | 1993-05-19 | 1994-03-22 | University Of Maryland | Three dimensional pointing device monitored by computer vision |
US5959596A (en) | 1993-06-24 | 1999-09-28 | Nintendo Co., Ltd. | Airline-based video game and communications system |
US5473701A (en) | 1993-11-05 | 1995-12-05 | At&T Corp. | Adaptive microphone array |
JP2552427B2 (ja) * | 1993-12-28 | 1996-11-13 | コナミ株式会社 | テレビ遊戯システム |
FR2714502A1 (fr) | 1993-12-29 | 1995-06-30 | Philips Laboratoire Electroniq | Procédé et dispositif de traitement d'image pour construire à partir d'une image source une image cible avec changement de perspective. |
US5611000A (en) * | 1994-02-22 | 1997-03-11 | Digital Equipment Corporation | Spline-based image registration |
JPH086708A (ja) * | 1994-04-22 | 1996-01-12 | Canon Inc | 表示装置 |
US5543818A (en) | 1994-05-13 | 1996-08-06 | Sony Corporation | Method and apparatus for entering text using an input device having a small number of keys |
US5846086A (en) | 1994-07-01 | 1998-12-08 | Massachusetts Institute Of Technology | System for human trajectory learning in virtual environments |
US5528265A (en) | 1994-07-18 | 1996-06-18 | Harrison; Simon J. | Orientation-operated cursor control device |
US5563988A (en) | 1994-08-01 | 1996-10-08 | Massachusetts Institute Of Technology | Method and system for facilitating wireless, full-body, real-time user interaction with a digitally represented visual environment |
SE504846C2 (sv) | 1994-09-28 | 1997-05-12 | Jan G Faeger | Styrutrustning med ett rörligt styrorgan |
JP3270643B2 (ja) | 1994-12-22 | 2002-04-02 | キヤノン株式会社 | 指示位置検出方法及び装置 |
US5929444A (en) | 1995-01-31 | 1999-07-27 | Hewlett-Packard Company | Aiming device using radiated energy |
US5568928A (en) | 1995-02-01 | 1996-10-29 | Exertron, Inc. | Video game controller for use with an exercise apparatus |
US5638228A (en) | 1995-02-14 | 1997-06-10 | Iomega Corporation | Retroreflective marker for data storage cartridge |
US5930741A (en) | 1995-02-28 | 1999-07-27 | Virtual Technologies, Inc. | Accurate, rapid, reliable position sensing using multiple sensing technologies |
US5583478A (en) | 1995-03-01 | 1996-12-10 | Renzi; Ronald | Virtual environment tactile system |
US5900863A (en) * | 1995-03-16 | 1999-05-04 | Kabushiki Kaisha Toshiba | Method and apparatus for controlling computer without touching input device |
US5704836A (en) * | 1995-03-23 | 1998-01-06 | Perception Systems, Inc. | Motion-based command generation technology |
EP0823683B1 (en) | 1995-04-28 | 2005-07-06 | Matsushita Electric Industrial Co., Ltd. | Interface device |
US5706364A (en) * | 1995-04-28 | 1998-01-06 | Xerox Corporation | Method of producing character templates using unsegmented samples |
US5913727A (en) | 1995-06-02 | 1999-06-22 | Ahdoot; Ned | Interactive movement and contact simulation game |
US5649021A (en) | 1995-06-07 | 1997-07-15 | David Sarnoff Research Center, Inc. | Method and system for object detection for instrument control |
IL114278A (en) | 1995-06-22 | 2010-06-16 | Microsoft Internat Holdings B | Camera and method |
JPH11508359A (ja) * | 1995-06-22 | 1999-07-21 | 3ディブイ・システムズ・リミテッド | 改善された光学測距カメラ |
WO1997005541A1 (en) | 1995-07-26 | 1997-02-13 | King Martin T | Reduced keyboard disambiguating system |
US6311214B1 (en) * | 1995-07-27 | 2001-10-30 | Digimarc Corporation | Linking of computers based on optical sensing of digital data |
US5768415A (en) | 1995-09-08 | 1998-06-16 | Lucent Technologies Inc. | Apparatus and methods for performing electronic scene analysis and enhancement |
US5611731A (en) * | 1995-09-08 | 1997-03-18 | Thrustmaster, Inc. | Video pinball machine controller having an optical accelerometer for detecting slide and tilt |
US5850222A (en) | 1995-09-13 | 1998-12-15 | Pixel Dust, Inc. | Method and system for displaying a graphic image of a person modeling a garment |
US5818424A (en) | 1995-10-19 | 1998-10-06 | International Business Machines Corporation | Rod shaped device and data acquisition apparatus for determining the position and orientation of an object in space |
US5963250A (en) | 1995-10-20 | 1999-10-05 | Parkervision, Inc. | System and method for controlling the field of view of a camera |
US6281930B1 (en) | 1995-10-20 | 2001-08-28 | Parkervision, Inc. | System and method for controlling the field of view of a camera |
US5719561A (en) | 1995-10-25 | 1998-02-17 | Gilbert R. Gonzales | Tactile communication device and method |
US6430997B1 (en) * | 1995-11-06 | 2002-08-13 | Trazer Technologies, Inc. | System and method for tracking and assessing movement skills in multidimensional space |
US5870100A (en) * | 1995-11-22 | 1999-02-09 | Compaq Computer Corporation | Filling of graphical regions |
EP0864145A4 (en) | 1995-11-30 | 1998-12-16 | Virtual Technologies Inc | TACTILE FEEDBACK FOR HUMAN / MACHINE INTERFACE |
JP3014313B2 (ja) | 1995-12-25 | 2000-02-28 | 富士通テン株式会社 | エアバッグの衝突判別装置 |
JP4079463B2 (ja) * | 1996-01-26 | 2008-04-23 | ソニー株式会社 | 被写体検出装置および被写体検出方法 |
US6049619A (en) * | 1996-02-12 | 2000-04-11 | Sarnoff Corporation | Method and apparatus for detecting moving objects in two- and three-dimensional scenes |
JP2891159B2 (ja) | 1996-02-14 | 1999-05-17 | 日本電気株式会社 | 多眼画像からの物体検出方式 |
RU2069885C1 (ru) | 1996-03-01 | 1996-11-27 | Йелстаун Корпорейшн Н.В. | Способ наблюдения объектов при пониженной освещенности и устройство для его осуществления |
JPH09244793A (ja) * | 1996-03-04 | 1997-09-19 | Alps Electric Co Ltd | 入力装置 |
ES2231754T3 (es) | 1996-03-05 | 2005-05-16 | Sega Enterprises, Ltd. | Controlador y unidad de expansion para el contralor. |
WO1997039416A2 (en) * | 1996-04-02 | 1997-10-23 | Cognex Corporation | Image formation apparatus for viewing indicia on a planar specular substrate |
US5937081A (en) | 1996-04-10 | 1999-08-10 | O'brill; Michael R. | Image composition system and method of using same |
US5923318A (en) | 1996-04-12 | 1999-07-13 | Zhai; Shumin | Finger manipulatable 6 degree-of-freedom input device |
US5917493A (en) | 1996-04-17 | 1999-06-29 | Hewlett-Packard Company | Method and apparatus for randomly generating information for subsequent correlating |
US6151009A (en) | 1996-08-21 | 2000-11-21 | Carnegie Mellon University | Method and apparatus for merging real and synthetic images |
US6400374B2 (en) | 1996-09-18 | 2002-06-04 | Eyematic Interfaces, Inc. | Video superposition system and method |
US5930383A (en) | 1996-09-24 | 1999-07-27 | Netzer; Yishay | Depth sensing camera systems and methods |
US5832931A (en) * | 1996-10-30 | 1998-11-10 | Photogen, Inc. | Method for improved selectivity in photo-activation and detection of molecular diagnostic agents |
NL1004648C2 (nl) * | 1996-11-11 | 1998-05-14 | Johan Michiel Schaaij | Computerspelsysteem. |
US5914723A (en) | 1996-12-30 | 1999-06-22 | Sun Microsystems, Inc. | Method and system for converting images in computer systems |
US6243491B1 (en) | 1996-12-31 | 2001-06-05 | Lucent Technologies Inc. | Methods and apparatus for controlling a video system with visually recognized props |
US5850473A (en) | 1997-01-07 | 1998-12-15 | Lucent Technologies Inc. | Method and apparatus for compensating for color variation in a video system |
US6021219A (en) * | 1997-01-07 | 2000-02-01 | Lucent Technologies Inc. | Methods and apparatus for distinguishing among several visual patterns |
US5796354A (en) | 1997-02-07 | 1998-08-18 | Reality Quest Corp. | Hand-attachable controller with direction sensing |
US5993314A (en) | 1997-02-10 | 1999-11-30 | Stadium Games, Ltd. | Method and apparatus for interactive audience participation by audio command |
US6009210A (en) | 1997-03-05 | 1999-12-28 | Digital Equipment Corporation | Hands-free interface to a virtual reality environment using head tracking |
JP2001515646A (ja) | 1997-03-07 | 2001-09-18 | スリーディーヴィー システムズ リミテッド | 光学式シャッタ |
US6061055A (en) | 1997-03-21 | 2000-05-09 | Autodesk, Inc. | Method of tracking objects with an imaging device |
US6144367A (en) | 1997-03-26 | 2000-11-07 | International Business Machines Corporation | Method and system for simultaneous operation of multiple handheld control devices in a data processing system |
US6088042A (en) * | 1997-03-31 | 2000-07-11 | Katrix, Inc. | Interactive motion data animation system |
US6587573B1 (en) | 2000-03-20 | 2003-07-01 | Gentex Corporation | System for controlling exterior vehicle lights |
US8120652B2 (en) * | 1997-04-02 | 2012-02-21 | Gentex Corporation | System for controlling vehicle equipment |
US6215898B1 (en) * | 1997-04-15 | 2001-04-10 | Interval Research Corporation | Data processing system and method |
KR100526740B1 (ko) | 1997-04-23 | 2005-11-08 | 톰슨 콘슈머 일렉트로닉스, 인코포레이티드 | 디스플레이될 정보의 영역 및 내용물에 의한 비디오 레벨 제어 시스템 및 방법 |
US6809776B1 (en) | 1997-04-23 | 2004-10-26 | Thomson Licensing S.A. | Control of video level by region and content of information displayed |
US6428411B1 (en) * | 1997-05-02 | 2002-08-06 | Konami Co., Ltd. | Volleyball video game system |
JPH10334270A (ja) * | 1997-05-28 | 1998-12-18 | Mitsubishi Electric Corp | 動作認識装置及び動作認識プログラムを記録した記録媒体 |
US6075895A (en) * | 1997-06-20 | 2000-06-13 | Holoplex | Methods and apparatus for gesture recognition based on templates |
EP0928460B1 (en) | 1997-07-29 | 2003-01-29 | Philips Electronics N.V. | Method of reconstruction of tridimensional scenes and corresponding reconstruction device and decoding system |
US6044181A (en) * | 1997-08-01 | 2000-03-28 | Microsoft Corporation | Focal length estimation method and apparatus for construction of panoramic mosaic images |
US6720949B1 (en) | 1997-08-22 | 2004-04-13 | Timothy R. Pryor | Man machine interfaces and applications |
US20020036617A1 (en) * | 1998-08-21 | 2002-03-28 | Timothy R. Pryor | Novel man machine interfaces and applications |
US6297838B1 (en) | 1997-08-29 | 2001-10-02 | Xerox Corporation | Spinning as a morpheme for a physical manipulatory grammar |
US6243074B1 (en) | 1997-08-29 | 2001-06-05 | Xerox Corporation | Handedness detection for a physical manipulatory grammar |
WO1999019828A1 (en) | 1997-10-15 | 1999-04-22 | Electric Planet, Inc. | Method and apparatus for performing a clean background subtraction |
US6072494A (en) | 1997-10-15 | 2000-06-06 | Electric Planet, Inc. | Method and apparatus for real-time gesture recognition |
US6101289A (en) | 1997-10-15 | 2000-08-08 | Electric Planet, Inc. | Method and apparatus for unencumbered capture of an object |
US6031934A (en) * | 1997-10-15 | 2000-02-29 | Electric Planet, Inc. | Computer vision system for subject characterization |
JP3812092B2 (ja) * | 1997-10-27 | 2006-08-23 | ソニー株式会社 | 姿勢検出装置及び方法 |
WO1999026198A2 (en) | 1997-11-14 | 1999-05-27 | National University Of Singapore | System and method for merging objects into an image sequence without prior knowledge of the scene in the image sequence |
JPH11154240A (ja) * | 1997-11-20 | 1999-06-08 | Nintendo Co Ltd | 取込み画像を用いて画像を作成するための画像作成装置 |
US6677987B1 (en) * | 1997-12-03 | 2004-01-13 | 8×8, Inc. | Wireless user-interface arrangement and method |
US6195104B1 (en) * | 1997-12-23 | 2001-02-27 | Philips Electronics North America Corp. | System and method for permitting three-dimensional navigation through a virtual reality environment using camera-based gesture inputs |
US6160540A (en) | 1998-01-12 | 2000-12-12 | Xerox Company | Zoomorphic computer user interface |
US6134346A (en) | 1998-01-16 | 2000-10-17 | Ultimatte Corp | Method for removing from an image the background surrounding a selected object |
WO1999040478A1 (en) | 1998-02-08 | 1999-08-12 | 3Dv Systems Ltd. | Large aperture optical image shutter |
US6115052A (en) * | 1998-02-12 | 2000-09-05 | Mitsubishi Electric Information Technology Center America, Inc. (Ita) | System for reconstructing the 3-dimensional motions of a human figure from a monocularly-viewed image sequence |
US6037942A (en) * | 1998-03-10 | 2000-03-14 | Magellan Dis, Inc. | Navigation system character input device |
JPH11265249A (ja) | 1998-03-17 | 1999-09-28 | Toshiba Corp | 情報入力装置および情報入力方法および記録媒体 |
US6411392B1 (en) | 1998-04-15 | 2002-06-25 | Massachusetts Institute Of Technology | Method and apparatus for data hiding in printed images |
US6393142B1 (en) | 1998-04-22 | 2002-05-21 | At&T Corp. | Method and apparatus for adaptive stripe based patch matching for depth estimation |
US6173059B1 (en) * | 1998-04-24 | 2001-01-09 | Gentner Communications Corporation | Teleconferencing system with visual feedback |
JP2000033184A (ja) * | 1998-05-14 | 2000-02-02 | Masanobu Kujirada | 全身動作入力型のゲ―ム及びイベント装置 |
US6593956B1 (en) | 1998-05-15 | 2003-07-15 | Polycom, Inc. | Locating an audio source |
US6473516B1 (en) | 1998-05-22 | 2002-10-29 | Asa Systems, Inc. | Large capacity steganography |
JP3646969B2 (ja) | 1998-05-25 | 2005-05-11 | 富士通株式会社 | 3次元画像表示装置 |
JP3841132B2 (ja) | 1998-06-01 | 2006-11-01 | 株式会社ソニー・コンピュータエンタテインメント | 入力位置検出装置及びエンタテインメントシステム |
US6513160B2 (en) * | 1998-06-17 | 2003-01-28 | Opentv, Inc. | System and method for promoting viewer interaction in a television system |
FR2780176B1 (fr) | 1998-06-17 | 2001-01-26 | Gabriel Guary | Pistolet de tir pour jeu video |
IL125221A0 (en) * | 1998-07-06 | 1999-03-12 | Toy Control Ltd | Motion activation using passive sound source |
US6198485B1 (en) * | 1998-07-29 | 2001-03-06 | Intel Corporation | Method and apparatus for three-dimensional input entry |
US6801637B2 (en) * | 1999-08-10 | 2004-10-05 | Cybernet Systems Corporation | Optical body tracker |
US6681031B2 (en) * | 1998-08-10 | 2004-01-20 | Cybernet Systems Corporation | Gesture-controlled interfaces for self-service machines and other applications |
US6256398B1 (en) | 1998-08-22 | 2001-07-03 | Kenneth H. P. Chang | Encoding and decoding a message within an image |
US6970183B1 (en) | 2000-06-14 | 2005-11-29 | E-Watch, Inc. | Multimedia surveillance and monitoring system including network configuration |
US6621938B1 (en) | 1998-09-18 | 2003-09-16 | Fuji Photo Film Co., Ltd. | Image capture apparatus and method |
US6184863B1 (en) * | 1998-10-13 | 2001-02-06 | The George Washington University | Direct pointing apparatus and method therefor |
DE19849515C1 (de) | 1998-10-19 | 2000-12-28 | Gerhard Wergen | Verfahren zur Übergabe von Zeichen insbesondere an einen Computer und Eingabevorrichtung unter Einsatz dieses Verfahrens |
US6307568B1 (en) | 1998-10-28 | 2001-10-23 | Imaginarix Ltd. | Virtual dressing over the internet |
US6712703B2 (en) * | 1998-11-19 | 2004-03-30 | Nintendo Co., Ltd. | Video game apparatus and information storage medium for video game |
JP2000172431A (ja) | 1998-12-09 | 2000-06-23 | Sony Corp | 情報入力装置及びゲーム装置 |
JP2000200088A (ja) * | 1998-12-29 | 2000-07-18 | Nagase & Co Ltd | カラオケ装置 |
US6533420B1 (en) * | 1999-01-22 | 2003-03-18 | Dimension Technologies, Inc. | Apparatus and method for generating and projecting autostereoscopic images |
US7139767B1 (en) * | 1999-03-05 | 2006-11-21 | Canon Kabushiki Kaisha | Image processing apparatus and database |
JP2000261752A (ja) | 1999-03-05 | 2000-09-22 | Hewlett Packard Co <Hp> | 音声付き画像録画再生装置 |
US6323942B1 (en) | 1999-04-30 | 2001-11-27 | Canesta, Inc. | CMOS-compatible three-dimensional image sensor IC |
JP2000315259A (ja) * | 1999-05-06 | 2000-11-14 | Sharp Corp | データベース作成装置及びデータベース作成プログラムを記録した記録媒体 |
US7164413B2 (en) * | 1999-05-19 | 2007-01-16 | Digimarc Corporation | Enhanced input peripheral |
US6791531B1 (en) | 1999-06-07 | 2004-09-14 | Dot On, Inc. | Device and method for cursor motion control calibration and object selection |
JP2000350865A (ja) | 1999-06-11 | 2000-12-19 | Mr System Kenkyusho:Kk | 複合現実空間のゲーム装置、その画像処理方法およびプログラム記憶媒体 |
US6952198B2 (en) | 1999-07-06 | 2005-10-04 | Hansen Karl C | System and method for communication with enhanced optical pointer |
US6819318B1 (en) | 1999-07-23 | 2004-11-16 | Z. Jason Geng | Method and apparatus for modeling via a three-dimensional image mosaic system |
US6545706B1 (en) * | 1999-07-30 | 2003-04-08 | Electric Planet, Inc. | System, method and article of manufacture for tracking a head of a camera-generated image of a person |
US6417836B1 (en) | 1999-08-02 | 2002-07-09 | Lucent Technologies Inc. | Computer input device having six degrees of freedom for controlling movement of a three-dimensional object |
JP2001056742A (ja) | 1999-08-19 | 2001-02-27 | Alps Electric Co Ltd | 入力装置 |
US6556704B1 (en) * | 1999-08-25 | 2003-04-29 | Eastman Kodak Company | Method for forming a depth image from digital image data |
US7224384B1 (en) | 1999-09-08 | 2007-05-29 | 3Dv Systems Ltd. | 3D imaging system |
EP1220547A4 (en) | 1999-09-17 | 2005-09-21 | Nature Technology Co Ltd | IMAGE ENTRY SYSTEM, IMAGE PROCESSOR AND CAMERA THEREFOR |
US6375572B1 (en) * | 1999-10-04 | 2002-04-23 | Nintendo Co., Ltd. | Portable game apparatus with acceleration sensor and information storage medium storing a game progam |
JP3847058B2 (ja) | 1999-10-04 | 2006-11-15 | 任天堂株式会社 | ゲームシステム及びそれに用いられるゲーム情報記憶媒体 |
US6441825B1 (en) | 1999-10-04 | 2002-08-27 | Intel Corporation | Video token tracking system for animation |
US6753849B1 (en) | 1999-10-27 | 2004-06-22 | Ken Curran & Associates | Universal remote TV mouse |
US6519359B1 (en) * | 1999-10-28 | 2003-02-11 | General Electric Company | Range camera controller for acquiring 3D models |
US20050037844A1 (en) * | 2002-10-30 | 2005-02-17 | Nike, Inc. | Sigils for use with apparel |
JP4403474B2 (ja) | 1999-12-09 | 2010-01-27 | ソニー株式会社 | 触覚提示機構及びこれを用いた力触覚提示装置 |
US6785329B1 (en) | 1999-12-21 | 2004-08-31 | Microsoft Corporation | Automatic video object extraction |
KR100384406B1 (ko) * | 2000-01-24 | 2003-05-22 | (주) 베스트소프트 | 컴퓨터 프로그램 구동조작장치 |
US6587835B1 (en) | 2000-02-09 | 2003-07-01 | G. Victor Treyz | Shopping assistance with handheld computing device |
AU2001241500A1 (en) * | 2000-02-15 | 2001-08-27 | Sorceron, Inc. | Method and system for distributing captured motion data over a network |
WO2001064481A2 (en) | 2000-03-02 | 2001-09-07 | Donnelly Corporation | Video mirror systems incorporating an accessory module |
JP2001265275A (ja) * | 2000-03-16 | 2001-09-28 | Olympus Optical Co Ltd | 画像表示装置 |
US6924787B2 (en) * | 2000-04-17 | 2005-08-02 | Immersion Corporation | Interface for controlling a graphical image |
JP3652961B2 (ja) * | 2000-06-27 | 2005-05-25 | シャープ株式会社 | 音声処理装置、音声・動画像処理装置及び音声・動画像処理プログラムを記録した記録媒体 |
TW527518B (en) * | 2000-07-14 | 2003-04-11 | Massachusetts Inst Technology | Method and system for high resolution, ultra fast, 3-D imaging |
US6795068B1 (en) | 2000-07-21 | 2004-09-21 | Sony Computer Entertainment Inc. | Prop input device and method for mapping an object from a two-dimensional camera image to a three-dimensional space for controlling action in a game program |
AUPQ896000A0 (en) | 2000-07-24 | 2000-08-17 | Seeing Machines Pty Ltd | Facial image processing system |
AU2001287948A1 (en) | 2000-07-24 | 2002-02-05 | Herman Ehrenburg | Computer-compatible, color-coded manual input system |
US7227526B2 (en) | 2000-07-24 | 2007-06-05 | Gesturetek, Inc. | Video-based image control system |
US6873747B2 (en) * | 2000-07-25 | 2005-03-29 | Farid Askary | Method for measurement of pitch in metrology and imaging systems |
JP4278288B2 (ja) * | 2000-07-31 | 2009-06-10 | 株式会社タイトー | 踊り映像強調合成装置 |
AUPQ952400A0 (en) * | 2000-08-18 | 2000-09-14 | Telefonaktiebolaget Lm Ericsson (Publ) | Improved method and system of effecting a financial transaction |
JP4815661B2 (ja) | 2000-08-24 | 2011-11-16 | ソニー株式会社 | 信号処理装置及び信号処理方法 |
US6748281B2 (en) | 2000-09-29 | 2004-06-08 | Gunilla Alsio | Wearable data input interface |
FR2814965A1 (fr) | 2000-10-11 | 2002-04-12 | Janick Simeray | Ordinateur et jouets cooperants |
US7016532B2 (en) * | 2000-11-06 | 2006-03-21 | Evryx Technologies | Image capture and identification system and process |
US7061507B1 (en) | 2000-11-12 | 2006-06-13 | Bitboys, Inc. | Antialiasing method and apparatus for video applications |
KR100385563B1 (ko) * | 2000-12-01 | 2003-05-27 | 한국과학기술원 | 구동수단을 갖는 분광 광도계와 광도 측정방법 |
US6751338B1 (en) | 2000-12-15 | 2004-06-15 | Cognex Corporation | System and method of using range image data with machine vision tools |
US20020085097A1 (en) | 2000-12-22 | 2002-07-04 | Colmenarez Antonio J. | Computer vision-based wireless pointing system |
AU2002303082A1 (en) | 2001-01-26 | 2002-09-12 | Zaxel Systems, Inc. | Real-time virtual viewpoint in simulated reality environment |
DE10103922A1 (de) | 2001-01-30 | 2002-08-01 | Physoptics Opto Electronic Gmb | Interaktives Datensicht- und Bediensystem |
US6741741B2 (en) | 2001-02-01 | 2004-05-25 | Xerox Corporation | System and method for automatically detecting edges of scanned documents |
US6789967B1 (en) | 2001-02-02 | 2004-09-14 | George Forester | Distal chording keyboard |
US20020134151A1 (en) | 2001-02-05 | 2002-09-26 | Matsushita Electric Industrial Co., Ltd. | Apparatus and method for measuring distances |
US6746124B2 (en) | 2001-02-06 | 2004-06-08 | Robert E. Fischer | Flashlight producing uniform high brightness |
US7116330B2 (en) | 2001-02-28 | 2006-10-03 | Intel Corporation | Approximating motion using a three-dimensional model |
GB2376397A (en) | 2001-06-04 | 2002-12-11 | Hewlett Packard Co | Virtual or augmented reality |
JP2003018604A (ja) * | 2001-07-04 | 2003-01-17 | Matsushita Electric Ind Co Ltd | 画像信号符号化方法、画像信号符号化装置および記録媒体 |
US6931125B2 (en) | 2001-07-10 | 2005-08-16 | Gregory N. Smallwood | Telephone equipment compatible, twelve button alphanumeric keypad |
KR20030009919A (ko) * | 2001-07-24 | 2003-02-05 | 삼성전자주식회사 | 관성 센서를 구비하는 컴퓨터 게임용 입력 장치 |
US7039253B2 (en) | 2001-07-24 | 2006-05-02 | Casio Computer Co., Ltd. | Image display device, image display method, program, and projection system |
US7148922B2 (en) | 2001-08-02 | 2006-12-12 | Olympus Optical Co., Ltd. | Electronic camera which detects flash influence on an image and controls white balance in accordance with the flash influence |
JP3442754B2 (ja) * | 2001-08-10 | 2003-09-02 | 株式会社コナミコンピュータエンタテインメント東京 | ガンシューティングゲーム装置、コンピュータの制御方法及びプログラム |
WO2003017045A2 (en) * | 2001-08-16 | 2003-02-27 | Trans World New York Llc | User-personalized media sampling, recommendation and purchasing system using real-time inventory database |
US6595642B2 (en) | 2001-08-31 | 2003-07-22 | Adaptive Optics Associates, Inc. | Ophthalmic instrument having Hartmann wavefront sensor with extended source |
US7555157B2 (en) | 2001-09-07 | 2009-06-30 | Geoff Davidson | System and method for transforming graphical images |
KR100846761B1 (ko) | 2001-09-11 | 2008-07-16 | 삼성전자주식회사 | 포인터 표시방법, 그 포인팅 장치, 및 그 호스트 장치 |
JP2003114640A (ja) * | 2001-10-04 | 2003-04-18 | Nec Corp | プラズマディスプレイパネル及びその駆動方法 |
US20030093591A1 (en) | 2001-11-09 | 2003-05-15 | David Hohl | System and method for fast data transfer to display driver |
FR2832892B1 (fr) | 2001-11-27 | 2004-04-02 | Thomson Licensing Sa | Camera video d'effets speciaux |
US20030100363A1 (en) | 2001-11-28 | 2003-05-29 | Ali Guiseppe C. | Method and apparatus for inputting appearance of computer operator into a computer program |
US20040070565A1 (en) * | 2001-12-05 | 2004-04-15 | Nayar Shree K | Method and apparatus for displaying images |
KR20030048570A (ko) | 2001-12-12 | 2003-06-25 | 한국전자통신연구원 | 부가적 버튼을 장착한 키패드 및 그의 작동방법 |
US7106366B2 (en) | 2001-12-19 | 2006-09-12 | Eastman Kodak Company | Image capture system incorporating metadata to facilitate transcoding |
US7305114B2 (en) | 2001-12-26 | 2007-12-04 | Cognex Technology And Investment Corporation | Human/machine interface for a machine vision sensor and method for installing and operating the same |
US7436887B2 (en) | 2002-02-06 | 2008-10-14 | Playtex Products, Inc. | Method and apparatus for video frame sequence-based object tracking |
US6990639B2 (en) | 2002-02-07 | 2006-01-24 | Microsoft Corporation | System and process for controlling electronic components in a ubiquitous computing environment using multimodal integration |
US20030160862A1 (en) | 2002-02-27 | 2003-08-28 | Charlier Michael L. | Apparatus having cooperating wide-angle digital camera system and microphone array |
US20030167211A1 (en) | 2002-03-04 | 2003-09-04 | Marco Scibora | Method and apparatus for digitally marking media content |
US7301547B2 (en) | 2002-03-22 | 2007-11-27 | Intel Corporation | Augmented reality system |
FR2837597A1 (fr) | 2002-03-25 | 2003-09-26 | Thomson Licensing Sa | Procede de modelisation d'une scene 3d |
US6847311B2 (en) * | 2002-03-28 | 2005-01-25 | Motorola Inc. | Method and apparatus for character entry in a wireless communication device |
GB2388418A (en) | 2002-03-28 | 2003-11-12 | Marcus James Eales | Input or pointing device with a camera |
US20030199324A1 (en) | 2002-04-23 | 2003-10-23 | Xiaoling Wang | Apparatus and a method for more realistic shooting video games on computers or similar devices using visible or invisible light |
JP2004021345A (ja) | 2002-06-12 | 2004-01-22 | Toshiba Corp | 画像処理装置及びその方法 |
US20040001082A1 (en) * | 2002-06-26 | 2004-01-01 | Amir Said | System and method of interaction with a computer controlled image display system using a projected light source |
CA2390072C (en) | 2002-06-28 | 2018-02-27 | Adrian Gh Podoleanu | Optical mapping apparatus with adjustable depth resolution and multiple functionality |
US7227976B1 (en) | 2002-07-08 | 2007-06-05 | Videomining Corporation | Method and system for real-time facial image enhancement |
CN1167996C (zh) * | 2002-07-11 | 2004-09-22 | 庄胜雄 | 可形成虚拟追踪球的手套滑鼠 |
US7623115B2 (en) | 2002-07-27 | 2009-11-24 | Sony Computer Entertainment Inc. | Method and apparatus for light input device |
US7545926B2 (en) | 2006-05-04 | 2009-06-09 | Sony Computer Entertainment Inc. | Echo and noise cancellation |
US7646372B2 (en) * | 2003-09-15 | 2010-01-12 | Sony Computer Entertainment Inc. | Methods and systems for enabling direction detection when interfacing with a computer program |
US8073157B2 (en) | 2003-08-27 | 2011-12-06 | Sony Computer Entertainment Inc. | Methods and apparatus for targeted sound detection and characterization |
US7970147B2 (en) | 2004-04-07 | 2011-06-28 | Sony Computer Entertainment Inc. | Video game controller with noise canceling logic |
US7102615B2 (en) | 2002-07-27 | 2006-09-05 | Sony Computer Entertainment Inc. | Man-machine interface using a deformable device |
US7809145B2 (en) | 2006-05-04 | 2010-10-05 | Sony Computer Entertainment Inc. | Ultra small microphone array |
US7783061B2 (en) * | 2003-08-27 | 2010-08-24 | Sony Computer Entertainment Inc. | Methods and apparatus for the targeted sound detection |
US8797260B2 (en) | 2002-07-27 | 2014-08-05 | Sony Computer Entertainment Inc. | Inertially trackable hand-held controller |
US7697700B2 (en) * | 2006-05-04 | 2010-04-13 | Sony Computer Entertainment Inc. | Noise removal for electronic device with far field microphone on console |
US7613310B2 (en) * | 2003-08-27 | 2009-11-03 | Sony Computer Entertainment Inc. | Audio input system |
US20040017355A1 (en) * | 2002-07-24 | 2004-01-29 | Youngtack Shim | Cursor control systems and methods |
US7850526B2 (en) | 2002-07-27 | 2010-12-14 | Sony Computer Entertainment America Inc. | System for tracking user manipulations within an environment |
US9393487B2 (en) | 2002-07-27 | 2016-07-19 | Sony Interactive Entertainment Inc. | Method for mapping movements of a hand-held controller to game commands |
US10086282B2 (en) | 2002-07-27 | 2018-10-02 | Sony Interactive Entertainment Inc. | Tracking device for use in obtaining information for controlling game program execution |
US8313380B2 (en) | 2002-07-27 | 2012-11-20 | Sony Computer Entertainment America Llc | Scheme for translating movements of a hand-held controller into inputs for a system |
US7352359B2 (en) * | 2002-07-27 | 2008-04-01 | Sony Computer Entertainment America Inc. | Method and system for applying gearing effects to inertial tracking |
US7627139B2 (en) | 2002-07-27 | 2009-12-01 | Sony Computer Entertainment Inc. | Computer image and audio processing of intensity and input devices for interfacing with a computer program |
US20070015559A1 (en) * | 2002-07-27 | 2007-01-18 | Sony Computer Entertainment America Inc. | Method and apparatus for use in determining lack of user activity in relation to a system |
US20070260517A1 (en) | 2006-05-08 | 2007-11-08 | Gary Zalewski | Profile detection |
US20070261077A1 (en) | 2006-05-08 | 2007-11-08 | Gary Zalewski | Using audio/visual environment to select ads on game platform |
US8686939B2 (en) | 2002-07-27 | 2014-04-01 | Sony Computer Entertainment Inc. | System, method, and apparatus for three-dimensional input control |
US8160269B2 (en) | 2003-08-27 | 2012-04-17 | Sony Computer Entertainment Inc. | Methods and apparatuses for adjusting a listening area for capturing sounds |
US7391409B2 (en) | 2002-07-27 | 2008-06-24 | Sony Computer Entertainment America Inc. | Method and system for applying gearing effects to multi-channel mixed input |
US7918733B2 (en) | 2002-07-27 | 2011-04-05 | Sony Computer Entertainment America Inc. | Multi-input game control mixer |
US8139793B2 (en) | 2003-08-27 | 2012-03-20 | Sony Computer Entertainment Inc. | Methods and apparatus for capturing audio signals based on a visual image |
US7803050B2 (en) | 2002-07-27 | 2010-09-28 | Sony Computer Entertainment Inc. | Tracking device with sound emitter for use in obtaining information for controlling game program execution |
US20070061413A1 (en) * | 2005-09-15 | 2007-03-15 | Larsen Eric J | System and method for obtaining user information from voices |
US7854655B2 (en) * | 2002-07-27 | 2010-12-21 | Sony Computer Entertainment America Inc. | Obtaining input for controlling execution of a game program |
US9474968B2 (en) | 2002-07-27 | 2016-10-25 | Sony Interactive Entertainment America Llc | Method and system for applying gearing effects to visual tracking |
US20060256081A1 (en) | 2002-07-27 | 2006-11-16 | Sony Computer Entertainment America Inc. | Scheme for detecting and tracking user manipulation of a game controller body |
US8233642B2 (en) | 2003-08-27 | 2012-07-31 | Sony Computer Entertainment Inc. | Methods and apparatuses for capturing an audio signal based on a location of the signal |
US20060282873A1 (en) | 2002-07-27 | 2006-12-14 | Sony Computer Entertainment Inc. | Hand-held controller having detectable elements for tracking purposes |
US7760248B2 (en) | 2002-07-27 | 2010-07-20 | Sony Computer Entertainment Inc. | Selective sound source listening in conjunction with computer interactive processing |
US20060264260A1 (en) | 2002-07-27 | 2006-11-23 | Sony Computer Entertainment Inc. | Detectable and trackable hand-held controller |
GB2392286B (en) * | 2002-08-19 | 2004-07-07 | Chunghwa Telecom Co Ltd | Personal identification system based on the reading of multiple one-dimensional barcodes scanned from scanned from PDA/cell phone screen |
US7039199B2 (en) | 2002-08-26 | 2006-05-02 | Microsoft Corporation | System and process for locating a speaker using 360 degree sound source localization |
US6917688B2 (en) | 2002-09-11 | 2005-07-12 | Nanyang Technological University | Adaptive noise cancelling microphone system |
US20040063480A1 (en) * | 2002-09-30 | 2004-04-01 | Xiaoling Wang | Apparatus and a method for more realistic interactive video games on computers or similar devices |
EP1411461A1 (en) | 2002-10-14 | 2004-04-21 | STMicroelectronics S.r.l. | User controlled device for sending control signals to an electric appliance, in particular user controlled pointing device such as mouse or joystick, with 3D-motion detection |
US6995666B1 (en) | 2002-10-16 | 2006-02-07 | Luttrell Clyde K | Cellemetry-operated railroad switch heater |
JP2004145448A (ja) | 2002-10-22 | 2004-05-20 | Toshiba Corp | 端末装置、サーバ装置および画像加工方法 |
US8206219B2 (en) | 2002-10-30 | 2012-06-26 | Nike, Inc. | Interactive gaming apparel for interactive gaming |
AU2003288938A1 (en) | 2002-10-30 | 2004-06-07 | Nike International Ltd. | Clothes with tracking marks for computer games |
US20040095327A1 (en) | 2002-11-14 | 2004-05-20 | Lo Fook Loong | Alphanumeric data input system and method |
US8012025B2 (en) | 2002-12-13 | 2011-09-06 | Applied Minds, Llc | Video game controller hub with control input reduction and combination schemes |
US7212308B2 (en) | 2002-12-18 | 2007-05-01 | Morgan Carol L | Interactive photo kiosk |
US20040140955A1 (en) | 2003-01-21 | 2004-07-22 | Metz Kristofer Erik | Input device for a computer and method of operation |
JP2004261236A (ja) * | 2003-02-20 | 2004-09-24 | Konami Co Ltd | ゲームシステム |
GB2398690B (en) * | 2003-02-21 | 2006-05-10 | Sony Comp Entertainment Europe | Control of data processing |
GB2398691B (en) * | 2003-02-21 | 2006-05-31 | Sony Comp Entertainment Europe | Control of data processing |
US7161634B2 (en) * | 2003-03-06 | 2007-01-09 | Huaya Microelectronics, Ltd. | Encoding system for error diffusion dithering |
US7665041B2 (en) * | 2003-03-25 | 2010-02-16 | Microsoft Corporation | Architecture for controlling a computer using hand gestures |
US20040212589A1 (en) | 2003-04-24 | 2004-10-28 | Hall Deirdre M. | System and method for fusing and displaying multiple degree of freedom positional input data from multiple input sources |
US7519186B2 (en) | 2003-04-25 | 2009-04-14 | Microsoft Corporation | Noise reduction systems and methods for voice applications |
US7379559B2 (en) | 2003-05-28 | 2008-05-27 | Trw Automotive U.S. Llc | Method and apparatus for determining an occupant's head location in an actuatable occupant restraining system |
US6881147B2 (en) * | 2003-06-06 | 2005-04-19 | Nyko Technologies, Inc. | Video game controller with integrated microphone and speaker |
TW571812U (en) | 2003-06-11 | 2004-01-11 | Vision Electronics Co Ltd | Audio device for TV game machine |
ATE339757T1 (de) * | 2003-06-17 | 2006-10-15 | Sony Ericsson Mobile Comm Ab | Verfahren und vorrichtung zur sprachaktivitätsdetektion |
US7156311B2 (en) * | 2003-07-16 | 2007-01-02 | Scanbuy, Inc. | System and method for decoding and analyzing barcodes using a mobile device |
US7489299B2 (en) * | 2003-10-23 | 2009-02-10 | Hillcrest Laboratories, Inc. | User interface devices and methods employing accelerometers |
DE602004020505D1 (de) * | 2003-10-28 | 2009-05-20 | Welch Allyn Inc | Digitales dokumentier-ophthalmoskop |
US20050105777A1 (en) | 2003-11-18 | 2005-05-19 | Kozlowski William J.Jr. | Personalized multimedia summary |
US7277526B2 (en) | 2004-04-09 | 2007-10-02 | Lyncean Technologies, Inc. | Apparatus, system, and method for high flux, compact compton x-ray source |
ATE550709T1 (de) * | 2004-04-30 | 2012-04-15 | Hillcrest Lab Inc | Freiraum-zeigeeinrichtungen mit neigungskompensation und verbesserter benutzbarkeit |
KR100937572B1 (ko) | 2004-04-30 | 2010-01-19 | 힐크레스트 래보래토리스, 인크. | 3d 포인팅 장치 및 방법 |
US7296007B1 (en) | 2004-07-06 | 2007-11-13 | Ailive, Inc. | Real time context learning by software agents |
US7263462B2 (en) | 2004-07-30 | 2007-08-28 | Ailive, Inc. | Non-disruptive embedding of specialized elements |
US7613610B1 (en) | 2005-03-14 | 2009-11-03 | Escription, Inc. | Transcription data extraction |
US7918732B2 (en) | 2005-05-06 | 2011-04-05 | Milton Charles Van Noland | Manifold compatibility electronic omni axis human interface |
US7927216B2 (en) * | 2005-09-15 | 2011-04-19 | Nintendo Co., Ltd. | Video game system with wireless modular handheld controller |
US7620316B2 (en) | 2005-11-28 | 2009-11-17 | Navisense | Method and device for touchless control of a camera |
US7834850B2 (en) | 2005-11-29 | 2010-11-16 | Navisense | Method and system for object control |
US7636645B1 (en) | 2007-06-18 | 2009-12-22 | Ailive Inc. | Self-contained inertial navigation system for interactive control using movable controllers |
JP4481280B2 (ja) * | 2006-08-30 | 2010-06-16 | 富士フイルム株式会社 | 画像処理装置、及び画像処理方法 |
US8277316B2 (en) * | 2006-09-14 | 2012-10-02 | Nintendo Co., Ltd. | Method and apparatus for using a common pointing input to control 3D viewpoint and object targeting |
GB0622451D0 (en) | 2006-11-10 | 2006-12-20 | Intelligent Earth Ltd | Object position and orientation detection device |
US7636697B1 (en) | 2007-01-29 | 2009-12-22 | Ailive Inc. | Method and system for rapid evaluation of logical expressions |
US7937243B2 (en) | 2007-08-03 | 2011-05-03 | Ailive, Inc. | Method and apparatus for non-disruptive embedding of specialized elements |
US20090221368A1 (en) | 2007-11-28 | 2009-09-03 | Ailive Inc., | Method and system for creating a shared game space for a networked game |
US8419545B2 (en) | 2007-11-28 | 2013-04-16 | Ailive, Inc. | Method and system for controlling movements of objects in a videogame |
US8655622B2 (en) * | 2008-07-05 | 2014-02-18 | Ailive, Inc. | Method and apparatus for interpreting orientation invariant motion |
-
2003
- 2003-02-11 US US10/365,120 patent/US9177387B2/en active Active
- 2003-10-06 AT AT03773138T patent/ATE443903T1/de not_active IP Right Cessation
- 2003-10-06 EP EP03773138A patent/EP1593096B1/en not_active Expired - Lifetime
- 2003-10-06 CN CNB2003801102426A patent/CN100409261C/zh not_active Expired - Lifetime
- 2003-10-06 JP JP2004568305A patent/JP4723863B2/ja not_active Expired - Lifetime
- 2003-10-06 DE DE60329424T patent/DE60329424D1/de not_active Expired - Lifetime
- 2003-10-06 KR KR1020057014813A patent/KR100965348B1/ko active IP Right Grant
- 2003-10-06 WO PCT/US2003/031502 patent/WO2004072909A1/en active Application Filing
- 2003-10-06 AU AU2003279810A patent/AU2003279810B2/en not_active Expired
- 2003-10-08 TW TW092127982A patent/TWI274295B/zh not_active IP Right Cessation
-
2015
- 2015-10-07 US US14/877,844 patent/US9881382B2/en not_active Expired - Lifetime
-
2018
- 2018-01-30 US US15/884,326 patent/US10410359B2/en not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
US9177387B2 (en) | 2015-11-03 |
CN100409261C (zh) | 2008-08-06 |
US20160027188A1 (en) | 2016-01-28 |
EP1593096A1 (en) | 2005-11-09 |
US20040155962A1 (en) | 2004-08-12 |
AU2003279810B2 (en) | 2008-06-19 |
KR20050099547A (ko) | 2005-10-13 |
US20180158196A1 (en) | 2018-06-07 |
KR100965348B1 (ko) | 2010-06-22 |
WO2004072909A1 (en) | 2004-08-26 |
CN1764931A (zh) | 2006-04-26 |
JP4723863B2 (ja) | 2011-07-13 |
JP2006514366A (ja) | 2006-04-27 |
TWI274295B (en) | 2007-02-21 |
AU2003279810A1 (en) | 2004-09-06 |
US9881382B2 (en) | 2018-01-30 |
ATE443903T1 (de) | 2009-10-15 |
EP1593096B1 (en) | 2009-09-23 |
DE60329424D1 (de) | 2009-11-05 |
US10410359B2 (en) | 2019-09-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TW200415527A (en) | Method and apparatus for real time motion capture | |
CN111460875B (zh) | 图像处理方法及装置、图像设备及存储介质 | |
CN106843456B (zh) | 一种基于姿态追踪的显示方法、装置和虚拟现实设备 | |
CN105955456B (zh) | 虚拟现实与增强现实融合的方法、装置及智能穿戴设备 | |
KR101751078B1 (ko) | 애니메이션 또는 모션들을 캐릭터에 적용하는 시스템 및 방법 | |
EP1636762B1 (en) | System and method for providing a real-time three-dimensional interactive environment | |
US8866898B2 (en) | Living room movie creation | |
WO2018214697A1 (zh) | 图形处理方法、处理器和虚拟现实系统 | |
JP3530772B2 (ja) | 複合現実感装置及び複合現実空間画像の生成方法 | |
US20140094307A1 (en) | Multi-camera depth imaging | |
US20140045593A1 (en) | Virtual joint orientation in virtual skeleton | |
TW202010308A (zh) | 鞋品虛擬試穿之遮蔽改善的方法與系統 | |
Ahuja et al. | Controllerpose: inside-out body capture with VR controller cameras | |
JP2003103045A (ja) | 映像体験システムおよび情報処理方法 | |
CN111862348A (zh) | 视频显示方法、视频生成方法、装置、设备及存储介质 | |
CN206819290U (zh) | 一种虚拟现实多人互动的系统 | |
US11103771B1 (en) | Motion capture compression suit | |
Sato et al. | Using motion capture for real-time augmented reality scenes. | |
JP2023156940A (ja) | 画像処理装置、画像処理方法及びプログラム | |
Spanlang et al. | Full body avatar interaction |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
MK4A | Expiration of patent term of an invention patent |