TWI735830B - 追蹤系統及其相關追蹤方法 - Google Patents

追蹤系統及其相關追蹤方法 Download PDF

Info

Publication number
TWI735830B
TWI735830B TW107145272A TW107145272A TWI735830B TW I735830 B TWI735830 B TW I735830B TW 107145272 A TW107145272 A TW 107145272A TW 107145272 A TW107145272 A TW 107145272A TW I735830 B TWI735830 B TW I735830B
Authority
TW
Taiwan
Prior art keywords
information
sensor
head
ankle
association
Prior art date
Application number
TW107145272A
Other languages
English (en)
Other versions
TW202013147A (zh
Inventor
周永明
林俊偉
謝毅剛
吳嘉偉
Original Assignee
未來市股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 未來市股份有限公司 filed Critical 未來市股份有限公司
Publication of TW202013147A publication Critical patent/TW202013147A/zh
Application granted granted Critical
Publication of TWI735830B publication Critical patent/TWI735830B/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0334Foot operated pointing devices

Abstract

一種追蹤系統,用於追蹤一使用者之肢體動作,該追蹤系統包含有:一頭戴式顯示器,配戴於一使用者之一頭部,用於收集該使用者的頭部資訊;一第一感應器,配戴於該使用者之一腳踝,用於收集該使用者的第一腳踝資訊;以及一第二感應器,配戴於該使用者之另一腳踝,用於收集該使用者的第二腳踝資訊;其中,該追蹤系統透過該頭部資訊、該第一腳踝資訊、該第二腳踝資訊及三者彼此的關係,決定該使用者之肢體動作。

Description

追蹤系統及其相關追蹤方法
本發明係指一種追蹤系統及其相關追蹤方法。
隨著科技的發展與進步,電腦遊戲與使用者之間的互動需求也隨之增加。人機互動科技,例如體感遊戲、虛擬實境(Virtual Reality,VR)環境、擴增實境(Augmented Reality,AR)環境、混合實境(Mixed Reality,MR)環境、延展實境(Extended Reality,XR)環境,也由於其生理及娛樂功能而愈趨流行。現有的科技藉由一由外而內追蹤方法,即時地以頭戴式顯示器(head-mounted displays,HMD)、周邊運動控制器(motion controller peripherals)或相機,追蹤場景座標中的移動物體,以追蹤使用者的動作,進而虛擬化使用者。在此情形下,頭戴式顯示器、周邊運動控制器或相機可互相合作,以反應在使用者於VR/AR/MR/XR環境中所擺的姿勢,進而即時地與使用者於VR/AR/MR/XR環境中進行互動。
然而,使用者的肢體動作可自由地改變位置,如同於三個互相垂直的坐標軸中前後(即浪湧)、上下(即起伏)、左右(即擺動),其也可結合在三個垂直軸上進行旋轉。現有於VR/AR/MR/XR環境中的追蹤系統需要設置至少四 個感應器、由外而內的追蹤器以及相機,以感測使用者的肢體動作,但也造成使用者於體驗VR/AR/MR/XR環境時的不便。
因此,本發明提供一種追蹤系統及其相關追蹤方法,以提供使用者更優良的體驗。
本發明之一實施例揭露一種追蹤系統,用於追蹤一使用者之肢體動作,該追蹤系統包含有:一頭戴式顯示器,配戴於一使用者之一頭部,用於收集該使用者的頭部資訊;一第一感應器,配戴於該使用者之一腳踝,用於收集該使用者的第一腳踝資訊;以及一第二感應器,配戴於該使用者之另一腳踝,用於收集該使用者的第二腳踝資訊;其中,該頭部資訊與該第一腳踝資訊之間具有一第一關聯,該頭部資訊與該第二腳踝資訊之間具有一第二關聯,該第一腳踝資訊與該第二腳踝資訊之間具有一第三關聯;其中,該追蹤系統透過該頭部資訊、該第一腳踝資訊、該第二腳踝資訊、該第一關聯、該第二關聯及該第三關聯,決定該使用者之肢體動作。
本發明之另一實施例揭露一種追蹤方法,用於追蹤一使用者之肢體動作,該追蹤方法包含有收集該使用者的頭部資訊、第一腳踝資訊及第二腳踝資訊,其中該頭部資訊與該第一腳踝資訊之間具有一第一關聯,該頭部資訊與該第二腳踝資訊之間具有一第二關聯,該第一腳踝資訊與該第二腳踝資訊之間具有一第三關聯;以及透過該頭部資訊、該第一腳踝資訊、該第二腳踝資訊、該第一關聯、該第二關聯及該第三關聯,決定該使用者之肢體動作。
10:追蹤系統
102:頭戴式顯示器
104:感應器
104_1:第一感應器
104_2:第二感應器
106_1:第一慣性測量單元
106_2:第二慣性測量單元
30:追蹤流程
302、304、306、308:步驟
C1:第一連結
C2:第二連結
第1圖為本發明實施例之一追蹤系統之示意圖。
第2圖為本發明實施例之追蹤系統之一實施態樣之示意圖。
第3圖為本發明實施例之一追蹤流程之示意圖。
請參考第1圖,第1圖為本發明實施例之一追蹤系統10之示意圖。追蹤系統10包含有一頭戴式顯示器102及複數個感應器104。頭戴式顯示器102可配戴於一使用者之一頭部以收集一頭部資訊。感應器104可配戴於使用者之雙腳腳踝,以收集一第一腳踝資訊及第二腳踝資訊。該追蹤系統10透過該頭部資訊、該第一腳踝資訊、該第二腳踝資訊及三者彼此的關係,決定該使用者之肢體動作。決定的肢體動作可被傳送至頭戴式顯示器102,使得頭戴式顯示器102可藉由一虛擬替身(avatar)在一場景中重現所決定的肢體動作。因此,本發明之追蹤系統10不只藉由頭戴式顯示器及感應器取得使用者的頭部資訊及腳踝資訊,更藉由頭部資訊與第一腳踝資訊之間的第一關聯、頭部資訊與第一腳踝資訊之間的第二關聯、及兩個腳踝資訊之間的第三關聯作為決定肢體動作的判斷因子(例如用於校正頭部資訊及腳踝資訊),因此可以提升追蹤結果的精準度,提升使用者的體驗。
如第2圖所示,在一實施例中,本發明之感應器104包含一第一感應器104_1及一第二感應器104_2。第一感應器104_1與第二感應器104_2分別進一步包含一第一慣性測量單元(inertial measurement unit,IMU)106_1與一第二慣性測量單元106_2,以模擬第一感應器104_1的一第一座標,以及模擬第二感應 器104_2的一第二座標。藉由第一座標和第二座標,可以得到感應器之間的一相對位置及一相對距離。感應器之間的相對位置及相對距離可作為兩個腳踝資訊之間的第三關聯。於其他實施例,第三關聯還可以包括感應器之間的三維移動向量差及動量差等。
在一實施例中,頭戴式顯示器包含一第三慣性測量單元以模擬頭戴式顯示器的一第三座標。藉由第一座標和第三座標,可以得到頭戴式顯示器與第一感應器之間的一相對位置及一相對距離。頭戴式顯示器與第一感應器之間的相對位置及相對距離可作為第一關聯。藉由第一座標和第二座標,可以得到頭戴式顯示器與第二感應器之間的一相對位置及一相對距離。頭戴式顯示器與第二感應器之間的相對位置及相對距離可作為第二關聯。於其他實施例,第一關聯及第二關聯還可以包括頭戴式顯示器與兩個感應器之間的三維移動向量差及動量差等。
在一實施例中,感應器可新增一磁力計(magnetic meter)或一球型天線矩陣(spherical antenna array)以校正其位置,以提升追蹤系統之追蹤結果的正確性。
在一實施例中,頭戴式顯示器102可透過一第一連結C1與兩個感應器104分別進行連結,因而頭戴式顯示器102及感應器104可分享彼此的位置、三維移動向量及動量等。兩個感應器104可透過一第二連結C2彼此連結,因而感應器104可分享彼此的位置、三維移動向量、及動量等。藉由第一連結C1及第二連結C2,頭戴式顯示器102可以用於計算第一關聯、第二關聯及第三關聯,兩個感應器104之任一者也可以用於計算第一關聯、第二關聯及第三關聯,從而使追蹤系 統10可以依個別運算能力上限,適當分配運算任務至頭戴式顯示器102及兩個感應器104,提升即時運算效率。
在一實施例中,第一連結C1及第二連結C2可以經由無線通訊(例如藍芽)、超音波、雷射或磁力連結等之任一者實現。
在一實施例中,感應器104可以是六自由度(degrees-of-freedom,DOF)感應器或三自由度感應器。由於本發明不只收集頭部資訊及腳踝資訊,還進一步收集第一關聯、第二關聯及第三關聯來決定肢體動作,因此無論使用六自由度感應器或三自由度感應器,都可以得到更精準的追蹤結果。
根據不同的應用及設計概念,本發明之追蹤系統10可以各種方法實現。進一步地,追蹤系統10之操作流程可被歸納為一追蹤流程30,如第3圖所示,其包含下列步驟:
步驟302:開始。
步驟304:收集該使用者的頭部資訊、第一腳踝資訊及第二腳踝資訊,其中該頭部資訊與該第一腳踝資訊之間具有一第一關聯,該頭部資訊與該第二腳踝資訊之間具有一第二關聯,該第一腳踝資訊與該第二腳踝資訊之間具有一第三關聯。
步驟306:透過該頭部資訊、該第一腳踝資訊、該第二腳踝資訊、該第一關聯、該第二關聯及該第三關聯,決定該使用者之肢體動作。
步驟308:結束。
追蹤流程30的細節可參考前述追蹤系統10的實施例,在此不再贅述。
綜上所述,本發明提供一種追蹤系統10及相關追蹤方法,其有利於得到更精準的追蹤結果,以於使用者體驗虛擬實境/擴增實境/混合實境/延伸實境環境時,提供更優良的使用者體驗。
以上所述僅為本發明之較佳實施例,凡依本發明申請專利範圍所做之均等變化與修飾,皆應屬本發明之涵蓋範圍。
10:追蹤系統
102:頭戴式顯示器
104:感應器
104_1:第一感應器
104_2:第二感應器
106_1:第一慣性測量單元
106_2:第二慣性測量單元
C1:第一連結
C2:第二連結

Claims (4)

  1. 一種追蹤系統,用於追蹤一使用者之肢體動作,該追蹤系統包含有:一頭戴式顯示器,配戴於一使用者之一頭部,用於收集該使用者的一頭部資訊,該頭戴式顯示器包含一第三慣性測量單元以模擬該頭戴式顯示器之一第三座標;一第一感應器,配戴於該使用者之一腳踝且透過一第一連結連結該頭戴式顯示器,該第一感應器用於收集該使用者的一第一腳踝資訊,該第一感應器與該頭戴式顯示器透過該第一連結彼此分享該頭部資訊與該第一腳踝資訊,以取得一第一關聯,該第一感應器包含一第一慣性測量單元以模擬該第一感應器之一第一座標;以及一第二感應器,配戴於該使用者之另一腳踝,該第二感應器透過該第一連結連結該頭戴式顯示器且透過一第二連結連結該第一感應器,該第二感應器用於收集該使用者的一第二腳踝資訊,該第二感應器與該頭戴式顯示器透過該第一連結彼此分享該頭部資訊與該第二腳踝資訊,以取得一第二關聯,該第二感應器與該第一感應器透過該第二連結彼此分享該第二腳踝資訊與該第一腳踝資訊,以取得一第三關聯,該第二感應器包含一第二慣性測量單元以模擬該第二感應器之一第二座標;其中,該頭部資訊與該第一腳踝資訊之間具有該第一關聯,該頭部資訊與該第二腳踝資訊之間具有該第二關聯,該第一腳踝資訊與該第二腳踝資訊之間具有該第三關聯,該第一關聯係根據該頭戴式顯示器與該第一感應器之透過該第一連結彼此分享之該頭部資訊與該第一腳踝資訊計算而得,該第二關聯係根據該頭戴式顯示器與該第二感應器之透過該第一連結彼此分享之該頭部資訊與該第二腳踝資訊計算而得,該第三關聯係根據該第一感應器與該第二感應器之透過該第二連結彼此分享之該第一 腳踝資訊與該第二腳踝資訊計算而得,該第一關聯包括該第一座標與該第三座標的距離及相對位置,該第二關聯包括該第二座標與該第三座標的距離及相對位置,該第三關聯包括該第一座標與該第二座標的距離及相對位置;其中,該追蹤系統透過該頭部資訊、該第一腳踝資訊、該第二腳踝資訊、該第一關聯、該第二關聯及該第三關聯,決定該使用者之肢體動作。
  2. 如請求項1所述之追蹤系統,其中該第一感應器具有一磁力計(magnetic meter)或一球型天線矩陣(spherical antenna array),用於以校正該第一座標。
  3. 一種追蹤方法,用於追蹤一使用者之肢體動作,該追蹤方法包含有:利用一頭戴式顯示器收集該使用者的一頭部資訊且另分別利用一第一感應器及一第二感應器收集該使用者的一第一腳踝資訊及一第二腳踝資訊;利用一第一連結連結該第一感應器與該頭戴式顯示器且另利用該第一連結連結該第二感應器與該頭戴式顯示器,以分別取得一第一關聯及一第二關聯,其中該頭部資訊與該第一腳踝資訊之間具有該第一關聯,該頭部資訊與該第二腳踝資訊之間具有該第二關聯,該第一關聯係根據該頭戴式顯示器與該第一感應器之透過該第一連結彼此分享之該頭部資訊與該第一腳踝資訊計算而得,該第二關聯係根據該頭戴式顯示器與該第二感應器之透過該第一連結彼此分享之該頭部資訊與該第二腳踝資訊計算而得,該第一關聯包括該第一座標與該第三座標的距離及相對位置,該第二關聯包括該第二座標與該第三座標的距離及相對位置;利用一第二連結連結該第一感應器與該第二感應器,以取得一第三關聯,其 中該第一腳踝資訊與該第二腳踝資訊之間具有該第三關聯,該第三關聯係根據該第一感應器與該第二感應器之透過該第二連結彼此分享之該第一腳踝資訊與該第二腳踝資訊計算而得,該第三關聯包括該第一座標與該第二座標的距離及相對位置;以及透過該頭部資訊、該第一腳踝資訊、該第二腳踝資訊、該第一關聯、該第二關聯及該第三關聯,決定該使用者之肢體動作。
  4. 如請求項3所述之追蹤方法,其中該第一感應器具有一磁力計(magnetic meter)或一球型天線矩陣(spherical antenna array),用於以校正該第一座標。
TW107145272A 2018-09-19 2018-12-14 追蹤系統及其相關追蹤方法 TWI735830B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16/136,198 2018-09-19
US16/136,198 US10817047B2 (en) 2018-09-19 2018-09-19 Tracking system and tacking method using the same

Publications (2)

Publication Number Publication Date
TW202013147A TW202013147A (zh) 2020-04-01
TWI735830B true TWI735830B (zh) 2021-08-11

Family

ID=64744605

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107145272A TWI735830B (zh) 2018-09-19 2018-12-14 追蹤系統及其相關追蹤方法

Country Status (4)

Country Link
US (1) US10817047B2 (zh)
EP (1) EP3627289A1 (zh)
JP (1) JP6986003B2 (zh)
TW (1) TWI735830B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112416125A (zh) 2020-11-17 2021-02-26 青岛小鸟看看科技有限公司 Vr头戴式一体机
US20220269333A1 (en) * 2021-02-19 2022-08-25 Apple Inc. User interfaces and device settings based on user identification

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7301648B2 (en) * 2000-01-28 2007-11-27 Intersense, Inc. Self-referenced tracking
US7542040B2 (en) * 2004-08-11 2009-06-02 The United States Of America As Represented By The Secretary Of The Navy Simulated locomotion method and apparatus
US20110009241A1 (en) * 2009-04-10 2011-01-13 Sovoz, Inc. Virtual locomotion controller apparatus and methods
EP3067783A1 (en) * 2015-03-11 2016-09-14 ETH Zurich Method and system to track human locomotion by relative positional tracking of body parts of the human
US20170192496A1 (en) * 2015-11-25 2017-07-06 Jakob Balslev Methods and systems of a motion-capture body suit with wearable body-position sensors
EP3270266A2 (en) * 2016-07-15 2018-01-17 HTC Corporation Method, electronic apparatus and recording medium for automatically configuring sensors

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7636645B1 (en) * 2007-06-18 2009-12-22 Ailive Inc. Self-contained inertial navigation system for interactive control using movable controllers
KR101483713B1 (ko) 2008-06-30 2015-01-16 삼성전자 주식회사 모션 캡쳐 장치 및 모션 캡쳐 방법
JP2010240185A (ja) 2009-04-07 2010-10-28 Kanazawa Inst Of Technology 動作学習支援装置
US20110270135A1 (en) * 2009-11-30 2011-11-03 Christopher John Dooley Augmented reality for testing and training of human performance
US10415975B2 (en) 2014-01-09 2019-09-17 Xsens Holding B.V. Motion tracking with reduced on-body sensors set
US9649558B2 (en) * 2014-03-14 2017-05-16 Sony Interactive Entertainment Inc. Gaming device with rotatably placed cameras
WO2016033717A1 (zh) * 2014-09-01 2016-03-10 北京诺亦腾科技有限公司 一种组合式运动捕捉系统
JP6391465B2 (ja) 2014-12-26 2018-09-19 Kddi株式会社 ウェアラブル端末装置およびプログラム
US10073516B2 (en) * 2014-12-29 2018-09-11 Sony Interactive Entertainment Inc. Methods and systems for user interaction within virtual reality scene using head mounted display
US10353489B2 (en) * 2016-04-13 2019-07-16 Seiko Epson Corporation Foot input device and head-mounted display device
DE102016212236A1 (de) * 2016-07-05 2018-01-11 Siemens Aktiengesellschaft Interaktionssystem und -verfahren
WO2018143360A1 (ja) 2017-02-03 2018-08-09 良夫 川又 相対位置検出システム及び画像表示システム
WO2018208924A1 (en) * 2017-05-09 2018-11-15 Google Llc Augmented and/or virtual reality footwear
US10379613B2 (en) * 2017-05-16 2019-08-13 Finch Technologies Ltd. Tracking arm movements to generate inputs for computer systems
US11016116B2 (en) * 2018-01-11 2021-05-25 Finch Technologies Ltd. Correction of accumulated errors in inertial measurement units attached to a user

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7301648B2 (en) * 2000-01-28 2007-11-27 Intersense, Inc. Self-referenced tracking
US7542040B2 (en) * 2004-08-11 2009-06-02 The United States Of America As Represented By The Secretary Of The Navy Simulated locomotion method and apparatus
US20110009241A1 (en) * 2009-04-10 2011-01-13 Sovoz, Inc. Virtual locomotion controller apparatus and methods
EP3067783A1 (en) * 2015-03-11 2016-09-14 ETH Zurich Method and system to track human locomotion by relative positional tracking of body parts of the human
US20170192496A1 (en) * 2015-11-25 2017-07-06 Jakob Balslev Methods and systems of a motion-capture body suit with wearable body-position sensors
EP3270266A2 (en) * 2016-07-15 2018-01-17 HTC Corporation Method, electronic apparatus and recording medium for automatically configuring sensors

Also Published As

Publication number Publication date
US10817047B2 (en) 2020-10-27
EP3627289A1 (en) 2020-03-25
US20200089311A1 (en) 2020-03-19
CN110928404A (zh) 2020-03-27
JP6986003B2 (ja) 2021-12-22
JP2020047239A (ja) 2020-03-26
TW202013147A (zh) 2020-04-01

Similar Documents

Publication Publication Date Title
Tregillus et al. Vr-step: Walking-in-place using inertial sensing for hands free navigation in mobile vr environments
Burdea et al. Virtual reality technology
JP2020102239A (ja) ヘッドマウントディスプレイ追跡
JP7162898B2 (ja) 着用可能な動作追跡システム
CN110603510B (zh) 虚拟现实系统中虚拟控制器的位置和取向跟踪
WO2016041088A1 (en) System and method for tracking wearable peripherals in augmented reality and virtual reality applications
KR20220110205A (ko) 헤드 장착식 디스플레이들에 대한 컨텐츠 안정화
WO2019067650A1 (en) TELEMETRY AND ACCESSORY TRACKING OF VISIOCASTIC SYSTEMS
Fang et al. Development of a wearable device for motion capturing based on magnetic and inertial measurement units
TWI659221B (zh) 追蹤系統、追蹤裝置及追蹤方法
CN106843507A (zh) 一种虚拟现实多人互动的方法及系统
TWI735830B (zh) 追蹤系統及其相關追蹤方法
Yang et al. 3-D markerless tracking of human gait by geometric trilateration of multiple Kinects
TW202026846A (zh) 動作捕捉方法
Chen et al. Development of an upper limb rehabilitation system using inertial movement units and kinect device
US20180216959A1 (en) A Combined Motion Capture System
TWI666571B (zh) 用於虛擬實境環境的動作捕捉系統
Leoncini et al. Multiple NUI device approach to full body tracking for collaborative virtual environments
Asadzadeh et al. Low-cost interactive device for virtual reality
US11887259B2 (en) Method, system, and apparatus for full-body tracking with magnetic fields in virtual reality and augmented reality applications
Zhang et al. Ubiquitous human body motion capture using micro-sensors
CN110928404B (zh) 追踪系统及其相关追踪方法
WO2017080533A2 (zh) 一种与虚拟现实环境进行交互的装置
TWI712985B (zh) 復健用骨架追蹤系統與方法
Micelli et al. Extending Upper Limb User Interactions in AR, VR and MR Headsets Employing a Custom-Made Wearable Device