TWI731263B - 智慧型背帶及定義人體姿態的方法 - Google Patents

智慧型背帶及定義人體姿態的方法 Download PDF

Info

Publication number
TWI731263B
TWI731263B TW107131373A TW107131373A TWI731263B TW I731263 B TWI731263 B TW I731263B TW 107131373 A TW107131373 A TW 107131373A TW 107131373 A TW107131373 A TW 107131373A TW I731263 B TWI731263 B TW I731263B
Authority
TW
Taiwan
Prior art keywords
strap
wearer
distance
microcontroller
smart
Prior art date
Application number
TW107131373A
Other languages
English (en)
Other versions
TW202010556A (zh
Inventor
林家宇
陳志強
Original Assignee
宏碁股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 宏碁股份有限公司 filed Critical 宏碁股份有限公司
Priority to TW107131373A priority Critical patent/TWI731263B/zh
Priority to US16/208,590 priority patent/US11422618B2/en
Publication of TW202010556A publication Critical patent/TW202010556A/zh
Application granted granted Critical
Publication of TWI731263B publication Critical patent/TWI731263B/zh

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6813Specially adapted to be attached to a specific body part
    • A61B5/6823Trunk, e.g., chest, back, abdomen, hip
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • AHUMAN NECESSITIES
    • A41WEARING APPAREL
    • A41DOUTERWEAR; PROTECTIVE GARMENTS; ACCESSORIES
    • A41D1/00Garments
    • A41D1/002Garments adapted to accommodate electronic equipment
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45CPURSES; LUGGAGE; HAND CARRIED BAGS
    • A45C13/00Details; Accessories
    • A45C13/30Straps; Bands
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45FTRAVELLING OR CAMP EQUIPMENT: SACKS OR PACKS CARRIED ON THE BODY
    • A45F3/00Travelling or camp articles; Sacks or packs carried on the body
    • A45F3/14Carrying-straps; Pack-carrying harnesses
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1116Determining posture transitions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1121Determining geometric values, e.g. centre of rotation or angular range of movement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1128Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/683Means for maintaining contact with the body
    • A61B5/6831Straps, bands or harnesses
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0062Monitoring athletic performances, e.g. for determining the work of a user on an exercise apparatus, the completed jogging or cycling distance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/23Recognition of whole body movements, e.g. for sport training
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802Sensor mounted on worn items
    • A61B5/6803Head-worn items, e.g. helmets, masks, headphones or goggles
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6844Monitoring or controlling distance between sensor and tissue

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Physiology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Hardware Design (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Multimedia (AREA)
  • Textile Engineering (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Geometry (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本發明提供一種智慧型背帶及定義人體姿態的方法。智慧型背帶包括第一肩背帶、第二肩背帶、胸綁帶、鏡頭及微控制器。胸綁帶具有第一端及第二端,其中胸綁帶的第一端連接於第一肩背帶,胸綁帶的第二端連接於第二肩背帶,且胸綁帶包括剛性區段。鏡頭設置於剛性區段的表面並面向第一方向,拍攝位於第一方向上的物件的多個物件影像。微控制器從鏡頭接收前述物件影像,基於前述物件影像偵測物件與鏡頭之間的距離,並依據距離調整提供於智慧型背帶的穿戴者的畫面。

Description

智慧型背帶及定義人體姿態的方法
本發明是有關於一種智慧型背帶及定義人體姿態的方法,且特別是有關於一種基於Inside-out追蹤技術的智慧型背帶及定義人體姿態的方法。
隨著虛擬實境(virtual reality,VR)技術的成熟,消費者的需求不再僅是視覺上的衝擊,而期望能更進一步與VR內容(content)互動。因此,3D感測、人臉辨識等相關技術也跟著成為熱門的討論主題。目前市面上已可見許多輸入裝置,但多半體現為手套或是槍/武器等等的型態,且較難看到關於姿態判定的實際應用,例如判定手臂揮動姿態等。雖然早期曾有相關業者提出用於偵測使用者肢體運動以及移動狀態的偵測配件(例如,Kinect),但由於此類產品需要較大的淨空區域及距離才能辨識,在使用上並不便利,因此目前已無進一步的研發計畫。
在VR服務中,目前較常使用Phase Space以及Light House這兩種光學定位技術來實現對於3D移動物件的位置感測。上述兩種技術在實務上均是在環境中的定點以及頭戴式顯示器(head mounted display,HMD)上設置定位光源以及接收器,差別在於Phase Space的定位光源係設置於HMD上,而Light House則是將接收器設置在HMD上。然而,上述兩種方式均屬於Outside-in追蹤類型,亦即需在外部環境架設攝影機或是紅外光發射源,進而用以與目標(HMD/人體)做溝通。
然而,Outside-in追蹤普遍具有以下缺點:(1)價格較高━需額外設置軌道、攝影機或紅外光源等硬體;(2)環境需求高━環境需大且淨空,使得人們較難騰出一塊淨空區域專門用於進行VR活動;(3)架設困難━可能需在周遭環境中進行打洞或上釘等;(4)便利性低━只能限定在已架設好的環境使用,且安裝校正考驗技術能力。
相較之下,Inside-out追蹤技術則是僅透過人體佩戴的穿戴式裝置即可判斷外界狀況,故不會產生上述提到的問題。因此,對於本領域技術人員而言,如何研發更佳的Inside-out追蹤技術實為一項重要議題。
有鑑於此,本發明提出一種智慧型背帶及定義人體姿態的方法,其可基於Inside-out追蹤技術來提升使用者使用VR的體驗。
本發明提供一種智慧型背帶,包括第一肩背帶、第二肩背帶、胸綁帶、至少一鏡頭及微控制器。胸綁帶具有第一端及第二端,其中胸綁帶的第一端連接於第一肩背帶,胸綁帶的第二端連接於第二肩背帶,且胸綁帶包括一剛性區段。至少一鏡頭,設置於剛性區段的表面並面向一第一方向,拍攝位於第一方向上的一物件的多個物件影像。微控制器耦接於至少一鏡頭,從至少一鏡頭接收前述物件影像,基於前述物件影像偵測物件與至少一鏡頭之間的一距離,並依據距離調整提供於智慧型背帶的一穿戴者的一畫面。
本發明提供一種智慧型背帶,包括一第一肩背帶、一第二肩背帶、一胸綁帶、多個姿態偵測模組及一微控制器。胸綁帶具有第一端及第二端,其中胸綁帶的第一端連接於第一肩背帶,胸綁帶的第二端連接於第二肩背帶。多個姿態偵測模組,對稱地設置於第一肩背帶及第二肩背帶上,或是對稱地設置於胸綁帶上,其中各姿態偵測模組用於偵測在一特定方向上的一距離變化。微控制器耦接於前述姿態偵測模組,並依據各姿態偵測模組偵測到的距離變化定義智慧型背帶的一穿戴者的一人體姿態。
本發明提供一種定義人體姿態的方法,適於包括一第一肩背帶、一第二肩背帶、一胸綁帶、多個姿態偵測模組及一微控制器的一智慧型背帶。所述方法包括:由各姿態偵測模組偵測在一特定方向上的一距離變化,其中前述姿態偵測模組對稱地設置於第一肩背帶及第二肩背帶上,或是對稱地設置於胸綁帶上;以及依據各姿態偵測模組偵測到的距離變化定義智慧型背帶的一穿戴者的一人體姿態。
基於上述,本發明實施例提出的智慧型背帶及定義人體姿態的方法可基於Inside-out追蹤技術來實現前方物件的距離偵測、穿戴者人體姿態(例如,腿部姿態)及偵測穿戴者手臂的揮動狀態及開合狀態等功能,藉以免除Outside-in追蹤技術中可能產生的缺點。
為讓本發明的上述特徵和優點能更明顯易懂,下文特舉實施例,並配合所附圖式作詳細說明如下。
請參照圖1A及圖1B,其中圖1A是依據本發明第一實施例繪示的系統架構圖,圖1B是依據圖1A繪示的穿戴情境圖。在第一實施例中,系統10包括智慧型背帶100、主機110及HMD 112。智慧型背帶100可如圖1B所示地穿戴於穿戴者199身上,並可透過智慧型背帶100上的各式感測元件進行偵測,並將所偵測到的信號及/或數據反饋至主機110,並相應地控制HMD 112提供予穿戴者199觀看的畫面(例如是VR內容)。在不同的實施例中,主機110可以是個人電腦、背包式電腦或其他可用於在智慧型背帶100及HMD 112之間傳遞信號及控制HMD 112所顯示畫面的裝置,但本發明可不限於此。
如圖1A及圖1B所示,智慧型背帶100包括第一肩背帶102a、第二肩背帶120b、胸綁帶104、鏡頭106a、106b及微控制器108。為便於說明,以下假設第一肩背帶102a係穿戴於穿戴者199的右肩,第二肩背帶係穿戴於穿戴者199的左肩,但其並非用以限定本發明可能的實施方式。
胸綁帶104具有第一端及第二端,其中胸綁帶104的第一端連接於第一肩背帶102a,胸綁帶104的第二端連接於第二肩背帶102b。在第一實施例中,胸綁帶104包括剛性區段104a,其可理解為一不具彈性且不會因外力而產生形變的區段。此外,為使智慧型背帶100可適於穿戴在具各種身材的穿戴者199身上,胸綁帶104可更具有彈性區段104b及104c,其中彈性區段104b可連接於剛性區段104a及第一肩背帶102a之間,而彈性區段104c可連接於剛性區段104a及第二肩背帶102b之間,用以隨著穿戴者199的身材而伸縮。
鏡頭106a及106b設置於剛性區段104a的表面並面向一第一方向D1(例如是穿戴者199的前方)。相應地,鏡頭106a及106b可拍攝位於第一方向D1上的物件(例如是位於穿戴者199前方的物體)的多個物件影像。
微控制器108耦接於鏡頭106a及106b,從鏡頭106a及106b接收前述物件影像,基於前述物件影像偵測物件與鏡頭106a及106b之間的距離,並依據距離調整提供於智慧型背帶100的穿戴者199的畫面。
在第一實施例中,微控制器108基於鏡頭106a及106b所拍攝的物件影像偵測上述距離的機制可參照台灣專利申請號第10712182號,其全文以引用方式併入本文中。並且,由於鏡頭106a及106b係設置於不具彈性且不會產生形變的剛性區域104a上,因而使得鏡頭106a及106b之間的相對距離可維持不變。在此情況下,可令微控制器108基於前述物件影像所偵測到的距離更為準確。由於微控制器108可將所偵測到的距離傳輸至主機110及HMD 112以調整提供予穿戴者199的畫面,因此亦可相應地令前述畫面呈現更佳的效果,從而提升使用者體驗。
從另一觀點而言,由於智慧型背帶100可進行距離的偵測以協助調整提供予穿戴者199的畫面,因此形同可透過Inside-out追蹤技術來提供將VR體驗升級為擴增實境(augmented reality,AR)或混合實境(mixed reality,MR)的效果。
在其他實施例中,智慧型背帶100亦可透過例如飛時測距(Time of Flight,ToF)、結構光(structure light)或立體攝影機(stereo camera)來實現上述的距離偵測機制,但本發明可不限於此。
請參照圖2A及圖2B,其中圖2A是依據本發明第二實施例繪示的系統架構圖,圖2B是依據本發明第二實施例繪示的智慧型背帶前視圖。相較於第一實施例,第二實施例的智慧型背帶100a更包括耦接於微控制器108的姿態偵測模組210、220、230及240。如圖2B所示,姿態偵測模組210及220可對稱地設置於第一肩背帶102a及第二肩背帶102b上彼此對應的兩個位置,用以偵測智慧型背帶100a的穿戴者的人體姿態。相似地,姿態偵測模組230及240可對稱地設置於剛性區段104a上彼此對應的兩個位置,用以偵測智慧型背帶100a的穿戴者的人體姿態。在第二實施例中,姿態偵測模組210、220、230及240的架構及運作原理相似,以下即搭配圖2C來進行詳細說明。
請參照圖2C,其是依據圖2B繪示的設置於第一肩背帶或第二肩背帶上的姿態偵測模組側視圖。如圖2C所示,各姿態偵測模組210及220可包括基座250a、旋鈕250b及距離感測器250c。基座205a包括底面、側面及頂面,其中基座250a的底面連接於第一肩背帶102a或第二肩背帶102b表面上,基座250a的頂面朝向第一方向D1。旋鈕250b包括底面、側面及頂面,其中旋鈕250a的底面可旋轉地連接於基座250a的側面,旋鈕250b的頂面朝向第二方向D2,其中第二方向D2垂直於第一方向D1。距離感測器250c設置於旋鈕250b的側面,並因應於旋鈕250b的旋轉而在不同的方向進行距離偵測。
在一實施例中,若穿戴者屬於中等身材,則當其將智慧型背帶100a穿戴於身上時,距離感測器250c應能依圖2C所示方式朝第三方向D3(例如,垂直往下)進行距離偵測。
然而,在其他實施例中,若穿戴者的身材較為寬大,則可能相應地令距離感測器250c改變為朝其他方向進行偵測。在此情況下,穿戴者例如可依VR內容中的指示而透過旋轉旋鈕250b的方式來調整距離感測器250c的進行距離偵測的第三方向D3,但本發明可不限於此。
請參照圖2D,其是依據圖2C繪示的智慧型背帶的穿戴情境側視圖。在本實施例中,由於第一肩背帶102a係穿戴於穿戴者199的右肩及左肩上,且姿態偵測模組210的距離感測器(未繪示)係垂直往下進行距離偵測,因此當穿戴者抬起右膝時,姿態偵測模組210的距離感測器將相應地偵測到距離變化。同理,當使用者抬起左膝時,位於第二肩背帶102b上的距離感測器亦可相應地偵測到距離變化。
在一實施例中,姿態偵測模組210及220的距離感測器可分別將所偵測到的第一特定距離及第二特定距離傳送至微控制器108,以令微控制器108可基於第一特定距離及第二特定距離的變化來得知穿戴者199的膝蓋是否已抬起,但可不限於此。
請參照圖2E,其是依據圖2B繪示的設置於剛性區段上的姿態偵測模組側視圖。在本實施例中,姿態偵測模組230及240除了所設置的位置不同於圖2C的姿態偵測模組210及220之外,結構與運作方式皆相同於姿態偵測模組210及220,故相關細節於此不再贅述。
請參照圖3,其是依據本發明第二實施例繪示的指定動作示意圖。在本實施例中,圖3所示的連續動作可作為VR內容而提供予第二實施例的智慧型背帶100a的穿戴者199觀看,以要求穿戴者199作出相同於圖3的指定動作(例如是蹲下再起立的動作)。在穿戴者199依圖3執行指定動作的過程中,姿態偵測模組210及220(或是姿態偵測模組230及240)即可於所測得的距離變化而獲得專屬於穿戴者199的校正基準值。舉例而言,在穿戴者199蹲下時,姿態偵測模組210及220所測得的距離(例如,50公分)即對應於穿戴者199的蹲踞姿態,並可相應地將此距離設定為校正基準值。因此,當姿態偵測模組210及220日後再次測得等於校正基準值的距離時,微控制器108即可得知穿戴者199目前正呈現蹲踞姿態。舉另一例而言,在穿戴者199起立後,姿態偵測模組210及220所測得的距離(例如,150公分)即對應於穿戴者199的站立姿態,並可相應地將此距離設定為校正基準值。因此,當姿態偵測模組210及220日後再次測得等於校正基準值的距離時,微控制器108即可得知穿戴者199目前正呈現站立姿態。
請參照圖4,其是依據本發明第二實施例繪示的偵測人體姿態示意圖。在本實施例中,假設穿戴者400的身上穿戴有圖2B所示的智慧型背帶100a(未繪示),且智慧型背帶100a已透過圖3所示的機制取得穿戴者400處於站立姿態的校正基準值(例如,150公分)。因此,當分別位於穿戴者400右側及左側的姿態偵測模組210及220皆偵測到150公分時,微控制器108即可得知穿戴者400目前呈現為站立姿態。
此外,若姿態偵測模組210偵測到的第一特定距離(例如50公分)小於姿態偵測模組220偵測到的第二特定距離(例如,150公分),微控制器108即可得知穿戴者400的右膝已抬起。相反地,若姿態偵測模組210偵測到的第一特定距離(例如150公分)大於姿態偵測模組220偵測到的第二特定距離(例如,50公分),微控制器108即可得知穿戴者400的左膝已抬起,但本發明可不限於此。
請參照圖5,其是依據本發明第二實施例繪示的調整畫面視角的示意圖。在本實施例中,當穿戴者穿戴圖2B所示的智慧型背帶100a時,微控制器108可依據姿態偵測模組210及220(或姿態偵測模組230及240)分別測得的第一特定距離及第二特定距離改變提供予穿戴者的畫面的視角高度。舉例而言,微控制器108可依據穿戴者在站立姿態時所測得的第一特定距離及第二特定距離推得穿戴者的身高,並相應地調高或調低VR內容的畫面視角。若穿戴者的身高較矮,則微控制器108可相應地將VR內容的畫面視角調整為圖5左方所示的低視角。相反地,若穿戴者的身高較高,則微控制器108可相應地將VR內容的畫面視角調整為圖5右方所示的高視角,但本發明可不限於此。
由上可知,透過設置多個姿態偵測模組的方式,本發明的智慧型背帶可更具備偵測穿戴者人體姿態的功能,從而達到透過Inside-out追蹤技術來提供將VR體驗升級為AR或MR的效果。並且,還可基於姿態偵測模組測得的距離來相應改變提供予穿戴者的畫面視角,進而讓穿戴者在VR內容中看到的畫面能夠更貼現實生活中所見的景像,改善使用者體驗。
此外,習知技術中存在一種投影技術,其可透過在地面上擺放特定的發光球體作為虛像投影的基準點。藉此,可讓投影出來的虛擬人物呈現在適當的高度及位置。然而,本發明不需透過上述發光球體即可實現相同的效果,從而降低了相關的實現成本及複雜度。
請參照圖6,其是依據本發明第二實施例繪示的在畫面中顯示視覺輔助格線的示意圖。在本實施例中,在姿態偵測模組210及220(或姿態偵測模組230及240)分別測得的第一特定距離及第二特定距離(以下以距離DD代稱)之後,微控制器108可依據預設的角度
Figure 02_image001
Figure 02_image003
Figure 02_image005
Figure 02_image007
Figure 02_image009
而計算出距離X1、X2、X3、X4、X5實際對應的距離,並據以調整在VR內容中呈現予穿戴者參考的視覺輔助格線610及620。
舉例而言,假設距離DD為140公分,則其對應的視覺輔助格線610可如圖6左上方所示。在本實施例中,視覺輔助格線610可包括多條格線,而其中由近至遠的格線可分別對應於基於距離DD(即,140公分)所計算而得的距離X1~X5。藉此,可令穿戴者更易於透過視覺輔助格線610判斷VR內容中的相對距離。
舉另一例而言,假設距離DD為160公分,則其對應的視覺輔助格線620可如圖6右上方所示。在本實施例中,視覺輔助格線620可包括多條格線,而其中由近至遠的格線可分別對應於基於距離DD(即,160公分)所計算而得的距離X1~X5。藉此,可令穿戴者更易於透過視覺輔助格線620判斷VR內容中的相對距離。
請參照圖7A及圖7B,其中圖7A是依據本發明第三實施例繪示的系統架構圖,圖7B是依據本發明第三實施例繪示的智慧型背帶的穿戴情境圖。相較於第一實施例,第三實施例的智慧型背帶100b更包括耦接於微控制器108的第一距離感測器711a、712a、713a、714a、715a及耦接於微控制器108的第二距離感測器711b、712b、713b、714b及715b。第一距離感測器711a~715a縱向排列於第一肩背帶102a的外側面上,並用以朝第二方向D2(例如是穿戴者199的右邊)偵測多個第一距離。相似地,第二距離感測器711b~715b縱向排列於第二肩背帶102b的外側面上,並用以朝第四方向D4(例如是穿戴者199的左邊)偵測多個第二距離。
在第三實施例中,微控制器108可依據前述第一距離定義穿戴者右臂的揮動狀態,以下將輔以圖8進行說明。
請參照圖8,其是依據本發明第三實施例繪示的偵測手臂動狀態示意圖。在圖8中,假設穿戴者800身上穿戴有圖7B所示的智慧型背帶100b(未繪示),並依序由左至右作出圖8所示的抬起右臂的動作。在此情況下,第一距離感測器711a~715a將依序偵測到第一距離,因此微控制器108可據以判定穿戴者800已抬起右臂。
相似地,微控制器108亦可依據前述第二距離定義穿戴者199左臂的揮動狀態,而其細節與圖8所示內容相似,故於此不再贅述。
在第三實施例中,微控制器108還可依據前述第一距離及第二距離定義穿戴者雙臂的開合狀態,以下將輔以圖9進行說明。
請參照圖9,其是依據本發明第三實施例繪示的偵測手臂開合狀態示意圖。在圖9中,假設穿戴者900身上穿戴有圖7B所示的智慧型背帶100b(未繪示),並依序由左至右作出圖9所示的擴胸動作。由於第一距離感測器713a及第二距離感測器713b的位置約略對應穿戴者900的雙臂在圖9中的初始位置,且較靠近第一肩背帶102a(未繪示)及第二肩背帶102b(未繪示),因此第一距離感測器713a及第二距離感測器713b可分別偵測到較短的第一距離及第二距離。
接著,在穿戴者900將雙臂下放的過程中,由於穿戴者900的雙臂將會逐漸遠離第一肩背帶102a及第二肩背帶102b,第一距離感測器713a及第二距離感測器713b分別測得的第一距離及第二距離將逐漸地增加,如圖9所示。相應地,微控制器108即可依據上述第一距離及第二距離的變化而得知穿戴者900的雙臂目前呈現打開的狀態。
同理,當穿戴者900逐漸合上雙臂時,第一距離感測器713a及第二距離感測器713b分別測得的第一距離及第二距離將逐漸地減少。據此,微控制器108即可依據上述第一距離及第二距離的變化而得知穿戴者900正逐漸收回雙臂。
由上可知,透過設置於肩背帶外側面的一排距離感測器,本發明提出的智慧型背帶還可偵測穿戴者手臂的揮動狀態及開合狀態,從而達到透過Inside-out追蹤技術來提供將VR體驗升級為AR或MR的效果。
在其他實施例中,還可將第一、第二及第三實施例予以結合,進而讓智慧型背帶同時具有偵測前方物件距離、偵測穿戴者人體姿態(例如,腿部姿態)及偵測穿戴者手臂的揮動狀態及開合狀態的功能,其細節可參照以上實施例的相關說明,於此不再贅述。
請參照圖10,其是依據本發明之一實施例繪示的定義人體姿態方法的流程圖。首先,在步驟S1010中,可由各姿態偵測模組偵測在特定方向上的距離變化。之後,在步驟S1020中,可依據各姿態偵測模組偵測到的距離變化定義智慧型背帶的穿戴者的人體姿態。圖10各步驟的細節可參照以上實施例中的說明,於此不再贅述。
綜上所述,本發明實施例提出的智慧型背帶可基於Inside-out追蹤技術來實現前方物件的距離偵測、穿戴者人體姿態(例如,腿部姿態)及偵測穿戴者手臂的揮動狀態及開合狀態等功能,從而可在較低成本、低環境需求、低架設困難度及高便利性的情況下,達到將VR體驗升級為AR或MR的效果。
雖然本發明已以實施例揭露如上,然其並非用以限定本發明,任何所屬技術領域中具有通常知識者,在不脫離本發明的精神和範圍內,當可作些許的更動與潤飾,故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
10:系統100、100a、100b:智慧型背帶102a:第一肩背帶120b:第二肩背帶104:胸綁帶104a:剛性區段104b、104c:彈性區段106a、106b:鏡頭108:微控制器110:主機112:HMD199、400、800、900:穿戴者210、220、230、240:姿態偵測模組250a:基座250b:旋鈕250c:距離感測器610、620:視覺輔助格線711a、712a、713a、714a、715a:第一距離感測器711b、712b、713b、714b、715b:第二距離感測器D1:第一方向D2:第二方向D3:第三方向D4:第四方向S1010、S1020:步驟X1、X2、X3、X4、X5、DD:距離
Figure 02_image001
Figure 02_image003
Figure 02_image005
Figure 02_image007
Figure 02_image009
:角度
圖1A是依據本發明第一實施例繪示的系統架構圖,圖1B是依據圖1A繪示的穿戴情境圖。 圖2A是依據本發明第二實施例繪示的系統架構圖。 圖2B是依據本發明第二實施例繪示的智慧型背帶前視圖。 圖2C是依據圖2B繪示的設置於第一肩背帶或第二肩背帶上的姿態偵測模組側視圖。 圖2D是依據圖2C繪示的智慧型背帶的穿戴情境側視圖。 圖2E是依據圖2B繪示的設置於剛性區段上的姿態偵測模組側視圖。 圖3是依據本發明第二實施例繪示的指定動作示意圖。 圖4是依據本發明第二實施例繪示的偵測人體姿態示意圖。 圖5是依據本發明第二實施例繪示的調整畫面視角的示意圖。 圖6是依據本發明第二實施例繪示的在畫面中顯示視覺輔助格線的示意圖。 圖7A是依據本發明第三實施例繪示的系統架構圖。 圖7B是依據本發明第三實施例繪示的智慧型背帶的穿戴情境圖。 圖8是依據本發明第三實施例繪示的偵測手臂動狀態示意圖。 圖9是依據本發明第三實施例繪示的偵測手臂開合狀態示意圖。 圖10是依據本發明之一實施例繪示的定義人體姿態方法的流程圖。
100:智慧型背帶
102a:第一肩背帶
120b:第二肩背帶
104:胸綁帶
104a:剛性區段
104b、104c:彈性區段
106a、106b:鏡頭
108:微控制器
112:HMD
199:穿戴者
D1:第一方向

Claims (10)

  1. 一種智慧型背帶,包括:一第一肩背帶;一第二肩背帶;一胸綁帶,其具有第一端及第二端,其中該胸綁帶的該第一端連接於該第一肩背帶,該胸綁帶的該第二端連接於該第二肩背帶,且該胸綁帶包括一剛性區段;至少一鏡頭,設置於該剛性區段的表面並面向一第一方向,拍攝位於該第一方向上的一物件的多個物件影像;一微控制器,其耦接於該至少一鏡頭,從該至少一鏡頭接收該些物件影像,基於該些物件影像偵測該物件與該至少一鏡頭之間的一距離,並依據該距離調整提供於該智慧型背帶的一穿戴者的一畫面;多個姿態偵測模組,連接於該微控制器,其中該些姿態偵測模組對稱地設置於該第一肩背帶及該第二肩背帶上,或是對稱地設置於該剛性區段上,用於偵測該智慧型背帶的該穿戴者的一人體姿態,其中各該姿態偵測模組包括:一基座,包括底面、側面及頂面,其中該基座的底面連接於該第一肩背帶、該第二肩背帶或該剛性區段的表面上,該基坐的頂面朝向該第一方向; 一旋鈕,包括底面、側面及頂面,其中該旋鈕的底面可旋轉地連接於該基座的側面,該旋鈕的頂面朝向一第二方向,其中該第二方向垂直於該第一方向;以及一距離感測器,設置於該旋鈕的側面,並因應於該旋鈕的旋轉而在不同的方向進行一距離偵測。
  2. 如申請專利範圍第1項所述的智慧型背帶,其中該胸綁帶更包括至少一彈性區段,其連接於該剛性區段與該第一肩背帶及該第二肩背帶的至少其中之一之間。
  3. 如申請專利範圍第1項所述的智慧型背帶,其中該些姿態偵測模組包括:一第一姿態偵測模組,設置於一第一位置,用於偵測在一第三方向上的一第一特定距離,並將該第一特定距離提供予該微控制器;一第二姿態偵測模組,設置於一第二位置,用於偵測在該第三方向上的一第二特定距離,並將該第二特定距離提供予該微控制器,其中該第二位置對應於該第一位置。
  4. 如申請專利範圍第3項所述的智慧型背帶,其中當該第一特定距離與該第二特定距離皆為一校正基準值時,該微控制器判定該穿戴者的該人體姿態為一站立姿態。
  5. 如申請專利範圍第3項所述的智慧型背帶,其中該第一位置及該第二位置分別對應於該穿戴者的右側及左側,且當該第一特定距離小於該第二特定距離時,該微控制器判定該穿戴者的 右膝已抬起,而當該第一特定距離大於該第二特定距離時,該微控制器判定該穿戴者的左膝已抬起。
  6. 如申請專利範圍第3項所述的智慧型背帶,其中該微控制器依據該第一特定距離及該第二特定距離改變提供予該穿戴者的該畫面的一視角高度。
  7. 如申請專利範圍第3項所述的智慧型背帶,其中該畫面更包括多個視覺輔助格線,且該微控制器依據該第一特定距離及該第二特定距離調整該些視覺輔助格線對應的多個視覺距離。
  8. 如申請專利範圍第1項所述的智慧型背帶,更包括耦接於該微控制器的多個第一距離感測器,縱向排列於該第一肩背帶的外側面上,並用以朝一第二方向偵測多個第一距離,其中該第一肩背帶穿戴於該穿戴者的第一側,且該微控制器依據該些第一距離定義該穿戴者在該第一側的手臂的一揮動狀態。
  9. 如申請專利範圍第8項所述的智慧型背帶,其中:當該些第一距離感測器由下而上依序偵測到該些第一距離時,該微控制器判定該穿戴者位於該第一側的手臂已向上揮動;當該些第一距離感測器由上而下依序偵測到該些第一距離時,該微控制器判定該穿戴者位於該第一側的手臂已向下揮動。
  10. 如申請專利範圍第8項所述的智慧型背帶,更包括耦接於該微控制器的多個第二距離感測器,縱向排列於該第二肩背帶的外側面上,並用以朝一第四方向偵測多個第二距離,其中該第二肩背帶穿戴於該穿戴者的第二側,該第四方向相反於該第二方 向,且該微控制器依據該些第一距離及該些第二距離定義該穿戴者的一手臂開合狀態。
TW107131373A 2018-09-06 2018-09-06 智慧型背帶及定義人體姿態的方法 TWI731263B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW107131373A TWI731263B (zh) 2018-09-06 2018-09-06 智慧型背帶及定義人體姿態的方法
US16/208,590 US11422618B2 (en) 2018-09-06 2018-12-04 Smart strap and method for defining human posture

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW107131373A TWI731263B (zh) 2018-09-06 2018-09-06 智慧型背帶及定義人體姿態的方法

Publications (2)

Publication Number Publication Date
TW202010556A TW202010556A (zh) 2020-03-16
TWI731263B true TWI731263B (zh) 2021-06-21

Family

ID=69720363

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107131373A TWI731263B (zh) 2018-09-06 2018-09-06 智慧型背帶及定義人體姿態的方法

Country Status (2)

Country Link
US (1) US11422618B2 (zh)
TW (1) TWI731263B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111814700B (zh) * 2020-07-13 2023-09-26 苏州玥林信息科技有限公司 一种基于儿童行为特征的行为动作识别方法
CN117218728A (zh) * 2023-11-09 2023-12-12 深圳市微克科技有限公司 一种智能穿戴设备的身体姿势识别方法、系统及介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100006611A1 (en) * 2008-07-11 2010-01-14 Michael Knowles Support apparatus
TW201617787A (zh) * 2014-11-07 2016-05-16 鴻海精密工業股份有限公司 手勢創建系統及方法
CN106648116A (zh) * 2017-01-22 2017-05-10 隋文涛 一种基于动作捕捉的虚拟现实综合系统
CN107977070A (zh) * 2016-10-25 2018-05-01 中兴通讯股份有限公司 一种手势操控虚拟现实视频的方法、装置和系统

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8970569B2 (en) * 2005-03-01 2015-03-03 Eyesmatch Ltd Devices, systems and methods of virtualizing a mirror
DE102008013707A1 (de) 2008-03-11 2009-09-24 Dräger Medical AG & Co. KG Gurt mit Sensoren
TWI454966B (zh) 2012-04-24 2014-10-01 Wistron Corp 手勢控制方法及手勢控制裝置
US20190265802A1 (en) * 2013-06-20 2019-08-29 Uday Parshionikar Gesture based user interfaces, apparatuses and control systems
US9729864B2 (en) 2013-09-30 2017-08-08 Sony Interactive Entertainment Inc. Camera based safety mechanisms for users of head mounted displays
US10933209B2 (en) 2013-11-01 2021-03-02 Georama, Inc. System to process data related to user interactions with and user feedback of a product while user finds, perceives, or uses the product
CN105866949B (zh) 2015-01-21 2018-08-17 成都理想境界科技有限公司 能自动调节景深的双目ar头戴设备及景深调节方法
CN206470692U (zh) 2016-12-29 2017-09-05 北京诺亦腾科技有限公司 光混动捕装置及虚拟现实系统
WO2019045996A1 (en) * 2017-08-31 2019-03-07 The Regents Of The University Of California SYSTEMS FOR MONITORING AND ANALYZING MULTI-SENSOR CARDIAC FUNCTION

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100006611A1 (en) * 2008-07-11 2010-01-14 Michael Knowles Support apparatus
TW201617787A (zh) * 2014-11-07 2016-05-16 鴻海精密工業股份有限公司 手勢創建系統及方法
CN107977070A (zh) * 2016-10-25 2018-05-01 中兴通讯股份有限公司 一种手势操控虚拟现实视频的方法、装置和系统
CN106648116A (zh) * 2017-01-22 2017-05-10 隋文涛 一种基于动作捕捉的虚拟现实综合系统

Also Published As

Publication number Publication date
US11422618B2 (en) 2022-08-23
US20200077926A1 (en) 2020-03-12
TW202010556A (zh) 2020-03-16

Similar Documents

Publication Publication Date Title
US11670267B2 (en) Computer vision and mapping for audio applications
US10488659B2 (en) Apparatus, systems and methods for providing motion tracking using a personal viewing device
US10162408B2 (en) Head mounted display, detection device, control method for head mounted display, and computer program
KR20230074780A (ko) 검출된 손 제스처들에 응답한 터치리스 포토 캡처
RU2643222C2 (ru) Устройство, способ и система обеспечения увеличенного дисплея с использованием шлема-дисплея
US11689877B2 (en) Immersive augmented reality experiences using spatial audio
JP2018511098A (ja) 複合現実システム
US20190011983A1 (en) Information processing device, information processing method, and program
US11880093B2 (en) Hyperextending hinge for wearable electronic device
TWI731263B (zh) 智慧型背帶及定義人體姿態的方法
TW202024864A (zh) 動作追蹤系統及方法
KR20230029923A (ko) 롤링 셔터 카메라들을 사용하는 시각적 관성 추적
CN110275602A (zh) 人工现实系统和头戴式显示器
US20230359038A1 (en) Eyewear having unsynchronized rolling shutter cameras
CN115735150A (zh) 增强现实眼戴器与3d服装
US11803234B2 (en) Augmented reality with eyewear triggered IoT
US20240004197A1 (en) Dynamic sensor selection for visual inertial odometry systems
US20240107256A1 (en) Augmented reality spatial audio experience
US20230252918A1 (en) Eyewear projector brightness control
US11982814B2 (en) Segmented illumination display
CN110934594B (zh) 智能型背带及定义人体姿势的方法
US20230063078A1 (en) System on a chip with simultaneous usb communications
US20230319476A1 (en) Eyewear with audio source separation using pose trackers
US20240050831A1 (en) Instructor avatars for augmented reality experiences
US20240341591A1 (en) Eyewear with inter-pupillary distance estimation