TWI729602B - 頭戴式顯示系統及其影像產生方法 - Google Patents

頭戴式顯示系統及其影像產生方法 Download PDF

Info

Publication number
TWI729602B
TWI729602B TW108144230A TW108144230A TWI729602B TW I729602 B TWI729602 B TW I729602B TW 108144230 A TW108144230 A TW 108144230A TW 108144230 A TW108144230 A TW 108144230A TW I729602 B TWI729602 B TW I729602B
Authority
TW
Taiwan
Prior art keywords
image
physiological information
display device
user
head
Prior art date
Application number
TW108144230A
Other languages
English (en)
Other versions
TW202023274A (zh
Inventor
吳健民
黎煥欣
謝政翰
Original Assignee
宏達國際電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 宏達國際電子股份有限公司 filed Critical 宏達國際電子股份有限公司
Publication of TW202023274A publication Critical patent/TW202023274A/zh
Application granted granted Critical
Publication of TWI729602B publication Critical patent/TWI729602B/zh

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02405—Determining heart rate variability
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02438—Detecting, measuring or recording pulse rate or heart rate with portable devices, e.g. worn by the patient
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/486—Bio-feedback
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4866—Evaluating metabolism
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4884—Other medical applications inducing physiological or psychological stress, e.g. applications for stress testing
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802—Sensor mounted on worn items
    • A61B5/6803—Head-worn items, e.g. helmets, masks, headphones or goggles
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • A61B5/7267—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7445—Display arrangements, e.g. multiple display units
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7455—Details of notification to user or communication with user or patient ; user input means characterised by tactile indication, e.g. vibration or electrical stimulation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10—Intensity circuits
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0626—Adjustment of display parameters for control of overall brightness
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0666—Adjustment of display parameters for control of colour parameters, e.g. colour temperature
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user

Abstract

一種頭戴式顯示系統及其影像產生方法。頭戴式顯示系統包括一顯示裝置、一移動感測器、一框架、一影像產生系統以及一生理資訊感測器。移動感測器感測物體移動或感測顯示裝置的移動。框架用以固定顯示裝置。影像產生系統耦接顯示裝置。影像產生系統經由顯示裝置顯示一影像。影像中包括一第一部分。第一部分與移動感測器的感測結果無關。生理資訊感測器配置於框架且耦接影像產生系統。影像產生系統根據生理資訊感測器感測的生理資訊調整顯示裝置顯示的影像中的第一部分。

Description

頭戴式顯示系統及其影像產生方法
本發明是有關於一種系統與方法，且特別是有關於一種頭戴式顯示系統及其影像產生方法。
近年來，頭戴式顯示裝置(Head Mounted Display, HMD)，例如擴增實境（Augmented Reality, AR）、混合實境（Mixed Reality, MR）或虛擬實境(Virtual Reality, VR)顯示器，逐漸成為市場上的熱門產品。隨著科技發展，虛擬實境技術在生活中得到了越來越多的應用。在現有技術中，當用戶希望在虛擬環境中得到逼真的與真實物體的交互體驗時，往往需要通過在特別設定的方法調整影像顯示的方式或互動的模式。當使用者在虛擬實境環境中需要與真實物體互動，例如進行遊戲時，現有技術無法提供方便的互動方法以在虛擬世界中進行遊戲。因此，需要一種能準確類比使用者與真實物體交互動作的方法。需要說明的是，在上述先前技術部分公開的資訊僅用於加強對本發明的背景的理解，因此可以包括不構成對本領域普通技術人員已知的先前技術的資訊。
本發明提供一種頭戴式顯示系統及其影像產生方法，可改善影像與使用者的生理資訊缺乏關聯性的問題。
本發明的頭戴式顯示系統包括一顯示裝置、一移動感測器、一框架、一影像產生系統以及一生理資訊感測器。移動感測器感測物體移動或感測顯示裝置的移動。框架用以固定顯示裝置。影像產生系統耦接顯示裝置。影像產生系統經由顯示裝置顯示一影像。影像中包括一第一部分。第一部分與移動感測器的感測結果無關。生理資訊感測器配置於框架且耦接影像產生系統。影像產生系統根據生理資訊感測器感測的生理資訊調整顯示裝置顯示的影像中的第一部分。
本發明的頭戴式顯示系統的影像產生方法中，頭戴式顯示系統包括一顯示裝置與一移動感測器。移動感測器感測一物體移動或感測顯示裝置的移動。頭戴式顯示系統的影像產生方法包括：感測物體移動或感測顯示裝置的移動；感測生理資訊；以及根據所感測的生理資訊調整顯示裝置顯示的一影像中的一第一部分，第一部分與移動感測器的感測結果無關。
基於上述，在本發明的頭戴式顯示系統及其影像產生方法中，會根據生理資訊調整所產生的影像，能適時依據使用者的生理狀況做出因應。
現在將參考附圖更全面地描述示例實施方式。然而，示例實施方式能夠以多種形式實施，且不應被理解為限於在此闡述的範例；相反，提供這些實施方式使得本發明將更加全面和完整，並將示例實施方式的構思全面地傳達給本領域的技術人員。所描述的特徵、結構或特性可以以任何合適的方式結合在一個或更多實施方式中。在下面的描述中，提供許多具體細節從而給出對本發明的實施方式的充分理解。然而，本領域技術人員將意識到，可以實踐本發明的技術方案而省略所述特定細節中的一個或更多，或者可以採用其它的方法、組成、裝置、步驟等。在其它情況下，不詳細示出或描述習知技術方案以避免喧賓奪主而使得本發明的各方面變得模糊。
此外，附圖僅為本發明的示意性圖解，並非一定是按比例繪製。圖中相同的符號表示相同或類似的部分，因而將省略對它們的重複描述。附圖中所示的一些方框是功能實體，不一定必須與物理或邏輯上獨立的實體相對應。可以採用軟體形式來實現這些功能實體，或在一個或多個硬體模組或積體電路中實現這些功能實體，或在不同網路和/或處理器裝置和/或微控制器裝置中實現這些功能實體。
頭戴式顯示系統包括頭戴式顯示裝置與一影像顯示系統。頭戴式顯示裝置包括框架，該框架可以包括顯示裝置及一對延伸部。延伸部一端可以連接顯示裝置，用於固定該顯示裝置於使用者的可視範圍。顯示裝置可罩覆於使用者的眼部，且可包括一光學系統（未繪示）以及保護外殼等構件，顯示裝置可以是內建顯示裝置或外加的可攜式顯示裝置（例如智能手機等）。該顯示裝置可以是密閉式的顯示系統，或者是開放式眼鏡。頭戴式顯示裝置可以獨立於影像顯示系統或整合成一裝置，例如智能手機整合影像顯示系統和頭戴式顯示裝置於頭戴式顯示裝置內。影像顯示系統可以是一電腦系統或雲端裝置或邊緣計算裝置，其與頭戴式顯示裝置結構上分開，利用無線連接的方式存取資料。顯示裝置的種類可依據頭戴式顯示系統100應用在虛擬實境系統（virtual reality system）、擴增實境系統（augmented reality system）或混合實境系統（mixed reality system）中而有所調整。而光學系統包括用於改變顯示裝置的光路的一光學元件，例如為透鏡、導光件或稜鏡等，本發明並不以此為限。
圖1是本發明一實施例的頭戴式顯示系統的示意圖。請參照圖1，本實施例的頭戴式顯示系統100包括一顯示裝置120、一移動感測器140、一框架110、一影像產生系統130以及一生理資訊感測器150。本實施例的移動感測器140感測物體移動，但在其他實施例中的移動感測器感測顯示裝置的移動。框架110用以顯示裝置120，並可於使用時固定於一使用者的頭部。影像產生系統130耦連接顯示裝置120。影像產生系統130經由顯示裝置120顯示一影像。影像中包括一第一部分。第一部分與移動感測器140的感測結果無關。這裡說的影像可以應用在擴增實境、混合實境、虛擬實境或其他形式的實境。
圖2是圖1中的框架的內面的示意圖。請參照圖1與圖2，本實施例的生理資訊感測器150配置於框架110且耦接影像產生系統130。影像產生系統130根據生理資訊感測器150感測的生理資訊調整顯示裝置120顯示的影像中的第一部分。
顯示裝置120可以是銀幕、投影裝置、LCD、光場顯示裝置或其他顯示裝置。
本實施例的移動感測器140可以設置於框架110，而在其他實施例中的移動感測器也可以設置於控制器內，或者是設置在顯示裝置120內。本實施例的移動感測器140可用於偵測使用者的手部、腳部或軀幹的移動。在其他實施例中，移動感測器也可以獨立在框架，利用攝影機捕捉使用者的移動，並且可以設置有無線裝置傳遞資料。移動感測器140可以是攝影機，也可以是光、電、磁、重力、加速度或超音波感測器。
生理資訊感測器150亦可是一獨立配件，可透過電性連接埠 (如TYPE C連接埠或USB連接埠) 連結框架110。
因為生理資訊感測器150能夠提供使用者的生理資訊給影像產生系統130，所以影像產生系統130可以根據生理資訊的狀態及變化而調整顯示裝置120所顯示的影像，能夠提供使用者更為沈浸式的體驗，也能主動式地調整影像來幫助使用者達到更佳的運動效果、觀影體驗及其他目的，還可降低影像造成使用者不適的可能性。
影像產生系統130可包括一處理單元132。處理單元處理並輸出一顯示資料。顯示資料經由顯示裝置120顯示成影像。顯示資料包括第一資料與第二資料。第一資料經由顯示裝置120顯示成影像的前述的第一部分。第二資料經由顯示裝置120顯示成影像的一第二部分。
圖3是使用於說明顯示裝置顯示的影像與移動感測器的感測結果相關的部分的示意圖。請參照圖1與圖3，前面敘述影像產生系統130根據生理資訊感測器150感測的生理資訊調整顯示裝置120顯示的影像中的第一部分，且第一部分與移動感測器140的感測結果無關。這裡所說的無關是指，不會受到移動感測器的感測結果影響的影像或影音特徵。並且，顯示裝置120顯示的影像還包括第二部分，第二部分對應到移動感測器140的移動而改變。具體來說，當使用者揮動手上的控制器160時，若使用者是在玩網球遊戲，從圖3中右側所顯示的使用者從顯示裝置120觀看到的影像可知，網球拍50會隨著控制器160的揮動而揮動，而控制器160的揮動是由移動感測器140感測獲得的。因此，顯示裝置120顯示的影像中的網球拍50的揮動或移動就屬於與移動感測器140的感測結果相關的第二部分，而不屬於前述的影像中的第一部分。但是，影像中的遊戲對手回擊的球的速度與軌跡（或者整體影像的解析度或顯示頻率）並不會因為移動感測器140感測獲得的控制器160的移動而不同，這些就是前述的影像中的第一部分。統整地說，影像產生系統130可產生多個事件並且依據這些事件產生經由顯示裝置120顯示的影像，這些事件例如是射擊遊戲中目標物的出現，影像產生系統130根據生理資訊感測器150感測的生理資訊調整這些事件產生的頻率。因此，當從生理資訊判斷使用者的心率過高時，可以減少射擊遊戲中目標物的出現頻率，反之則增加射擊遊戲中目標物的出現頻率，以幫助使用者的心率維持在適當的區間內。
相似地，影像或影音中的更新頻率、對比、亮度、色差、白平衡、色調曲線、色彩平衡、色彩飽和度、色溫、色差補正、影像尺寸、解析度、音量大小、聲音頻率範圍、響度、音調、音品、頻率、振幅、諧波等影像或影音的特徵也不會因為移動感測器140的感測結果而不同，這些特徵屬於前述的影像中的第一部分。影像產生系統130可根據生理資訊感測器150感測的生理資訊調整影像中的第一部分的前述特徵。此外，影像產生系統130也可調整內容為互動式電影的影像中的劇情發展路線。
本實施例的頭戴式顯示系統100還可包括一揚聲器172與一震動器174至少其中之一。如此一來，影像產生系統130可根據生理資訊感測器150提供的使用者的生理資訊來調整影像產生系統130產生的聲音與震動至少其中之一。例如，影像產生系統130除了調整影像外，還可改變與影像搭配的震動模式與強度或配樂來增加或降低使用者的緊張感。或者搭配揚聲器調整影像的第一部分（該第一部分與該移動感測器的感測結果無關）的聲音的音量大小、聲音頻率範圍、響度、音調、音品、頻率、振幅、諧波等。當然，也可單純在影像中加入生理資訊的數據顯示，以便使用者即時了解自己的生理狀況。後續，會舉例說明更多細節。
在本實施例中，影像產生系統130是主動式地根據使用者的生理資訊來調整影像產生系統130產生的影像，而非接受使用者的指令來調整影像。在本實施例中，影像產生系統130可包括一人工智慧模組134，人工智慧模組134根據生理資訊感測器150感測的生理資訊調整顯示裝置120顯示的影像。人工智慧模組134包括一學習模組134A，以便影像產生系統130透過自我學習來改善使用者體驗。學習模組134A根據生理資訊感測器150感測的生理資訊以及顯示裝置120顯示的影像產生一函數模組。人工智慧模組134根據生理資訊感測器150感測的生理資訊以及此函數模組調整顯示裝置120顯示的影像。學習模組134A也可根據生理資訊感測器150感測的生理資訊以及顯示裝置120顯示的影像的特徵產生一函數模組。
人工智慧模組134接收到使用者的生理資訊，例如心跳、心電圖、體溫、血液含氧量、眨眼頻率，可根據來自預先產生的函數模組將顯示刷新率從120 Hz調整為60 Hz或從60 Hz調整為120 Hz。此外，可以通過使用長短型記憶（Long Short-Term Memory, LSTM）、卷積神經網絡（Convolutional Neural Network, CNN）、循環神經網絡（RNN）、深度神經網路（DNN）與膠囊網絡的組合來訓練人工智慧模組134。人工智慧模組134也可以通過有監督或無監督的方法進行訓練。
在本實施例中，生理資訊感測器150包括光電容積圖(Photoplethysmography, PPG)感測器、心電圖(Electrocardiography, ECG)感測器、攝影機與皮膚阻抗感測器至少其中之一。PPG感測器可測量使用者的心率，而影像產生系統130可根據心率判斷使用者的運動激烈程度、情緒、卡路里消耗量等。ECG感測器可測量使用者的心電圖，可更精確獲得使用者的心率，甚至可判斷使用者是否有心律不整等異常狀況。攝影機例如可追蹤使用者的眼球運動，進而對於使用者的目光集中處的影像進行調整。皮膚阻抗感測器例如可瞭解使用者的出汗量，以推估使用者的運動量或是使用者的情緒是否亢奮、緊張。以上的生理資訊感測器150的種類僅是舉例，本發明不侷限於此。
圖4是用於顯示圖1的生理資訊感測器與使用者的額頭的對應關係。請參照圖2與圖4，本實施例的生理資訊感測器150可安裝於如圖2的位置，而使用者配戴頭戴式顯示系統100後，生理資訊感測器150將可接觸使用者的額頭，例如圖4中的區域A10。人在額頭的位置分布有許多血管，而一般使用者在使用頭戴式顯示系統100時都會將其穩固於頭部，因此生理資訊感測器150可穩定感測使用者的額頭的血管所提供的生理資訊。相較於常見的腕戴式的生理資訊感測器容易在使用者激烈運動時失去感測能力，本實施例的生理資訊感測器150能提供更穩定的感測結果。當然，本發明不侷限生理資訊感測器150的安裝位置，也可依據感測區域的不同而調整其安裝位置。
圖5是本發明另一實施例的頭戴式顯示系統的示意圖。請參照圖5，本實施例的頭戴式顯示系統200大致上與圖1的頭戴式顯示系統100相似，差異處在於本實施例的影像產生系統230為可攜帶式的，例如可配戴於使用者的身上，並以有線或無線的方式耦接顯示裝置120。此外，本實施例的移動感測器240與框架110分離，並用於感測顯示裝置120的移動，還可感測控制器160的移動。本實施例的頭戴式顯示系統200的其他部分與圖1的頭戴式顯示系統100相似，在此不再贅述。
圖6是本發明一實施例的影像產生方法流程圖。請參照圖1與圖4，本實施例的影像產生方法可應用於圖1的頭戴式顯示系統100、圖5的頭戴式顯示系統200或其他頭戴式顯示系統。本實施例的影像產生方法是先由移動感測器140感測物體移動或感測顯示裝置120的移動，步驟S110。之後，感測使用者的生理資訊，步驟S120。接著，再根據所感測的生理資訊調整顯示裝置120顯示的影像中的第一部分，第一部分與移動感測器140的感測結果無關，步驟S130。舉例來說，步驟S130中對於影像的調整可由圖1中的影像產生系統130來執行。影像產生系統130例如是一台電腦，以有線或無線的方式耦接顯示裝置120。在另一實施例中，同樣可使用如圖1的頭戴式顯示系統100來執行影像產生方法，而影像產生系統130是外部的影像內容提供系統，例如是線上遊戲或是串流影音的伺服器，同樣可以有線或無線的方式耦接顯示裝置120。然後，由外部的影像內容提供者根據所接收到的生理資訊而調整影像內容，例如是線上遊戲中的內容的緊湊度或是串流影音的劇情發展。在步驟S130中，除了調整影像，也可調整聲音與震動至少其中之一。
據此，本實施例的影像產生方法能夠提供使用者更為沈浸式的體驗，也能主動式地調整影像來幫助使用者達到更佳的運動效果、觀影體驗及其他目的，還可降低影像造成使用者不適的可能性。
圖7是本發明另一實施例的影像產生方法流程圖。請參照圖7，在此，主要以執行的事件為網球遊戲為例，但本發明不侷限於此。本實施例的影像產生方法同樣可應用於圖1的頭戴式顯示系統100、圖5的頭戴式顯示系統200或其他頭戴式顯示系統。在本實施例的影像產生方法中，首先進行步驟S210，由移動感測器140感測物體移動或感測顯示裝置120的移動。接著進行步驟S220，詢問使用者是否開始感測生理資訊。當使用者選擇不要感測生理資訊，進入步驟S230，開始事件，例如是開啟網球遊戲。需說明的是，當使用者選擇不要感測生理資訊，在步驟S230後會進入步驟S240而執行事件，但不會再繼續感測與判斷生理資訊。
當使用者選擇要感測生理資訊，則進入步驟S221，要求使用者輸入基本資料。在本實施例中，基本資料例如包括年齡、身高、體重與性別至少其中之一。接著進入步驟S222，根據使用者輸入的基本資料計算得到最大心率(Maximum Heart Rate, MHR)。最大心率例如是以220減去使用者的年齡而得。
接著進入步驟S223，啟動生理資訊感測器。然後進入步驟S224，確認能否順利感測使用者的生理資訊，例如是感測使用者的PPG。當確認無法順利感測使用者的生理資訊時，進入步驟S225，提醒使用者調整生理資訊感測器以順利感測使用者的生理資訊。舉例來說，可以提醒使用者確認頭戴式顯示系統是否已經穩固地配戴，以使生理資訊感測器能順利感測生理資訊。當確認可以順利感測使用者的生理資訊時，進入步驟S230，開始事件，例如是開啟網球遊戲。
接著進入步驟S240，執行事件，例如是玩網球遊戲。在事件進行中，進入步驟S250，判斷生理資訊中的心率是否適中。當心率不適中，可進入步驟S254，調整所產生的影像以提醒使用者其心率狀況，例如在影像中顯示使用者的心率。心率的顯示方式可以是直接顯示心率的數值，也可以是以圖像化的方式顯示心率偏離適中值的程度，或者是以文字、聲音、震動、圖像或其他形式提醒使用者如何調整心率，本發明不對此加以限制。當然，不論心率是否適中，都可以在影像中實時顯示當前卡路里累計消耗量、當前心率、最低心率、最高心率、平均心率或其他生理資訊。當心率不適中，也可進入步驟S252，進一步判斷心率是否高於一上限值。若是，則進入步驟S258，調整所產生的影像而減弱事件強度以使使用者的心率減少，例如降低網球遊戲的強度。若否，表示心率低於一下限值，則進入步驟S256，調整所產生的影像而增強事件強度以使使用者的心率增加，例如增加網球遊戲的強度。例如，增加遊戲對手回擊的球的速度，或是增加遊戲對手回擊球的頻率。在此所述的上限值例如是使用者的最大心率的80%，而下限值例如為使用者的最大心率的60%。當心率在此上限值與下限值之間，通常表示使用者的心率介於最佳的運動燃脂心率區間內，最能有效幫助使用者在遊戲中達到健身以及瘦身的效果。關於影像的調整方式，以遊戲為例，可調整遊戲的複雜度或是遊戲的節奏。當然，使用者可以自由選擇是否要開啟該功能。如不啟動此功能，則依照既有的遊戲節奏進行。反之，如開啟此功能，則系統會動態的調整遊戲相關的各項參數，來增加或是減少使用者的運動量，進而控制使用者之心率能夠落在最佳運動燃脂心率間。以網球遊戲為例，可以調整網球的球速，讓使用者可以增加或減慢回擊的速度。或者，可以根據頭戴式顯示系統所提供的位置資訊，得知目前使用者的位置，進而控制網球的方向，增加或減少使用者真實移動的腳步。或者，可以根據頭戴式顯示系統搭配的手握控制器所提供的資訊，讓使用者必須提升或減低揮拍的強度，才能讓網球可以被打得更遠或更近。在其他的遊戲中，除了像是加快或減慢遊戲的步調之外，也可增加或減少在同一時間出現的敵人等。抑或是，在拳擊遊戲中，可增加閃躲的動作，或者調整參數讓使用者需要更快的出拳才能提高命中的機會以及命中時的拳擊強度，這些都是可以讓使用者提高或降低心率的方法。
另外，假設是進行射擊遊戲，當生理資訊中顯示使用者的頭部溫度到達到一設定的最高溫，則影像產生系統根據這樣的溫度變化而降低目標物出現的頻率或是目標物對於使用者攻擊的速度。這樣可以有效的降低使用者的緊張感或腦袋的使用度，進而避免使用者產生不適的狀況。每個目標物的出現可視為一個產生的事件，調整事件的方式就產生頻率就可以影響使用者的生理狀況。
此外，在步驟S250中若判斷生理資訊中的心率適中，可進入步驟S260，計算並記錄使用者消耗的卡路里。接著，在步驟中S270，確認是否結束事件。若否，則回到步驟S240，繼續執行事件，並持續監控使用者的生理資訊。若事件結束，則進入步驟S272，在影像中顯示使用者累計消耗的卡路里。
在結束事件後，可進入步驟S280，判斷當時使用者的生理資訊中的一第一心率是否高於下限值，並記錄第一心率。在此所述的下限值是以與前述的下限值相同為例，但本發明不侷限於此。當第一心率未高於下限值，則結束測量。當第一心率高於下限值，進入步驟S282，休息一預設時間，例如1到2分鐘。然後在從記錄第一心率之後經過預設時間後，進入步驟S284，記錄當時使用者的生理資訊中的一第二心率。然後進入步驟S286，使用第一心率與第二心率而計算得出使用者的一心率恢復率。之後進入步驟S288，在影像中顯示使用者的心率恢復率。此外，當心率恢復率不理想時，也可由頭戴式顯示系統主動將相關資訊傳送給使用者預先設定的醫療或急救機構，以便在使用者有需要時能立刻得到適當的醫療或急救處置。
綜上所述，在本發明的頭戴式顯示系統及其影像產生方法中，不僅測量使用者的生理資訊，也根據測量到的生理資訊而調整所產生的影像，能夠提供使用者更為沈浸式的體驗，也能幫助使用者達成更佳的運動效果、觀影體驗及其他目的。
50:網球拍 100、200:頭戴式顯示系統 110:框架 120:顯示裝置 130、230:影像產生系統 132:處理單元 134:人工智慧模組 134A:學習模組 140、240:移動感測器 150:生理資訊感測器 160:控制器 172:揚聲器 174:震動器 A10:區域 S110~S130、S210~S225、S230、S240、S250~S260、S270、S272、S280~S288:步驟
圖1是本發明一實施例的頭戴式顯示系統的示意圖。 圖2是圖1中的框架的內面的示意圖。 圖3是使用於說明顯示裝置顯示的影像與移動感測器的感測結果相關的部分的示意圖。 圖4是用於顯示圖1的生理資訊感測器與使用者的額頭的對應關係。 圖5是本發明另一實施例的頭戴式顯示系統的示意圖。 圖6是本發明一實施例的影像產生方法流程圖。 圖7是本發明另一實施例的影像產生方法流程圖。
100:頭戴式顯示系統
110:框架
120:顯示裝置
130:影像產生系統
132:處理單元
134:人工智慧模組
134A:學習模組
140:移動感測器
160:控制器
172:揚聲器
174:震動器

Claims (21)

  1. 一種頭戴式顯示系統，包括：一顯示裝置；一移動感測器，感測一物體移動或感測該顯示裝置的移動；一框架，固定該顯示裝置；一影像產生系統，耦接該顯示裝置，該影像產生系統經由該顯示裝置顯示一影像，該影像中包括一第一部分，該第一部分與該移動感測器的感測結果無關；以及一生理資訊感測器，配置於該框架，該生理資訊感測器耦接該影像產生系統，該影像產生系統根據該生理資訊感測器感測的生理資訊調整該顯示裝置顯示的該影像中的該第一部分，其中該影像產生系統產生多個事件並且依據該些事件產生經由該顯示裝置顯示的該影像，該影像產生系統根據該生理資訊感測器感測的生理資訊調整該些事件產生的頻率。
  2. 如申請專利範圍第1項所述的頭戴式顯示系統，其中該影像產生系統包括一處理單元，該處理單元處理並輸出一顯示資料，該顯示資料經由該顯示裝置顯示成該影像。
  3. 如申請專利範圍第2項所述的頭戴式顯示系統，其中該顯示資料包括一第一資料與一第二資料，該第一資料經由該顯示裝置顯示成該影像的該第一部分，該第二資料經由該顯示裝置顯示成該影像的一第二部分，該影像的該第二部分對應到該移動感測器的移動而改變。
  4. 如申請專利範圍第1項所述的頭戴式顯示系統，其中該影像產生系統根據該生理資訊感測器感測的生理資訊調整該影像中的該第一部分的一特徵。
  5. 如申請專利範圍第4項所述的頭戴式顯示系統，其中該特徵是更新頻率、對比、亮度、色差、白平衡、色調曲線、色彩平衡、色彩飽和度、色溫、色差補正、影像尺寸或解析度。
  6. 如申請專利範圍第1項所述的頭戴式顯示系統，更包括一震動器，該影像產生系統根據該生理資訊感測器感測的生理資訊該震動器產生的震動。
  7. 如申請專利範圍第1項所述的頭戴式顯示系統，其中該影像產生系統包括一人工智慧模組，該人工智慧模組根據該生理資訊感測器感測的生理資訊調整該顯示裝置顯示的該影像。
  8. 如申請專利範圍第7項所述的頭戴式顯示系統，其中該人工智慧模組包括一學習模組，該學習模組根據該生理資訊感測器感測的生理資訊以及該顯示裝置顯示的該影像產生一函數模組，該人工智慧模組根據該生理資訊感測器感測的生理資訊以及該函數模組調整該顯示裝置顯示的該影像。
  9. 如申請專利範圍第8項所述的頭戴式顯示系統，其中該學習模組根據該生理資訊感測器感測的生理資訊以及該顯示裝置顯示的該影像的特徵產生一函數模組。
  10. 一種頭戴式顯示系統的影像產生方法，該頭戴式顯示系統包括一顯示裝置與一移動感測器，該移動感測器感測一物體 移動或感測該顯示裝置的移動，該頭戴式顯示系統的影像產生方法包括：感測該物體移動或感測該顯示裝置的移動；感測生理資訊；以及根據所感測的生理資訊調整該顯示裝置顯示的一影像中的一第一部分，該第一部分與該移動感測器的感測結果無關，其中調整該影像中的該第一部分包括產生多個事件並且依據該些事件產生經由該顯示裝置顯示的該影像，並且調整該些事件的產生頻率。
  11. 如申請專利範圍第10項所述的頭戴式顯示系統的影像產生方法，其中調整該影像中的該第一部分是調整該影像的該第一部分的特徵。
  12. 如申請專利範圍第10項所述的頭戴式顯示系統的影像產生方法，其中調整該影像中的該第一部分包括根據所感測的生理資訊以及該顯示裝置顯示的該影像產生一函數模組，該人工智慧模組根據所感測的生理資訊以及該函數模組調整該顯示裝置顯示的該影像。
  13. 如申請專利範圍第10項所述的頭戴式顯示系統的影像產生方法，其調整該影像中的該第一部分包括根據所感測的生理資訊以及該顯示裝置顯示的該影像產生一函數模組，並且根據所感測的生理資訊以及該函數模組調整該顯示裝置顯示的該影像。
  14. 如申請專利範圍第10項所述的頭戴式顯示系統的影像產生方法，依序包括： 感測該物體移動或感測該顯示裝置的移動；詢問一使用者是否開始感測生理資訊；要求該使用者輸入基本資料；根據該使用者輸入的基本資料計算得到一最大心率；啟動一生理資訊感測器並確認能否順利感測該使用者的生理資訊；當確認無法順利感測該使用者的生理資訊時，提醒該使用者調整該生理資訊感測器以順利感測該使用者的生理資訊；當確認可以順利感測該使用者的生理資訊時，執行一事件而產生該顯示裝置顯示的該影像；以及根據所感測的生理資訊調整該影像中的該第一部分。
  15. 如申請專利範圍第10項所述的頭戴式顯示系統的影像產生方法，依序包括：感測該物體移動或感測該顯示裝置的移動；感測一使用者的生理資訊；執行一事件而產生該顯示裝置顯示的該影像；在該事件進行中，判斷所感測的生理資訊中的心率是否適中；當所感測的生理資訊中的心率高於一上限值或低於一下限值，調整該影像中的該第一部分以提醒該使用者其心率狀況；以及結束該事件。
  16. 如申請專利範圍第10項所述的頭戴式顯示系統的影像產生方法，依序包括：感測該物體移動或感測該顯示裝置的移動；感測一使用者的該生理資訊；執行一事件而產生該顯示裝置顯示的該影像；在該事件進行中，判斷所感測的生理資訊中的心率是否適中；當所感測的生理資訊中的心率高於一上限值，調整該影像中的該第一部分以使該使用者的心率減少；當所感測的生理資訊中的心率低於一下限值，調整該影像中的該第一部分以使該使用者的心率增加；以及結束該事件。
  17. 如申請專利範圍第16項所述的頭戴式顯示系統的影像產生方法，其中該上限值為該使用者的最大心率的80%，且該下限值為該使用者的最大心率的60%。
  18. 如申請專利範圍第16項所述的頭戴式顯示系統的影像產生方法，更包括：當所感測的生理資訊中的心率適中，計算並記錄該使用者消耗的卡路里。
  19. 如申請專利範圍第18項所述的頭戴式顯示系統的影像產生方法，其中在結束該事件後，更包括：在該影像中顯示該使用者消耗的卡路里。
  20. 如申請專利範圍第10項所述的頭戴式顯示系統的影像產生方法，其中在根據所感測的生理資訊調整該影像中的該第一部分後，更包括：結束一事件並判斷當時一使用者的生理資訊中的一第一心率是否高於一下限值；當該第一心率高於該下限值，記錄該第一心率；在記錄該第一心率一預設時間後，記錄當時該使用者的生理資訊中的一第二心率，並使用該第一心率與該第二心率而計算得出該使用者的一心率恢復率；以及在該影像中顯示該使用者的該心率恢復率。
  21. 如申請專利範圍第10項所述的頭戴式顯示系統的影像產生方法，其中在根據所感測的生理資訊調整該影像中的該第一部分之外，還包括調整聲音與調整震動至少其中之一。
TW108144230A 2018-12-04 2019-12-04 頭戴式顯示系統及其影像產生方法 TWI729602B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201862774880P 2018-12-04 2018-12-04
US62/774,880 2018-12-04

Publications (2)

Publication Number Publication Date
TW202023274A TW202023274A (zh) 2020-06-16
TWI729602B true TWI729602B (zh) 2021-06-01

Family

ID=71156263

Family Applications (1)

Application Number Title Priority Date Filing Date
TW108144230A TWI729602B (zh) 2018-12-04 2019-12-04 頭戴式顯示系統及其影像產生方法

Country Status (3)

Country Link
US (1) US20200219468A1 (zh)
CN (1) CN111308703A (zh)
TW (1) TWI729602B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023111638A1 (en) * 2021-12-14 2023-06-22 Bayat Peyman Tennis game simulation system equipped with a smart racket

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020166641A (ja) * 2019-03-29 2020-10-08 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US11475167B2 (en) 2020-01-29 2022-10-18 International Business Machines Corporation Reserving one or more security modules for a secure guest
CN114504777B (zh) * 2022-04-19 2022-07-15 西南石油大学 基于神经网络和模糊综合评价的锻炼强度计算系统和方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104298722A (zh) * 2014-09-24 2015-01-21 张鸿勋 多媒体交互系统及其方法
CN204360325U (zh) * 2015-01-15 2015-05-27 深圳市掌网立体时代视讯技术有限公司 一种头戴式多通道交互系统
CN107347149A (zh) * 2017-06-14 2017-11-14 深圳市酷开网络科技有限公司 一种悬浮展示方法、虚拟现实设备及存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10300371B2 (en) * 2015-10-01 2019-05-28 Mc10, Inc. Method and system for interacting with a virtual environment

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104298722A (zh) * 2014-09-24 2015-01-21 张鸿勋 多媒体交互系统及其方法
CN204360325U (zh) * 2015-01-15 2015-05-27 深圳市掌网立体时代视讯技术有限公司 一种头戴式多通道交互系统
CN107347149A (zh) * 2017-06-14 2017-11-14 深圳市酷开网络科技有限公司 一种悬浮展示方法、虚拟现实设备及存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023111638A1 (en) * 2021-12-14 2023-06-22 Bayat Peyman Tennis game simulation system equipped with a smart racket

Also Published As

Publication number Publication date
US20200219468A1 (en) 2020-07-09
TW202023274A (zh) 2020-06-16
CN111308703A (zh) 2020-06-19

Similar Documents

Publication Publication Date Title
TWI729602B (zh) 頭戴式顯示系統及其影像產生方法
US11556811B2 (en) Information processing apparatus and storage medium
Roo et al. Inner garden: Connecting inner states to a mixed reality sandbox for mindfulness
TWI658377B (zh) 機器人輔助互動系統及其方法
US20190200920A1 (en) Virtual reality biofeedback systems and methods
US11000669B2 (en) Method of virtual reality system and implementing such method
WO2019022706A1 (en) EXERCISE PROGRAMS
RU2009105336A (ru) Система для представления виртуального пространства
CN109032384A (zh) 音乐播放控制方法、装置及存储介质和穿戴式设备
JP2018010310A (ja) プログラム、情報処理装置及び情報処理方法
Kojic et al. Influence of ui complexity and positioning on user experience during vr exergames
US11490857B2 (en) Virtual reality biofeedback systems and methods
US20240082535A1 (en) Cloud-based gaming platform with health-related data collection
EP3549630A1 (en) Output control device, output control method, and program
Ishiguro et al. Immersive experience influences eye blink rate during virtual reality gaming
KR102437583B1 (ko) 생체신호를 활용한 선호 색상에 대한 사용자 맞춤형 색상콘텐츠를 제공하는 시스템 및 방법
US20230038695A1 (en) Virtual reality activities for various impairments
US20230025585A1 (en) Augmented reality artificial intelligence enhance ways user perceive themselves
Liu et al. PhysioTreadmill: an auto-controlled treadmill featuring physiological-data-driven visual/audio feedback
TW201729879A (zh) 移動式互動跳舞健身系統
US20230115716A1 (en) Augmented image adjustment of user based on possible actions or non-actions
JP7285808B2 (ja) プログラム、ゲームサーバ、情報処理端末、方法およびゲームシステム
KR20230137139A (ko) 사용자가 존재하는 공간의 습도를 생성한 아바타로 수행하는 콘텐츠 환경의 습도로 제어하는 실감 효과를 위한 시스템 및 방법
JP2023113275A (ja) 所定対象の視認性を調整する動作支援装置、システム、プログラム及び方法
JP2020013152A (ja) プログラム、情報処理装置及び情報処理方法