TWI686743B - 控制耳機裝置之方法、耳機裝置、電腦可讀媒體及紅外線感測器 - Google Patents

控制耳機裝置之方法、耳機裝置、電腦可讀媒體及紅外線感測器 Download PDF

Info

Publication number
TWI686743B
TWI686743B TW105106687A TW105106687A TWI686743B TW I686743 B TWI686743 B TW I686743B TW 105106687 A TW105106687 A TW 105106687A TW 105106687 A TW105106687 A TW 105106687A TW I686743 B TWI686743 B TW I686743B
Authority
TW
Taiwan
Prior art keywords
display
determined
aforementioned
peripheral device
earphone
Prior art date
Application number
TW105106687A
Other languages
English (en)
Other versions
TW201702862A (zh
Inventor
路米拉維若妮卡 帕夫林
尼可拉斯比傑 納薩瑞
Original Assignee
新加坡商雷蛇（亞太）私人有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 新加坡商雷蛇（亞太）私人有限公司 filed Critical 新加坡商雷蛇（亞太）私人有限公司
Publication of TW201702862A publication Critical patent/TW201702862A/zh
Application granted granted Critical
Publication of TWI686743B publication Critical patent/TWI686743B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1041—Mechanical or electronic switches, or control elements
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C23/00—Non-electrical signal transmission systems, e.g. optical systems
    • G08C23/04—Non-electrical signal transmission systems, e.g. optical systems using light waves, e.g. infrared
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1008—Earpieces of the supra-aural or circum-aural type

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Optics & Photonics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

根據各種實施例，可提供一種用於控制耳機裝置的方法。前述方法可包括：捕獲前述耳機裝置之鄰近區的紅外線影像；基於前述紅外線影像而判定在前述耳機裝置之鄰近區的預判定周邊裝置之存在；以及控制前述耳機裝置之顯示器以基於前述預判定周邊裝置之前述所判定存在而顯示前述預判定周邊裝置之表示。

Description

控制耳機裝置之方法、耳機裝置、電腦可讀媒體及紅外線感測器
各種實施例大致上係關於一種控制耳機裝置之方法、耳機裝置、電腦可讀媒體及紅外線感測器。
當佩戴虛擬實境(virtual reality；VR)耳機時，對真實世界對象之視野會遭遮擋，在未摘除該耳機的情況下防礙使用者定位及使用各種周邊設備，諸如，例如鍵盤、滑鼠以及其他輸入裝置。因而，可存在提高耳機裝置之可用性的需要。
根據各種實施例，可提供一種耳機裝置。該耳機裝置可包括：顯示器；紅外線感測器，其配置以捕獲耳機裝置之鄰近區的紅外線影像；存在判定電路，其配置以基於該紅外線影像而判定在耳機裝置之鄰近區的預判定周邊裝 置之存在；以及控制器，其配置以控制顯示器以基於預判定周邊裝置之所判定存在而顯示預判定周邊裝置之表示。
根據各種實施例，可提供一種用於控制耳機裝置的方法。該方法可包括：捕獲耳機裝置之鄰近區的紅外線影像；基於紅外線影像而判定在耳機裝置之鄰近區的預判定周邊裝置之存在；以及控制耳機裝置之顯示器以基於預判定周邊裝置之所判定存在而顯示預判定周邊裝置之表示。
根據各種實施例，可提供一種電腦可讀媒體。該電腦可讀媒體可包括程式指令，當藉由處理器執行該程式指令時，該程式指令引起處理器進行用於控制耳機裝置的方法。
根據各種實施例，可提供一種紅外線感測器。該紅外線感測器可包括：捕獲電路，其配置以捕獲耳機裝置之鄰近區的紅外線影像；以及通訊電路，其配置以將基於所捕獲紅外線影像之資料傳送至耳機裝置，用於基於紅外線影像而判定在耳機裝置之鄰近區的預判定周邊裝置之存在，以及用於控制耳機裝置之顯示器以基於預判定周邊裝置之所判定存在而顯示預判定周邊裝置之表示。
100‧‧‧耳機裝置
102‧‧‧顯示器
104‧‧‧紅外線感測器
106‧‧‧存在判定電路
108‧‧‧控制器
110‧‧‧線
112‧‧‧耳機裝置
114‧‧‧手勢辨識電路
116‧‧‧介面
118‧‧‧線
120‧‧‧流程圖
122‧‧‧步驟
124‧‧‧步驟
126‧‧‧步驟
128‧‧‧紅外線感測器
130‧‧‧捕獲電路
132‧‧‧通訊電路
134‧‧‧線
在圖式中，在全部不同視圖中，類似元件符號一般係 指相同部件。圖式未必按比例繪製，相反，重點通常是關注對本發明原理的例示。各種特徵或元件之尺寸可出於清晰度任意地擴展或縮減。在以下描述中，本發明之各種實施例係參考以下圖式來描述。
圖1顯示根據各種實施例之耳機裝置。
圖2顯示根據各種實施例之耳機裝置。
圖3顯示例示用於控制根據各種實施例的耳機裝置之方法的流程圖。
圖4顯示根據各種實施例之紅外線感測器。
以下詳細描述參照藉助於例示來顯示可實現本發明之特定細節及實施例的隨附圖式。足夠詳細地描述這些實施例以允許熟習此項技術者實現本發明。可利用其他實施例，並且可在不脫離本發明之範疇的情況下進行結構及邏輯改變。各種實施例未必互相排斥，如一些實施例可與一個或複數個其他實施例組合以形成新的實施例。
在此情境中，如此說明中所描述之耳機裝置可包括記憶體，該記憶體例如使用於在該耳機裝置中進行之處理。 使用於實施例之記憶體可為依電性記憶體，例如DRAM(動態隨機存取記憶體)或非依電性記憶體，例如PROM(可程式化唯讀記憶體)、EPROM(可抹除PROM)、EEPROM(電子可抹除PROM)，或快閃記憶體，例如浮閘記憶體、電荷捕集記憶體、MRAM(磁電阻隨機存取記憶體)或PCRAM(相變隨機存取記憶體)。
在實施例中，「電路」可理解為任何種類的邏輯實行實體，該邏輯實行實體可為執行儲存於記憶體中之軟體、韌體或其任何組合的專用電路或處理器。因此，在實施例中，「電路」可為硬連線邏輯電路或可程式化邏輯電路，諸如可程式化處理器，例如微處理器(例如複雜指令集電腦(CISC)處理器或精簡指令集電腦(RISC)處理器)。「電路」亦可為執行軟體的處理器，該軟體例如任何種類的電腦程式，例如使用虛擬機代碼(諸如例如Java)之電腦程式。將在以下更詳細地描述的各別功能之任何其他種類的實行方案亦可理解為根據替代實施例之「電路」。
在說明書中，應瞭解術語「包含」具有類似於術語「包括」之廣義意義，且將瞭解術語「包含」意指已陳述之整體或步驟或一個以上整體或步驟之組群的集合，但不排斥任何其他整體或步驟或一個以上整體或步驟之組群。此定義亦應用於術語「包含(comprising)」之變體，諸如「包含(comprise)」及「包含(comprises)」。
此說明書中提及之任何先前技術不視為且不應視為對所提及之先前技術形成在澳大利亞(或任何其他國家)之公知常識的部分之承認或任何形式之建議。
為使本發明可易於理解且獲得實際效果，將以舉例且非限制之方式並參考圖式來描述特定實施例。
針對裝置已提供各種實施例，且針對方法已提供各種實施例。將理解的是，裝置之基本性質亦適用於方法，且反之亦然。因此，為簡潔起見，可省略此等性質之重複描述。
將理解的是，本文針對特定裝置所描述之任何性質亦可適用於本文所描述之任何裝置。將理解的是，本文針對特定方法所描述之任何性質亦可適用於本文所描述之任何方法。此外，將理解的是，對於本文所描述之任何裝置或方法而言，所描述之所有組件或步驟未必必須含括於裝置或方法中，而可僅僅含括一些(但非所有)組件或步驟。
本文之術語「耦接」(或「連接」)可理解為電氣耦接或理解為機械耦接，例如附接或固定或附接，或僅在無任何固定之情況下接觸，且將理解的是，可提供直接耦接或間接耦接(換言之，在無直接接觸之情況下耦接)。
當佩戴VR(虛擬實境)耳機時，對真實世界對象之視野會遭遮擋，在未摘除該耳機的情況下防礙使用者定位及使用各種周邊設備，諸如，例如鍵盤、滑鼠以及其他輸入裝置。根據各種實施例，可提供裝置及方法以提高耳機裝置之可用性。
根據各種實施例，可提供VR之周邊產品偵測及視覺化。根據各種實施例，可提供頭戴顯示裝置(head mounted display；HMD)產品偵測。
根據各種實施例，可將感測器(例如消費級紅外線攝錄影機)附接至耳機外部且可識別周邊產品上之定製指示器(例如感測器貼簽(sticker))，可識別該產品且可在相對於該產品之實際位置的VR視野中呈現該產品之三維模型。
圖1顯示根據各種實施例的耳機裝置100(例如VR耳機或頭戴顯示裝置)。耳機裝置100可包括顯示器102。例如，顯示器102可顯示例如電腦遊戲之電腦程式的輸出。耳機裝置100可進一步包括紅外線感測器104，該紅外線感測器配置以捕獲耳機裝置100之鄰近區之紅外線影像。耳機裝置100可進一步包括存在判定電路106，該存在判定電路配置以基於該紅外線影像而判定在耳機裝置100之鄰近區之預判定周邊裝置(圖1中未顯示)的存 在。耳機裝置100可進一步包括控制器108，該控制器配置以控制顯示器102以基於預判定周邊裝置之所判定存在而顯示該預判定周邊裝置之表示。顯示器102、紅外線感測器104、存在判定電路106、以及控制器108可彼此耦接，如藉由線110所指示，該耦接例如電氣耦接及/或機械耦接，該電氣耦接例如使用線或電纜。
換言之，若耳機裝置藉由使用紅外線感測器而判定周邊裝置位於耳機裝置附近，則根據各種實施例的耳機裝置可在該耳機裝置之顯示器中顯示表示周邊裝置的資訊，在該顯示器中通常展示電腦程式(例如電腦遊戲)資訊。
根據各種實施例，存在判定電路106可進一步經配置以基於該紅外線影像而判定預判定周邊裝置上之紅外線記號(換言之，在紅外光(可為在700奈米至1mm波長範圍內的光)下可見之記號，例如在不同於紅外光的光下不可見之記號)的存在。根據各種實施例，存在判定電路106可進一步經配置以基於判定該紅外線記號(例如基於判定紅外線影像中的紅外線記號)而判定在耳機裝置100之鄰近區的預判定周邊裝置之存在。
根據各種實施例，紅外線記號可包括或可為或可包括於快速回應碼(QR碼)中。
根據各種實施例，存在判定電路106可進一步經配置以基於紅外線影像而判定預判定周邊裝置相對於耳機裝置100之位置。
根據各種實施例，控制器108可進一步經配置以控制顯示器102以基於預判定周邊裝置之所判定位置而顯示該預判定周邊裝置之三維表示。
根據各種實施例，控制器108可進一步經配置以控制顯示器102以使用預判定周邊裝置的表示來覆蓋耳機裝置周圍的表示。
根據各種實施例，控制器108可進一步經配置以控制顯示器102以使用預判定周邊裝置的表示來覆蓋由耳機裝置100之使用者所使用的程式之輸出。
根據各種實施例，控制器108可進一步經配置以控制顯示器102來基於由耳機裝置100之使用者在由使用者所使用之程式中(例如在由使用者所玩之電腦遊戲中)所採取的動作而顯示預判定周邊裝置之表示。
根據各種實施例，由使用者所採取之動作可包括或可為或可包括於開啟電腦程式中的輸入單元(例如開啟文字盒)中。
根據各種實施例，控制器108可進一步經配置以控制顯示器102以基於進入連接至耳機裝置100的輸入裝置之預判定輸入而顯示預判定周邊裝置之表示。
圖2顯示根據各種實施例的耳機裝置112(例如VR耳機或頭戴顯示裝置)。類似於圖1中所顯示之耳機裝置100，耳機裝置112可包括顯示器102。例如，顯示器102可顯示例如電腦遊戲之電腦程式的輸出。類似於圖1中所顯示之耳機裝置100，耳機裝置112可進一步包括紅外線感測器104，該紅外線感測器配置以捕獲耳機裝置100之鄰近區的紅外線影像。類似於圖1中所顯示之耳機裝置100，耳機裝置112可進一步包括存在判定電路106，該存在判定電路配置以基於該紅外線影像而判定在耳機裝置100之鄰近區的預判定周邊裝置(圖1中未顯示)之存在。類似於圖1中所顯示之耳機裝置100，耳機裝置112可進一步包括控制器108，該控制器配置以控制顯示器102來基於預判定周邊裝置之所判定存在而顯示預判定周邊裝置之表示。耳機裝置112可進一步包括手勢辨識電路114，如將在以下更詳細地描述。耳機裝置112可進一步包括介面116，如將在以下更詳細地描述。顯示器102、紅外線感測器104、存在判定電路106、控制器108、手勢辨識電路114、以及介面116可彼此耦接，如藉由線118所指示，該耦接例如電氣耦接及/或機械耦接，該電氣耦 接例如使用線或電纜。
根據各種實施例，手勢辨識電路114可經配置以判定由耳機之使用者所進行的手勢。根據各種實施例，控制器108可進一步經配置以控制顯示器102以基於所判定手勢而顯示預判定周邊裝置之表示。
根據各種實施例，介面116可為至手勢辨識裝置(圖2中未顯示)的介面，且該手勢辨識裝置可經配置以判定耳機裝置之使用者的手勢。介面116可經配置以接收指示所判定手勢的資訊。根據各種實施例，控制器108可進一步經配置以控制顯示器102以基於所判定手勢而顯示預判定周邊裝置之表示。
根據各種實施例，控制器108可進一步經配置以控制顯示器102以顯示耳機裝置100之使用者與預判定周邊裝置之交互作用。
根據各種實施例，周邊裝置可包括或可為或可包括於輸入裝置中。
根據各種實施例，周邊裝置可包括或可為或可包括於滑鼠、鍵盤、觸控板、遊戲控制器及/或操縱桿中。
圖3顯示例示用於控制根據各種實施例的耳機裝置之方法的流程圖120。在步驟122中，可捕獲耳機裝置之鄰近區之紅外線影像。在步驟124中，可基於該紅外線影像而判定在耳機裝置之鄰近區之預判定周邊裝置的存在。在步驟126中，可控制耳機裝置之顯示器以基於預判定周邊裝置之所判定存在而顯示預判定周邊裝置的表示。
根據各種實施例，該方法可進一步包括：基於紅外線影像而判定預判定周邊裝置上之紅外線記號的存在；以及基於判定該紅外線記號而判定在耳機裝置之鄰近區之預判定周邊裝置的存在。
根據各種實施例，紅外線記號可包括或可為或可包括於QR碼中。
根據各種實施例，該方法可進一步包括基於紅外線影像而判定預判定周邊裝置相對於耳機裝置之位置。
根據各種實施例，該方法可進一步包括控制顯示器以基於預判定周邊裝置之所判定位置而顯示預判定周邊裝置之三維表示。
根據各種實施例，該方法可進一步包括控制顯示器以使用預判定周邊裝置的表示來覆蓋耳機裝置周圍的表示。
根據各種實施例，該方法可進一步包括控制顯示器以使用預判定周邊裝置的表示來覆蓋由耳機裝置之使用者所使用的程式之輸出。
根據各種實施例，該方法可進一步包括控制顯示器以基於由耳機裝置之使用者在由使用者所使用之程式中所採取的動作而顯示預判定周邊裝置之表示。
根據各種實施例，由使用者所採取之動作可包括或可為或可包括於啟動(activating)或開啟電腦程式中的輸入單元(例如文字盒、按鈕、滑塊或手勢)。
根據各種實施例，該方法可進一步包括控制顯示器以基於進入連接至耳機裝置的輸入裝置之預判定輸入而顯示預判定周邊裝置之表示。
根據各種實施例，該方法可進一步包括：判定由耳機之使用者所進行的手勢；以及控制顯示器以基於所判定手勢而顯示預判定周邊裝置之表示。
根據各種實施例，該方法可進一步包括：接收指示來自手勢判定裝置之所判定手勢的資訊；以及控制顯示器以基於所判定手勢而顯示預判定周邊裝置之表示。
根據各種實施例，該方法可進一步包括控制顯示器以顯示耳機裝置之使用者與預判定周邊裝置之交互作用。
根據各種實施例，周邊裝置可包括或可為或可包括於輸入裝置中。
根據各種實施例，周邊裝置可包括或可為或可包括於滑鼠、鍵盤、觸控板、遊戲控制器及/或操縱桿中。
根據各種實施例，可提供一種電腦可讀媒體。該電腦可讀媒體可包括程式指令，當藉由處理器執行該程式指令時，該程式指令引起處理器進行用於控制耳機裝置的方法，例如用於控制根據如同以上參照圖3所描述之各種實施例的耳機裝置的方法。
圖4顯示根據各種實施例的紅外線感測器128。紅外線感測器128可包括捕獲電路130，該捕獲電路配置以捕獲耳機裝置之鄰近區的紅外線影像。紅外線感測器128可進一步包括通訊電路132，該通訊電路配置以將基於所捕獲紅外線影像之資料傳送至耳機裝置，用於基於紅外線影像而判定在耳機裝置之鄰近區的預判定周邊裝置之存在，以及用於控制耳機裝置之顯示器以基於預判定周邊裝置之所判定存在而顯示預判定周邊裝置之表示。捕獲電路 130與通訊電路132可彼此耦接，如藉由線134所指示，該耦接例如電氣耦接及/或機械耦接，該電氣耦接例如使用線或電纜。例如耳機裝置可為如同以上參照圖1或圖2所描述之耳機裝置。例如可將紅外線感測器安裝於該耳機裝置上或整合於該耳機裝置中。
根據各種實施例，可提供一種系統，該系統包括具有附接感測器之遊戲耳機，該附接感測器例如附接至耳機外部的消費級紅外線攝錄影機。該感測器可經由識別符以識別周邊裝置，該識別符即周邊裝置上之定製指示器、感測器貼簽、訊息、文本、幾何圖元及類似識別符。該系統可提供一處理器，該處理器識別產品，且在相對於周邊裝置的實際實體位置的虛擬實境視圖中呈現該周邊裝置之3D虛擬模型。該系統可提供周邊裝置之虛擬圖形描繪，以使得可與該產品進行交互作用。
根據各種實施例，該感測器可藉由識別其紅外線列印圖案以偵測周邊裝置。該圖案可包括QR碼及其他專屬記號。可將感測器資料轉換為3D位置坐標。可基於經編碼為QR碼或專屬記號之獨特標識符以區分產品。可將資料匹配至周邊設備的3D模型資料庫。可呈現處於真實世界對象的相對特殊位置之周邊設備的3D模型。最後，可基於例如軟體驅動情境之情境而隱藏及取消隱藏周邊呈現，該情境包括：使用者開啟文本聊天；使用者使用手部 運動/手勢而啟動或停用觀察儀；以及基於熱鍵組合之啟動及停用。
根據各種實施例，可藉由識別附接至周邊裝置的紅外線列印圖案而偵測周邊設備(換言之，周邊裝置)。根據各種實施例，紅外線列印圖案可包括QR碼或任何另一種專屬記號。
根據各種實施例，可將感測器資料轉換為3D位置坐標。根據各種實施例，該3D位置坐標可用以顯示使用者之耳機中的周邊裝置的表示。
根據各種實施例，可基於經編碼為QR碼或另一專屬記號之獨特標識符而區分產品(例如各種周邊裝置)。
根據各種實施例，可將資料匹配至周邊設備的3D模型資料庫。
根據各種實施例，可呈現處於真實世界對象的相對特殊位置之周邊設備的3D模型。
根據各種實施例，可基於情境(例如軟體驅動情境)而隱藏及取消隱藏周邊呈現(換言之，周邊裝置之呈現)，例如當使用者開啟文本聊天，或當使用者使用手部運動(換 言之，手勢)而啟動或停用觀察儀，或該周邊呈現可基於熱鍵組合而隱藏或取消隱藏(換言之，啟動或停用)。
以下將描述根據各種實施例之敘述式實例。
使用者(例如玩家)可正在例如個人電腦(personal computer；PC)上使用電腦程式(例如玩(電腦)遊戲(例如精英危險(Elite Dangerous)))，該使用者使用開放原始碼虛擬實境(Open-Source Virtual Reality；OSVR)耳機及手部感測器，例如跳躍運動手部感測器。使用者可在耳機中(換言之，在抬頭顯示器中)看到該使用者可用之聊天訊息。閱讀訊息後，使用者可決定其想要打出答覆。
當使用者啟動文本輸入字段時，根據各種實施例之裝置或方法可掃描該使用者對周邊設備的視場，且可偵測輸入裝置(例如鍵盤、滑鼠或操縱桿，例如Razer鍵盤、Razer滑鼠及/或飛行操縱桿)，該周邊設備均配備有根據各種實施例之視覺化指示器。
輸入裝置(例如鍵盤)之3D模型可出現於該使用者的VR耳機中，且當該使用者伸出手觸碰該輸入裝置時，該使用者將其手部放置於書桌上的周邊設備上，無需摘除該使用者的耳機。
在該使用者打字時，其可能夠看見其正觸碰之鍵的實體位置，給出該使用者正按下正確鍵的視覺反饋。
當該使用者關閉文本框(該使用者已在該文本框中打出文本)時，3D鍵盤(換言之，鍵盤在耳機中之視覺化)可淡出且該使用者之滑鼠及/或該使用者之操縱桿可以3D呈現，以使得該使用者可再次伸出手並找到該滑鼠及該操縱桿。一旦該使用者的手部位於操縱桿及滑鼠上，則3D模型可淡出且該使用者可返回至其完全再現之遊戲。
以下實例係關於其他實施例。
實例1為一種用於控制耳機裝置的方法，該方法包含：捕獲耳機裝置之鄰近區的紅外線影像；基於紅外線影像而判定在耳機裝置之鄰近區的預判定周邊裝置之存在；以及控制耳機裝置之顯示器以基於預判定周邊裝置之所判定存在而顯示預判定周邊裝置之表示。
在實例2中，實例1之標的可視需要包括：基於紅外線影像而判定預判定周邊裝置上之紅外線記號的存在；以及基於判定該紅外線記號而判定在耳機裝置之鄰近區之預判定周邊裝置的存在。
在實例3中，實例2之標的可視需要包括：該紅外線 記號包含QR碼。
在實例4中，實例1至3中之任一者之標的可視需要包括：基於紅外線影像而判定預判定周邊裝置相對於耳機裝置之位置。
在實例5中，實例4之標的可視需要包括：控制顯示器以基於預判定周邊裝置之所判定位置而顯示預判定周邊裝置之三維表示。
在實例6中，實例1至5中之任一者之標的可視需要包括：控制顯示器以使用預判定周邊裝置的表示來覆蓋耳機裝置周圍的表示。
在實例7中，實例1至6中之任一者之標的可視需要包括：控制顯示器以使用預判定周邊裝置的表示來覆蓋由耳機裝置之使用者所使用的程式之輸出。
在實例8中，實例1至7中之任一者之標的可視需要包括：控制顯示器以基於由耳機裝置之使用者在由使用者所使用之程式中所採取的動作而顯示預判定周邊裝置之表示。
在實例9中，實例1至8中之任一者之標的可視需要 包括：由使用者所採取之動作包含在電腦程式中開啟輸入單元。
在實例10中，實例1至9中之任一者之標的可視需要包括：控制顯示器以基於進入連接至耳機裝置的輸入裝置之預判定輸入而顯示預判定周邊裝置之表示。
在實例11中，實例1至10中之任一者之標的可視需要包括：判定由耳機之使用者所進行的手勢；以及控制顯示器以基於所判定手勢而顯示預判定周邊裝置之表示。
在實例12中，實例1至11中之任一者之標的可視需要包括：接收指示來自手勢判定裝置之所判定手勢的資訊；以及控制顯示器以基於所判定手勢而顯示預判定周邊裝置之表示。
在實例13中，實例1至12中之任一者之標的可視需要包括：控制顯示器以顯示耳機裝置之使用者與預判定周邊裝置之交互作用。
在實例14中，實例1至13中之任一者之標的可視需要包括：周邊裝置包含輸入裝置。
在實例15中，實例1至14中之任一者之標的可視需 要包括：該周邊裝置包含至少一個周邊裝置，該至少一個周邊裝置選自由以下組成的列表之周邊裝置：滑鼠、鍵盤、觸控板、遊戲控制器、以及操縱桿。
實例16為一種耳機裝置，該耳機裝置包含：顯示器；紅外線感測器，其配置以捕獲耳機裝置之鄰近區的紅外線影像；存在判定電路，其配置以基於紅外線影像而判定在耳機裝置之鄰近區的預判定周邊裝置之存在；以及控制器，其配置以控制顯示器以基於預判定周邊裝置之所判定存在而顯示預判定周邊裝置之表示。
在實例17中，實例16之標的可視需要包括：該存在判定電路經配置以基於紅外線影像而判定預判定周邊裝置上的紅外線記號之存在，且經配置以基於判定紅外線記號而判定在耳機裝置之鄰近區的預判定周邊裝置之存在。
在實例18中，實例17之標的可視需要包括：該紅外線記號包含QR碼。
在實例19中，實例16至18中之任一者之標的可視需要包括：該存在判定電路經進一步配置以基於紅外線影像而判定預判定周邊裝置相對於耳機裝置之位置。
在實例20中，實例19之標的可視需要包括：該控制 器經進一步配置以控制顯示器來基於預判定周邊裝置之所判定位置而顯示預判定周邊裝置之三維表示。
在實例21中，實例16至20中之任一者之標的可視需要包括：該控制器經進一步配置以控制顯示器使用預判定周邊裝置之表示來覆蓋耳機裝置周圍的表示。
在實例22中，實例16至21中之任一者之標的可視需要包括：該控制器經進一步配置以控制顯示器使用預判定周邊裝置之表示來覆蓋由耳機裝置之使用者所使用的程式之輸出。
在實例23中，實例16至22中之任一者之標的可視需要包括：該控制器經進一步配置以控制顯示器來基於由耳機裝置之使用者在由使用者所使用之程式中所採取的動作而顯示預判定周邊裝置之表示。
在實例24中，實例16至23中之任一者之標的可視需要包括：由使用者所採取之動作包含在電腦程式中開啟輸入單元。
在實例25中，實例16至24中之任一者之標的可視需要包括：該控制器經進一步配置以控制顯示器來基於進入連接至耳機裝置的輸入裝置之預判定輸入而顯示預判 定周邊裝置之表示。
在實例26中，實例16至25中之任一者之標的可視需要包括：手勢識別電路，其配置以判定由耳機之使用者所進行的手勢；其中控制器經進一步配置以控制顯示器來基於所判定手勢而顯示預判定周邊裝置之表示。
在實例27中，實例16至26中之任一者之標的可視需要包括：至手勢辨識裝置之介面，該手勢辨識裝置配置以判定耳機裝置之使用者的手勢，該介面配置以接收指示所判定手勢之資訊；其中控制器經進一步配置以控制顯示器來基於所判定手勢而顯示預判定周邊裝置之表示。
在實例28中，實例16至27中之任一者之標的可視需要包括：該控制器經進一步配置以控制顯示器來顯示耳機裝置之使用者與預判定周邊裝置之交互作用。
在實例29中，實例16至28中之任一者之標的可視需要包括：周邊裝置包含輸入裝置。
在實例30中，實例16至29中之任一者之標的可視需要包括：該周邊裝置包含至少一個周邊裝置，該至少一個周邊裝置選自由以下組成的列表之周邊裝置：滑鼠、鍵盤、觸控板、遊戲控制器、以及操縱桿。
實例31為一種電腦可讀媒體，其包含程式指令，當藉由處理器執行該程式指令時，該程式指令引起處理器以進行一種用於控制耳機裝置的方法，該方法包含：捕獲耳機裝置之鄰近區的紅外線影像；基於紅外線影像而判定在耳機裝置之鄰近區的預判定周邊裝置之存在；以及控制耳機裝置之顯示器以基於預判定周邊裝置之所判定存在而顯示預判定周邊裝置之表示。
實例32為一種紅外線感測器，該紅外線感測器包含：捕獲電路，其配置以捕獲耳機裝置之鄰近區的紅外線影像；以及通訊電路，其配置以將基於所捕獲紅外線影像之資料傳送至耳機裝置，用於基於紅外線影像而判定在耳機裝置之鄰近區的預判定周邊裝置之存在，以及用於控制耳機裝置之顯示器以基於預判定周邊裝置之所判定存在而顯示預判定周邊裝置之表示。
雖然已參考特定實施例詳細地顯示及描述本發明，但熟習此項技術者應瞭解的是，在不脫離藉由附加申請專利範圍限定的本發明之精神及範疇的情況下，可對該實施例中之形式及細節做出各種改變。本發明之範疇因此藉由隨附申請專利範圍來指示，且落入請求項之同類者的含義及範圍內之所有改變因此均欲涵蓋於本發明中。
102‧‧‧顯示器
104‧‧‧紅外線感測器
106‧‧‧存在判定電路
108‧‧‧控制器
112‧‧‧耳機裝置
114‧‧‧手勢辨識電路
116‧‧‧介面
118‧‧‧線

Claims (28)

  1. 一種方法，係用於控制耳機裝置，前述方法包含以下步驟：判定在由使用者所使用之程式中一輸入單元的開啟；在判定前述輸入單元的前述開啟時捕獲一耳機裝置之鄰近區之一紅外線影像；基於在前述判定前述輸入單元的前述開啟時所捕獲的前述紅外線影像而判定在前述耳機裝置之鄰近區的一預判定周邊裝置之一存在；以及控制前述耳機裝置之一顯示器以基於前述預判定周邊裝置之前述所判定存在和前述判定前述輸入單元的前述開啟而顯示前述預判定周邊裝置之一表示。
  2. 如請求項1所記載之方法，其進一步包含：基於前述紅外線影像而判定前述預判定周邊裝置上之一紅外線記號之存在；基於判定前述紅外線記號而判定在前述耳機裝置之鄰近區之前述預判定周邊裝置的前述存在。
  3. 如請求項2所記載之方法，其中前述紅外線記號包含一快速回應碼。
  4. 如請求項1所記載之方法，其進一步包含：基於前述紅外線影像而判定前述預判定周邊裝置相對於前述耳機裝置之一位置。
  5. 如請求項4所記載之方法，其進一步包含：控制前述顯示器以基於前述預判定周邊裝置之前述所判定位置而顯示前述預判定周邊裝置之一三維表示。
  6. 如請求項1所記載之方法，其進一步包含：控制前述顯示器以使用前述預判定周邊裝置的前述表示來覆蓋前述耳機裝置之一周圍的一表示。
  7. 如請求項1所記載之方法，其進一步包含：控制前述顯示器以使用前述預判定周邊裝置的前述表示來覆蓋由前述耳機裝置之一使用者所使用的一程式之一輸出。
  8. 如請求項1所記載之方法，其進一步包含：控制前述顯示器以基於進入連接至前述耳機裝置的一輸入裝置之一預判定輸入而顯示前述預判定周邊裝置之前述表示。
  9. 如請求項1所記載之方法，其進一步包含：判定由前述耳機之一使用者所進行的一手勢；控制前述顯示器以基於前述所判定手勢而顯示前述預判定周邊裝置之前述表示。
  10. 如請求項1所記載之方法，其進一步包含：接收指示來自一手勢判定裝置之一所判定手勢的資訊；控制前述顯示器以基於前述所判定手勢而顯示前述預判定周邊裝置之前述表示。
  11. 如請求項1所記載之方法，其進一步包含：控制前述顯示器以顯示前述耳機裝置之一使用者與前述預判定周邊裝置之一交互作用。
  12. 如請求項1所記載之方法，其中前述周邊裝置包含一輸入裝置。
  13. 如請求項1所記載之方法，其中前述周邊裝置包含至少一個周邊裝置，前述至少一個周邊裝置選自由以下組成的一列表之周邊裝置：一滑鼠、一鍵盤、一觸控板、一遊戲控制器、以及一操縱桿。
  14. 一種耳機裝置，其包含：一顯示器；一紅外線感測器，其配置以判定在由使用者所使用之程式中一輸入單元的開啟時捕獲一耳機裝置之鄰近區的一紅外線影像；一存在判定電路，其配置以基於在前述判定前述輸入單元的前述開啟時所捕獲的前述紅外線影像而判定在前述耳機裝置之鄰近區的一預判定周邊裝置之一存在；以及一控制器，其配置以控制前述顯示器以基於前述預判定周邊裝置之前述所判定存在和前述判定前述輸入單元的前述開啟而顯示前述預判定周邊裝置之一表示。
  15. 如請求項14所記載之耳機裝置，其中前述存在判定電路經配置以基於前述紅外線影像而判定前述預判 定周邊裝置上的一紅外線記號之存在，且經配置以基於判定前述紅外線記號而判定在前述耳機裝置之鄰近區的前述預判定周邊裝置之前述存在。
  16. 如請求項15所記載之耳機裝置，其中前述紅外線記號包含一快速回應碼。
  17. 如請求項14所記載之耳機裝置，其中前述存在判定電路經進一步配置以基於前述紅外線影像而判定前述預判定周邊裝置相對於前述耳機裝置之一位置。
  18. 如請求項17所記載之耳機裝置，其中前述控制器經進一步配置以控制前述顯示器來基於前述預判定周邊裝置之前述所判定位置而顯示前述預判定周邊裝置之一三維表示。
  19. 如請求項14所記載之耳機裝置，其中前述控制器經進一步配置以控制前述顯示器來使用前述預判定周邊裝置之前述表示來覆蓋前述耳機裝置之一周圍的一表示。
  20. 如請求項14所記載之耳機裝置，其中前述控制器經進一步配置以控制前述顯示器來使用前述預判定周邊裝置之前述表示來覆蓋由前述耳機裝置之一使用者所使用的一程式之一輸出。
  21. 如請求項14所記載之耳機裝置，其中前述控制器經進一步配置以控制前述顯示器來基於進入連接至前述耳機裝置的一輸入裝置之一預判定輸入而顯示前述預判定周邊裝置之前述表示。
  22. 如請求項14所記載之耳機裝置，其進一步包含：一手勢辨識電路，其配置以判定由前述耳機之一使用者所進行的一手勢；前述控制器經進一步配置以控制前述顯示器來基於前述所判定手勢而顯示前述預判定周邊裝置之前述表示。
  23. 如請求項14所記載之耳機裝置，其進一步包含：至一手勢辨識裝置之一介面，前述手勢辨識裝置配置以判定前述耳機裝置之一使用者的一手勢，前述介面配置以接收指示前述所判定手勢之資訊；前述控制器經進一步配置以控制前述顯示器來基於前述所判定手勢而顯示前述預判定周邊裝置之前述表示。
  24. 如請求項14所記載之耳機裝置，其中前述控制器經進一步配置以控制前述顯示器來顯示前述耳機裝置之一使用者與前述預判定周邊裝置之一交互作用。
  25. 如請求項14所記載之耳機裝置，其中前述周邊裝置包含一輸入裝置。
  26. 如請求項14所記載之耳機裝置，其中前述周邊裝置包含至少一個周邊裝置，前述至少一個周邊裝置選自由以下組成的一列表之周邊裝置：一滑鼠、一鍵盤、一觸控板、一遊戲控制器、以及一操縱桿。
  27. 一種電腦可讀媒體，其包含程式指令，當藉由一處理器執行前述程式指令時，前述程式指令引起前述處理 器以進行一種用於控制一耳機裝置的方法，前述方法包含以下步驟：判定在由使用者所使用之程式中一輸入單元的開啟；在判定前述輸入單元的前述開啟時捕獲一耳機裝置之鄰近區的一紅外線影像；基於在前述判定前述輸入單元的前述開啟時所捕獲的前述紅外線影像而判定在前述耳機裝置之鄰近區的一預判定周邊裝置之一存在；以及控制前述耳機裝置之一顯示器以基於前述預判定周邊裝置之前述所判定存在和前述判定前述輸入單元的前述開啟而顯示前述預判定周邊裝置之一表示。
  28. 一種紅外線感測器，其包含：一捕獲電路，其配置以判定在由使用者所使用之程式中一輸入單元的開啟時捕獲一耳機裝置之一鄰近區的一紅外線影像；以及一通訊電路，其配置以將基於前述所捕獲紅外線影像之資料傳送至前述耳機裝置，用於基於在前述判定前述輸入單元的前述開啟時所捕獲的前述紅外線影像而判定在前述耳機裝置之鄰近區的一預判定周邊裝置之一存在，以及用於控制前述耳機裝置之一顯示器以基於前述預判定周邊裝置之前述所判定存在和前述判定前述輸入單元的前述開啟而顯示前述預 判定周邊裝置之一表示。
TW105106687A 2015-05-05 2016-03-04 控制耳機裝置之方法、耳機裝置、電腦可讀媒體及紅外線感測器 TWI686743B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
WOPCT/US15/29139 2015-05-05
PCT/US2015/029139 WO2016178665A1 (en) 2015-05-05 2015-05-05 Methods for controlling a headset device, headset devices, computer readable media, and infrared sensors

Publications (2)

Publication Number Publication Date
TW201702862A TW201702862A (zh) 2017-01-16
TWI686743B true TWI686743B (zh) 2020-03-01

Family

ID=57218155

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105106687A TWI686743B (zh) 2015-05-05 2016-03-04 控制耳機裝置之方法、耳機裝置、電腦可讀媒體及紅外線感測器

Country Status (6)

Country Link
US (1) US10115303B2 (zh)
EP (1) EP3292700B1 (zh)
CN (1) CN107787588B (zh)
AU (1) AU2015394001C1 (zh)
TW (1) TWI686743B (zh)
WO (1) WO2016178665A1 (zh)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150054734A1 (en) * 2013-08-21 2015-02-26 Sony Computer Entertainment Europe Limited Head-mountable apparatus and systems

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020176330A1 (en) 2001-05-22 2002-11-28 Gregory Ramonowski Headset with data disk player and display
US7215322B2 (en) * 2001-05-31 2007-05-08 Siemens Corporate Research, Inc. Input devices for augmented reality applications
US6997803B2 (en) 2002-03-12 2006-02-14 Igt Virtual gaming peripherals for a gaming machine
CA2576010C (en) 2004-08-03 2011-07-26 Silverbrook Research Pty Ltd Head mounted display with wave front modulator
US7873765B1 (en) 2005-03-31 2011-01-18 Google, Inc. Method and system for detection of peripheral devices and communication of related devices
US8601470B2 (en) 2007-01-05 2013-12-03 Moka5, Inc. Symbiotic smart peripherals
US7911410B2 (en) * 2007-03-06 2011-03-22 Sony Ericsson Mobile Communications Ab Peripheral with a display
US8855719B2 (en) 2009-05-08 2014-10-07 Kopin Corporation Wireless hands-free computing headset with detachable accessories controllable by motion, body gesture and/or vocal commands
US8428053B2 (en) 2009-02-26 2013-04-23 Plantronics, Inc. Presence based telephony call signaling
US8556721B2 (en) 2009-11-16 2013-10-15 Steelseries Aps Apparatus and method for managing peripheral device communications
US8896457B2 (en) 2010-02-26 2014-11-25 Thl Holding Company, Llc Method, system and wireless device with event detection for monitoring protective headgear
KR101103516B1 (ko) 2011-02-11 2012-01-06 성환도 스마트 소방 헬멧
US20120249587A1 (en) * 2011-04-04 2012-10-04 Anderson Glen J Keyboard avatar for heads up display (hud)
WO2012154938A1 (en) 2011-05-10 2012-11-15 Kopin Corporation Headset computer that uses motion and voice commands to control information display and remote devices
US9497501B2 (en) 2011-12-06 2016-11-15 Microsoft Technology Licensing, Llc Augmented reality virtual monitor
EP2820555B1 (en) 2012-02-29 2018-12-26 Razer (Asia-Pacific) Pte. Ltd. Headset device and a device profile management system and method thereof
KR20140062257A (ko) 2012-11-14 2014-05-23 삼성전자주식회사 가상 키보드를 제공하기 위한 방법 및 그 전자 장치
CN103019377A (zh) * 2012-12-04 2013-04-03 天津大学 基于头戴式可视显示设备的输入方法及装置
US20140285520A1 (en) * 2013-03-22 2014-09-25 Industry-University Cooperation Foundation Hanyang University Wearable display device using augmented reality
US10019057B2 (en) * 2013-06-07 2018-07-10 Sony Interactive Entertainment Inc. Switching mode of operation in a head mounted display
GB201310358D0 (en) * 2013-06-11 2013-07-24 Sony Comp Entertainment Europe Head-Mountable apparatus and systems
US9630105B2 (en) 2013-09-30 2017-04-25 Sony Interactive Entertainment Inc. Camera based safety mechanisms for users of head mounted displays
EP4239456A1 (en) * 2014-03-21 2023-09-06 Samsung Electronics Co., Ltd. Method and glasses type wearable device for providing a virtual input interface
US9778814B2 (en) * 2014-12-19 2017-10-03 Microsoft Technology Licensing, Llc Assisted object placement in a three-dimensional visualization system
CN204256272U (zh) * 2014-12-22 2015-04-08 王傲立 耳机式虚拟现实显示器
US10725297B2 (en) * 2015-01-28 2020-07-28 CCP hf. Method and system for implementing a virtual representation of a physical environment using a virtual reality environment

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150054734A1 (en) * 2013-08-21 2015-02-26 Sony Computer Entertainment Europe Limited Head-mountable apparatus and systems

Also Published As

Publication number Publication date
EP3292700B1 (en) 2019-09-18
CN107787588A (zh) 2018-03-09
AU2015394001A1 (en) 2017-11-30
CN107787588B (zh) 2019-11-29
AU2015394001B2 (en) 2018-08-02
TW201702862A (zh) 2017-01-16
AU2015394001C1 (en) 2018-12-06
WO2016178665A1 (en) 2016-11-10
US20180144619A1 (en) 2018-05-24
EP3292700A4 (en) 2018-07-04
US10115303B2 (en) 2018-10-30
EP3292700A1 (en) 2018-03-14

Similar Documents

Publication Publication Date Title
JP7052845B2 (ja) 情報処理装置、情報処理方法、及びプログラム
US10203764B2 (en) Systems and methods for triggering actions based on touch-free gesture detection
US9652047B2 (en) Visual gestures for a head mounted device
JP6598617B2 (ja) 情報処理装置、情報処理方法およびプログラム
KR102517425B1 (ko) 디지털 디바이스와 상호작용을 위한 다이렉트 포인팅 검출 시스템 및 방법
US20170255450A1 (en) Spatial cooperative programming language
KR102389185B1 (ko) 컨텐츠의 적어도 일부를 통해 표시된 입력 인터페이스를 이용하여 기능을 실행하기 위한 전자 장치 및 방법
JP2022535315A (ja) 自己触覚型仮想キーボードを有する人工現実システム
JP2017059062A5 (zh)
CN107469354A (zh) 补偿声音信息的视觉方法及装置、存储介质、电子设备
JP2019501747A5 (zh)
JP2022534639A (ja) 指マッピング自己触覚型入力方法を有する人工現実システム
JP2017187952A (ja) 表示制御方法及び当該表示制御方法をコンピュータに実行させるためのプログラム
CN111813214B (zh) 虚拟内容的处理方法、装置、终端设备及存储介质
TW201911024A (zh) 偵測手指的電子裝置、方法及系統以及非暫態可讀取媒體
JP2010205223A (ja) 仮想対象に対するジェスチャーに従う制御を行うシステム及び装置
EP3885883A1 (en) Imaging system and method for producing images with virtually-superimposed functional elements
JP2021002290A (ja) 画像処理装置およびその制御方法
TWI686743B (zh) 控制耳機裝置之方法、耳機裝置、電腦可讀媒體及紅外線感測器
JP2009116824A (ja) 描画編集システム及びそのグループ化処理方法、プログラム
US11934584B2 (en) Finger orientation touch detection
JP2019155113A5 (ja) 情報処理方法、情報処理装置、及びプログラム
TW201908953A (zh) 互動式螢幕保護系統及方法