CN105518615A - 基于可佩戴显示装置使用的数据处理 - Google Patents

基于可佩戴显示装置使用的数据处理 Download PDF

Info

Publication number
CN105518615A
CN105518615A CN201480048356.0A CN201480048356A CN105518615A CN 105518615 A CN105518615 A CN 105518615A CN 201480048356 A CN201480048356 A CN 201480048356A CN 105518615 A CN105518615 A CN 105518615A
Authority
CN
China
Prior art keywords
display device
wearing
host apparatus
wear
state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480048356.0A
Other languages
English (en)
Other versions
CN105518615B (zh
Inventor
科斯罗·穆罕默德·拉布尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN105518615A publication Critical patent/CN105518615A/zh
Application granted granted Critical
Publication of CN105518615B publication Critical patent/CN105518615B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3231Monitoring the presence, absence or movement of users
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • G06F1/325Power saving in peripheral device
    • G06F1/3265Power saving in display device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • G06F3/0444Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means using a single conductive element covering the whole sensing surface, e.g. by sensing the electrical current flowing at the corners
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/20Processor architectures; Processor configuration, e.g. pipelining
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/001Arbitration of resources in a display system, e.g. control of access to frame buffer by video controller and/or main processor
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03KPULSE TECHNIQUE
    • H03K17/00Electronic switching or gating, i.e. not by contact-making and –breaking
    • H03K17/94Electronic switching or gating, i.e. not by contact-making and –breaking characterised by the way in which the control signals are generated
    • H03K17/96Touch switches
    • H03K17/962Capacitive touch switches
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0181Adaptation to the pilot/driver
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/033Indexing scheme relating to G06F3/033
    • G06F2203/0339Touch strips, e.g. orthogonal touch strips to control cursor movement or scrolling; single touch strip to adjust parameter or to implement a row of soft keys
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02Details of power systems and of start or stop of display operation
    • G09G2330/021Power management, e.g. power saving
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02Details of power systems and of start or stop of display operation
    • G09G2330/021Power management, e.g. power saving
    • G09G2330/022Power management, e.g. power saving in absence of operation, e.g. no data being entered during a predetermined time
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/16Use of wireless transmission of display information
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03KPULSE TECHNIQUE
    • H03K2217/00Indexing scheme related to electronic switching or gating, i.e. not by contact-making or -breaking covered by H03K17/00
    • H03K2217/94Indexing scheme related to electronic switching or gating, i.e. not by contact-making or -breaking covered by H03K17/00 characterised by the way in which the control signal is generated
    • H03K2217/96Touch switches
    • H03K2217/9607Capacitive touch switches
    • H03K2217/96071Capacitive touch switches characterised by the detection principle
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03KPULSE TECHNIQUE
    • H03K2217/00Indexing scheme related to electronic switching or gating, i.e. not by contact-making or -breaking covered by H03K17/00
    • H03K2217/94Indexing scheme related to electronic switching or gating, i.e. not by contact-making or -breaking covered by H03K17/00 characterised by the way in which the control signal is generated
    • H03K2217/96Touch switches
    • H03K2217/9607Capacitive touch switches
    • H03K2217/960735Capacitive touch switches characterised by circuit details
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Optics & Photonics (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Telephone Function (AREA)
  • Digital Computer Display Output (AREA)

Abstract

本发明描述用于基于连接到主机装置的可佩戴显示装置的使用状态控制所述主机装置和所述可佩戴显示装置两者的操作的技术。所述技术包含基于指示可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置内的一或多个触摸传感器的反馈,自动确定所述可佩戴显示装置的使用状态。基于所述确定的使用状态,所述可佩戴显示装置控制其自身的操作(例如,控制所述可佩戴显示装置的显示屏的操作、与所述主机装置的通信会话和从所述主机装置接收的数据的显示处理)。所述可佩戴显示装置还将所述使用状态的指示发送到所述主机装置。所述主机装置接着基于所述指示的使用状态针对所述可佩戴显示装置控制其自身的数据处理。

Description

基于可佩戴显示装置使用的数据处理
技术领域
本发明涉及多媒体数据的处理,且更确切地说,对多媒体数据的处理的控制。
背景技术
无线显示器(WD)系统包含至少一个主机装置和通过无线网络通信的至少一个客户端装置。举例来说,Wi-Fi直连(WFD)系统包含通过Wi-Fi网络通信的多个装置。主机装置充当无线接入点且将可包含音频视频(AV)数据、音频数据和/或视频数据的多媒体数据发送到参与使用一或多个无线通信标准(例如,IEEE802.11)的特定对等(P2P)群组通信会话的一或多个客户端装置。多媒体数据可在主机装置的显示器和客户端装置中的每一者处的显示器处回放。更具体地说,参与的客户端装置中的每一者处理接收到的多媒体数据用于在其显示屏和音频装备上呈现。此外,主机装置可执行多媒体数据的至少一些处理以用于在客户端装置上呈现。
主机装置和客户端装置中的一或多者可为无线装置或具有无线通信能力的有线装置。在一个实例中,作为有线装置,主机装置所述客户端装置中的一或多者可包括包含无线通信能力的电视、监视器、投影仪、机顶盒、DVD或蓝光碟播放器、数字视频记录器、膝上型计算机或桌上型个人计算机、视频游戏控制台和类似者。在另一实例中,作为无线装置,主机装置和客户端装置中的一或多者可包括移动电话、具有无线通信卡的便携式计算机、个人数字助理(PDA)、便携式媒体播放器或具有无线通信能力的其它闪存装置,包含所谓的“智能”电话和“智能”板或平板电脑或其它类型的无线通信装置(WCD)。
在一些实例中,客户端装置中的至少一者可包括可佩戴显示装置。可佩戴显示装置可包括佩戴在用户的身体上的任何类型的有线或无线显示装置。作为实例,可佩戴显示装置可包括佩戴在用户的头上以便将一或多个显示屏定位在用户的眼睛前方的无线头戴式显示器(wirelesshead-worndisplay)或无线头戴式显示器(wirelesshead-mounteddisplay,WHMD)。主机装置通常负责执行多媒体数据的至少一些处理以用于在可佩戴显示装置上显示。在无线装置的情况下,主机装置和可佩戴显示装置两者都可由有限电池资源供电。当设计WCD和无线可佩戴显示装置时,改善的电池寿命和电池寿命节省因此为首要关注点。
发明内容
一般来说,本发明涉及用于基于可佩戴显示装置的使用状态控制主机装置和连接到主机装置的可佩戴显示装置两者的操作的技术。可佩戴显示装置通常包含手动通/断开关,且当接通时,可佩戴显示装置可处理从主机装置接收的数据用于在可佩戴显示装置上显示。常规地,主机装置处理且发送数据到可佩戴显示装置,且可佩戴显示装置处理且显示接收到的数据,而与用户实际上是否佩戴可佩戴显示装置以用于使用查看和与显示的数据交互无关。在无线装置的情况下,连续处理为关于可佩戴显示装置和主机装置两者的相对短的电池循环寿命的不必要的消耗。
本发明的技术包含基于指示可佩戴显示装置是否由用户佩戴的来自可佩戴显示装置的一或多个触摸传感器的反馈自动确定可佩戴显示装置的使用状态。基于所确定的使用状态,可佩戴显示装置控制其自身的操作。举例来说,可佩戴显示装置可控制可佩戴显示装置的显示屏的操作、与主机装置的通信会话和从主机装置接收的数据的显示处理。可佩戴显示装置还将使用状态的指示发送到主机装置。主机装置可接着基于可佩戴显示装置的指示的使用状态针对可佩戴显示装置控制其自身的数据处理。
在一个实例中,本发明是针对一种控制连接到主机装置的可佩戴显示装置的方法,所述方法包括:通过所述可佩戴显示装置基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈,确定所述可佩戴显示装置的使用状态;通过所述可佩戴显示装置将所述可佩戴显示装置的所述使用状态的指示发送到所述主机装置以控制针对所述可佩戴显示装置的在所述主机装置处的数据处理;以及通过所述可佩戴显示装置基于所述可佩戴显示装置的所述使用状态,控制所述可佩戴显示装置的操作。
在另一实例中,本发明是针对一种控制连接到可佩戴显示装置的主机装置的方法,所述方法包括:通过所述主机装置接收所述可佩戴显示装置的使用状态的指示,其中所述可佩戴显示装置的所述使用状态是基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈确定;以及通过所述主机装置基于所述可佩戴显示装置的所述指示的使用状态,控制针对所述可佩戴显示装置的在所述主机装置处的数据处理。
在再一实例中,本发明是针对一种连接到主机装置的可佩戴显示装置,所述可佩戴显示装置包括一或多个触摸传感器,和一或多个处理器,所述一或多个处理器经配置以:基于指示所述可佩戴显示装置是否由用户佩戴的来自所述触摸传感器的反馈,确定所述可佩戴显示装置的使用状态;将所述可佩戴显示装置的所述使用状态的指示发送到所述主机装置以控制在所述主机装置处的针对所述可佩戴显示装置的数据处理;以及基于所述可佩戴显示装置的所述使用状态,控制所述可佩戴显示装置的操作。
在另一实例中,本发明是针对一种连接到可佩戴显示装置的主机装置,所述主机装置包括经配置以:接收所述可佩戴显示装置的使用状态的指示的一或多个处理器,其中所述可佩戴显示装置的所述使用状态是基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈确定;以及基于所述可佩戴显示装置的所述指示的使用状态控制针对所述可佩戴显示装置的数据处理。
在额外实例中,本发明是针对一种连接到主机装置的可佩戴显示装置,所述可佩戴显示装置包括:用于基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈确定所述可佩戴显示装置的使用状态的装置;用于将所述可佩戴显示装置的所述使用状态的指示发送到所述主机装置以控制在所述主机装置处的针对所述可佩戴显示装置的数据处理的装置;以及用于基于所述可佩戴显示装置的所述使用状态控制所述可佩戴显示装置的操作的装置。
在再一实例中,本发明是针对一种连接到可佩戴显示装置的主机装置,所述主机装置包括:用于接收所述可佩戴显示装置的使用状态的指示的装置,其中所述可佩戴显示装置的所述使用状态是基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈确定;以及用于基于所述可佩戴显示装置的所述指示的使用状态控制针对所述可佩戴显示装置的在所述主机装置处的数据处理的装置。
在另一实例中,本发明是针对一种包括用于控制连接到主机装置的可佩戴显示装置的指令的计算机可读媒体,所述指令在经执行时使一或多个可编程处理器:通过所述可佩戴显示装置基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈,确定所述可佩戴显示装置的使用状态;通过所述可佩戴显示装置将所述可佩戴显示装置的所述使用状态的指示发送到主机装置以控制在所述主机装置处的针对所述可佩戴显示装置的数据处理;以及通过所述可佩戴显示装置基于所述可佩戴显示装置的所述使用状态,控制所述可佩戴显示装置的操作。
在再一实例中,本发明是针对一种包括用于控制连接到可佩戴显示装置的主机装置的指令的计算机可读媒体,所述指令在经执行时使一或多个可编程处理器:通过所述主机装置接收所述可佩戴显示装置的使用状态的指示,其中所述可佩戴显示装置的所述使用状态是基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈确定;以及通过所述主机装置基于所述可佩戴显示装置的所述指示的使用状态,控制针对所述可佩戴显示装置的数据处理。
在附图和下文描述中阐明本发明的一或多个实例的细节。其它特征、目标和优点将从所述描述、图式和权利要求书而显而易见。
附图说明
图1为说明包含主机装置和可佩戴显示装置的无线显示器(WD)系统的框图。
图2为更详细地说明来自图1的主机装置和可佩戴显示装置的框图。
图3为说明作为形成为具有触摸传感器的眼镜的头戴式显示器(HMD)的可佩戴显示装置的实例的框图。
图4为说明实例平行板电容器的概念图。
图5为说明包含在来自图3的可佩戴显示装置内的触摸传感器的实例RC振荡器电路的电路图。
图6为更详细地说明包含于来自图2的可佩戴显示装置中的位置感测单元的框图。
图7为更详细地说明来自图2的主机装置的框图。
图8为说明确定连接到主机装置的可佩戴显示器的使用状态和基于使用状态控制在主机装置和可佩戴显示装置处的处理的实例操作的流程图。
图9为说明接收在主机装置处的可佩戴显示装置的使用状态的指示和基于指示的使用状态控制在主机装置处的处理的实例操作的流程图。
图10为说明无线头戴式显示器(WHMD)装置和WHMD装置的有关控制机构中包含的位置感测单元的实例操作的流程图。
具体实施方式
图1为说明包含主机装置12和可佩戴显示装置16的无线显示器(WD)系统10的框图。在图1的实例中,WD系统10包含主机装置12和仅一个客户端装置,即,可佩戴显示装置16。在其它实例中,WD系统10可包含额外客户端装置(未图示),其可包括可佩戴显示装置、无线装置或具有无线通信能力的有线装置。
在一些实例中,WD系统10可遵守由Wi-Fi联盟定义的Wi-Fi直连(WFD)标准。WFD标准实现通过Wi-Fi网络(即,无线局域网)的装置到装置通信,其中所述装置协商其作为接入点或客户端装置的角色。WD系统10可包含支持多个无线网络的一或多个基站(未图示),通过多个无线网络,可在主机装置12、可佩戴显示装置16与其它参与的客户端装置之间建立对等(P2P)群组通信会话。通信服务提供商或其它实体可将基站用作网络集线器来在中央操作和管理这些无线网络中的一或多者。
根据WFD标准,主机装置12可充当无线接入点且接收来自可佩戴显示装置16的建立P2P群组通信会话的请求。举例来说,主机装置12可使用实时流协议(RTSP)建立主机装置12与可佩戴显示装置16之间的P2P群组通信会话。P2P群组通信会话可通过无线网络(例如,使用例如对先前802.11标准的IEEE802.11a、802.11g或802.11n改善的无线通信标准的Wi-Fi网络)建立。关于无线网络的额外资讯可在卡斯特·M.的“无线网络:权威指南”(奥莱利,2002年4月)中发现。
一旦建立了P2P群组通信会话,主机装置12可将多媒体数据(其可包含音频视频(AV)数据、音频数据和/或视频数据)发送到可佩戴显示装置16和参与特定P2P群组通信会话的任何其它客户端装置。举例来说,主机装置12可使用实时输送协议(RTP)将多媒体数据发送到可佩戴显示装置16。多媒体数据可在主机装置12的显示器和可佩戴显示装置16的显示屏两者处回放。举例来说,可佩戴显示装置16可处理从主机装置12接收的多媒体数据以用于在其显示屏和音频装备上呈现。此外,主机装置12可执行多媒体数据的至少一些处理以用于在可佩戴显示装置16上呈现。
可佩戴显示装置16的用户可经由包括于可佩戴显示装置16内或连接到可佩戴显示装置16的接口(例如,人接口装置(HID))提供用户输入。HID可包括触摸显示器、对输入物件(例如,手指、触控笔等)敏感的输入装置、键盘、追踪球、鼠标、操纵杆、遥控器、麦克风或类似者中的一或多者。可佩戴显示装置16将提供的用户输入发送到主机装置12。在一些实例中,可佩戴显示装置16通过被称作用户输入反向通道(UIBC)的反向通道架构发送用户输入。以此方式,主机装置12可响应在可佩戴显示装置16处提供的用户输入。举例来说,主机装置12可处理接收到的用户输入且应用用户输入对发送到可佩戴显示装置16的后续数据的任何效应。
主机装置12可为无线装置或具有无线通信能力的有线装置。在一个实例中,作为有线装置,主机装置12可包括电视、监视机、投影仪、机顶盒、DVD或蓝光碟播放器、数字录像机、膝上型计算机或桌上型个人计算机、视频游戏控制台和包含无线通信能力的类似者中的一者。在另一实例中,作为无线装置,主机装置12可包括以下各者中的一者:移动电话、具有无线通信卡的便携式计算机、个人数字助理(PDA)、便携式媒体播放器或具有无线通信能力的其它闪存装置,包含所谓的“智能”电话和“智能”板或平板电脑或另一类型的无线通信装置(WCD)。
可佩戴显示装置16可包括佩戴在用户的身体上的任何类型的有线或无线显示装置。作为实例,可佩戴显示装置16可包括佩戴在用户的头上以便将一或多个显示屏定位在用户的眼睛前方的头戴式显示器(head-worndisplay)或头戴式显示器(head-mounteddisplay,HMD)。一般来说,可佩戴显示装置16的显示屏可包括例如液晶显示器(LCD)、等离子显示器、有机发光二极管(OLED)显示器或另一类型的显示屏的多种显示屏中的一者。
在一个实例中,可佩戴显示装置16可包括形成为包含在目镜中的一或多者中的显示屏且还包含鼻梁和支臂以佩戴在用户的脸上的眼镜的HMD装置。作为另一实例,可佩戴显示装置16可包括形成为包含在单独的目镜中的显示屏或单一显示屏且还包含至少一个带子以将护目镜固持在用户的头上的护目镜的HMD装置。虽然可佩戴显示装置16主要地在本发明中被描述为HMD,但在其它实例中,可佩戴显示装置16可包括佩戴在用户的身体的其它部分上(例如,在用户的颈部、肩部、手臂或手腕上)的显示装置。HMD和其操作的具体实例更详细地描述于罗兰·J.和华·H.的“头戴式显示器系统”(光学工程百科全书,2005)中。
在WD系统10中,主机装置12和可佩戴显示装置16通常为无线装置。举例来说,可佩戴显示装置16可包括无线连接到主机装置12的无线HMD(WHMD),且主机装置12可包括WCD,例如,行动智能电话或智能板。在此实例中,除了典型WCD操作外,主机装置12还执行至少一些多媒体数据处理以用于在可佩戴显示装置16上呈现,和执行来自在可佩戴显示装置16处的用户接口交互性的用户输入处理。主机装置12可通过由大小和重量受到限制以便配合于手持式装置的结构内的可再充电电池提供来源的电源管理器来执行这些操作。
用于可佩戴显示装置16的电源管理器和电池可甚至进一步受到限制,因为意欲将可佩戴显示装置16佩戴在用户的身体上。由于可佩戴显示装置16可为佩戴在用户的头上的HMD,因此可佩戴显示装置16的结构需要足够小且轻以在使用期间保持舒适。与其它移动装置相比,这些大小和重量限制可导致相对小的电池包含在可佩戴显示装置16中。可佩戴显示装置16因此可能需要执行多媒体数据处理以供呈现和执行与由大小、重量、平衡、热和健康约束受到限制的可再充电电池提供来源的电源管理器的用户接口交互性。
WFD标准确实提供用于作为接入点操作的装置(例如,主机装置12)的一些电源管理协议,即,机会性省电协议和不存在通知协议。这些电源管理协议中的两者都实现装置作为接入点操作以通过在方便的或预先计划的周期期间进入睡眠来省电,而不拆开与一或多个客户端装置的P2P群组通信会话。关于这些WFD电源管理协议的更多信息可在坎普斯-穆·D.等人的“设计具有Wi-Fi直连的高效节能接入点(DesigningEnergyEfficientAccessPointswithWi-FiDirect)”(国际计算机和电信联网期刊,第55卷,第13期,2011年9月)中得到。
可佩戴显示装置16可包含手动通/断开关(未图示),且当接通时,可佩戴显示装置16处理从主机装置12接收的数据用于在可佩戴显示装置16上显示。然而,仅开启可佩戴显示装置16不指示用户是否实际上佩戴可佩戴显示装置16用于使用查看和与显示的数据交互。常规地,主机装置将处理且发送数据到可佩戴显示装置,且可佩戴显示装置将处理且显示接收到的数据,而与用户是否实际上佩戴可佩戴显示装置无关。在无线装置的情况下,连续处理为关于可佩戴显示装置和主机装置两者的短的电池循环寿命的不必要的消耗。
可佩戴显示装置16必定需要用户佩戴所述装置供使用,因此仅当用户实际上佩戴装置时,需要可佩戴显示装置16的操作和在主机装置12处的有关多媒体数据处理。因为用户必须佩戴可佩戴显示装置16,所以可佩戴显示装置16的使用可为侵入性的且干扰用户的正常活动。因此,可任意中断可佩戴显示装置16的使用,且用户不大可能将记得去手动关断可佩戴显示装置16。
一般来说,本发明涉及用于基于可佩戴显示装置16的使用状态(即,是否在使用中或不在使用中)控制主机装置12和连接到主机装置12的可佩戴显示装置16两者的操作的技术。根据所述技术,自动检测可佩戴显示装置16的使用状态以最小化不必要的处理且保存在主机装置12和可佩戴显示装置16两者处的电池循环寿命,而不依赖于用户交互。如图1中所说明,可佩戴显示装置16包含位置感测单元20,其经配置以自动确定可佩戴显示装置16是否由用户佩戴以用于使用查看和/或与显示的数据交互。
本发明的技术包含包含定位在当用户正佩戴可佩戴显示装置16时与用户接触或紧密接近的位置处的一或多个触摸传感器(图1中未展示)的可佩戴显示装置16的使用。在可佩戴显示装置16包括形成为眼镜的WHMD装置的实例中,可佩戴显示装置16可包含当佩戴眼镜时将分别与用户的鼻子和耳朵接触的鼻梁上的至少一个传感器和支臂上的至少两个传感器。以此方式,当用户正佩戴且使用可佩戴显示装置时,触摸传感器将不可避免地与用户接触。在其它实例中,可佩戴显示装置16可包含取决于装置的形式或形状定位在不同位置处的或多或少触摸传感器。此外,在一些情况下,可佩戴显示装置16可包含能够由紧密接近用户的身体而不需要实际接触用户的身体来触发的触摸传感器。
根据所述技术,位置感测单元20基于来自可佩戴显示装置16的触摸传感器的反馈自动确定可佩戴显示装置16的使用状态。反馈对位置感测单元20指示可佩戴显示装置16是否正由用户佩戴。基于所确定的使用状态,可佩戴显示装置16控制其自身的操作。举例来说,可佩戴显示装置16可控制可佩戴显示装置16的显示屏、与主机装置12的通信会话和从主机装置12接收的数据的显示处理中的一或多者的操作。可佩戴显示装置16还将使用状态的指示发送到主机装置12。主机装置12可接着基于可佩戴显示装置16的指示的使用状态控制其针对可佩戴显示装置16的自身的数据处理。
图2为更详细地说明来自图1的主机装置12和可佩戴显示装置16的框图。为了本发明的目的,主机装置12和可佩戴显示装置16将主要地描述为无线装置,其中对电池大小和重量有限制,从而导致短的电池循环寿命。举例来说,主机装置12可包括智能电话或智能垫,或其它手持型WCD,且可佩戴显示装置16可包括WHMD装置。然而,在其它实例中,主机装置12和可佩戴显示装置16可包括无线装置或具有无线通信能力的有线装置。
在图2中说明的实例中,主机装置12包含应用程序处理器30、系统中断处理器34、无线控制器36、连接处理器38、多媒体处理器42和显示器44。应用程序处理器30包含用户输入(UI)处理器32。在其它实例中,主机装置12可包括用以控制且执行WCD操作的额外功能单元或模组。作为实例,以下关于图7描述主机装置12的更详细型式。
如图2中所说明,可佩戴显示装置16包含位置感测单元20、无线控制器46、连接处理器48、控制器50、多媒体处理器52、显示屏54和触摸传感器56。控制器50包括用于可佩戴显示装置16的主控制器,且控制可佩戴显示装置16的总体操作。可佩戴显示装置16的位置感测单元20和触摸传感器56和其根据本发明的技术的操作在下文且关于图3到图6更详细地描述。
一般来说,主机装置12处理多媒体数据以用于在其自身的显示器44上呈现,且也可处理多媒体数据以用于在可佩戴显示装置16上呈现。此外,可佩戴显示装置16可经由接口(例如,HID)接收用户输入,且可将用户输入发送到主机装置12供处理。在图2中,将多媒体数据和用户输入两者在主机装置12与可佩戴显示装置16之间的传送说明为路径62。
为了将多媒体数据从主机装置12传送到可佩戴显示装置16,路径62可开始于应用程序处理器30。应用程序处理器30提供多种应用程序可在主机装置12上运行的环境。实例应用程序包含文字发送应用程序、电子邮件应用程序、视频或图片幻灯片应用程序、演示应用程序、视频会议应用程序和类似者。应用程序处理器30可从与主机装置12相关联的内部或外部存储位置和/或内部或外部传感器或相机接收数据,用于由这些应用程序使用。在应用程序处理器30上运行的应用程序又产生多媒体数据用于对主机装置12和/或可佩戴显示装置16的用户呈现。在其它实例中,路径62可开始于多媒体处理器42或产生多媒体数据或从存储位置和/或传感器或相机直接接收多媒体数据的某一其它功能装置。
多媒体处理器42可显示处理接收到的多媒体数据用于在主机装置12的显示器44上呈现。此外,多媒体处理器42可处理接收到的多媒体数据用于发射和在可佩戴显示装置16上呈现。在后一种情况下,无线控制器36将处理的数据打包用于发射。将处理的数据打包可包含将数据分群至可取决于通过Wi-Fi网络40使用的无线通信标准的包、帧或小区内。连接处理器38接着使用Wi-Fi网络40将处理的数据发射到可佩戴显示装置16。连接处理器38管理主机装置12的连接,包含通过Wi-Fi网络40与可佩戴显示装置16的P2P群组通信会话,和通过连接对数据的发射和接收。
当连接处理器48接收到来自主机装置12的发射的数据时,多媒体数据的传送在可佩戴显示装置16处继续沿着路径62。类似于主机装置12的连接处理器38,可佩戴显示装置16的连接处理器48管理可佩戴显示装置16的连接,包含通过Wi-Fi网络40与主机装置12的P2P群组通信会话,和通过连接对数据的发射和接收。无线控制器46解包接收到的数据用于由多媒体处理器52处理。多媒体处理器52接着显示处理接收到的数据用于在可佩戴显示装置16的显示屏54上呈现。
为了将用户输入从可佩戴显示装置16传送到主机装置12,可沿着路径62,与以上描述的顺序相反,其开始于多媒体处理器52。多媒体处理器52可经由HID或可佩戴显示装置16内包含或连接到可佩戴显示装置16的其它用户接口(未图示)接收用户输入。无线控制器46打包用户输入,且连接处理器48通过Wi-Fi网络40将打包的用户输入发射到主机装置12。在主机装置12处,连接处理器38接收发射的用户输入,且无线控制器36解包接收到的用户输入用于由多媒体处理器42和UI处理器32处理。以此方式,主机装置12可通过应用用户输入对在多媒体处理器42和/或在应用程序处理器30上运行的应用程序处的数据处理的任何效应来响应用户输入。
常规地,主机装置12和可佩戴显示装置16将继续如上所述的操作,直到一些用户交互发生断开连接、进入睡眠或对可佩戴显示装置16断电。然而,不管用户是否正佩戴可佩戴显示装置16,连续处理数据用于在可佩戴显示装置16上显示消耗主机装置12和可佩戴显示装置16两者的大量电力资源。为了保存电池循环寿命,本发明的技术包含在可佩戴显示装置16中的位置感测单元20和触摸传感器56以便实现可佩戴显示装置16的使用状态的自动确定,即,可佩戴显示装置16是否由用户佩戴以用于使用查看和/或与显示的数据交互。此外,所述技术包含对主机装置12通知可佩戴显示装置16的使用状态。以此方式,所述技术使可佩戴显示装置16能够自动进入功率减小状态,其中关闭除位置感测单元20外的所有组件,而不依赖于用户交互来断开连接、进入睡眠或对可佩戴显示装置16断电。所述技术还允许当可佩戴显示装置16不在使用中时主机装置12停用针对可佩戴显示装置16的在主机装置12处的数据处理。
可佩戴显示装置16的位置感测单元20经设计以始终在操作,甚至当可佩戴显示装置16的其余组件在睡眠或断电时。在一些情况下,负责位置感测单元20的操作的控制器50的一部分也可保持通电。为了保持“始终通电”,位置感测单元20经设计以消耗超低功率,例如,大致10微瓦(μW)。此外,位置感测单元20可需要在可佩戴显示装置16处的可忽略的额外硬件。位置感测单元20也可避免参加用户输入控制(其将不必要地接合主机装置12),且可用于在可佩戴显示装置16处的一些应用程式具体控制以最小化潜时。
位置感测单元20接收指示可佩戴显示装置16是否由用户佩戴的来自触摸传感器56的反馈。基于反馈,位置感测单元20连续地确定可佩戴显示装置16的使用状态。如下文更详细地描述,在一些情况下,位置感测单元20可产生基于触摸传感器56是否与用户的身体接触而改变的振荡频率,且基于产生的振荡频率与阈值频率值的比较来确定可佩戴显示装置16的使用状态。
触摸传感器56可定位在可佩戴显示装置16内当用户在佩戴可佩戴显示装置16时将与用户接触或紧密接近用户的位置处。关于图3更详细地描述可佩戴显示装置16包括形成为眼镜的WHMD装置的实例。在一些情况下,触摸传感器56中的每一者可包括增大由位置感测单元20产生的振荡频率的电容触摸传感器。在此实例中,当由位置感测单元20产生的振荡频率大于阈值频率值时,位置感测单元20确定可佩戴显示装置16在使用中。
当发生使用状态的改变时(例如,用户戴上或拿掉可佩戴显示装置16),位置感测单元20可经由直接处理器中断请求58通知控制器50所确定的使用状态。在其它实例中,位置感测单元20可连续地将使用状态指示发送到控制器50,而与是否已发生使用状态的发改变无关。控制器50又可产生虚拟处理器中断请求60以将可佩戴显示装置16的使用状态对主机装置12指示。如图2中所说明,虚拟处理器中断请求60由无线控制器46打包且由连接处理器48通过Wi-Fi网络40发射到主机装置12。在主机装置12处,连接处理器38接收发射的虚拟处理器中断请求60,且无线控制器36解包接收到的用户输入用于由系统中断处理器34和应用程序处理器30处理。
在可佩戴显示装置16处于功率减小状态中且用户戴上可佩戴显示装置用于使用的情况下,位置感测单元20接收指示可佩戴显示装置16正由用户佩戴的来自触摸传感器56的反馈。基于反馈,位置感测单元20确定可佩戴显示装置16在使用中,且对控制器50指示所确定的使用。举例来说,位置感测单元20可将直接处理器中断请求58发送到控制器50以唤醒或激活可佩戴显示装置16的其它组件。控制器50基于可佩戴显示装置16的使用状态的指示控制可佩戴显示装置16的操作。举例来说,控制器50可指导连接处理器48建立与主机装置12的通信会话。此外,控制器50可实现从主机装置12接收的数据在多媒体处理器52处的显示处理,且激活可佩戴显示装置16的显示屏54以便显示处理的数据。
在从位置感测单元20接收到可佩戴显示装置16在使用中的指示后,控制器50还将可佩戴显示装置在使用中的指示发送到主机装置12。举例来说,控制器50可将虚拟处理器中断请求60发送到主机装置12。主机装置12的应用程序处理器30基于可佩戴显示装置16的使用状态的指示控制针对可佩戴显示装置16的在主机装置12处的数据处理。举例来说,应用程序处理器30可实现在多媒体处理器42处的数据处理以用于发射和在可佩戴显示装置16上显示。在一些情况下,应用程序处理器30也可指导连接处理器38建立与可佩戴显示装置16的通信会话,且基于可佩戴显示装置16在使用中的指示将处理的数据发射到可佩戴显示装置16。此外,应用程序处理器30可使UI处理器32能够处理从可佩戴显示装置16接收的任何用户输入,且基于接收到的使用输入调整应用程序处理和数据处理。
在可佩戴显示装置16处于使用中且用户去除可佩戴显示装置的情况下,位置感测单元20接收指示可佩戴显示装置16未由用户佩戴的来自触摸传感器56的反馈。基于反馈,位置感测单元20确定可佩戴显示装置16不再在使用中,且对控制器50指示所确定的使用。举例来说,位置感测单元20可将直接处理器中断请求58发送到控制器50以进入睡眠、关闭或另外去激活可佩戴显示装置16的其它组件。控制器50基于可佩戴显示装置16的使用状态的指示控制可佩戴显示装置16的操作。举例来说,控制器50可停用从主机装置12接收的数据在多媒体处理器52处的显示处理,且去激活可佩戴显示装置16的显示屏54。控制器50也可指导连接处理器48拆开与主机装置12的通信会话。
在从位置感测单元20接收到可佩戴显示装置16不在使用中的指示后,控制器50还将可佩戴显示装置不在使用中的指示发送到主机装置12。举例来说,控制器50可将虚拟处理器中断请求60发送到主机装置12。主机装置12的应用程序处理器30基于可佩戴显示装置16的使用状态的指示控制针对可佩戴显示装置16的在主机装置12处的数据处理。举例来说,应用程序处理器30可停用在多媒体处理器42处的数据处理以用于发射和在可佩戴显示装置16上显示。在一些情况下,应用程序处理器30也可指导连接处理器38拆开与可佩戴显示装置16的通信会话,且基于可佩戴显示装置16在使用中的指示停止数据到可佩戴显示装置16的发射。此外,应用程序处理器30可使UI处理器32停止处理从可佩戴显示装置16接收的任何用户输入。以此方式,本发明的技术可改善电池循环寿命且可减少在可佩戴显示装置16和主机装置12两者处的不必要的数据处理。
图3为说明作为形成为具有触摸传感器56A到56C(“触摸传感器56”)的眼镜的HMD的可佩戴显示装置16的实例的框图。如以上描述的图2中所说明,可佩戴显示装置16包含使用通过Wi-Fi网络40建立的与主机装置12的P2P群组通信会话准备用于发射的数据的无线控制器46、控制可佩戴显示装置16的操作的控制器50和执行从主机装置12接收的数据的显示处理的多媒体处理器52。在所说明的实例中,眼镜的透镜包含显示屏54,用于其的多媒体处理器52处理视频数据以用于对用户呈现。此外,可佩戴显示装置16包含扬声器64A和64B(“扬声器64”),用于其的多媒体处理器52处理音频数据以用于对用户呈现。
如图3中所说明,形成为眼镜的可佩戴显示装置16包含在目镜中由使可佩戴显示装置16能够佩戴在用户的脸上的鼻梁63和支臂65A和65B(“支臂65”)固持在一起的显示屏54。在此实例中,触摸传感器56定位在当用户在佩戴可佩戴显示装置16时将不可避免地与用户的身体接触的位置处。在所说明的实例中,可佩戴显示装置16包含定位在眼镜的鼻梁上的触摸传感器56C,和定位在眼镜的支臂上的触摸传感器56A和56B,当佩戴眼镜时,鼻梁和支臂将分别与用户的鼻子和耳朵接触。。在其它情况下,可佩戴显示装置16可包含能够由紧密接近用户的身体而不需要实际接触用户的身体来触发的触摸传感器。在此情况下,触摸传感器可定位在可佩戴显示装置16上将至少紧密接近用户的身体但不实际触碰用户的身体的位置处。
可佩戴显示装置16的位置感测单元20包含触摸换能器66和触摸检测器68。触摸换能器66直接连接到触摸传感器56中的每一者以接收来自触摸传感器56的反馈。触摸换能器66将来自触摸传感器56的“触摸”反馈转换成电反馈。在位置感测单元20产生振荡频率以确定可佩戴显示装置16的使用状态的情况下,触摸换能器66可将来自触摸传感器56的反馈转换成当触摸传感器56与用户的身体接触时产生的振荡频率增大的额外电容。
触摸检测器68接收指示触摸传感器56中的一或多者是否与用户的身体接触的来自触摸换能器66的经转换反馈,且基于反馈确定可佩戴显示装置16是否在使用中。更具体地说,触摸检测器68可将基于来自触摸传感器56的反馈产生的振荡频率与阈值频率值比较。举例来说,当产生的振荡频率大于阈值频率值时,触摸检测器68可确定可佩戴显示装置16正由用户佩戴供使用。触摸检测器68可接着将直接处理器中断请求发送到控制器50以指示可佩戴显示装置16的所确定的使用状态。
在所说明的实例中,可佩戴显示装置16包含三个触摸传感器56。在其它实例中,可佩戴显示装置16可包含或多或少触摸传感器。在一些情况下,使用触摸传感器56中的两者或两者以上使得位置感测单元20能够检测是否所有触摸传感器56都与用户接触或紧密接近且可佩戴显示装置16正被恰当地佩戴供使用或是否并非全部触摸传感器56与用户接触且可佩戴显示装置16经不正确地定位或固持在触摸传感器56中的一或多者处可为有利的。举例来说,当所有触摸传感器56同时与用户的身体的表面接触(指示用户正佩戴可佩戴显示装置16供使用)时,位置感测单元20将产生最高振荡频率。阈值频率值可为需要所有触摸传感器56与用户接触的预设值。在其它实例中,阈值频率值可为需要触摸传感器56中的至少一者与用户接触的预设值。
如上所述,位置感测单元20可经设计以为“始终通电”。因此,触摸换能器66可持续地接收来自触摸传感器56的反馈且转换反馈以用于位置感测单元20产生不断更新的振荡频率。此外,触摸检测器68可持续地比较经更新的振荡频率与阈值频率值以确定可佩戴显示装置16的当前使用状态。
在一些情况下,仅当发生可佩戴显示装置16的确定的使用状态的改变时,触摸检测器68将直接处理器中断请求发送到控制器50以指示使用状态。以此方式,仅当需要执行唤醒或关闭操作时,对控制器50通知使用状态。在其它情况下,触摸检测器68持续地将使用状态的指示发送到控制器50,且控制器50接着检测使用状态的改变已发生的时间以控制可佩戴显示装置16的操作,且将使用状态改变的指示发送到主机装置12。在任一情况下,使用状态确定和后续唤醒或关闭操作可作为可佩戴显示装置16的后台进程来执行。
在所说明的实例中,可佩戴显示装置16为形成为眼镜的HMD。在其它实例中,可佩戴显示装置16可包括佩戴在用户的身体上的任何类型的有线或无线显示装置,包含具有与图3中所展示不同的外观尺寸的HMD。作为实例,可佩戴显示装置16可包括形成为包含在单独的目镜中的显示屏或单一显示屏的护目镜的HMD装置,且还包含至少一个带以将护目镜固持在用户的头上。作为一些实例,可佩戴显示装置16可包括佩戴在用户的身体的其它部分上(例如,在用户的颈部或肩部上)的显示装置。
图4为说明实例平行板电容器70的概念图。根据本发明的技术,平行板电容器70可与来自图3的可佩戴显示装置16中包含的触摸传感器56中的一者相关联。电容器70包含相互平行地定位的顶板72A和底板72B(“板72”),和夹在板72A与72B之间的介电材料74。在图4中,介电材料74指示为具有等于介电材料74的相对介电常数εr与自由空间的介电常数εr的乘积的实际介电常数。介电材料74的介电常数指示介电材料74发射电场的能力。
一般来说平行板电容器70的电容指示电容器70储存电荷的能力。平行板电容器70的电容取决于板72的面积、板72之间的距离和板72之间的介电材料74的相对介电常数或介电常数。具体地说,平行板电容器70的电容等于C=ε0r*(A/d),其中A表示板72的面积且d表示板72之间的距离。
图5为说明包含在来自图3的可佩戴显示装置16内的触摸传感器56A的实例RC振荡器电路75的电路图。在一些实例中,RC振荡器电路75可被视为张驰振荡器。RC振荡器电路75包含基于由RC网络提供的频率选择性输入产生振荡频率的放大器,其包含至少一个电阻器(R)和至少一个电容器(C)。
在图5中说明的实例中,RC振荡器电路75还包含来自图3的可佩戴显示装置16的触控感测器56A。触控感测器56A可包括电容触摸传感器,其包含定位在可佩戴显示装置16内使得当佩戴可佩戴显示装置16时触摸传感器56A将与用户接触的板或电极。当触摸传感器56A与用户的身体接触时,创建用户的皮肤充当介电材料且地球充当用于触摸传感器56A的电极的接地的电容器。
在图5中说明的一个实例中,当触摸传感器56A不与用户的身体的表面接触时,电流78不流动到触摸传感器56A且产生的振荡频率只取决于R和C。可将此振荡频率视为RC振荡器电路75的基线或默认振荡频率。在图5中说明的另一实例中,当触摸传感器56A与用户的身体接触时,电流76流动到触摸传感器56A且通过用户的身体到地面。在此情况下,将用户的身体的电容(例如,Ctouch)添加到RC网络。额外电容改变RC网络的总RC时间常数且更改产生的振荡频率。本发明的技术使用更改的振荡频率值确定可佩戴显示装置16是否由用户佩戴。
图6为更详细地说明包含于来自图2的可佩戴显示装置16中的位置感测单元20的框图。如以上描述的图2中所说明,可佩戴显示装置16包含使用通过Wi-Fi网络40建立的与主机装置12的P2P群组通信会话准备用于发射的数据的无线控制器46、控制可佩戴显示装置16的操作的控制器50和执行从主机装置12接收的数据的显示处理以用于在显示屏54上呈现的多媒体处理器52。此外,如以上描述的图3中所说明,可佩戴显示装置16的位置感测单元20包含接收来自触摸传感器56的反馈的触摸换能器66和基于由触摸换能器66转换的反馈确定可佩戴显示装置的使用状态的触摸检测器68。
在图6的说明的实例中,位置感测单元20进一步包含基于来自触摸传感器56的反馈产生振荡频率的RC振荡电路。RC振荡器电路可实质上类似于来自图5的RC振荡器电路75操作,只不过包含额外电容触摸传感器。触摸传感器56在图6中说明为通过用户的身体连接到大地的包含于位置感测单元20的RC振荡器电路中的额外电容器。触摸传感器56中的每一者可实质上类似于关于图5描述的触摸传感器56A操作。
当首先对可佩戴显示装置16通电时,位置感测单元20激活接地电路69以在预设时间周期内将所有触摸传感器56接地。在那个周期期间,当触摸传感器56不与用户的身体接触时,RC振荡器电路产生用于可佩戴显示装置16的默认振荡频率。一旦确定了默认振荡频率,那么位置感测单元20可开始使用状态确定操作。
在扫描计时器周期期间,触摸换能器66接收来自触摸传感器56的反馈,且RC振荡器电路基于所述反馈产生振荡频率。扫描计时器周期可为预设时间周期,在此期间,位置感测单元20的RC振荡器电路基于来自触摸传感器56的反馈产生振荡频率。扫描计时器周期可允许所得振荡频率在触摸检测器68将振荡频率与阈值频率值比较以确定可佩戴显示装置16的使用状态前变稳定。
当触摸传感器56中的一或多者与用户的身体接触时,触摸换能器66接收作为通过额外电容器的较快电容放电率的反馈。来自触摸传感器56的此反馈导致RC振荡器电路产生比当不触摸触摸传感器56时高的振荡频率。触摸检测器68接着将较高振荡频率与阈值频率值比较以确定频率是否足够高以指示用户正佩戴可佩戴显示装置16供使用。
举例来说,阈值频率值可为小于最高振荡频率但大于当触摸传感器56中无一者与用户的身体接触时产生的振荡频率的预设值。在一些情况下,阈值频率值可经预设,使得触摸检测器68仅当所有触摸传感器56与用户接触时确定可佩戴显示装置16在使用中。在其它情况下,阈值频率值可经预设,使得当触摸传感器56中的至少一者与用户接触时,触摸检测器68确定可佩戴显示装置16在使用中。
如图6中所说明,可佩戴显示装置16还包含电源管理器79,其可存储以下电池状态信息:反映可佩戴显示装置16为壁插式还是使用其电池储备,且如果使用电池储备,那么剩余电池电力的等级。在一些情况下,可将电池状态信息对可佩戴显示装置16的用户显示,例如,使用小电池图标、灯或声音指示不同电池状况。电源管理器79可几乎连续地更新电池状态信息以对可佩戴显示装置16的用户反映准确的电池状态。在一些情况下,当电池储备低于最小值时,电源管理器79可起始针对可佩戴显示装置16的关闭或睡眠操作,而不管其使用状态。
图7为更详细地说明来自图2的主机装置12的框图。在所说明的实例中,主机装置12包含具有UI处理器32的应用程序处理器30、系统中断处理器34、无线控制器36、连接处理器38、多媒体处理器42、显示器44、外部存储器80、本地存储器82、通用图形处理单元(GPGPU)84、应用程序数据管理器86、显示处理器88、电池监测系统90和安全管理器92。
一般来说,应用程序处理器30、UI处理器32、系统中断处理器34、无线控制器36、连接处理器38、多媒体处理器42如以上关于图2所描述操作。在应用程序处理器30上运行的应用程序产生多媒体数据(例如,AV数据、视频数据或音频数据),用于对主机装置12和/或连接到主机装置12的可佩戴显示装置16或某一其它客户端装置的用户呈现。在一些情况下,多媒体处理器42可处理相同视频数据用于在显示器44和可佩戴显示装置16或另一客户端装置的外部显示器两者上显示。在其它情况下,多媒体处理器42可处理视频数据用于在显示器44和外部显示器中的仅一者上显示。
为了在主机装置12上呈现数据,多媒体处理器42可执行一些预处理,且显示处理器88执行视频数据的显示处理以用于在显示器44上呈现。在音频数据的情况下,多媒体处理器42可再次执行一些预先预处理,且音频处理器(未图示)可执行另外的音频处理以用于在主机装置12的一或多个扬声器(未图示)上呈现。为了在连接到主机装置12的可佩戴显示装置16或某一其它客户端装置上呈现数据,多媒体处理器42可执行一些预处理,且无线控制器36和连接处理器38接着分别打包处理的数据且经由Wi-Fi网络40将其发射到客户端装置。连接处理器38通过Wi-Fi网络40管理主机装置12的连接。在其它实例中,连接处理器38可管理3G或4G调制解调器连接、全球定位系统(GPS)连接和/或蓝牙连接。
在一些情况下,存储在外部存储器80中的数据可经由外设接口(例如,通用串行总线(USB)接口或安全数字(SD)卡接口)从外部存储装置(例如,闪存驱动器)接收。存储在外部存储器80中的数据也可经由连接处理器38从存储装置或实时地从私用网络或公用网路(例如,因特网)接收。应用程序数据管理器86可从外部存储器80和本地存储器82移动用于应用程序的数据以为了应用程序处理器30较容易的存取。此外,GPGPU84可执行针对视频游戏应用程序或需要3D表示的其它应用程序的任何图形处理。
主机装置12还包含监测主机装置12的电池状态的电池监测系统90。电池监测系统90可存储以下电池状态信息:反映主机装置12为壁插式还是使用其电池储备,且如果使用电池储备,那么剩余电池电力的等级。在一些情况下,可将电池状态信息对主机装置12的用户显示,例如,使用小电池图标、灯或声音指示不同电池状况。电池监测系统90可几乎连续地更新电池状态信息以对主机装置12的用户反映准确的电池状态。
图7中说明的主机装置12的组件仅为示范性。在其它实例中,主机装置12可包含更多、更少和/或不同的组件。可将主机装置12的组件实施为多种合适电路中的任一者,例如,一或多个微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑、软件、硬件、固件或其任何组合。主机装置12中的显示器44可包括例如液晶显示器(LCD)、等离子显示器、有机发光二极管(OLED)显示器或另一类型的显示屏的多种显示装置中的一者。
主机装置12中的外部存储器80和本地存储器82可包括广泛多种易失性或非易失性存储器中的任一者,包括(但不限于)例如同步动态随机存取存储器(SDRAM)的随机存取存储器(RAM)、只读存储器(ROM)、非易失性随机存取存储器(NVRAM)、电可擦除可编程只读存储器(EEPROM)、闪存和类似者。外部存储器80和本地存储器82可包括计算机可读存储媒体用于存储媒体数据以及其它种类的数据。外部存储器80和本地存储器82另外存储由应用程序处理器30和/或多媒体处理器42执行作为执行本发明中描述的技术的部分的指令和程序代码。
图8为说明确定连接到主机装置的可佩戴显示装置(WDD)的使用状态和基于使用状态控制在主机装置和可佩戴显示装置处的处理的实例操作的流程图。关于来自图1和2的连接到主机装置12的可佩戴显示装置16描述实例操作。
WDD16的位置感测单元20基于从WDD16中包含的一或多个触摸传感器56接收的反馈确定WDD16的使用状态(100)。触摸传感器56可定位于WDD16上当用户在佩戴WDD16供使用时与用户接触或紧密接近的位置处。在一些实例中,WDD16包括形成为眼镜的无线头戴式显示器(WHMD)装置(如图3中所说明),包含位于眼镜的鼻梁上的触摸传感器中的至少一者(例如,触摸传感器56C)和位于眼镜的支臂上的触摸传感器中的至少两者(例如,触摸传感器56A和56B)。
位置感测单元20可包含使用电阻器与电容器的组合产生振荡频率的振荡器电路。在此实例中,连接到WDD16的触摸传感器56中的每一者对振荡器电路增添电容。当触摸传感器56中的一或多者与用户的身体(例如,用户的头或脸)的表面接触时,来自触摸传感器56的反馈包括通过额外电容器的较快电容放电率,其导致振荡器电路产生比当不触摸触摸传感器56时高的振荡频率。在此实例中,位置感测单元20通过基于来自触摸传感器56的反馈产生振荡频率且将所得振荡频率与阈值频率值比较以确定用户是否正佩戴WDD16供使用来确定WDD16的使用状态。
当振荡频率大于阈值频率值时,位置感测单元20确定WDD16在使用中。相反地,当振荡频率小于或等于阈值频率值时,位置感测单元20确定WDD16不在使用中。当所有触摸传感器56同时与用户的身体的表面接触(指示用户正佩戴WDD16供使用)时,位置感测单元20将产生最高振荡频率。因此,阈值频率值可为小于最高振荡频率但大于当触摸传感器56中无一者与用户的身体的表面接触时产生的振荡频率的预设值。在一些情况下,阈值频率值可经预设使得位置感测单元20仅当所有触摸传感器56与用户接触时确定WDD16在使用中。在其它情况下,阈值频率值可经预设使得当触摸传感器56中的至少一者与用户接触时,位置感测单元20确定WDD16在使用中。
在一些情况下,位置感测单元20可持续地确定WDD16的使用状态,并且,按固定间隔或在确定使用状态的改变后,将指示WDD16的使用状态的直接处理器中断请求发送到WDD16的控制器50。控制器50又可将指示WDD16的使用状态的虚拟处理器中断请求发送到主机装置12。作为一个实例,当位置感测单元20确定WDD16在使用中(102的是分支)时,WDD16的控制器50将WDD16在使用中的指示发送到主机装置12以实现在主机装置12处的数据处理供在WDD16上显示(104)。
WDD16的控制器50还基于WDD16的使用状态控制其自身的操作。举例来说,当位置感测单元20确定WDD16在使用中(102的是分支)时,WDD16的控制器50可建立与主机装置12的通信会话,例如,对等(P2P)无线连接(106)。此外,WDD16的控制器50可激活WDD16的显示屏54(108)。WDD16的控制器50也可实现从主机装置12接收的数据的由多媒体处理器52进行的显示处理,供在WDD16上显示(110)。WDD16和主机装置12可在此全功率状态中继续操作,直到位置感测单元20确定WDD16不再处于用户的使用中。
作为另一实例,当位置感测单元20确定WDD16不在使用中(102的否分支)时,WDD16的控制器50将WDD16不在使用中的指示发送到主机装置12以停用用于在WDD16上显示的在主机装置12处的数据处理(112)。WDD16的控制器50还基于WDD16的使用状态控制其自身的操作。举例来说,当位置感测单元20确定WDD16不在使用中(102的否分支)时,WDD16可进入功率减小状态。在此情况下,WDD16的控制器50可停用用于在WDD16上显示的从主机装置12接收的数据的由多媒体处理器52进行的显示处理(114)。此外,WDD16的控制器50可去激活WDD16的显示屏54(116)。WDD16的控制器50也可拆开与主机装置12的通信会话,例如,对等(P2P)无线连接(118)。WDD16和主机装置12可在此功率减小状态中继续操作,直到位置感测单元20确定WDD16在用户的使用中。
图9为说明接收在主机装置处的可佩戴显示装置(WDD)的使用状态的指示和基于指示的使用状态控制在主机装置处的处理的实例操作的流程图。关于来自图1和2的连接到可佩戴显示装置16的主机装置12描述实例操作。
主机装置12从WDD16的控制器50接收WDD16的使用状态的指示(120)。如上关于图8所描述,WDD16的位置感测单元20基于指示用户是否正佩戴WDD16供使用的从WDD16中包含的一或多个触摸传感器56接收的反馈确定WDD16的使用状态,且使用直接处理器中断请求对WDD16的控制器50指示使用状态。在一些情况下,主机装置12的应用程序处理器30从WDD16的控制器50接收指示WDD16的使用状态的虚拟处理器中断请求。主机装置12的应用程序处理器30可按固定间隔或在WDD16的使用状态的改变后接收指示WDD16的使用状态的虚拟处理器中断请求。
主机装置12的应用程序处理器30基于WDD16的使用状态控制针对WDD16的在主机装置12处的数据处理。在一些情况下,应用程序处理器30也可基于WDD16的指示的使用状态控制与WDD16的通信会话(例如,对等(P2P)无线连接)的操作和通过通信会话到WDD16的数据发射。作为一个实例,当主机装置12接收到WDD16在使用中(122的是分支)的指示时,应用程序处理器30实现由主机装置12的多媒体处理器42进行的数据的处理,以用于在WDD16上显示(124)。主机装置12可在此全功率状态中继续操作,直到主机装置12的应用程序处理器30接收到WDD16不再在用户的使用中的指示。
作为另一实例,当主机装置12接收到WDD16不在使用中(122的否分支)的指示时,应用程序处理器30停用用于在WDD16上显示的由主机装置12的多媒体处理器42进行的数据的处理(126)。此外,应用程序处理器30可为主机装置12和WDD16的用户产生WDD16已进入功率减小状态的消息(128)。在一些实例中,可将产生的消息对用户在主机装置12的显示器44上呈现。以此方式,通知用户在某一预设时间周期内WDD16尚未在使用中,且自动进入功率减小状态。主机装置12可在此功率减小状态中继续操作,直到主机装置12的应用程序处理器30接收到WDD16在用户的使用中的指示。
图10为说明无线头戴式显示器(WHMD)装置和WHMD装置的有关控制机构中包含的位置感测单元的实例操作的流程图。关于可佩戴显示装置16将实例操作描述为WHMD16包含来自图2的位置感测单元20和控制器50。
开始于WHMD16的“唤醒”(140),WHMD16的位置感测单元20在扫描计时器周期期间接收来自WHMD16内的触摸传感器56的反馈。唤醒机制可为由用户进行的WHMD16的手动开启。扫描计时器周期可为位置感测单元20基于来自触摸传感器56的反馈产生振荡频率所在的预设时间周期。扫描计时器周期可允许所得振荡频率在位置感测单元20进行WHMD16的使用状态的确定前变稳定。
当扫描计时器到期(142的是分支)时,位置感测单元20确定WHMD16是否在位置中,即,是否由用户佩戴供使用(144)。当WHMD16处于位置中(144的是分支)时,位置感测单元20将直接处理器中断请求发送到WHMD16的控制器50以唤醒控制器50和WHMD16的其它组件。若WHMD16并未P2P连接到主机装置12(150的否分支),那么控制器50可起始与主机装置12的通信会话(例如,P2P群组)的建立(152)。一旦WHMD16P2P连接到主机装置12(150的是分支),那么控制器50将指示WHMD16在使用中的虚拟中断请求发送到主机装置12以实现针对WHMD16在主机装置12处的数据处理。控制器50可接着控制WHMD16在全功率状态中的操作,如上关于图8所描述。WHMD16可在全功率状态中操作,直到位置感测单元20确定WHMD16不再由用户佩戴供使用(144)。
当WHMD16不在位置中(144的否分支)时,位置感测单元20指引控制器50起始针对WHMD16的断开连接计时器(146)。断开连接计时器周期可为预设时间周期,在此期间,控制器50在拆开与主机装置12的P2P无线连接前关闭WHMD16。举例来说,在断开连接计时器已到期(146的否分支)前,控制器50可减少或最小化从主机装置12接收的AV数据在WHMD16处的显示处理,直到显示屏54经去激活且声音为静音(154)。举例来说,控制器50可降低用于显示的数据呈现的服务质量(QoS)。控制器50还将指示WHMD16不在使用中的虚拟中断请求发送到主机装置12以停用针对WHMD16的在主机装置12处的数据处理。在断开连接计时器已到期(146的是分支)后,控制器50可起始WHMD16与主机装置12之间的P2P无线连接的拆开(即,P2P连接省电模式)(148)。
一旦控制器50停用在WHMD16处的数据的显示处理(156的是分支)且拆开P2P无线连接(148),那么WHMD16进入功率减小状态(如上关于图8所描述),直到位置感测单元20确定WHMD16由用户佩戴供使用。此外,基于来自控制器50的指示,主机装置12停用针对WHMD16的在主机装置12处的数据的处理且产生与WHMD16的功率减小状态有关的用户消息(158)。WHMD16可在功率减小状态中操作,直到位置感测单元20确定WHMD16由用户佩戴供使用(144)。
在一或多个实例中,所描述功能可用硬件、软件、固件或其任何组合实施。如果用软件实施,那么可将功能作为一或多个指令或代码存储在计算机可读媒体上或通过计算机可读媒体进行发射。计算机可读媒体可包含计算机数据存储媒体或通信媒体,通信媒体包含促进将计算机程序从一处传送到另一处的任何媒体。在一些实例中,计算机可读媒体可包括非暂时性计算机可读媒体。数据存储媒体可为可由一或多个计算机或一或多个处理器存取以检索用于实施本发明中描述的技术的指令、代码和/或数据结构的任何可用媒体。
借助于实例而非限制,此计算机可读媒体可包括非暂时性媒体,例如,RAM、ROM、EEPROM、CD-ROM或其它光盘存储装置、磁盘存储装置或其它磁性存储装置、闪存或可用以载运或存储呈指令或数据结构的形式的所要的程序代码且可由计算机存取的任何其它媒体。而且,可恰当地将任何连接称为计算机可读媒体。例如,如果使用同轴电缆、光纤电缆、双绞线、数字订户线(DSL)或例如红外线、无线电和微波的无线技术从网站、服务器或其它远程源发射软件,那么同轴电缆、光纤电缆、双绞线、DSL或例如红外线、无线电和微波的无线技术包含于媒体的定义中。如本文中使用的磁盘和光盘包含压缩光盘(CD)、激光光盘、光盘、数字多功能光盘(DVD)、软磁盘和蓝光盘,其中磁盘通常是以磁性方式再现数据,而光盘是用激光以光学方式再现数据。以上各项的组合也应包括在计算机可读媒体的范围内。
代码可由一或多个处理器执行,所述一或多个处理器例如一或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)或其它等效的集成或离散逻辑电路。因此,如本文中所使用的术语“处理器”可指前述结构或适合于实施本文中所描述的技术的任何其它结构中的任一者。另外,在一些方面中,本文所描述的功能性可在经配置用于编码和解码的专用硬件和/或软件模块内提供,或者并入于组合编码解码器中。并且,所述技术可完全实施于一或多个电路或逻辑元件中。
本发明的技术可在广泛多种装置或设备中实施,包括无线手持机、集成电路(IC)或一组IC(例如,芯片组)。本发明中描述各种组件、模块或单元以强调经配置以执行所揭示的技术的装置的功能方面,但未必需要由不同硬件单元实现。相反地,如上文所描述,各种单元可与合适的软件和/或固件一起组合在一个编码解码器硬件单元中,或者通过互操作硬件单元的集合来提供,所述硬件单元包含如上文所描述的一或多个处理器。
已描述本发明的各种实施例。这些和其它实施例在所附权利要求书的范围内。

Claims (45)

1.一种控制连接到主机装置的可佩戴显示装置的方法,所述方法包括:
通过所述可佩戴显示装置基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈,确定所述可佩戴显示装置的使用状态;
通过所述可佩戴显示装置将所述可佩戴显示装置的所述使用状态的指示发送到所述主机装置以控制针对所述可佩戴显示装置的在所述主机装置处的数据处理;以及
通过所述可佩戴显示装置基于所述可佩戴显示装置的所述使用状态,控制所述可佩戴显示装置的操作。
2.根据权利要求1所述的方法,其中确定所述可佩戴显示装置的所述使用状态包括:
基于来自所述可佩戴显示装置的所述触摸传感器的所述反馈产生振荡频率,其中当所述触摸传感器与所述用户接触时,所述振荡频率增大;
基于所述振荡频率大于阈值频率值,确定所述可佩戴显示装置在使用中;以及
基于所述振荡频率小于或等于所述阈值频率值,确定所述可佩戴显示装置不在使用中。
3.根据权利要求1所述的方法,其中确定所述可佩戴显示装置的所述使用状态包括连续地确定所述可佩戴显示装置的所述使用状态,和基于所述使用状态的改变产生直接处理器中断请求。
4.根据权利要求1所述的方法,其中控制所述可佩戴显示装置的操作包括控制所述可佩戴显示装置的一或多个显示屏的操作、与所述主机装置的通信会话和从所述主机装置接收的数据的显示处理。
5.根据权利要求1所述的方法,其中将所述可佩戴显示装置的所述使用状态的所述指示发送到所述主机装置包括将虚拟处理器中断请求发送到所述主机装置以进行以下操作中的一者:启用、停用或减少针对所述可佩戴显示装置的在所述主机装置处的数据处理。
6.根据权利要求1所述的方法,其中确定所述可佩戴显示装置的所述使用状态包括确定所述可佩戴显示装置在使用中,且其中控制所述可佩戴显示装置的操作包括以下操作中的一或多者:建立与所述主机装置的通信会话、激活所述可佩戴显示装置的一或多个显示屏和启用从所述主机装置接收的数据的显示处理。
7.根据权利要求1所述的方法,其中确定所述可佩戴显示装置的所述使用状态包括确定所述可佩戴显示装置在使用中,且其中将所述使用状态的所述指示发送到所述主机装置包括将指示发送到所述主机装置以启用针对所述可佩戴显示装置的在所述主机装置处的数据处理。
8.根据权利要求1所述的方法,其中确定所述可佩戴显示装置的所述使用状态包括确定所述可佩戴显示装置不在使用中,且其中控制所述可佩戴显示装置的操作包括进入功率减小状态。
9.根据权利要求1所述的方法,其中确定所述可佩戴显示装置的所述使用状态包括确定所述可佩戴显示装置不在使用中,且其中控制所述可佩戴显示装置的操作包括以下操作中的一或多者:停用从所述主机装置接收的数据的显示处理、去激活所述可佩戴显示装置的一或多个显示屏和拆开与所述主机装置的通信会话。
10.根据权利要求9所述的方法,其进一步包括起始断开连接计时器,其中控制所述可佩戴显示装置的操作包括:
在所述断开连接计时器到期前,减少从所述主机装置接收的数据的显示处理,直到所述显示屏经去激活;以及
在所述断开连接计时器到期后,拆开与所述主机装置的所述通信会话。
11.根据权利要求1所述的方法,其中确定所述可佩戴显示装置的所述使用状态包括确定所述可佩戴显示装置不在使用中,且其中将所述使用状态的所述指示发送到所述主机装置包括将指示发送到所述主机装置以停用针对所述可佩戴显示装置的在所述主机装置处的数据处理。
12.根据权利要求1所述的方法,其中所述可佩戴显示装置包括形成为眼镜的无线头戴式显示器WHMD装置,所述眼镜包含位于所述眼镜的鼻梁架上的所述触摸传感器中的至少一者和位于所述眼镜的支臂上的所述触摸传感器中的至少两者。
13.一种控制连接到可佩戴显示装置的主机装置的方法,所述方法包括:
通过所述主机装置接收所述可佩戴显示装置的使用状态的指示,其中所述可佩戴显示装置的所述使用状态是基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈确定;以及
通过所述主机装置基于所述可佩戴显示装置的所述指示的使用状态,控制针对所述可佩戴显示装置的在所述主机装置处的数据处理。
14.根据权利要求13所述的方法,其中接收所述可佩戴显示装置的所述使用状态的所述指示包括从所述可佩戴显示装置接收虚拟处理器中断请求以进行以下操作中的一者:启用、停用或减少针对所述可佩戴显示装置的在所述主机装置处的数据处理。
15.根据权利要求13所述的方法,其进一步包括基于所述可佩戴显示装置的所述指示的使用状态,通过所述主机装置控制与所述可佩戴显示装置的通信会话的操作和到所述可佩戴显示装置的数据发射。
16.根据权利要求13所述的方法,其中接收所述可佩戴显示装置的所述使用状态的所述指示包括接收所述可佩戴显示装置在使用中的指示,且其中控制针对所述可佩戴显示装置的数据处理包括启用用于在所述可佩戴显示装置上显示的在所述主机装置处的数据的处理。
17.根据权利要求13所述的方法,其中接收所述可佩戴显示装置的所述使用状态的所述指示包括接收所述可佩戴显示装置不在使用中的指示,且其中控制针对所述可佩戴显示装置的数据处理包括停用用于在所述可佩戴显示装置上显示的在所述主机装置处的数据的处理。
18.根据权利要求17所述的方法,其进一步包括在接收到所述可佩戴显示装置不在使用中的所述指示后,为所述用户产生所述可佩戴显示装置已进入功率减小状态的消息。
19.一种连接到主机装置的可佩戴显示装置,所述可佩戴显示装置包括:
一或多个触摸传感器;以及
一或多个处理器,其经配置以基于指示所述可佩戴显示装置是否由用户佩戴的来自所述触摸传感器的反馈,确定所述可佩戴显示装置的使用状态;将所述可佩戴显示装置的所述使用状态的指示发送到所述主机装置以控制在所述主机装置处的针对所述可佩戴显示装置的数据处理;以及基于所述可佩戴显示装置的所述使用状态,控制所述可佩戴显示装置的操作。
20.根据权利要求19所述的可佩戴显示装置,其中所述处理器经配置以:
基于来自所述可佩戴显示装置的所述触摸传感器的所述反馈产生振荡频率,其中当所述触摸传感器与所述用户接触时,所述振荡频率增大;
基于所述振荡频率大于阈值频率值,确定所述可佩戴显示装置在使用中;以及
基于所述振荡频率小于或等于所述阈值频率值,确定所述可佩戴显示装置不在使用中。
21.根据权利要求19所述的可佩戴显示装置,其中所述处理器经配置以连续地确定所述可佩戴显示装置的所述使用状态,且基于所述使用状态的改变产生直接处理器中断请求。
22.根据权利要求19所述的可佩戴显示装置,其中所述处理器经配置以控制所述可佩戴显示装置的一或多个显示屏的操作、与所述主机装置的通信会话和从所述主机装置接收的数据的显示处理。
23.根据权利要求19所述的可佩戴显示装置,其中所述处理器经配置以将虚拟处理器中断请求发送到所述主机装置以进行以下操作中的一者:启用、停用或减少针对所述可佩戴显示装置的在所述主机装置处的数据处理。
24.根据权利要求19所述的可佩戴显示装置,其中,基于所述可佩戴显示装置在使用中,所述处理器经配置以进行以下操作中的一或多者:建立与所述主机装置的通信会话、激活所述可佩戴显示装置的一或多个显示屏和启用从所述主机装置接收的数据的显示处理。
25.根据权利要求19所述的可佩戴显示装置,其中,基于所述可佩戴显示装置在使用中,所述处理器经配置以将指示发送到所述主机装置以启用针对所述可佩戴显示装置的在所述主机装置处的数据处理。
26.根据权利要求19所述的可佩戴显示装置,其中,基于所述可佩戴显示装置不在使用中,所述处理器经配置以进入功率减小状态。
27.根据权利要求19所述的可佩戴显示装置,其中,基于所述可佩戴显示装置不在使用中,所述处理器经配置以进行以下操作中的一或多者:停用从所述主机装置接收的数据的显示处理、去激活所述可佩戴显示装置的一或多个显示屏和拆开与所述主机装置的通信会话。
28.根据权利要求27所述的可佩戴显示装置,其中所述处理器经配置以:
起始断开连接计时器;
在所述断开连接计时器到期前,减少从所述主机装置接收的数据的显示处理,直到所述显示屏经去激活;以及
在所述断开连接计时器到期后,拆开与所述主机装置的所述通信会话。
29.根据权利要求19所述的可佩戴显示装置,其中基于所述可佩戴显示装置不在使用中,所述处理器经配置以将指示发送到所述主机装置以停用针对所述可佩戴显示装置的在所述主机装置处的数据处理。
30.根据权利要求19所述的可佩戴显示装置,其中所述可佩戴显示装置包括形成为眼镜的无线头戴式显示器WHMD装置,所述眼镜包含位于所述眼镜的鼻梁架上的所述触摸传感器中的至少一者和位于所述眼镜的支臂上的所述触摸传感器中的至少两者。
31.一种连接到可佩戴显示装置的主机装置,所述主机装置包括:
一或多个处理器,其经配置以接收所述可佩戴显示装置的使用状态的指示,其中所述可佩戴显示装置的所述使用状态是基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈确定;以及基于所述可佩戴显示装置的所述指示的使用状态,控制针对所述可佩戴显示装置的数据处理。
32.根据权利要求31所述的主机装置,其中所述处理器经配置以从所述可佩戴显示装置接收虚拟处理器中断请求以进行以下操作中的一者:启用、停用或减少针对所述可佩戴显示装置的在所述主机装置处的数据处理。
33.根据权利要求31所述的主机装置,其中所述处理器经配置以基于所述可佩戴显示装置的所述指示的使用状态,控制与所述可佩戴显示装置的通信会话的操作和到所述可佩戴显示装置的数据发射。
34.根据权利要求31所述的主机装置,其中基于所述可佩戴显示装置在使用中的指示,所述处理器经配置以启用用于在所述可佩戴显示装置上显示的在所述主机装置处的数据的处理。
35.根据权利要求31所述的主机装置,其中,基于所述可佩戴显示装置不在使用中的指示,所述处理器经配置以停用用于在所述可佩戴显示装置上显示的在所述主机装置处的数据的处理。
36.根据权利要求35所述的主机装置,其中,基于所述可佩戴显示装置不在使用中的所述指示,所述处理器经配置以为所述用户产生所述可佩戴显示装置已进入功率减小状态的消息。
37.一种连接到主机装置的可佩戴显示装置,所述可佩戴显示装置包括:
用于基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈确定所述可佩戴显示装置的使用状态的装置;
用于将所述可佩戴显示装置的所述使用状态的指示发送到所述主机装置以控制在所述主机装置处的针对所述可佩戴显示装置的数据处理的装置;以及
用于基于所述可佩戴显示装置的所述使用状态控制所述可佩戴显示装置的操作的装置。
38.根据权利要求37所述的可佩戴显示装置,其进一步包括用于连续地确定所述可佩戴显示装置的所述使用状态的装置,和用于基于所述使用状态的改变产生直接处理器中断请求的装置。
39.根据权利要求37所述的可佩戴显示装置,其进一步包括用于控制所述可佩戴显示装置的一或多个显示屏的操作、与所述主机装置的通信会话和从所述主机装置接收的数据的显示处理的装置。
40.根据权利要求37所述的可佩戴显示装置,其进一步包括用于将虚拟处理器中断请求发送到所述主机装置以进行以下操作中的一者的装置:启用、停用或减少针对所述可佩戴显示装置的在所述主机装置处的数据处理。
41.一种连接到可佩戴显示装置的主机装置,所述主机装置包括:
用于接收所述可佩戴显示装置的使用状态的指示的装置,其中所述可佩戴显示装置的所述使用状态是基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈确定;以及
用于基于所述可佩戴显示装置的所述指示的使用状态控制针对所述可佩戴显示装置的在所述主机装置处的数据处理的装置。
42.根据权利要求41所述的主机装置,其进一步包括用于从所述可佩戴显示装置接收虚拟处理器中断请求以进行以下操作中的一者的装置:启用、停用或减少针对所述可佩戴显示装置的在所述主机装置处的数据处理。
43.根据权利要求41所述的主机装置,其进一步包括用于基于所述可佩戴显示装置的所述指示的使用状态控制与所述可佩戴显示装置的通信会话的操作和到所述可佩戴显示装置的数据发射的装置。
44.一种包括用于控制连接到主机装置的可佩戴显示装置的指令的计算机可读媒体,所述指令在经执行时使一或多个可编程处理器:
通过所述可佩戴显示装置基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈,确定所述可佩戴显示装置的使用状态;
通过所述可佩戴显示装置将所述可佩戴显示装置的所述使用状态的指示发送到所述主机装置以控制在所述主机装置处的针对所述可佩戴显示装置的数据处理;以及
通过所述可佩戴显示装置基于所述可佩戴显示装置的所述使用状态,控制所述可佩戴显示装置的操作。
45.一种包括用于控制连接到可佩戴显示装置的主机装置的指令的计算机可读媒体,所述指令在经执行时使一或多个可编程处理器:
通过所述主机装置接收所述可佩戴显示装置的使用状态的指示,其中所述可佩戴显示装置的所述使用状态是基于指示所述可佩戴显示装置是否由用户佩戴的来自所述可佩戴显示装置的一或多个触摸传感器的反馈确定;以及
通过所述主机装置基于所述可佩戴显示装置的所述指示的使用状态,控制针对所述可佩戴显示装置的数据处理。
CN201480048356.0A 2013-09-04 2014-08-05 基于可佩戴显示装置使用的数据处理 Active CN105518615B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/018,131 US9183612B2 (en) 2013-09-04 2013-09-04 Wearable display device use-based data processing control
US14/018,131 2013-09-04
PCT/US2014/049814 WO2015034617A1 (en) 2013-09-04 2014-08-05 Wearable display device use-based data processing control

Publications (2)

Publication Number Publication Date
CN105518615A true CN105518615A (zh) 2016-04-20
CN105518615B CN105518615B (zh) 2017-06-30

Family

ID=51429368

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480048356.0A Active CN105518615B (zh) 2013-09-04 2014-08-05 基于可佩戴显示装置使用的数据处理

Country Status (8)

Country Link
US (2) US9183612B2 (zh)
EP (1) EP3042279A1 (zh)
JP (1) JP6022740B1 (zh)
KR (1) KR101751657B1 (zh)
CN (1) CN105518615B (zh)
BR (1) BR112016004824B1 (zh)
CA (1) CA2920708C (zh)
WO (1) WO2015034617A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113632495A (zh) * 2019-03-08 2021-11-09 脸谱科技有限责任公司 用于动态调度的系统和方法
CN113759545A (zh) * 2020-06-02 2021-12-07 罗伯特·博世有限公司 用于操作一副智能眼镜的方法

Families Citing this family (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9183612B2 (en) 2013-09-04 2015-11-10 Qualcomm Incorporated Wearable display device use-based data processing control
JP6338344B2 (ja) * 2013-10-04 2018-06-06 キヤノン株式会社 通信装置、通信装置の制御方法およびプログラム
US9986044B2 (en) * 2013-10-21 2018-05-29 Huawei Technologies Co., Ltd. Multi-screen interaction method, devices, and system
US9223451B1 (en) * 2013-10-25 2015-12-29 Google Inc. Active capacitive sensing on an HMD
KR102233728B1 (ko) * 2013-10-31 2021-03-30 삼성전자주식회사 전자 장치의 제어 방법, 장치 및 컴퓨터 판독 가능한 기록 매체
GB2520025B (en) * 2013-11-06 2021-04-14 Arm Ip Ltd Calibrating proximity detection for a wearable processing device
KR102244855B1 (ko) * 2014-04-11 2021-04-27 삼성전자 주식회사 전자 장치의 입출력 장치 선택 방법 및 이를 이용한 전자 장치
US10649500B2 (en) * 2014-07-21 2020-05-12 Beam Authentic, Inc. Centralized content distribution in a wearable display device network
KR102216126B1 (ko) * 2014-07-31 2021-02-16 삼성전자주식회사 정맥 인증을 이용하여 동작하는 웨어러블 디바이스 및 웨어러블 디바이스의 동작 방법
US10375081B2 (en) * 2014-08-13 2019-08-06 Intel Corporation Techniques and system for extended authentication
KR20160069936A (ko) * 2014-12-09 2016-06-17 삼성전자주식회사 절전 제어 방법 및 이를 제공하는 전자 장치
KR20160090582A (ko) * 2015-01-22 2016-08-01 삼성전자주식회사 스마트 카드 및 상기 스마트 카드의 제조 방법
KR102281341B1 (ko) * 2015-01-26 2021-07-23 엘지전자 주식회사 싱크 디바이스 및 그 제어 방법
US9794684B2 (en) * 2015-02-13 2017-10-17 Seiko Epson Corporation Head-mounted display device, control method for the same, and computer program
US10083018B1 (en) * 2015-03-09 2018-09-25 Fitbit, Inc. Systems and methods for distributing application templates to wearable client devices
WO2016142423A1 (en) * 2015-03-12 2016-09-15 Essilor International (Compagnie Générale d'Optique) A method for customizing a mounted sensing device
CN104703148A (zh) * 2015-03-16 2015-06-10 安徽华米信息科技有限公司 一种反馈信息的方法及装置
KR20160113903A (ko) 2015-03-23 2016-10-04 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
EP3093194B1 (en) * 2015-04-24 2021-09-22 Ricoh Company, Ltd. Information provision device
CN104851368A (zh) * 2015-06-04 2015-08-19 京东方科技集团股份有限公司 一种柔性显示装置
JP2017030530A (ja) * 2015-07-31 2017-02-09 スズキ株式会社 映像表示システム
KR20170051013A (ko) * 2015-11-02 2017-05-11 엘지전자 주식회사 테더링 형 hmd 및 그 hmd의 제어 방법
US10827320B2 (en) 2015-12-04 2020-11-03 Lenovo (Singapore) Pte. Ltd. Presentation of information based on whether user is in physical contact with device
US10289196B2 (en) * 2016-07-01 2019-05-14 North Inc. Techniques for ocular control
CN106648491A (zh) * 2016-10-12 2017-05-10 深圳市优景观复光电有限公司 互动式led显示装置及显示方法
WO2018123170A1 (ja) * 2016-12-27 2018-07-05 三井化学株式会社 センサーモジュール、テンプル、フレームおよびアイウェア
US11337474B2 (en) * 2017-04-17 2022-05-24 Interactive Skin, Inc. Interactive skin for vehicle
US10571691B1 (en) * 2017-08-09 2020-02-25 Facebook Technologies, Llc Service loop for a head-mounted display
US10690986B2 (en) * 2017-09-13 2020-06-23 Apple Inc. Electronic devices having electrically adjustable optical shutters
US11864899B2 (en) 2018-04-18 2024-01-09 Interactive Skin, Inc. Interactive skin
CN111989643A (zh) * 2018-04-19 2020-11-24 惠普发展公司,有限责任合伙企业 从触摸表面设备向虚拟现实设备的输入
TWI659352B (zh) * 2018-05-15 2019-05-11 元太科技工業股份有限公司 觸控感測器、電子紙顯示面板以及電子紙顯示器裝置
EP4107711A1 (en) * 2020-02-17 2022-12-28 Koninklijke Philips N.V. System to secure health safety during charging of health wearable
US11314320B2 (en) 2020-04-28 2022-04-26 Facebook Technologies, Llc Interface between host processor and wireless processor for artificial reality
TWI818305B (zh) * 2020-10-29 2023-10-11 宏達國際電子股份有限公司 頭戴式顯示裝置及其電源管理方法
US11493983B2 (en) 2020-10-29 2022-11-08 Htc Corporation Head mounted display device and power management method thereof
JP2022135770A (ja) * 2021-03-05 2022-09-15 キヤノン株式会社 メガネ型情報機器、その方法及びプログラム
WO2023038274A1 (ko) * 2021-09-13 2023-03-16 삼성전자 주식회사 사용자의 착용을 감지하기 위한 웨어러블 장치
EP4339873A4 (en) 2021-11-09 2024-05-01 Samsung Electronics Co., Ltd. METHOD AND APPARATUS FOR PROVIDING CONTENT RELATED TO AN AUGMENTED REALITY SERVICE BETWEEN AN ELECTRONIC DEVICE AND A PORTABLE ELECTRONIC DEVICE
KR20230067197A (ko) * 2021-11-09 2023-05-16 삼성전자주식회사 전자 장치와 웨어러블 전자 장치 사이에서 증강 현실 서비스에 관련된 컨텐츠를 제공하는 방법 및 장치
US20230324984A1 (en) * 2022-03-25 2023-10-12 Meta Platforms Technologies, Llc Adaptive sensors to assess user status for wearable devices

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5635948A (en) * 1994-04-22 1997-06-03 Canon Kabushiki Kaisha Display apparatus provided with use-state detecting unit
US8184067B1 (en) * 2011-07-20 2012-05-22 Google Inc. Nose bridge sensor
US20120310391A1 (en) * 2011-06-01 2012-12-06 Apple Inc. Controlling operation of a media device based upon whether a presentation device is currently being worn by a user

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02205151A (ja) 1989-02-03 1990-08-15 Nec Corp 通信装置
US7596242B2 (en) 1995-06-07 2009-09-29 Automotive Technologies International, Inc. Image processing for vehicular applications
JPH1065996A (ja) 1996-08-23 1998-03-06 Olympus Optical Co Ltd 頭部装着型表示装置
US7474276B2 (en) * 2000-06-20 2009-01-06 Olympus Optical Co., Ltd. Display system and microdisplay apparatus
JP3988632B2 (ja) * 2002-11-28 2007-10-10 日本電気株式会社 眼鏡型ディスプレイの制御方法
JP2004236242A (ja) 2003-01-31 2004-08-19 Nikon Corp ヘッドマウントディスプレイ
JP4426918B2 (ja) 2004-07-20 2010-03-03 オリンパス株式会社 情報表示システム
US20090243966A1 (en) 2006-07-25 2009-10-01 Nikon Corporation Outputting apparatus and image display apparatus
JP2009288892A (ja) * 2008-05-27 2009-12-10 Nikon Corp ヘッドマウントディスプレイ装置
WO2011097564A1 (en) 2010-02-05 2011-08-11 Kopin Corporation Touch sensor for controlling eyewear
WO2011098854A1 (en) 2010-02-11 2011-08-18 Varidal Company Limited Method for the detection of a body with respect to a surface, detecting device for the implementation of the method, and surface comprising such devise
US20120249797A1 (en) 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
CN102893236B (zh) 2010-07-20 2015-11-25 英派尔科技开发有限公司 增强现实临近检测
JP5953714B2 (ja) * 2011-11-24 2016-07-20 セイコーエプソン株式会社 装置、頭部装着型表示装置、装置の制御方法および頭部装着型表示装置の制御方法
JP2013114124A (ja) * 2011-11-30 2013-06-10 Seiko Epson Corp 画像表示装置、画像表示装置における電源制御方法および画像表示装置における電源制御プログラム
JP2012191624A (ja) 2012-03-21 2012-10-04 Nikon Corp ヘッドマウントディスプレイ装置
US9183612B2 (en) 2013-09-04 2015-11-10 Qualcomm Incorporated Wearable display device use-based data processing control

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5635948A (en) * 1994-04-22 1997-06-03 Canon Kabushiki Kaisha Display apparatus provided with use-state detecting unit
US20120310391A1 (en) * 2011-06-01 2012-12-06 Apple Inc. Controlling operation of a media device based upon whether a presentation device is currently being worn by a user
US8184067B1 (en) * 2011-07-20 2012-05-22 Google Inc. Nose bridge sensor

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113632495A (zh) * 2019-03-08 2021-11-09 脸谱科技有限责任公司 用于动态调度的系统和方法
CN113759545A (zh) * 2020-06-02 2021-12-07 罗伯特·博世有限公司 用于操作一副智能眼镜的方法

Also Published As

Publication number Publication date
KR101751657B1 (ko) 2017-06-27
EP3042279A1 (en) 2016-07-13
US20160025975A1 (en) 2016-01-28
US9772494B2 (en) 2017-09-26
CA2920708C (en) 2019-02-19
JP2016536684A (ja) 2016-11-24
CA2920708A1 (en) 2015-03-12
US20150062022A1 (en) 2015-03-05
JP6022740B1 (ja) 2016-11-09
BR112016004824B1 (pt) 2022-09-20
CN105518615B (zh) 2017-06-30
KR20160032269A (ko) 2016-03-23
WO2015034617A1 (en) 2015-03-12
BR112016004824A2 (pt) 2020-04-28
US9183612B2 (en) 2015-11-10

Similar Documents

Publication Publication Date Title
CN105518615A (zh) 基于可佩戴显示装置使用的数据处理
KR102448786B1 (ko) 전자 장치 및 그의 동작 방법
EP3379853B1 (en) Electronic device for transmitting audio data to multiple external devices
KR102381432B1 (ko) 무선 충전 방법 및 장치
US9921631B2 (en) Methods and apparatus for saving power
TWI516912B (zh) 適應性圖形次級系統電源及效能管理
KR102513790B1 (ko) 무선 전력 전송 방법 및 장치
US9693176B2 (en) Information processing method and electronic apparatus
CN108304151B (zh) 用于显示内容的方法及其电子设备
KR102469570B1 (ko) 전자 장치 및 그의 동작 방법
KR102199030B1 (ko) 주변 장치와의 통신 방법, 전자 장치 및 저장 매체
KR20150106233A (ko) 복수의 전자 장치에서 기능을 수행하는 방법 및 전자 장치
KR102607647B1 (ko) 전자 장치 및 전자 장치의 테더링 연결 방법
KR20160090074A (ko) 전자 장치의 소모 전력 감소 방법 및 장치
AU2013290024A1 (en) Energy-efficient transmission of content over a wireless connection
KR102580710B1 (ko) 전자 장치들의 연동 방법 및 장치
KR20150098827A (ko) 전자 장치 및 전자 장치의 절전 방법
KR102368461B1 (ko) 전자 장치에서 전원을 관리하는 장치 및 방법
KR102521194B1 (ko) 알림 메시지를 제공하는 전자 장치 및 방법
KR20150086932A (ko) 데이터 처리 방법 및 그 전자 장치
CN107622234B (zh) 一种显示萌脸礼物的方法和装置
CN113791684A (zh) 获取应用帧率的方法、刷新装置、移动终端及存储介质
KR102658778B1 (ko) 전자 장치에서 데이터를 송/수신하는 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant