CN115113715A - 显示系统、显示装置以及显示装置的控制方法 - Google Patents
显示系统、显示装置以及显示装置的控制方法 Download PDFInfo
- Publication number
- CN115113715A CN115113715A CN202210262695.5A CN202210262695A CN115113715A CN 115113715 A CN115113715 A CN 115113715A CN 202210262695 A CN202210262695 A CN 202210262695A CN 115113715 A CN115113715 A CN 115113715A
- Authority
- CN
- China
- Prior art keywords
- unit
- display
- power
- sensor
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 30
- 230000010365 information processing Effects 0.000 claims abstract description 8
- 238000005070 sampling Methods 0.000 claims description 8
- 238000001514 detection method Methods 0.000 abstract description 45
- 238000012545 processing Methods 0.000 abstract description 32
- 230000006870 function Effects 0.000 description 45
- 230000008859 change Effects 0.000 description 20
- 230000003287 optical effect Effects 0.000 description 16
- 238000004891 communication Methods 0.000 description 15
- 230000008569 process Effects 0.000 description 15
- 238000003384 imaging method Methods 0.000 description 14
- 239000000758 substrate Substances 0.000 description 14
- 230000005236 sound signal Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 238000005259 measurement Methods 0.000 description 5
- 210000003128 head Anatomy 0.000 description 4
- 230000007423 decrease Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000006386 memory function Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000007499 fusion processing Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000011347 resin Substances 0.000 description 1
- 229920005989 resin Polymers 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
- G06F1/3215—Monitoring of peripheral devices
- G06F1/3218—Monitoring of peripheral devices of display devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3234—Power saving characterised by the action undertaken
- G06F1/325—Power saving in peripheral device
- G06F1/3265—Power saving in display device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3234—Power saving characterised by the action undertaken
- G06F1/3287—Power saving characterised by the action undertaken by switching off individual functional units in the computer system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Optics & Photonics (AREA)
- Computer Hardware Design (AREA)
- Computing Systems (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Controls And Circuits For Display Device (AREA)
- Power Sources (AREA)
Abstract
显示系统、显示装置以及显示装置的控制方法,利用从信息处理装置供给的电力使显示装置动作。在具有HMD(100)和控制装置(300)的显示系统(1)中,控制装置具有向HMD(100)供给电力的电池(329)和CO控制部(310),HMD(100)具有:显示从控制装置接收到的再现信号中包含的图像的图像显示部(20);输出再现信号中包含的声音的声音处理部(147)、右耳机(32)和左耳机(34);具有多个传感器的检测部;以及将从控制装置(300)供给的电力供给到供给目的地的电源控制部(126),在HMD的消耗电力大于由控制装置供给的电力的情况下,使图像显示部、声音输出部以及多个传感器的一部分动作停止。
Description
技术领域
本发明涉及显示系统、显示装置以及显示装置的控制方法。
背景技术
以往,已知有将信息处理装置与显示装置连接并从信息处理装置向显示装置供给电力的系统。
例如,专利文献1的显示系统具有:小型显示装置,其存储监视器要求电压信息和监视器消耗电流信息作为EDID信息;以及主机装置,其从小型显示装置取得EDID信息。主机装置基于从小型显示装置作为EDID信息取得的监视器要求电压信息和监视器消耗电流信息、以及由检测单元检测出的电源电压值和电源消耗电流值,控制主机装置的输出电压。
专利文献1:日本特开2002-41188号公报
然而,在从主机装置供给到小型显示装置的电力不足的情况下,无法使用小型显示装置,只能选择可供给使得小型显示装置能够动作的电力的主机装置。
发明内容
解决上述课题的一个方式是一种显示系统,其具有:信息处理装置,其具有供给第1电力的第1供给部、以及输出包含图像和声音的再现信号的输出部;以及显示装置,其具有第1传感器、显示所述图像的显示部、输出所述声音的声音输出部、以及第2供给部,所述第2供给部将所述第1电力供给到所述第1传感器、所述显示部和所述声音输出部,在由所述显示装置消耗的第2电力大于所述第1电力的情况下,所述显示部、所述声音输出部和所述第1传感器停止一部分的动作,或者,所述显示部、所述声音输出部和所述第1传感器以使所述第2电力小于所述第1电力的方式动作。
解决上述课题的一个方式是一种显示系统,其具有:信息处理装置,其具有供给第1电力的第1供给部、以及输出包含图像的再现信号的输出部;以及显示装置,其具有显示所述图像的第1显示部、显示所述图像且不同于所述第1显示部的第2显示部、以及将所述第1电力供给到所述第1显示部和所述第2显示部的第2供给部,在由所述显示装置消耗的第2电力大于所述第1电力的情况下,所述第1显示部和所述第2显示部中的至少一方不显示所述图像。
解决上述课题的一个方式是一种显示装置,其具有:传感器;显示部,其显示图像;声音输出部,其输出声音;供给部,其将第1电力供给到所述显示部、所述声音输出部和所述传感器;以及控制部,其对所述供给部进行控制,以使由所述显示部、所述声音输出部和所述传感器消耗的第2电力成为所述第1电力以下。
解决上述课题的一个方式是一种显示装置,其具有:第1显示部,其显示图像;第2显示部,其显示所述图像且不同于所述第1显示部;供给部,其将第1电力供给到所述第1显示部和所述第2显示部;以及控制部,其对所述第1显示部和所述第2显示部进行控制,所述控制部在由所述第1显示部和所述第2显示部消耗的第2电力大于所述第1电力的情况下,使所述第1显示部和所述第2显示部中的至少一方不显示所述图像。
解决上述课题的一个方式是一种显示装置的控制方法,所述显示装置具有:传感器;显示部,其显示图像;以及声音输出部,其输出声音,在该显示装置的控制方法中,将第1电力供给到所述传感器、所述显示部和所述声音输出部,控制供给到所述显示部、所述声音输出部和所述传感器的所述第1电力,以使由所述显示装置消耗的第2电力成为所述第1电力以下。
解决上述课题的一个方式是一种显示装置的控制方法,所述显示装置具有第1显示部和第2显示部,在该显示装置的控制方法中,将第1电力供给到所述第1显示部和所述第2显示部,在由所述第1显示部和所述第2显示部消耗的第2电力大于所述第1电力的情况下,所述第1显示部和所述第2显示部中的至少一方不显示图像。
附图说明
图1是表示显示系统的概略结构的图。
图2是表示图像显示部的光学系统结构的主要部分俯视图。
图3是显示系统的框图。
图4是控制装置的框图。
图5是表示消耗电力表的一例的图。
图6是表示HMD的动作的流程图。
图7是表示控制装置的动作的流程图。
图8是表示HMD的动作的流程图。
图9是表示控制装置的动作的流程图。
标号说明
1:显示系统;10:连接装置;11A:连接器;11D:连接器;20:图像显示部;21:右保持部;22:右显示部;23:左保持部;24:左显示部;26:右导光板;27:前部框架;28:左导光板;30:耳机;32:右耳机;34:左耳机;36:音频连接器;40:连接线缆;46:USB线缆;61:DP外侧摄像头;63:麦克风;64:距离传感器;65:DP照度传感器;67:LED指示器;100:HMD;110:I/F部;120:DP控制部;122:传感器控制部;126:电源控制部;130:非易失性存储部;135:消耗电力表;140:操作部;145:连接部;147:声音处理部;201:影像信号;210:右显示部基板;211:右I/F部;213:接收部;215:EEPROM;217:温度传感器;221:OLED单元;223:OLED面板;225:OLED驱动电路;229:电源部;230:左显示部基板;231:左I/F部;233:接收部;235:DP六轴传感器;237:DP磁传感器;239:温度传感器;241:OLED单元;243:OLED面板;245:OLED驱动电路;249:电源部;251:右光学系统;252:左光学系统;261:半反射镜;281:半反射镜;300:控制装置;310:CO控制部;311:处理器;312:存储器;313:非易失性存储器;321:GNSS;322:CO摄像头;323:CO六轴传感器;324:CO磁传感器;325:CO照度传感器;326:声音输出部;327:CO显示部;328:触摸面板;329:电池;330:通信部;331:I/F部。
具体实施方式
1.显示系统的结构
图1是表示显示系统1的概略结构的图。
显示系统1具有相当于显示装置的HMD 100和相当于信息处理装置的控制装置300。HMD 100是具有佩戴于使用者U的头部的图像显示部20而令使用者看到图像或影像的头部佩戴型显示装置。HMD是Head Mounted Display(头戴式显示器)的缩写。
HMD 100具有与图像显示部20连接的连接装置10。连接装置10作为将HMD 100和与HMD 100不同的装置连接的接口发挥功能。在显示系统1中,对连接装置10连接控制装置300。
在以下的说明和附图中,为了便于说明,对构成HMD 100的若干个功能部的名称附加前缀DP,对构成控制装置300的若干个功能部的名称附加前缀CO。
控制装置300是具有显示字符、图像的显示画面以及作为检测触摸操作、按压操作的操作部发挥功能的触摸面板328,且为能够携带的尺寸的终端装置,例如能够使用智能手机。控制装置300也可以是台式个人计算机、笔记本型个人计算机、平板型个人计算机等。
连接装置10在箱形的壳体上具有连接器11A以及连接器11D。图像显示部20经由连接线缆40与连接器11A连接,控制装置300经由USB线缆46与连接器11D连接。由此,图像显示部20和控制装置300相互可收发数据地连接。例如,控制装置300将图像显示部20显示影像用的影像数据和声音数据输出到图像显示部20。例如,图像显示部20如后述那样将图像显示部20所具有的各种传感器的检测数据发送到控制装置300。控制装置300也可以对图像显示部20供给电力。USB是Universal Serial Bus(通用串行总线)的缩写。
使用USB线缆46将连接装置10和控制装置300连接起来的结构只不过是一例,连接装置10和控制装置300的具体连接方式不受限制。例如,也可以使用其他种类的线缆进行有线连接,还可以经由无线通信进行连接。例如,在USB线缆46与USB-TypeC标准的连接器11D连接的结构中,能够通过USB线缆46进行20伏特的直流电流的供给,作为USB-TypeC的替代模式的功能,能够传输HDMI标准的影像数据等。HDMI是注册商标。
图像显示部20在具有右保持部21、左保持部23以及前部框架27的主体上具有右显示部22、左显示部24、右导光板26以及左导光板28。
右保持部21和左保持部23从前部框架27的两端部向后延伸,将图像显示部20保持于使用者U的头部。右保持部21与前部框架27的位于使用者U右侧的端部ER连结,左保持部23与前部框架27的位于使用者U左侧的端部EL连结。
右导光板26和左导光板28设置于前部框架27。右导光板26在图像显示部20的佩戴状态下位于使用者U的右眼的眼前,使右眼看到图像。左导光板28在图像显示部20的佩戴状态下位于使用者U的左眼的眼前,使左眼看到图像。右导光板26和左导光板28是由透光性的树脂等形成的光学部,将右显示部22和左显示部24输出的图像光引导至使用者U的眼睛。右导光板26和左导光板28例如是棱镜。
前部框架27具有将右导光板26的一端和左导光板28的一端相互连结起来的形状,在使用者U佩戴图像显示部20的佩戴状态下,该连结位置与使用者U的眉间对应。前部框架27可以具有在图像显示部20的佩戴状态下抵靠于使用者U的鼻子的鼻托部,也可以是对右保持部21和左保持部23连接带子,并通过带子将图像显示部20保持于使用者U的头部的结构。
右显示部22和左显示部24分别是将光学单元和外围电路进行单元化而得的模块。右显示部22通过右导光板26显示图像,左显示部24通过左导光板28显示图像。右显示部22设置在右保持部21上,左显示部24设置在左保持部23上。
由右导光板26引导的图像光和透过右导光板26的外部光入射到使用者U的右眼。同样,由左导光板28引导的图像光和透过左导光板28的外部光入射到左眼。来自右导光板26以及左导光板28的图像光和透过右导光板26以及左导光板28的外部光入射到使用者U的眼睛。由此,使用者U重叠看到图像显示部20显示的图像和透过右导光板26以及左导光板28的外景。
在前部框架27配置有DP照度传感器65。DP照度传感器65是如下的传感器:接收来自佩戴图像显示部20的使用者U的前方的外部光。通过DP照度传感器65,能够检测透过右导光板26以及左导光板28而入射到使用者U的眼睛的外部光的照度和光量。
DP外侧摄像头61在前部框架27中设置在不遮挡透过右导光板26以及左导光板28的外部光的位置处。DP外侧摄像头61是具有CCD或CMOS等摄像元件和摄像镜头等的数字摄像头,可以是单眼摄像头,也可以是立体摄像头。DP外侧摄像头61的视场角包含佩戴了图像显示部20的使用者U透过右导光板26以及左导光板28而看到的外景范围的至少一部分。DP外侧摄像头61可以是广角摄像头,也可以是能够拍摄佩戴了图像显示部20的使用者U看到的外景整体的摄像头。CCD是Charge Coupled Device(电荷耦合器件)的缩写,CMOS是Complementary Metal Oxide Semiconductor(互补金属氧化物半导体)的缩写。
在前部框架27配置有在DP外侧摄像头61的动作中点亮的LED指示器67。
在前部框架27设置有距离传感器64,该距离传感器64检测到位于预先设定的测量方向上的测量对象物的距离。距离传感器64例如是使用LED或激光二极管等的光反射式距离传感器、红外线式深度传感器、超声波式距离传感器或者激光测距仪。距离传感器64可以是组合了图像检测和声音检测的距离检测单元、或对由摄像头的立体拍摄得到的图像进行处理来检测距离的装置。距离传感器64的测量方向例如是使用者U透过右导光板26以及左导光板28看到的外景的方向。
右显示部22和左显示部24分别通过连接线缆40与连接装置10连接。连接线缆40具有音频连接器36。在音频连接器36上连接有具有构成立体声耳机的右耳机32和左耳机34、以及麦克风63的耳机30。右耳机32和左耳机34根据连接装置10输出的声音信号输出声音。麦克风63收集声音,并将声音信号输出到连接装置10。
2.图像显示部的光学系统的结构
图2是表示图像显示部20的光学系统结构的主要部分俯视图。在图2中为了便于说明,示出使用者U的左眼LE和右眼RE。
右显示部22和左显示部24例如构成为左右对称。
作为使右眼RE看到图像的结构,右显示部22具有发出图像光的OLED单元221以及将OLED单元221发出的图像光L引导至右导光板26的右光学系统251。OLED是Organic LightEmitting Diode(有机发光二极管)的缩写。
OLED单元221具有OLED面板223和驱动OLED面板223的OLED驱动电路225。OLED面板223例如是配置有分别发出R、G、B的色光的发光元件的自发光型的显示面板。OLED驱动电路225按照DP控制部120的控制来驱动OLED面板223。OLED驱动电路225例如安装在固定于OLED面板223的背面的未图示的基板上,在该基板上安装有图3所示的温度传感器217。
右光学系统251通过准直透镜使从OLED面板223射出的图像光L成为平行状态的光束,并使它们入射到右导光板26。在右导光板26的内部,图像光L被多个反射面反射,并被位于右眼RE眼前的半反射镜261反射而从右导光板26朝向右眼RE射出。
作为使左眼LE看到图像的结构,左显示部24具有发出图像光的OLED单元241以及将OLED单元241发出的图像光L向左导光板28引导的左光学系统252。
OLED单元241具有OLED面板243和驱动OLED面板243的OLED驱动电路245。OLED面板243例如是配置有分别发出R、G、B的色光的发光元件的自发光型的显示面板。OLED驱动电路245按照DP控制部120的控制来驱动OLED面板243。OLED驱动电路245例如安装在固定于OLED面板243的背面的未图示的基板上,在该基板上安装有图3所示的温度传感器239。
左光学系统252通过准直透镜使从OLED面板243射出的图像光L成为平行状态的光束,并使它们入射到左导光板28。在左导光板28的内部,图像光L被多个反射面反射,并被位于左眼LE眼前的半反射镜281反射而从左导光板28朝向左眼LE射出。
HMD 100作为透射型的显示装置发挥作用。即,由半反射镜261反射的图像光L和透过右导光板26的外部光OL入射到使用者U的右眼RE。由半反射镜281反射的图像光L和透过半反射镜281的外部光OL入射到左眼LE。HMD 100使在内部处理后的图像的图像光L与外部光OL重叠地入射到使用者U的眼睛。因此,使用者U能够透过右导光板26以及左导光板28看见外景,并与该外景重叠地看到基于图像光L的图像。半反射镜261、281是反射右显示部22和左显示部24分别输出的图像光来提取图像的图像提取部,构成显示部。
3.HMD的控制系统
图3是显示系统1的框图,特别是详细示出HMD 100的结构。
在图像显示部20中,右显示部22具有右显示部基板210。在右显示部基板210上安装有与连接线缆40连接的右I/F部211、接收经由右I/F部211而从连接装置10输入的数据的接收部213、以及EEPROM 215。右I/F部211将接收部213、EEPROM215、温度传感器217、DP外侧摄像头61、距离传感器64、DP照度传感器65以及LED指示器67与连接装置10连接。接收部213将OLED单元221与连接装置10连接。
左显示部24具有左显示部基板230。在左显示部基板230上安装有与连接线缆40连接的左I/F部231、以及接收经由左I/F部231而从连接装置10输入的数据的接收部233。在左显示部基板230安装有DP六轴传感器235以及DP磁传感器237。
左I/F部231将接收部233、DP六轴传感器235、DP磁传感器237以及温度传感器239与连接装置10连接。接收部233将OLED单元241与连接装置10连接。
EEPROM是Electrically Erasable Programmable Read-Only Memory(电可擦除可编程只读存储器)的缩写。此外,有时将接收部213以及接收部233分别记载为Rx 213、Rx233。
EEPROM 215非易失性地存储各种数据。EEPROM 215例如存储与图像显示部20所具有的OLED单元221、241的发光特性、显示特性相关的数据、与右显示部22或左显示部24所具有的传感器的特性相关的数据等。具体而言,以DP控制部120能够读取的方式存储OLED单元221、241的伽马校正所涉及的参数、对温度传感器217、239的检测值进行补偿的数据等。
DP外侧摄像头61按照经由右I/F部211输入的信号执行拍摄,并将拍摄图像数据输出到右I/F部211。DP照度传感器65接收外部光,输出与受光量或受光强度对应的检测值。LED指示器67按照经由右I/F部211输入的控制信号或驱动电流而点亮。
温度传感器217检测OLED单元221的温度,并输出与检测温度对应的电压值或者电阻值来作为检测值。
距离传感器64经由右I/F部211将表示检测到距离的检测结果的信号输出到连接装置10。
接收部213接收经由右I/F部211而从连接装置10传输的显示用的影像数据,并输出到OLED单元221。OLED单元221显示基于连接装置10传输的影像数据的影像。
接收部233接收经由左I/F部231而从连接装置10传输的显示用的影像数据,并输出到OLED单元241。OLED单元221、241显示基于连接装置10传输的影像数据的影像。
DP六轴传感器235是具有三轴加速度传感器和三轴陀螺传感器的运动传感器。DP磁传感器237例如是三轴的地磁传感器。DP六轴传感器235以及DP磁传感器237可以是上述的各传感器被模块化的IMU,也可以将DP六轴传感器235以及DP磁传感器237形成一体化的模块。IMU是Inertial Measurement Unit(惯性测量单元)的缩写。温度传感器239检测OLED单元241的温度。DP六轴传感器235、DP磁传感器237以及温度传感器239分别将检测值输出到连接装置10。
图像显示部20的各部分利用通过连接线缆40从连接装置10提供的电力进行动作。图像显示部20在右显示部22具有电源部229,在左显示部24具有电源部249。电源部229将连接装置10经由连接线缆40提供的电力分配并提供给包含右显示部基板210在内的右显示部22的各部分。电源部249将连接装置10经由连接线缆40提供的电力分配并提供给包含左显示部基板230在内的左显示部24的各部分。电源部229、249也可以具有转换电压的转换电路等。电源部229、249与电源控制部126一起相当于第2供给部。
连接装置10具有I/F部110、DP控制部120、传感器控制部122、显示控制部124、电源控制部126、非易失性存储部130、操作部140、连接部145以及声音处理部147。
I/F部110具有连接器11D以及接口电路,该接口电路执行基于各种通信标准的通信协议。I/F部110例如是安装有连接器11D以及接口电路的接口基板。I/F部110可以具有外部的存储装置、能够连接存储介质的存储卡用接口等,也可以由无线通信接口构成I/F部110。
DP控制部120具有CPU、微型计算机等处理器,通过该处理器执行程序来控制连接装置10的各部分。DP控制部120也可以具有构成处理器的工作区的RAM。RAM是RandomAccess Memory(随机存取存储器)的缩写。
在DP控制部120上连接有非易失性存储部130、操作部140、连接部145以及声音处理部147。非易失性存储部130是非易失性地存储DP控制部120执行的程序和数据的ROM。ROM是Read Only Memory(只读存储器)的缩写。
传感器控制部122使图像显示部20具有的传感器组进行动作。传感器组包含DP外侧摄像头61、距离传感器64、DP照度传感器65、温度传感器217、DP六轴传感器235、DP磁传感器237以及温度传感器239。传感器控制部122按照DP控制部120的控制进行各传感器的采样周期的设定以及初始化,并按照各传感器的采样周期,执行向各传感器的通电、控制数据的发送、检测值的取得等。
传感器控制部122在预先设定的定时,将表示各传感器的检测值、检测结果的检测数据输出到I/F部110。在此,将DP外侧摄像头61的拍摄图像数据与其他传感器的检测值、检测结果同样地称为检测数据。
传感器控制部122也可以具有将模拟信号转换为数字数据的A/D转换器。在该情况下,传感器控制部122将从图像显示部20的传感器取得的检测值或检测结果的模拟信号转换为检测数据并输出。传感器控制部122也可以从图像显示部20的传感器取得检测值或检测结果的数字数据,进行数据格式的转换、输出定时的调整等,并将检测数据输出到I/F部110。
通过传感器控制部122的动作,与I/F部110连接的控制装置300能够取得HMD100的各传感器的检测值、DP外侧摄像头61的拍摄图像数据。
传感器控制部122可以将基于上述各传感器的检测值进行运算处理的结果作为检测数据输出。例如,传感器控制部122也可以统一处理多个传感器的检测值或检测结果,而作为所谓的传感器融合处理部发挥作用。在该情况下,传感器控制部122可以通过传感器融合,生成不包含在图像显示部20的各传感器中的虚拟传感器的检测数据。例如,传感器控制部122也可以将表示图像显示部20移动的轨迹的轨迹数据、表示图像显示部20在三维空间中的位置的坐标数据、表示图像显示部20的方向的方向数据作为检测数据输出。这里,坐标数据可以是表示以连接装置10的位置为基准的相对坐标的数据,也可以是表示相对于在图像显示部20所存在的空间中设定的基准位置的位置的数据。方向数据可以是表示以连接装置10的位置和方向为基准的方向的数据,也可以是表示相对于在图像显示部20所存在的空间中设定的基准位置的方向的数据。
传感器控制部122与通过USB线缆46和连接器11D连接的控制装置300之间执行通信协议,并输出检测数据。
显示控制部124基于输入到I/F部110的再现信号所包含的影像数据或显示数据,执行用于使图像显示部20显示图像的各种处理。在本实施方式中,通过由USB-TypeC连接器构成的连接器11D,以USB-TypeC的替代模式传输影像数据。显示控制部124例如执行帧的截取、分辨率转换、缩放、中间帧生成、帧频转换等各种处理。显示控制部124将与OLED单元221、241对应的影像数据输出到连接部145。输入到连接部145的影像数据从连接器11A作为影像信号201被传输到右I/F部211以及左I/F部231。显示控制部124按照输入到I/F部110的显示控制数据来调整并变更图像显示部20的显示状态。
传感器控制部122和显示控制部124中的至少一方也可以由处理器执行程序而通过软件与硬件的协作来实现。即,传感器控制部122和显示控制部124由处理器构成,通过执行程序来执行上述动作。在该例中,传感器控制部122和显示控制部124也可以通过由构成DP控制部120的处理器执行程序来实现。换言之,也可以通过处理器执行程序来作为DP控制部120、显示控制部124以及传感器控制部122发挥功能。在此,处理器可以改述为计算机。传感器控制部122和显示控制部124可以具有用于进行数据处理的工作存储器,也可以利用DP控制部120的存储器来进行处理。
显示控制部124和传感器控制部122也可以由DSP、FPGA等编程后的硬件构成。也可以将传感器控制部122和显示控制部124合并而构成为SoC-FPGA。DSP是Digital SignalProcessor(数字信号处理器)的缩写。FPGA是Field Programmable Gate Array(现场可编程门阵列)的缩写。SoC是System-on-a-Chip(片上系统)的缩写。
电源控制部126是与连接器11D连接并基于从连接器11D供给的电力对连接装置10的各部分以及图像显示部20供给电源的电路。
电源控制部126与电源部229、249一起相当于第2供给部。
操作部140检测连接装置10所具有的开关等的操作,将表示操作内容的数据输出到DP控制部120。
声音处理部147按照从DP控制部120输入的声音数据,生成声音信号。该声音数据中还包含从控制装置300输入的再现信号所包含的声音数据。此外,声音处理部147具有放大器,对所生成的声音信号进行放大并输出到连接部145。从连接部145经由音频连接器36将该声音信号输出到右耳机32和左耳机34。声音处理部147生成麦克风63收集到的声音的声音数据,并输出到DP控制部120。从声音处理部147输出的声音数据与图像显示部20所具有的传感器的检测数据同样,可以由传感器控制部122进行处理。
4.控制装置的结构
图4是控制装置300的框图。
控制装置300具有CO控制部310。CO控制部310具有处理器311、存储器312以及非易失性存储器313。处理器311由CPU、微型计算机、DSP等构成,通过执行程序来控制控制装置300的各部分。存储器312形成处理器311的工作区。非易失性存储器313由半导体存储功能部等构成,非易失性地存储处理器311执行的程序、由处理器311处理的各种数据。例如,非易失性存储器313存储作为处理器311执行的基本控制程序的操作系统、以及在操作系统上工作的应用程序等。非易失性存储器313存储在执行应用程序时处理的数据和处理结果的数据。CO控制部310也可以是集成了处理器311、存储器312以及非易失性存储器313的SoC。
CO控制部310与GNSS 321、CO摄像头322、CO六轴传感器323、CO磁传感器324、CO照度传感器325、声音输出部326、CO显示部327、电池329、通信部330以及I/F部331连接。
GNSS 321利用卫星定位系统进行定位,将控制装置300的位置输出到CO控制部310。GNSS是Global Navigation Satellite System(全球导航卫星系统)的缩写。
CO摄像头322是设置在控制装置300的主体上的数字摄像头,例如与触摸面板328相邻配置,拍摄与触摸面板328相对的方向。CO摄像头322按照CO控制部310的控制来执行拍摄,并将拍摄图像数据输出到CO控制部310。
CO六轴传感器323是具有三轴加速度传感器以及三轴陀螺仪传感器的运动传感器,将表示检测值的检测数据输出到CO控制部310。CO磁传感器324例如是三轴地磁传感器,将表示检测值的检测数据输出到CO控制部310。CO六轴传感器323以及CO磁传感器324可以是上述各传感器被模块化的IMU,也可以将CO六轴传感器323以及CO磁传感器324形成一体化的模块。
CO照度传感器325接收外部光,将表示与受光量或受光强度对应的检测值的检测数据输出到CO控制部310。
声音输出部326具有扬声器,按照CO控制部310的控制从扬声器输出声音。声音输出部326也可以具有将CO控制部310输出的声音信号放大并输出到扬声器的放大器。在CO控制部310是输出数字声音数据的结构的情况下,声音输出部326也可以具有将数字声音数据转换为模拟声音信号的D/A转换器。
CO显示部327具有触摸面板328,按照CO控制部310的控制,使触摸面板328显示字符或图像。
电池329是内置在控制装置300的主体中的二次电池,向控制装置300的各部分供给电力,并且向所连接的HMD 100供给电力。
当HMD 100连接到I/F部331时,CO控制部310进行与HMD 100的协商,决定向HMD100供给的电力。协商例如是进行电力角色的设定、授受的电力量的设定等的处理。电力角色是用作供给电力的供给源的电力源或从电力源接收电力的电力接收器。
CO控制部310经由I/F部331将通过协商决定的电力提供给HMD 100。
电池329和CO控制部310相当于第1供给部。
通信部330与Bluetooth、Wi-Fi等无线通信协议对应,与显示系统1的外部装置之间执行无线通信。Bluetooth和Wi-Fi是注册商标。通信部330也可以是利用LTE或第五代移动通信系统等移动通信网络来执行移动数据通信的结构。LTE是注册商标。
I/F部331具有连接数据通信线缆的未图示的连接器、以及利用连接器执行遵循各种通信标准的通信协议的接口电路。例如,I/F部331具有遵循USB标准的连接器以及接口电路,通过USB线缆46收发数据并向HMD 100供给电力。
非易失性存储器313中存储有内容数据。
CO控制部310再现内容数据,生成包含影像和声音的再现信号。CO控制部310经由I/F部331将生成的再现信号发送到HMD 100。
5.控制装置300与HMD 100连接的情况下的动作
当控制装置300连接至连接装置10时,DP控制部120与控制装置300进行协商,取得控制装置300能够供给至HMD 100的电力的信息。
在HMD 100未搭载电池的情况下,控制装置300在与HMD 100连接时,向HMD100供给使控制装置300执行协商所需的电力。当与HMD 100的协商结束时,控制装置300与HMD 100的动作相应地供给所需的电力。
DP控制部120在取得能够从控制装置300供给的电力的信息时,将取得的信息所表示的电力与HMD 100的消耗电力进行比较。
在HMD 100的消耗电力大于控制装置300能够供给的电力的情况下,DP控制部120使图像显示部20、声音输出部、传感器组中的至少一部分的动作停止。另外,在HMD 100的消耗电力大于控制装置300能够供给的电力的情况下,DP控制部120将HMD 100切换为低消耗电力的设定。
图像显示部20包含右显示部22和左显示部24。
声音输出部包含声音处理部147、右耳机32以及左耳机34。
传感器组是搭载于HMD 100的检测部,包含DP外侧摄像头61、距离传感器64、DP照度传感器65、温度传感器217、DP六轴传感器235、DP磁传感器237以及温度传感器239。以下,将构成图像显示部20、声音输出部、传感器组的各传感器分别称为功能部。
图5是表示消耗电力表135的一例的图。
非易失性存储部130存储图5所示的消耗电力表135。
消耗电力表135是将识别功能部的识别信息与各功能部的消耗电力对应起来登记的表。
首先,对DP控制部120使图像显示部20、声音输出部、传感器组中的至少一部分的动作停止的情况进行说明。
DP控制部120在HMD 100的消耗电力大于控制装置300能够供给的电力的情况下,参照消耗电力表135来选择消耗电力最大的功能部。DP控制部120判定通过不使所选择的功能部动作,HMD 100的消耗电力是否会成为控制装置300能够供给的电力以下。
DP控制部120在HMD 100的消耗电力成为了控制装置300能够供给的电力以下的情况下,控制电源控制部126以使所选择的功能部不被供给电力,并设定为所选择的功能部不进行动作。
另外,DP控制部120在即使设定为不使消耗电力最大的功能部动作,HMD 100的消耗电力也不会成为控制装置300能够供给的电力以下的情况下,参照消耗电力表135来选择接下来不动作的功能部。DP控制部120参照消耗电力表135来选择消耗电力第二大的功能部。DP控制部120在选择了消耗电力第一大和第二大的功能部时,判定通过不使所选择的这些功能部动作,HMD 100的消耗电力是否会成为控制装置300能够供给的电力以下。DP控制部120在HMD 100的消耗电力成为了控制装置300能够供给的电力以下的情况下,控制电源控制部126以使所选择的功能部不被供给电力,并设定为所选择的功能部不进行动作。
DP控制部120在HMD 100的消耗电力未成为控制装置300能够供给的电力以下的情况下,选择消耗电力第三大的功能部。此后,DP控制部120重复相同的处理,直到HMD 100的消耗电力成为控制装置300能够供给的电力以下为止。
此外,DP控制部120可以计算HMD 100的消耗电力与控制装置300能够供给的电力之间的差,并且基于计算出的差来选择不动作的功能部。DP控制部120参照消耗电力表135,选择消耗电力大于计算出的差的功能部或功能部的组合,控制电源控制部126以使所选择的功能部不被供给电力,并设定为所选择的功能部不动作。
另外,DP控制部120也可以在对功能部设定了优先级的情况下,按照该优先级来选择使动作停止的功能部。例如,图像显示部20的右显示部22的优先级被设定为最高,以下,假设按照DP外侧摄像头61、声音输出部、传感器组的顺序设定了优先级。在该情况下,DP控制部120按照所设定的优先级,选择优先级为第一位的功能部。DP控制部120从HMD 100的消耗电力中减去所选择的功能部的消耗电力。DP控制部120在减去后的电力成为控制装置300能够供给的电力以下的情况下,控制电源控制部126以使得不向优先级为第一位的功能部供给电力,并设定为所选择的功能部不进行动作。在本实施方式中,对优先级的设定是使动作停止的优先级的情况进行说明,但优先级的设定也可以设定不想使动作停止的功能部的优先顺序。在该情况下,DP控制部120按照优先级从低到高的顺序选择使动作停止的功能部。另外,优先级的设定也可以不是使动作停止的功能部的优先级,而是变更工作参数的功能部的优先级。
另外,DP控制部120在从HMD 100的消耗电力中减去所选择的功能部的消耗电力而得到的电力大于控制装置300能够供给的电力的情况下,选择优先级为第二位的功能部。DP控制部120从HMD 100的消耗电力中减去所选择的优先级为第一位和第二位的功能部的消耗电力。DP控制部120在减去后的消耗电力成为控制装置300能够供给的电力以下的情况下,控制电源控制部126以使得不向优先级为第一位和第二位的功能部供给电力,并设定为所选择的功能部不进行动作。此后,DP控制部120重复相同的处理,直到HMD 100的消耗电力成为控制装置300能够供给的电力以下为止。
另外,DP控制部120在安装于控制装置300的应用程序已启动的情况下,也可以不停止该应用程序的执行所需的HMD 100的功能部的动作。以下,将应用程序简单地称为应用。
例如,假设在控制装置300中音乐再现应用已启动,从HMD 100的右耳机32和左耳机34输出了声音。在该情况下,DP控制部120进行设定,使得即使声音输出部的消耗电力较大、优先级被设定得较高,也不使声音输出部的动作停止。另外,假设控制装置300的地图应用已启动。在该情况下,即使DP六轴传感器235的消耗电力较大、优先级被设定得较高,DP控制部120也可以不使传感器组所包含的DP六轴传感器235的动作停止。
接着,说明以下情况:DP控制部120在HMD 100的消耗电力大于控制装置300能够供给的电力的情况下,以不超过控制装置300能够供给的电力的方式将HMD 100切换为低消耗电力的设定。
例如,DP控制部120也可以基于HMD 100的消耗电力和控制装置300能够供给的电力,使显示控制部124变更显示于右显示部22和左显示部24的图像的刷新率和图像的亮度中的至少一方。DP控制部120基于预先设定的阈值,变更刷新率和图像的亮度中的至少一方。例如,DP控制部120求出控制装置300能够供给的电力与HMD100的消耗电力之差,将求出的电力之差与阈值进行比较。DP控制部120在求出的电力之差为第1阈值以下的情况下,指示显示控制部124变更显示于右显示部22和左显示部24的图像的刷新率和图像的亮度中的至少一方。另外,DP控制部120在求出的电力之差为第2阈值以下的情况下,指示显示控制部124变更显示于右显示部22和左显示部24的图像的刷新率以及图像的亮度。第2阈值被设定为值比第1阈值大的值。
显示控制部124按照DP控制部120的控制,控制右显示部22和左显示部24,使得显示于右显示部22和左显示部24的图像的刷新率比控制装置300能够供给HMD 100的消耗电力的情况低。
另外,显示控制部124按照DP控制部120的控制,控制右显示部22和左显示部24,使得显示于右显示部22和左显示部24的图像的亮度比控制装置300能够供给HMD 100的消耗电力的情况低。
此外,DP控制部120也可以降低右显示部22和左显示部24中的任意一方的刷新率,或者降低亮度。此外,DP控制部120也可以设定为不使右显示部22和左显示部24中的任意一方显示图像。此外,DP控制部120还可以设定为降低右显示部22和左显示部24中的任意一方的刷新率或降低亮度,并不使右显示部22和左显示部24中的另一方显示图像。
另外,DP控制部120也可以指示传感器控制部122,以使传感器组所包含的至少一部分传感器的采样频率比控制装置300能够供给HMD 100的消耗电力的情况低。例如,DP控制部120基于控制装置300能够供给的电力与HMD 100的消耗电力之差和预先设定的优先级,向传感器控制部122指示将采样频率设定得低的传感器。传感器控制部122控制右显示部22和左显示部24,以使由DP控制部120指定的传感器的采样频率比控制装置300能够供给HMD 100的消耗电力的情况低。
另外,DP控制部120也可以基于HMD 100的消耗电力和控制装置300能够供给的电力,使传感器控制部122变更DP外侧摄像头61的拍摄分辨率和每单位时间的拍摄次数中的至少一方。DP控制部120基于预先设定的阈值,使传感器控制部122变更DP外侧摄像头61的拍摄分辨率和每单位时间的拍摄次数中的至少一方。
DP控制部120在控制装置300能够供给的电力与HMD 100的消耗电力之差为阈值以下的情况下,指示传感器控制部122变更DP外侧摄像头61的拍摄分辨率和每单位时间的拍摄次数中的至少一方。
另外,DP控制部120在控制装置300能够供给的电力与HMD 100的消耗电力之差为预先设定的阈值以上的情况下,对传感器控制部122指示DP外侧摄像头61的拍摄分辨率与每单位时间的拍摄次数的变更。
传感器控制部122按照DP控制部120的控制,控制DP外侧摄像头61,使得DP外侧摄像头61的拍摄分辨率比控制装置300能够供给HMD 100的消耗电力的情况低。
另外,传感器控制部122按照DP控制部120的控制,控制DP外侧摄像头61,使得DP外侧摄像头61的每单位时间的拍摄次数比控制装置300能够供给HMD 100的消耗电力的情况低。
此外,DP控制部120可以基于HMD 100的消耗电力和控制装置300能够供给的电力来减少向声音输出部的声音输出。
DP控制部120也可以计算控制装置300能够供给的电力与HMD 100的消耗电力之差,将计算出的差与预先设定的阈值进行比较,决定使声音输出部输出的声音的声压。由于放大器所消耗的电力较大,因此通过降低声音输出部输出的声音的声压,能够降低HMD 100的消耗电力。另外,DP控制部120也可以在计算出的控制装置300能够供给的电力与HMD 100的消耗电力之差为预先设定的阈值以上的情况下,使声音输出部停止声音的输出。
另外,也可以预先设定HMD 100的工作模式,根据HMD 100的消耗电力与控制装置300能够供给的电力之差,决定使HMD 100动作的工作模式。
例如,HMD 100具有第1工作模式、第2工作模式和第3工作模式这3个工作模式作为工作模式。
DP控制部120根据从控制装置300供给的电力将工作模式变更为第1工作模式、第2工作模式以及第3工作模式中的任意一个。
第1工作模式是图像显示部20的右显示部22和左显示部24、DP外侧摄像头61、声音处理部147、右耳机32以及左耳机34、传感器组全部能够动作的模式。
第2工作模式是与第1工作模式相比降低了消耗电力的模式。
DP控制部120在选择了第2工作模式的情况下,仅使右显示部22和左显示部24中的任意一方动作。另外,DP控制部120在选择了第2工作模式的情况下,控制传感器控制部122,使DP外侧摄像头61的拍摄帧频比第1工作模式时降低。另外,DP控制部120控制传感器控制部122,使传感器组的采样频率比第1工作模式时降低。
第3工作模式是与第2工作模式相比削减了消耗电力的模式。
DP控制部120在选择了第3工作模式的情况下,使DP外侧摄像头61和传感器组中的任意一方的动作停止。
此外,DP控制部120在选择了第3工作模式的情况下,使右显示部22和左显示部24的刷新率和亮度中的至少一方比第1工作模式时降低。
图6是示出协商中的HMD 100的动作的流程图。
DP控制部120检测控制装置300对I/F部110的连接(步骤S1)。例如,当设置在I/F部110中的电压监视部(未示出)检测到VBUS时,DP控制部120检测到对I/F部110的连接。DP控制部120在未检测到连接的情况下(步骤S1/否),不转移到步骤S2以后的步骤。
DP控制部120在检测到连接时(步骤S1/是),判定是否从所连接的控制装置300接收到连接请求(步骤S2)。DP控制部120在未接收到连接请求的情况下(步骤S2/否),不转移到步骤S3以后的步骤。
DP控制部120在从控制装置300接收到连接请求时(步骤S2/是),将以不限制HMD100的消耗电力的第1工作模式使HMD 100动作的情况下的消耗电力通知给控制装置300(步骤S3)。
接着,DP控制部120判定是否接收到控制装置300能够向HMD 100供给的电力即供给电力的通知(步骤S4)。
DP控制部120在未从控制装置300接收到供给电力的通知的情况下(步骤S4/否),不转移到步骤S5以后。
DP控制部120在从控制装置300接收到供给电力的通知时(步骤S4/是),判定HMD100的消耗电力为所通知的供给电力以下的工作模式(步骤S5)。DP控制部120在所通知的供给电力以下的工作模式存在多个的情况下,选择从控制装置300通知的供给电力以下且消耗电力最大的工作模式。另外,DP控制部120也可以按照每个工作模式设定优先级,在通知的供给电力以下的工作模式中选择优先级最高的工作模式。另外,DP控制部120在通知的供给电力以下的工作模式中存在与控制装置300的上次连接时选择的工作模式的情况下,也可以选择该上次连接时选择的工作模式。
DP控制部120在判定出所通知的供给电力以下的工作模式时,将所判定的工作模式的消耗电力通知给控制装置300(步骤S6)。
接下来,DP控制部120判定是否从控制装置300接收到协商完成通知(步骤S7)。DP控制部120在未从控制装置300接收到完成通知的情况下(步骤S7/否),不转移到下一步骤。
DP控制部120在从控制装置300接收到完成通知时(步骤S7/是),将通知接收到完成通知的接收通知发送到控制装置300(步骤S8),结束该处理流程。
图7是表示协商中的控制装置300的动作的流程图。
CO控制部310判定是否检测到连接(步骤T1)。
CO控制部310检测到控制装置300与I/F部331连接(步骤T1)。CO控制部310与HMD100同样地,通过由设置于I/F部331的未图示的电压监视部检测VBUS来检测连接。CO控制部310在未检测到连接的情况下(步骤T1/否),不执行步骤T2以后的处理。
CO控制部310在检测到连接时(步骤T1/是),向作为该连接的连接目的地的HMD100发送连接请求(步骤T2)。
接着,CO控制部310判定是否从HMD 100接收到消耗电力的通知(步骤T3)。CO控制部310在未从HMD 100接收到消耗电力的通知的情况下(步骤T3/否),不转移到步骤T4。
CO控制部310在从HMD 100接收到消耗电力的通知的情况下(步骤T3),将控制装置300能够向HMD 100供给的电力即供给电力通知给HMD 100(步骤T4)。
接着,CO控制部310判定是否从HMD 100接收到消耗电力的通知(步骤T5)。CO控制部310在未从HMD 100接收到消耗电力的通知的情况下(步骤T5/否),不转移到步骤T6的处理。
CO控制部310在从HMD 100接收到消耗电力的通知的情况下(步骤T5/是),向HMD100发送完成通知(步骤T6)。之后,CO控制部310判定是否从HMD 100接收到接收通知(步骤T7)。CO控制部310在未接收到接收通知的情况下(步骤T7/否),待机至接收到接收通知为止。
CO控制部310在从HMD 100接收到完成通知时(步骤T7/是),结束协商,开始向HMD100供给电力。
接下来,说明协商之后的动作。
DP控制部120在协商结束后受理了新启动功能部的操作的情况下,判定是否能够启动通过该操作选择出的功能部。例如,DP控制部120判定是否能够通过将HMD100的工作模式变更为消耗电力低于协商时决定的工作模式的工作模式来使所选择的功能部动作。工作模式的变更包含使动作停止的功能部的选择、工作参数的变更等。工作参数的变更是指变更为能够进一步降低功能部的消耗电力的工作参数。
DP控制部120基于各工作模式的消耗电力、从控制装置300供给的供给电力、以及所选择的功能部的消耗电力,判定是否能够使所选择的功能部启动。例如,如果新启动的功能部的消耗电力与变更后的工作模式的消耗电力之和等于或小于新启动功能部之前的当前的工作模式的消耗电力,则DP控制部120判定为能够启动所选择的功能部。
另外,DP控制部120在通过工作模式的变更无法使新的功能部启动的情况下,判定是否能够通过使动作中的其他功能部停止来使新的功能部启动。使动作停止的其他功能部可以是1个,也可以是多个。DP控制部120选择处于动作中且能够使动作停止的其他功能部。DP控制部120将所选择的其他功能部的消耗电力与新启动的功能部的消耗电力进行比较,判定是否能够启动新的功能部。DP控制部120在判定为所选择的其他功能部的消耗电力大于新启动的功能部的消耗电力、能够使新启动的功能部启动的情况下,使所选择的其他功能部的动作停止,使新启动的功能部启动。另外,DP控制部120也可以在新启动的功能部的消耗电力比其他功能部的消耗电力大的情况下,判定是否存在能够进一步停止的功能部。
另外,DP控制部120也可以判定是否能够通过将动作中的其他功能部的动作变更为低消耗电力的动作来使新的功能部启动。
DP控制部120在动作中的其他功能部的消耗电力大于新启动的功能部的消耗电力的情况下,判定为通过使该动作中的功能部的动作停止,能够使功能部新启动。在该情况下,DP控制部120将成为使动作停止的候选的其他功能部的信息发送到控制装置300。
CO控制部310在从HMD 100接收到作为使动作停止的候选的其他功能部的信息时,使CO显示部327显示接收到的其他功能部的信息。另外,CO控制部310使CO显示部327显示询问是否可以使其他功能部的动作停止的引导。
CO控制部310在通过触摸面板328的操作而受理了许可其他功能部的动作停止的操作的情况下,将许可动作停止的许可通知发送到HMD 100。
DP控制部120在从控制装置300接收到许可其他功能部的动作停止的通知时,使其他功能部的动作停止,使所选择的功能部启动。
图8是表示受理了使搭载于HMD 100的功能部启动的操作的情况下的DP控制部120的动作的流程图。
首先,DP控制部120判定是否受理了使功能部启动的操作(步骤S11)。DP控制部120在未受理启动功能部的操作的情况下(步骤S11/否),在受理启动功能部的操作之前不转移到步骤S12的判定。
DP控制部120在受理了启动功能部的操作时(步骤S11/是),参照图5所示的消耗电力表135取得使通过操作选择出的功能部动作的情况下的消耗电力(步骤S12)。
DP控制部120判定对HMD 100的当前工作模式的消耗电力加上所选择的功能部的消耗电量而得到的合计电力是否超过控制装置300的供给电力(步骤S13)。DP控制部120在合计电力未超过供给电力的情况下(步骤S13/否),使所选择的功能部启动(步骤S22)。
另外,DP控制部120在合计电力超过供给电力的情况下(步骤S13/是),判定是否能够通过将HMD 100的工作模式变更为其他模式而将合计电力抑制为供给电力以下(步骤S14)。
DP控制部120在判定为能够通过变更工作模式将合计电力抑制在供给电力以下的情况下(步骤S14/是),将HMD 100的工作模式的变更请求发送到控制装置300(步骤S15)。
接着,DP控制部120判定是否从控制装置300接收到许可工作模式的变更的通知(步骤S16)。
DP控制部120在不许可工作模式的变更的情况下(步骤S16/否),不变更工作模式,另外,不启动所选择的功能部而结束该流程。
另外,DP控制部120在许可了工作模式的变更的情况下(步骤S16/是),使工作模式转移到在步骤S14中判定为合计电力成为供给电力以下的工作模式(步骤S17)。然后,DP控制部120使所选择的功能部启动(步骤S22)。
另外,DP控制部120在判定为不能通过工作模式的变更来应对的情况下(步骤S14/否),能够使动作停止,判定是否存在通过动作的停止而使合计电力成为供给电力以下的其他功能部(步骤S18)。在不存在其他功能部的情况下(步骤S18/否),DP控制部120不使所选择的功能部启动,而使该处理流程结束。
另外,DP控制部120在存在其他功能部的情况下(步骤S18/是),将该能够停止动作的其他功能部的信息发送至控制装置300(步骤S19)。然后,DP控制部120在从控制装置300接收到拒绝其他功能部的动作停止的拒绝通知的情况下(步骤S20/否),不使其他功能部的动作停止,而使该流程结束。
另外,DP控制部120在从控制装置300接收到许可其他功能部的动作停止的许可通知的情况下(步骤S20/是),使其他功能部的动作停止(步骤S21),使所选择的功能部启动(步骤S22)。
图9是表示控制装置300的动作的流程图。
CO控制部310判定是否从HMD 100接收到工作模式的变更请求(步骤T11)。CO控制部310在未从HMD 100接收到工作模式的变更请求的情况下(步骤T11/否),转移到步骤T16的判定。
CO控制部310在从HMD 100接收到工作模式的变更请求时(步骤T11/是),使CO显示部327显示HMD 100的工作模式的变更请求(步骤T12)。CO控制部310在受理了许可变更HMD100的工作模式的操作的情况下(步骤T13/是),向HMD 100发送许可变更工作模式的许可通知(步骤T14)。另外,CO控制部310在受理了拒绝变更HMD 100的工作模式的操作的情况下(步骤T13/否),将拒绝工作模式变更的拒绝通知通知给HMD 100(步骤T15)。
接着,CO控制部310判定是否从HMD 100接收到使动作停止的其他功能部的信息(步骤T16)。CO控制部310在未接收到其他功能部的信息的情况下(步骤T16/否),返回步骤T11的判定。
另外,CO控制部310在从HMD 100接收到使动作停止的其他功能部的信息的情况下(步骤T16/是),使触摸面板328显示从HMD 100接收到的其他功能部的信息、和确认是否可以使其他功能部的动作停止的引导(步骤T17)。接着,CO控制部310判定是否受理了许可其他功能部的动作停止的操作(步骤T18)。CO控制部310在受理了许可其他功能部的动作停止的操作的情况下(步骤T18/是),向HMD 100发送许可其他功能部的动作停止的许可通知(步骤T19)。另外,CO控制部310在受理了拒绝其他功能部的动作停止的操作的情况下(步骤T18/否),向HMD 100发送拒绝其他功能部的动作停止的拒绝通知(步骤T20)。
如以上说明的那样,显示系统1具有显示图像的HMD 100和与HMD 100连接的控制装置300。
控制装置300具有第1供给部以及第1输出部。
第1供给部由向HMD 100供给电力的电池329构成。
第1输出部由输出包含图像和声音中的至少一方的再现信号的I/F部331构成。
HMD 100具有图像显示部20、声音输出部、检测部以及第2供给部。
图像显示部20显示从控制装置300接收到的再现信号所包含的图像。
声音输出部由声音处理部147、右耳机32以及左耳机34构成,输出再现信号所包含的声音。
检测部由传感器组构成。传感器组中包含DP外侧摄像头61、距离传感器64、DP照度传感器65、温度传感器217、DP六轴传感器235、DP磁传感器237以及温度传感器239。
另外,HMD 100具有向供给目的地供给从控制装置300供给的电力的电源控制部126、电源部229以及249。
显示系统1在HMD 100的消耗电力大于由控制装置300供给的电力的情况下,使显示部、声音输出部以及检测部的一部分动作停止。另外,HMD 100使图像显示部20、声音输出部和检测部以使HMD 100的消耗电力小于从控制装置300供给的电力的方式动作。
因此,即使从控制装置300供给的电力小于HMD 100的消耗电力,也能够降低HMD100的消耗电力,利用从控制装置300供给的电力使HMD 100动作。
另外,图像显示部20具有右显示部22作为第1显示部,具有左显示部24作为第2显示部。
显示系统1在由控制装置300供给的电力小于HMD 100的消耗电力的情况下,不使右显示部22和左显示部24中的至少一方显示图像。
因此,即使从控制装置300供给的电力小于HMD 100的消耗电力,通过将显示图像的显示部设为右显示部22和左显示部24中的一方,也能够降低HMD 100的消耗电力。因此,能够利用从控制装置300供给的电力使HMD 100动作。
显示系统1在由控制装置300供给的电力小于HMD 100的消耗电力的情况下,使多个传感器中的至少1个的动作停止。
另外,显示系统1与由控制装置300供给的电力大于HMD 100的消耗电力时相比,降低多个传感器中的至少1个的采样频率。
因此,能够降低HMD 100的消耗电力,利用从控制装置300供给的电力使HMD100进行动作。
传感器组中包含DP外侧摄像头61。
在由控制装置300供给的电力小于HMD 100的消耗电力的情况下,显示系统1使DP外侧摄像头61的拍摄分辨率和每单位时间的拍摄次数中的至少一方比由控制装置300供给的电力大于HMD 100的消耗电力时降低。
因此,能够降低HMD 100的消耗电力,利用从控制装置300供给的电力使HMD100进行动作。
另外,显示系统1在由控制装置300供给的电力小于HMD 100的消耗电力的情况下,使向声音输出部的声音输出停止。另外,显示系统1使从声音输出部输出的声音比由控制装置300供给的电力大于HMD 100的消耗电力时降低。
因此,能够降低HMD 100的消耗电力,利用从控制装置300供给的电力使HMD100进行动作。
另外,显示系统1在由控制装置300供给的电力小于HMD 100的消耗电力的情况下,使图像显示部20的刷新率和显示部的亮度中的至少一方比由控制装置300供给的电力大于HMD 100的消耗电力时降低。
因此,能够降低HMD 100的消耗电力,利用从控制装置300供给的电力使HMD100进行动作。
本发明不限于在上述各实施方式中说明的结构,在不脱离其主旨的范围内能够以各种方式实施。
例如,在上述实施方式中,说明了HDM 100的DP控制部120决定供给电力的供给目的地的情况。作为除此以外的方法,也可以是,控制装置300的CO控制部310基于HDM 100的消耗电力、控制装置300能够供给的电力来选择使动作停止或限制功能的功能部。
此外,例示了显示系统1具有作为头部佩戴型显示装置的HMD 100的结构,但本发明不限于此,可以采用各种显示装置。例如,可以替代图像显示部20,采用例如帽子那样佩戴的图像显示部等其他方式的图像显示部,只要具有与使用者U的左眼对应地显示图像的显示部、和与使用者U的右眼对应地显示图像的显示部即可。此外,本发明的显示装置例如可以构成为搭载于汽车或飞机等交通工具的头戴式显示器。此外,例如也可以构成为内置于头盔等身体防护器具的头戴式显示器。在该情况下,能够设对相对于使用者U身体的位置进行定位的部分、和针对该部分进行定位的部分为佩戴部。
HMD 100是作为本发明的应用对象的显示装置的一例,并不限定于图3所示的结构。例如,在上述实施方式中,以图像显示部20和连接装置10分离的结构为例进行了说明,但也可以是连接装置10和图像显示部20构成为一体并佩戴于使用者U头部的结构。此外,图像显示部20的光学系统的结构是任意的,例如,可以使用位于使用者U的眼睛前方并与使用者U视野的一部分或全部重叠的光学部件。或者,也可以采用使激光等进行扫描而形成图像光的扫描方式的光学系统。或者,不限于在光学部件的内部对图像光进行引导,也可以仅具有朝向使用者U的眼睛使图像光折射和/或反射而进行引导的功能。
另外,作为显示装置,也可以采用在液晶显示面板上显示图像的液晶监视器或液晶电视。还可以使用具有等离子体显示面板、有机EL显示面板的显示装置。该情况下,显示面板相当于本发明的显示部。并且,作为显示装置,也可以使用将图像光投射于屏幕等的投影仪。
另外,例如,在图3所示的HMD 100中,也可以利用USB-TypeC连接器、USB-TypeC控制器以及USB集线器来构成连接装置10。在该情况下,也可以将DP外侧摄像头61、其他传感器与USB集线器连接。另外,作为控制图像显示部20中的右显示部22和左显示部24的显示的控制器,也可以将向右显示部22和左显示部24输出显示数据的FPGA配置在右显示部22和左显示部24中的任意一个上。在该情况下,连接装置10也可以具有连接USB-TypeC控制器与FPGA的桥接控制器。另外,在图像显示部20中,也可以采用将DP六轴传感器235、DP磁传感器237、EEPROM215等安装在与FPGA相同的基板上的结构。其他传感器的配置也可以适当变更。例如,距离传感器64、DP照度传感器65也可以配置在适于测量或者检测的位置,构成为与FPGA、USB-TypeC控制器连接。
另外,包含OLED单元221、241的显示装置的具体的规格也没有限制,例如,OLED单元221、241可以具有共同的结构。
图3、图4所示的各功能块中的至少一部分可以通过硬件来实现,也可以是通过硬件与软件的协作实现的结构,不限定于如图中所示地配置独立的硬件资源的结构。
另外,图6和图8所示的表示HMD 100的处理的流程图是为了容易理解DP控制部120的处理而根据主要的处理内容进行了分割而得的。本发明不受图6和图8的流程图所示的处理单位的分割方式或名称限制。此外,DP控制部120的处理可以根据处理内容分割为更多的处理单位,也可以分割为1个处理单位包含更多的处理。另外,上述的流程图的处理顺序也不限于图示的例子。
另外,图7和图9所示的表示控制装置300的处理的流程图是为了容易理解CO控制部310的处理而根据主要的处理内容进行了分割而得的。本发明不受图7和图9的流程图所示的处理单位的分割方式或名称限制。此外,CO控制部310的处理可以根据处理内容分割为更多的处理单位,也可以分割为1个处理单位包含更多的处理。另外,上述的流程图的处理顺序也不限于图示的例子。
另外,在使用HMD 100所具有的计算机来实现显示装置的控制方法的情况下,也能够以记录介质或传送该程序的传送介质的方式构成使该计算机执行的程序。记录介质能够使用磁性、光学性的记录介质或半导体存储功能部。另外,上述记录介质也可以是服务器装置所具有的内部存储装置即RAM、ROM、HDD等非易失性存储装置。
Claims (10)
1.一种显示系统,其中,该显示系统具有:
信息处理装置,其具有供给第1电力的第1供给部、以及输出包含图像和声音的再现信号的输出部;以及
显示装置,其具有显示所述图像的显示部、输出所述声音的声音输出部、第1传感器、以及第2供给部,所述第2供给部将所述第1电力供给到所述显示部、所述声音输出部和所述第1传感器,
在由所述显示装置消耗的第2电力大于所述第1电力的情况下,所述显示部、所述声音输出部和所述第1传感器停止一部分的动作,或者,所述显示部、所述声音输出部和所述第1传感器以使所述第2电力小于所述第1电力的方式动作。
2.一种显示系统,其中,该显示系统具有:
信息处理装置,其具有供给第1电力的第1供给部、以及输出包含图像的再现信号的输出部;以及
显示装置,其具有显示所述图像的第1显示部、显示所述图像且不同于所述第1显示部的第2显示部、以及将所述第1电力供给到所述第1显示部和所述第2显示部的第2供给部,
在由所述显示装置消耗的第2电力大于所述第1电力的情况下,所述第1显示部和所述第2显示部中的至少一方不显示所述图像。
3.根据权利要求1所述的显示系统,其中,
该显示系统具有不同于所述第1传感器的第2传感器,
在所述第2电力大于所述第1电力的情况下,所述第1传感器和所述第2传感器中的至少1个停止动作,或者,所述第1传感器和所述第2传感器中的至少1个与所述第1电力大于所述第2电力的情况相比降低采样频率。
4.根据权利要求1所述的显示系统,其中,
所述第1传感器是摄像头,
在所述第2电力大于所述第1电力的情况下,与所述第1电力大于所述第2电力的情况相比,降低所述摄像头的拍摄分辨率和每单位时间的拍摄次数中的至少一方。
5.根据权利要求1所述的显示系统,其中,
在所述第2电力大于所述第1电力的情况下,所述声音输出部使所述声音的输出停止,或者,所述声音输出部使输出的所述声音比在所述第1电力大于所述第2电力的情况下输出的所述声音降低。
6.根据权利要求1所述的显示系统,其中,
在所述第2电力大于所述第1电力的情况下,与所述第1电力大于所述第2电力的情况相比,降低所述显示部的刷新率和所述显示部的亮度中的至少一方。
7.一种显示装置,其中,该显示装置具有:
传感器;
显示部,其显示图像;
声音输出部,其输出声音;
供给部,其将第1电力供给到所述显示部、所述声音输出部和所述传感器;以及
控制部,其对所述供给部进行控制,以使由所述显示部、所述声音输出部和所述传感器消耗的第2电力成为所述第1电力以下。
8.一种显示装置,其中,该显示装置具有:
第1显示部,其显示图像;
第2显示部,其显示所述图像且不同于所述第1显示部;
供给部,其将第1电力供给到所述第1显示部和所述第2显示部;以及
控制部,其对所述第1显示部和所述第2显示部进行控制,
所述控制部在由所述第1显示部和所述第2显示部消耗的第2电力大于所述第1电力的情况下,使所述第1显示部和所述第2显示部中的至少一方不显示所述图像。
9.一种显示装置的控制方法,所述显示装置具有:传感器;显示部,其显示图像;以及声音输出部,其输出声音,在该显示装置的控制方法中,
将第1电力供给到所述传感器、所述显示部和所述声音输出部,
控制供给到所述显示部、所述声音输出部和所述传感器的所述第1电力,以使由所述显示装置消耗的第2电力成为所述第1电力以下。
10.一种显示装置的控制方法,所述显示装置具有第1显示部和第2显示部,在该显示装置的控制方法中,
将第1电力供给到所述第1显示部和所述第2显示部,
在由所述第1显示部和所述第2显示部消耗的第2电力大于所述第1电力的情况下,所述第1显示部和所述第2显示部中的至少一方不显示图像。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021045653A JP2022144581A (ja) | 2021-03-19 | 2021-03-19 | 表示システム、表示装置及び表示装置の制御方法 |
JP2021-045653 | 2021-03-19 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115113715A true CN115113715A (zh) | 2022-09-27 |
Family
ID=83284558
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210262695.5A Pending CN115113715A (zh) | 2021-03-19 | 2022-03-17 | 显示系统、显示装置以及显示装置的控制方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220299763A1 (zh) |
JP (1) | JP2022144581A (zh) |
CN (1) | CN115113715A (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3894939B1 (en) * | 2019-01-17 | 2024-06-19 | Apple Inc. | Head-mounted display |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020113907A1 (en) * | 2000-06-20 | 2002-08-22 | Olympus Optical Co., Ltd. | Display system and microdisplay apparatus |
CN102689599A (zh) * | 2011-03-23 | 2012-09-26 | 欧姆龙汽车电子株式会社 | 电源控制装置及方法、以及电力管理系统 |
US20170045928A1 (en) * | 2014-02-21 | 2017-02-16 | Sony Corporation | Electronic apparatus and method of controlling power supply |
CN107872660A (zh) * | 2016-09-28 | 2018-04-03 | 卡西欧计算机株式会社 | 显示装置、显示方法及显示系统 |
CN109791278A (zh) * | 2016-09-30 | 2019-05-21 | 三美电机株式会社 | 光扫描装置以及视网膜扫描型头戴式显示器 |
CN110060614A (zh) * | 2018-01-18 | 2019-07-26 | 精工爱普生株式会社 | 头部佩戴型显示装置及其控制方法、显示系统 |
US20190347977A1 (en) * | 2018-05-11 | 2019-11-14 | Seiko Epson Corporation | Connection device, display device, and control method for the display device |
US20200371573A1 (en) * | 2018-03-14 | 2020-11-26 | Nec Display Solutions, Ltd. | Video display apparatus and method for supplying electric power |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101635640B1 (ko) * | 2008-12-11 | 2016-07-05 | 삼성전자 주식회사 | 디스플레이장치, 디스플레이장치를 포함하는 시스템 및 그 제어방법 |
KR102486833B1 (ko) * | 2017-08-23 | 2023-01-11 | 삼성전자주식회사 | 전자 장치들간의 전원 제어 방법 및 전자 장치 |
-
2021
- 2021-03-19 JP JP2021045653A patent/JP2022144581A/ja active Pending
-
2022
- 2022-03-17 CN CN202210262695.5A patent/CN115113715A/zh active Pending
- 2022-03-17 US US17/696,867 patent/US20220299763A1/en not_active Abandoned
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020113907A1 (en) * | 2000-06-20 | 2002-08-22 | Olympus Optical Co., Ltd. | Display system and microdisplay apparatus |
CN102689599A (zh) * | 2011-03-23 | 2012-09-26 | 欧姆龙汽车电子株式会社 | 电源控制装置及方法、以及电力管理系统 |
US20170045928A1 (en) * | 2014-02-21 | 2017-02-16 | Sony Corporation | Electronic apparatus and method of controlling power supply |
CN107872660A (zh) * | 2016-09-28 | 2018-04-03 | 卡西欧计算机株式会社 | 显示装置、显示方法及显示系统 |
CN109791278A (zh) * | 2016-09-30 | 2019-05-21 | 三美电机株式会社 | 光扫描装置以及视网膜扫描型头戴式显示器 |
CN110060614A (zh) * | 2018-01-18 | 2019-07-26 | 精工爱普生株式会社 | 头部佩戴型显示装置及其控制方法、显示系统 |
US20200371573A1 (en) * | 2018-03-14 | 2020-11-26 | Nec Display Solutions, Ltd. | Video display apparatus and method for supplying electric power |
US20190347977A1 (en) * | 2018-05-11 | 2019-11-14 | Seiko Epson Corporation | Connection device, display device, and control method for the display device |
Also Published As
Publication number | Publication date |
---|---|
JP2022144581A (ja) | 2022-10-03 |
US20220299763A1 (en) | 2022-09-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11310483B2 (en) | Display apparatus and method for controlling display apparatus | |
US11393431B2 (en) | Display system, control program for information processor, and control method for information processor that are configured to adjust display of a first image on a first display unit based on the position of a second display unit | |
JP2017116562A (ja) | 表示装置、表示装置の制御方法、及び、プログラム | |
US20210200284A1 (en) | Image display device, power supply system, and power supply method for image display device | |
CN115113715A (zh) | 显示系统、显示装置以及显示装置的控制方法 | |
US11353704B2 (en) | Head mounted device (HMD) coupled to smartphone executing personal authentication of a user | |
US11531508B2 (en) | Data processing device, display system, and data processing method that controls the output of data based on a connection state | |
US11322115B2 (en) | Display system, display control method, and program | |
CN114356071B (zh) | 显示系统、显示方法以及记录介质 | |
US11269188B2 (en) | Display system, control program for information processing device, method for controlling information processing device, and display device | |
CN112526749B (zh) | 显示装置、记录介质、显示装置的控制方法和显示系统 | |
US20200241685A1 (en) | Information processing apparatus, method for controlling information processing apparatus, and control program for information processing apparatus | |
US11579454B2 (en) | Image display device and reboot method for image display device | |
US11630793B2 (en) | Image display device and port arrangement | |
US20240027765A1 (en) | Control device, control method for head-mounted display device, and program | |
JP2019197251A (ja) | 接続装置、表示装置、接続装置の制御方法、及び、表示装置の制御方法 | |
US11520414B2 (en) | Display system, control program for information processing device, and method for controlling information processing device | |
JP2021057747A (ja) | 表示システム、画像表示装置、画像表示方法及びプログラム | |
EP3748952B1 (en) | Image data processing method and device therefor | |
JP2022144577A (ja) | 音声出力装置及び頭部装着型表示装置 | |
JP2022152148A (ja) | 頭部装着型表示装置 | |
CN114442801A (zh) | 操作方法以及记录介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |