CN109960481A - 显示系统及其控制方法、显示装置及其控制方法 - Google Patents

Abstract

提供显示系统及其控制方法、显示装置及其控制方法，与外部装置相对应地控制显示装置的显示。显示系统1具有PC(300)和HMD(100)。HMD(100)具有：图像显示部(20)，其构成为能够看到外景，与外景重叠地显示图像；以及显示控制部(122)，其使图像显示部(20)显示基于从PC(300)输入的数据的图像。显示系统(1)检测PC(300)的显示部(330)相对于HMD(100)的位置，在显示部(330)相对于HMD(100)的位置包含在通过图像显示部(20)看到的外景的范围内的情况下，对图像显示部(20)的显示进行调整。

Description

显示系统及其控制方法、显示装置及其控制方法

技术领域

本发明涉及显示系统、显示系统的控制方法、显示装置以及显示装置的控制方法。

背景技术

以往，在显示装置中，公知有接收外部装置的显示图像而进行显示的显示装置(例如，参照专利文献1)。在专利文献1中记载了如下例子：头部佩戴型显示装置(Head MountedDisplay：HMD)为了对多个装置的显示画面进行合并，接收外部装置所发送的显示图像而显示在显示部中。

专利文献1：日本特开2015-227919公报

专利文献1所公开的结构以通过HMD来显示全部显示图像为前提，能够在HMD的显示中对外部装置的显示图像进行合并。与此相对，在以往的提案中并没有与不同于显示装置的外部装置相对应地对显示装置的显示进行控制的方法的例子。

发明内容

本发明是鉴于上述情况而完成的，其目的在于，与外部装置相对应地对显示装置的显示进行控制。

为了解决上述课题，本发明的显示系统具有：电子设备，其具有第1显示部；以及显示装置，其具有第2显示部，所述显示装置具有：所述第2显示部，其构成为能够看到外景，与所述外景重叠地显示图像；以及显示控制部，其使所述第2显示部显示基于从所述电子设备输入的数据的图像，该显示系统检测所述电子设备的所述第1显示部相对于所述显示装置的位置，在所述第1显示部相对于所述显示装置的位置包含在通过所述第2显示部看到的所述外景的范围内的情况下，对所述第2显示部的显示进行调整。

根据本发明，由于与电子设备和显示装置的位置关系对应地对第2显示部的显示进行调整，所以能够与作为外部装置的电子设备的位置相对应地控制显示装置的显示状态。

并且，关于本发明，所述第2显示部是通过使外部光透过而能够看到所述外景的透过型的显示部，在所述第1显示部相对于所述显示装置的位置包含在通过所述第2显示部看到的所述外景的范围内的情况下，与透过所述第2显示部看到的所述第1显示部相对应地，对所述第2显示部的显示区域中的图像的显示位置、显示尺寸以及形状中的至少任意一方进行调整。

根据该结构，能够适当调整透过第2显示部看到第1显示部的情况下的可见性。

并且，关于本发明，所述第2显示部佩戴于使用者的头部，具有朝向所述使用者的左眼发出图像光的左眼用显示部、和朝向所述使用者的右眼发出图像光的右眼用显示部，在所述第1显示部包含在透过所述第2显示部看到的所述外景内的情况下，与所述第1显示部的位置对应地对显示于所述第2显示部的图像的会聚角进行调整。

根据该结构，能够与第1显示部的位置对应地对使用者观看第2显示部的显示图像的距离进行调整。

并且，关于本发明，在所述第1显示部相对于所述显示装置的位置未包含在透过所述第2显示部看到的所述外景内的情况下，使显示于所述第2显示部的图像的会聚角成为规定的初始状态。

根据该结构，能够在透过第2显示部看到第1显示部的情况和看不到第1显示部的情况下适当地切换第2显示部的显示状态。

并且，关于本发明，通过对所述左眼用显示部和所述右眼用显示部的显示位置进行控制，对显示于所述第2显示部的图像的会聚角进行调整。

根据该结构，能够通过对显示位置进行控制来容易地调整使用者观看第2显示部的显示图像的距离。

并且，关于本发明，在所述第1显示部包含在透过所述第2显示部看到的所述外景内的情况下，与所述第1显示部的位置对应地对所述左眼用显示部和所述右眼用显示部中的虚像的焦点位置进行调整。

根据该结构，能够通过调整虚像的焦点位置来调整使用者观看第2显示部的显示图像的距离。

并且，关于本发明，所述电子设备具有电子设备控制部，当在所述显示装置中透过所述第2显示部看到的所述外景内包含所述第1显示部的情况下，该电子设备控制部使所述第1显示部的显示成为第1显示状态，当在所述显示装置中透过所述第2显示部看到的所述外景内不包含所述第1显示部的情况下，该电子设备控制部使所述第1显示部的显示成为第2显示状态，所述电子设备控制部在所述第2显示状态下执行如下控制中的任意一个控制：使所述第1显示部的显示成为不显示的控制以及使所述第1显示部的亮度成为比所述第1显示状态低的亮度的控制。

根据该结构，通过电子设备控制部的控制，与电子设备和显示装置的位置关系对应地对电子设备的第1显示部的显示状态进行控制。由此，能够与电子设备和显示装置的位置关系对应地对电子设备的第1显示部的显示状态进行适当调整。

并且，关于本发明，能够切换地执行外部操作模式和通常操作模式，在该外部操作模式下，根据对所述显示装置的操作来控制所述电子设备的动作，在该通常操作模式下，不进行基于对所述显示装置的操作的、所述电子设备的动作控制，在所述外部操作模式下，根据所述第1显示部相对于所述显示装置的位置来执行所述第1显示部的显示控制，在所述通常操作模式下，执行如下控制中的任意一个控制：使所述第1显示部的显示成为不显示的控制以及使所述第1显示部的亮度成为比所述外部操作模式低的亮度的控制。

根据该结构，能够与不根据对显示装置的操作来控制电子设备的动作的情况、和根据对显示装置的操作来控制电子设备的动作的情况分别对应地，进行与电子设备的位置对应的第2显示部的显示控制。

并且，关于本发明，所述电子设备具有：位置检测部，其求出所述第1显示部相对于所述显示装置的位置；以及影像处理部，其对向所述显示装置输出的数据进行处理，在所述位置检测部所检测出的所述第1显示部的位置包含在通过所述第2显示部看到的所述外景的范围内的情况下，所述影像处理部与透过所述第2显示部看到的所述第1显示部相对应地，对所述第2显示部的显示区域中的图像的显示位置、显示尺寸以及形状中的至少任意一方进行调整。

根据该结构，能够利用电子设备的功能，与电子设备的位置相对应地对显示装置的显示状态进行控制。

并且，为了解决上述课题，在本发明的显示系统的控制方法中，该显示系统具有：电子设备，其具有第1显示部；以及显示装置，其具有第2显示部，该第2显示部构成为能够看到外景，与所述外景重叠地显示图像，在该显示系统的控制方法中，在所述第2显示部中显示基于从所述电子设备输入到所述显示装置的数据的图像，对所述电子设备的所述第1显示部相对于所述显示装置的位置进行检测，在所述第1显示部相对于所述显示装置的位置包含在通过所述第2显示部看到的所述外景的范围内的情况下，对所述第2显示部的显示进行调整。

根据本发明，与电子设备和显示装置的位置关系对应地对第2显示部的显示进行调整。由此，能够与电子设备的位置相对应地控制显示装置的显示。

并且，为了解决上述课题，本发明的显示装置具有：位置检测部，其以具有第1显示部的电子设备为对象，对所述第1显示部的位置进行检测；第2显示部，其构成为能够看到外景，与所述外景重叠地显示图像；以及显示控制部，其使所述第2显示部显示图像，在所述位置检测部所检测出的所述第1显示部的位置包含在通过所述第2显示部看到的所述外景的范围内的情况下，所述显示控制部对所述第2显示部的显示进行调整。

根据本发明，显示装置根据电子设备和显示装置的位置关系对第2显示部的显示进行调整。由此，能够与作为外部装置的电子设备的位置相对应地控制显示装置的显示。

并且，为了解决上述课题，在本发明的显示装置的控制方法中，该显示装置具有显示部，该显示部构成为能够看到外景，与所述外景重叠地显示图像，在该显示装置的控制方法中，使所述显示部显示图像，对具有显示画面的电子设备的所述显示画面的位置进行检测，在检测出的所述显示画面的位置包含在通过所述显示部看到的所述外景的范围内的情况下，对所述显示部的显示进行调整。

根据本发明，显示装置根据电子设备和显示装置的位置关系对第2显示部的显示进行调整。由此，能够与作为外部装置的电子设备的位置相对应地控制显示装置的显示。

本发明也可以通过上述显示系统、显示系统的控制方法、显示装置以及显示装置的控制方法以外的各种方式实现。例如，能够通过用于使计算机执行上述控制方法的程序、记录了上述程序的记录介质、分发上述程序的服务器装置、传送上述程序的传送介质、将上述程序具体化在载波内的数据信号等方式来实现。

附图说明

图1是构成显示系统的HMD和PC的外观图。

图2是示出HMD的光学系统的结构的图。

图3是从使用者的头部侧观察到的图像显示部的主要部分立体图。

图4是示出HMD的显示部与拍摄范围之间的对应的说明图。

图5是构成显示系统的各部分的框图。

图6是示出求出PC相对于图像显示部的相对位置的处理的说明图。

图7是示出显示系统的动作的流程图。

图8是示出主机设备显示模式的显示方式例的图。

图9是示出HMD显示模式的显示方式例的图。

图10是示出HMD显示模式的另一显示方式例的图。

图11是示出显示系统的动作的流程图。

图12是构成第2实施方式的显示系统的各部分的框图。

图13是示出第2实施方式的显示系统的动作的流程图。

标号说明

2：线缆；2A：HDMI线缆；2B：USB线缆；10：连接装置；10A：控制装置；11、11A、11B、11C：连接器；20：图像显示部(第2显示部)；22：右显示单元(右眼用显示部)；24：左显示单元(左眼用显示部)；61：照相机；64：距离传感器；65：照度传感器；67：LED指示器；100、100A：HMD(显示装置)；110：I/F部；120：控制部；121：控制部；123：位置检测部；124：传感器控制部；125：图像调整部(影像处理部)；126：电源控制部；130：非易失性存储部；140：操作部；145：连接部；201：显示图像；217：温度传感器；235：6轴传感器；237：磁传感器；239：温度传感器；261：半透半反镜；281：半透半反镜；300：PC(电子设备)；310：控制部(电子设备控制部)；311：输入输出控制部；312：检测值取得部；313：位置检测部；315：图像调整部(影像处理部)；320：非易失性存储部；321：内容数据；330：显示部(第1显示部、显示画面)；331：显示面板；332：触摸传感器；341：I/F部；345：通信部；VA：显示区域；VR：视野。

具体实施方式

[1.第1实施方式]

[1-1.显示系统的结构]

图1是示出应用了本发明的第1实施方式的显示系统1的结构的图。

显示系统1具有HMD(Head Mounted Display：头部佩戴型显示装置)100和作为HMD100的外部装置的PC(Personal Computer：个人计算机)300。

HMD 100是具有图像显示部20(第2显示部)和连接装置10的显示装置，其中，该图像显示部20在佩戴于使用者(用户)的头部的状态下令使用者看到虚像，该连接装置10对图像显示部20进行控制。连接装置10在箱形的外壳(也称为壳体或主体)上具有多个连接器11。图像显示部20和连接装置10通过连接线缆40来连接。

在图1的例子中，连接装置10具有3个连接器11A、11B、11C。在以下的说明中，在不区分连接器11A、11B、11C的情况下统称为连接器11。连接器11是用于连接通信线缆的有线接口，连接装置10通过该通信线缆与外部装置连接。连接器11A、11B、11C例如是依照公知的通信接口标准的连接器，可以是相同形状的连接器，也可以是不同种类的连接器。在本实施方式中，作为一例，将连接器11A设为依照HDMI(注册商标)(High Definition MultimediaInterface：高清多媒体接口)标准的连接器。并且，将连接器11B设为USB(UniversalSerial Bus：通用串行总线)-TypeC连接器。并且，将连接器11C设为MicroUSB连接器。

在图1的例子中，连接装置10和PC 300通过线缆2来连接。线缆2由HDMI线缆2A和USB线缆2B构成，其中，该HDMI线缆2A将PC 300和连接器11A连接起来，该USB线缆2B将PC300和连接器11B连接起来。在该例中，PC 300通过影像传送用的HDMI接口和数据通信用的USB接口与连接装置10连接。

PC 300是具有显示图像的显示部330的计算机，相当于本发明的电子设备。优选PC300是便携式计算机，可列举出平板型计算机、笔记本型计算机、智能手机等。图1的PC 300在平板状的主体表面具有显示部330(第1显示部、显示画面)。显示部330具有液晶显示面板、有机EL(Electro Luminescent：电致发光)显示面板等显示面板331(图5)，在显示面板331的表面上设置有检测用户的接触操作的触摸传感器332(图5)。

PC 300相对于HMD 100作为外部设备来发挥功能。外部设备只要是具有显示画面，并具有在显示画面上显示图像的功能的电子器件即可，在本实施方式中示出的PC 300只是一个例子。

图像显示部20是佩戴于使用者的头部的佩戴体，是所谓的头部佩戴型显示器(HMD)。也就是说，HMD 100采用了将作为HMD主体的图像显示部20与用于连接PC 300等外部装置的连接装置10连接起来的结构。图像显示部20在本实施方式中具有眼镜形状。图像显示部20的主体具有右保持部21、左保持部23以及前部框架27，在该主体上具有右显示单元22(右眼用显示部)、左显示单元24(左眼用显示部)、右导光板26以及左导光板28。

右保持部21和左保持部23分别从前部框架27的两端部向后方延伸，如眼镜的镜腿(边撑)那样，将图像显示部20保持于使用者的头部。这里，将前部框架27的两端部中的、在图像显示部20的佩戴状态下位于使用者右侧的端部设为端部ER，将位于使用者左侧的端部设为端部EL。右保持部21设置为从前部框架27的端部ER延伸至在图像显示部20的佩戴状态下与使用者的右侧头部对应的位置处。左保持部23设置为从端部EL延伸至在图像显示部20的佩戴状态下与使用者的左侧头部对应的位置处。

右导光板26和左导光板28设置于前部框架27。右导光板26在图像显示部20的佩戴状态下位于使用者的右眼的眼前，使右眼看到图像。左导光板28在图像显示部20的佩戴状态下位于使用者的左眼的眼前，使左眼看到图像。

前部框架27具有将右导光板26的一端与左导光板28的一端互相连结的形状，该连结位置在使用者佩戴图像显示部20的佩戴状态下与使用者的眉间对应。前部框架27可以在与右导光板26和左导光板28的连结位置处，设置有在图像显示部20的佩戴状态下抵靠于使用者的鼻子的鼻托部。在该情况下，能够通过鼻托部、右保持部21和左保持部23将图像显示部20保持于使用者的头部。并且，可以对右保持部21和左保持部23连结在图像显示部20的佩戴状态下与使用者的头部后侧接触的带(省略图示)，在该情况下，能够通过带将图像显示部20保持于使用者的头部。

右显示单元22和左显示单元24是分别对光学单元和外围电路进行单元化而得的模块。

右显示单元22是通过右导光板26来显示图像的单元，其设置于右保持部21，在佩戴状态下位于使用者的右侧头部附近。左显示单元24是通过左导光板28来显示图像的单元，其设置于左保持部23，在佩戴状态下位于使用者的左侧头部附近。另外，也将右显示单元22和左显示单元24统一简称为“显示驱动部”。

右导光板26和左导光板28是由光透过性的树脂等形成的光学部，将右显示单元22和左显示单元24所输出的图像光引导至使用者的眼睛。右导光板26和左导光板28例如是棱镜。

也可以在右导光板26和左导光板28的表面上设置调光板(省略图示)。调光板是透过率根据光的波段而不同的薄板状的光学元件，作为所谓的波长滤波器来发挥功能。调光板例如被配置成将前部框架27的正面侧(与使用者的眼睛侧相反的一侧)覆盖。通过适当选择该调光板的光学特性，能够对可见光、红外光和紫外光等任意波段的光的透过率进行调整，能够对从外部入射到右导光板26和左导光板28并透过右导光板26和左导光板28的外部光的光量进行调整。

图像显示部20将右显示单元22和左显示单元24所分别生成的图像光引导至右导光板26和左导光板28，利用该图像光令使用者看到虚像，从而显示出图像。在外部光从使用者的前方透过右导光板26和左导光板28入射到使用者的眼睛的情况下，构成虚像的图像光和外部光入射到使用者的眼睛，虚像的可见性会受到外部光的强度影响。因此，例如能够通过在前部框架27上安装调光板，并适当选择或调整调光板的光学特性来调整虚像被看到的容易度。在典型的例子中，可以使用如下的调光板：该调光板具有使佩戴了HMD 100的使用者至少能够看到外部景色的程度的光透过性。并且，当使用调光板时，可以期待如下的效果：保护右导光板26和左导光板28，从而抑制右导光板26和左导光板28的损伤或污物的附着等。也可以是，调光板能够分别相对于前部框架27或右导光板26和左导光板28进行拆装，也可以更换多种调光板来进行安装，还可以省略调光板。

图像显示部20的右显示单元22和左显示单元24分别与连接装置10连接。在HMD100中，左保持部23与连接线缆40连接，与该连接线缆40相连的布线布设在图像显示部20内部，右显示单元22和左显示单元24分别与连接装置10连接。

照相机61配设于图像显示部20的前部框架27。照相机61在前部框架27的前表面上设置于不遮挡透过右导光板26和左导光板28的外部光的位置处，优选对使用者在佩戴着图像显示部20的状态下所看到的外景方向进行拍摄。在图1的例子中，照相机61配置于前部框架27的端部ER侧。照相机61可以配置于端部EL侧，也可以配置于右导光板26与左导光板28的连结部。

照相机61是具有CCD、CMOS等摄像元件以及摄像镜头等的数码照相机，本实施方式的照相机61是单眼照相机，但也可以由立体照相机构成。照相机61拍摄HMD100的正面侧方向(换言之，佩戴着HMD 100的状态下的使用者的视野方向)的至少一部分外景。外景也可称为真实空间。

换言之，照相机61拍摄与使用者的视野重叠的范围或方向，拍摄使用者所注视的方向。照相机61的视场角的宽度能够适当设定，但在本实施方式中，如后述那样，包含使用者透过右导光板26和左导光板28看到的外界。更优选照相机61的拍摄范围被设定为能够拍摄可透过右导光板26和左导光板28看到的使用者的整个视野。

HMD 100具有距离传感器64。距离传感器64配置在右光学像显示部26和左光学像显示部28之间的边界部分。在使用者佩戴着图像显示部20的状态下，距离传感器64的位置在水平方向上处于使用者的双眼的大致中间，在铅直方向上处于使用者的双眼的上方。

距离传感器64对与位于预先设定的测量方向上的测量对象物之间的距离进行检测。本实施方式的距离传感器64的测量方向是HMD 100的正面侧方向，与照相机61的拍摄方向重叠。

图2是示出HMD 100的光学系统的结构的主要部分俯视图。为了便于说明，在图2中图示了使用者的左眼LE和右眼RE。

如图2所示，右显示单元22和左显示单元24构成为左右对称。作为令使用者的右眼RE看到图像的结构，右显示单元22具有发出图像光的OLED(Organic Light EmittingDiode：有机电致发光二极管)单元221。并且，还具有右光学系统251，该右光学系统251具有对OLED单元221发出的图像光L进行引导的透镜组等。图像光L被右光学系统251引导至右导光板26。

OLED单元221具有OLED面板223以及驱动OLED面板223的OLED驱动电路225。OLED面板223是将通过有机电致发光而发光并分别发出R(红)、G(绿)、B(蓝)的色光的发光元件配置成矩阵状而构成的，是自发光型的显示面板。OLED面板223具有以各包含一个R、G、B的元件的单位为1个像素的多个像素，通过配置成矩阵状的像素来形成图像。

OLED驱动电路225根据从连接装置10输入的图像数据来执行OLED面板223所具有的发光元件的选择和对发光元件的通电，从而使OLED面板223的发光元件发光。OLED驱动电路225通过粘接等固定于OLED面板223的反面、即发光面的反面侧。OLED驱动电路225例如可以由驱动OLED面板223的半导体器件构成，并安装于固定在OLED面板223的反面的基板(省略图示)上。在该基板上安装有温度传感器217。

另外，OLED面板223可以采用如下结构：将发出白色光的发光元件配置为矩阵状，并重叠配置与R、G、B的各色对应的滤色器。并且，除了分别放射R、G、B的色光的发光元件之外，也可以使用具有发出W(白色)光的发光元件的WRGB结构的OLED面板223。

右光学系统251具有使从OLED面板223射出的图像光L成为平行状态的光束的准直透镜。通过准直透镜而成为平行状态的光束的图像光L入射到右导光板26。在右导光板26的内部的引导光的光路上形成有对图像光L进行反射的多个反射面。图像光L在右导光板26的内部经过多次反射而被引导至右眼RE侧。在右导光板26上形成有位于右眼RE的眼前的半透半反镜261(反射面)。图像光L被半透半反镜261反射后从右导光板26朝向右眼RE射出，该图像光L在右眼RE的视网膜上成像，从而令使用者看到图像。

并且，作为令使用者的左眼LE看到图像的结构，左显示单元24具有发出图像光的OLED单元241和左光学系统252，该左光学系统252具有对OLED单元241发出的图像光L进行引导的透镜组等。图像光L被左光学系统252引导至左导光板28。

OLED单元241具有OLED面板243以及驱动OLED面板243的OLED驱动电路245。OLED面板243是与OLED面板223同样地构成的自发光型的显示面板。OLED驱动电路245根据从连接装置10输入的图像数据，执行OLED面板243所具有的发光元件的选择和对发光元件的通电，从而使OLED面板243的发光元件发光。OLED驱动电路245通过粘接等固定于OLED面板243的反面、即发光面的反面侧。OLED驱动电路245例如可以由驱动OLED面板243的半导体器件构成，并安装于固定在OLED面板243的反面的基板(省略图示)上。在该基板上安装有温度传感器239。

左光学系统252具有使从OLED面板243射出的图像光L成为平行状态的光束的准直透镜。通过准直透镜而成为平行状态的光束的图像光L入射到左导光板28。左导光板28是形成有对图像光L进行反射的多个反射面的光学元件(例如棱镜)。图像光L在左导光板28的内部经过多次反射而被引导至左眼LE侧。在左导光板28上形成有位于左眼LE的眼前的半透半反镜281(反射面)。图像光L被半透半反镜281反射后从左导光板28朝向左眼LE射出，该图像光L在左眼LE的视网膜上成像，从而令使用者看到图像。

HMD 100能够作为透视型的显示装置来发挥功能。即，被半透半反镜261反射后的图像光L和透过了右导光板26的外部光OL入射到使用者的右眼RE。并且，被半透半反镜281反射后的图像光L和透过了半透半反镜281的外部光OL入射到左眼LE。这样，HMD 100使在内部处理后的图像的图像光L与外部光OL重叠地入射到使用者的眼中，对于使用者而言，透过右导光板26和左导光板28看到外景，并且与该外景重叠地看到了基于图像光L的图像。半透半反镜261、281是对右显示单元22和左显示单元24所分别输出的图像光进行反射而取出图像的图像取出部，也可以称为显示部。

另外，也将左光学系统252和左导光板28统称为“左导光部”，将右光学系统251和右导光板26统称为“右导光部”。右导光部和左导光部的结构并不限定于上述的例子，只要使用图像光在使用者的眼前形成虚像，则可以使用任意的方式，例如，可以使用衍射光栅，也可以使用半透过反射膜。

图3是从使用者的头部侧观察到的图像显示部20的主要部分立体图，为图像显示部20的与使用者的头部接触的一侧(换言之是使用者的右眼RE和左眼LE所看到的一侧)。换言之，可以看到右导光板26和左导光板28的反面侧。

在图3中，向使用者的右眼RE照射图像光的半透半反镜261和向左眼LE照射图像光的半透半反镜281被看作是大致四边形的区域。并且，包含半透半反镜261、281的右导光板26和左导光板28的整体如上述那样使外部光透过。因此，使用者透过右导光板26和左导光板28的整体而看到外景，并且在半透半反镜261、281的位置处看到矩形的显示图像。

图4是示出HMD 100的图像显示部20与拍摄范围之间的对应的说明图。

照相机61如上述那样在图像显示部20中配置在右侧的端部，拍摄使用者的双眼所朝向的方向(即，使用者的前方)。

图4是将照相机61的位置与使用者的右眼RE和左眼LE一起俯视地示意性示出的图。将照相机61的视场角(拍摄范围)用C表示。另外，在图4中示出了水平方向的视场角C，但照相机61的实际视场角与普通的数码照相机同样也沿上下方向扩展。

照相机61的光轴处于包含右眼RE的视线方向RD和左眼LE的视线方向LD的方向上。使用者在佩戴着HMD 100的状态下能够看到的外景不限于无限远。例如，如图4所示，当使用者用双眼注视对象物OB时，使用者的视线RD、LD朝向对象物OB。在该情况下，使用者到对象物OB的距离在多数情况下为30cm～10m左右，更多情况下为1m～4m左右。因此，能够确定在通常使用HMD 100时的从使用者到对象物OB的距离的上限和下限的基准。该基准可以通过调查或实验求得，也可以由使用者来设定。照相机61的光轴以及视场角优选被设定为：在通常使用时的与对象物OB之间的距离相当于所设定的上限的基准和下限的基准的情况下，使得该对象物OB包含在视场角内。

并且，一般情况下，人的视野角在水平方向上大约为200度、在垂直方向上大约为125度，其中，信息接受能力优异的有效视野在水平方向上为30度左右、垂直方向上为20度左右。此外，人所注视的注视点能够迅速稳定地看到的稳定注视视野在水平方向上为60度～90度，在垂直方向上为45度～70度左右。在该情况下，当注视点为图4的对象物OB时，以视线RD、LD为中心，在水平方向上为30度、在垂直方向上为20度左右的范围是有效视野。并且，在水平方向上为60度～90度、在垂直方向上为45度～70度左右的范围是稳定注视视野，在水平方向上约为200度、在垂直方向上约为125度是视野角。此外，可以将使用者透过图像显示部20的右导光板26和左导光板28而看到的实际视野称为真实视野(FOV：Field OfView)。在图1和图2所示的本实施方式的结构中，真实视野相当于使用者透过右导光板26和左导光板28而看到的实际视野。真实视野比视野角和稳定注视视野窄，但比有效视野宽。

优选照相机61的视场角C能够拍摄比使用者的视野宽的范围，具体来说，优选视场角C至少比使用者的有效视野宽。并且，更优选视场角C比使用者的真实视野宽。进一步优选视场角C比使用者的稳定注视视野宽，最优选视场角C比使用者的双眼的视野角宽。

照相机61也可以构成为具有所谓的广角镜头来作为摄像镜头，从而能够拍摄较宽的视场角。广角镜头可以包含被称为超广角镜头、准广角镜头的镜头，并且照相机61可以构成为具有单焦点镜头，也可以具有变焦镜头，还可以具有由多个镜头构成的镜头组。

并且，如上述那样，本实施方式的照相机61在图像显示部20的前部框架27上配置在端部ER侧，但也可以配置在端部EL侧，还可以配置在右导光板26与左导光板28的连结部。在该情况下，照相机61在左右方向上的位置与图4的位置不同，视场角C根据照相机61的位置来适当设定。具体来说，在照相机61位于端部EL侧的情况下，视场角C朝向图4中的右斜前侧。并且，例如在照相机61配置于右导光板26与左导光板28的连结部的情况下，视场角C朝向图像显示部20的正面。

在使用者用右眼RE和左眼LE观察物体的情况下，通过右眼RE的视线方向与左眼LE的视线方向所成的角度来感知并识别与物体的距离。该角度被称为会聚角，例如在图4所示的观察对象物OB的情况下，会聚角为PA。

使用者观察显示于半透半反镜261、281的图像的情况下的会聚角是用右眼RE观察半透半反镜261的图像的情况下的视线方向、与用左眼LE观察半透半反镜281的图像的情况下的视线方向所成的角度。该情况下的会聚角的大小是根据半透半反镜261、281中的图像的显示位置来确定的。因此，通过对右显示单元22和左显示单元24显示图像的显示位置进行调整，能够控制会聚角，从而对使用者在视觉上识别的距离感进行控制。例如，能够调整使用者识别出由右显示单元22和左显示单元24显示的图像的距离感(视觉距离)。

并且，距离传感器64在右光学像显示部26和左光学像显示部28的中央朝向前方配置。

[1-2.显示系统的控制系统]

图5是示出构成显示系统1的HMD 100和PC 300的结构的框图。

如上述那样，HMD 100是通过连接线缆40将连接装置10和图像显示部20连接起来而构成的。

图像显示部20如上述那样具有右显示单元22和左显示单元24。右显示单元22具有显示单元基板210。在显示单元基板210上安装有连接部211、接收部(Rx)213以及EEPROM215，其中，该连接部211与连接线缆40连接，该接收部(Rx)213接收经由连接部211从连接装置10输入的数据。

连接部211将接收部213、EEPROM 215、温度传感器217、照相机61、距离传感器64、照度传感器65以及LED指示器67与连接装置10连接起来。

EEPROM(Electrically Erasable Programmable Read-Only Memory：电可擦可编程只读存储器)215对各种数据进行非易失性存储。EEPROM 215例如存储与图像显示部20所具有的OLED单元221、241的发光特性或显示特性相关的数据、与右显示单元22或左显示单元24所具有的传感器的特性相关的数据等。具体来说，存储与OLED单元221、241的伽马校正相关的参数、对温度传感器217、239的检测值进行补偿的数据等。这些数据通过HMD 100的工厂出货时的检查而生成，并被写入EEPROM 215中。EEPROM 215所存储的数据能够通过控制部120来读取。

照相机61根据经由连接部211输入的信号来执行拍摄，并将拍摄图像数据输出到连接部211。

如图1所示，照度传感器65设置于前部框架27的端部ER，配置成接收来自佩戴着图像显示部20的使用者的前方的外部光。照度传感器65输出与受光量(受光强度)对应的检测值。

如图1所示，LED指示器67在前部框架27的端部ER配置于照相机61的附近。LED指示器67在照相机61执行拍摄的过程中点亮，从而告知处于拍摄中。

温度传感器217检测温度，并输出与检测温度对应的电压值或电阻值来作为检测值。温度传感器217安装于OLED面板223(图3)的反面侧。温度传感器217例如可以与OLED驱动电路225安装于同一基板。通过该结构，温度传感器217主要检测OLED面板223的温度。

距离传感器64执行距离检测，将表示检测结果的信号经由连接部211输出到连接装置10。距离传感器64例如可以使用红外线深度(Depth)传感器、超声波距离传感器、TOF(Time Of Flight：飞行时间)距离传感器、由图像检测和声音检测组合而成的距离检测单元等。并且，也可以构成为对通过立体照相机或单眼照相机的立体拍摄而得到的图像进行处理来检测距离。

在图5中图示了1个距离传感器64，但图4所示的一对距离传感器64、64也可以同时进行动作。并且，一对距离传感器64、64也可以构成为分别与连接部211连接，独立地进行动作。

接收部213接收经由连接部211从连接装置10传送的显示用的图像数据，并输出到OLED单元221。

左显示单元24具有显示单元基板230。在显示单元基板230上安装有连接部231和接收部(Rx)233，其中，该连接部231与连接线缆40连接，该接收部(Rx)233接收经由连接部231从连接装置10输入的数据。并且，在显示单元基板230上安装有6轴传感器235和磁传感器237。

连接部231将接收部233、6轴传感器235、磁传感器237以及温度传感器239与连接装置10连接。

6轴传感器235是具有3轴加速度传感器和3轴陀螺仪(角速度)传感器的运动传感器(惯性传感器)。6轴传感器235也可以采用将上述传感器模块化而得的IMU(InertialMeasurement Unit：惯性测量单元)。磁传感器237例如是3轴的地磁传感器。

温度传感器239检测温度，并输出与检测温度对应的电压值或电阻值作为检测值。温度传感器239安装于OLED面板243(图3)的反面侧。温度传感器239例如也可以与OLED驱动电路245安装于同一基板。通过该结构，温度传感器239主要检测OLED面板243的温度。

并且，温度传感器239也可以内置于OLED面板243或OLED驱动电路245。并且，上述基板也可以是半导体基板。具体来说，在将OLED面板243作为Si-OLED而与OLED驱动电路245等一起安装成集成半导体芯片上的集成电路的情况下，也可以在该半导体芯片上安装温度传感器239。

图像显示部20的各部分通过由连接线缆40从连接装置10供给的电力来进行动作。图像显示部20可以具有电源电路(省略图示)，该电源电路用于对由连接线缆40供给的电力进行电压转换或分配。

连接装置10具有I/F(接口)部110、控制部120、显示控制部122、传感器控制部124、电源控制部126、非易失性存储部130、操作部140以及连接部145。作为取得部的I/F部110具有连接器11A、11B、11C。并且，I/F部110也可以具有接口电路(省略图示)，该接口电路与连接器11A、11B、11C连接而执行依据各种通信标准的通信协议。并且，I/F部110也可以构成为经由连接器11A、11B、11C接受电力。

I/F部110例如可以具有能够连接外部存储装置或存储介质的存储卡用接口等，也可以使I/F部110由无线通信接口构成。I/F部110例如也可以是安装有连接器11A、11B、11C和接口电路的接口基板。并且，连接装置10的控制部120、显示控制部122、传感器控制部124、电源控制部126也可以构成为安装在连接装置主基板(省略图示)上。在该情况下，也可以在连接装置主基板上安装I/F部110的连接器11A、11B、11C和接口电路。

控制部120对连接装置10的各部分进行控制。控制部120具有CPU(CentralProcessing Unit：中央处理单元)或微计算机等处理器(省略图示)。控制部120利用处理器来执行程序，从而通过软件与硬件的协作对HMD 100的各部分进行控制。并且，控制部120可以由程序化的硬件构成。控制部120也可以具有与处理器一起形成工作区的RAM(RandomAccess Memory：随机存取存储器)、存储控制程序的ROM(Read Only Memory：只读存储器)。并且，也可以是将处理器、RAM和ROM集成在一起的半导体器件。

控制部120与非易失性存储部130、操作部140和连接部145连接。

显示控制部122执行用于通过图像显示部20来显示基于输入到I/F部110的图像数据或影像数据的图像的各种处理。例如，显示控制部122执行帧的截取、分辨率转换(缩放)、中间帧生成、帧率转换等各种处理。显示控制部122将与右显示单元22的OLED单元221和左显示单元24的OLED单元241分别对应的图像数据输出到连接部145。输入到连接部145的图像数据经由连接线缆40被传送给连接部211、231。

例如，在输入到I/F部110的影像数据是3D(立体)影像数据的情况下，显示控制部122执行3D影像解码。在3D影像解码的处理中，显示控制部122基于3D影像数据生成右眼用的帧和左眼用的帧。关于输入到I/F部110的3D影像数据的格式，例如，可列举出并排格式、上下格式、帧封装格式等，但也可以是3D模型数据。

显示控制部122与I/F部110所具有的连接器11A和连接器11B连接。显示控制部122将输入到连接器11A的影像数据和输入到连接器11B的影像数据作为对象来执行处理。并且，显示控制部122也可以具有与连接于连接器11A或连接器11B的装置之间收发与影像数据的传送相关的各种控制数据的功能。

传感器控制部124对照相机61、距离传感器64、照度传感器65、温度传感器217、6轴传感器235、磁传感器237以及温度传感器239进行控制。具体来说，传感器控制部124根据控制部120的控制来进行各传感器的采样周期的设定和初始化，按照各传感器的采样周期来执行对各传感器的通电、控制数据的发送、检测值的取得等。

并且，传感器控制部124与I/F部110的连接器11B连接，在预先设定的时刻将与从各传感器取得的检测值相关的数据输出到连接器11B。由此，与连接器11B连接的装置能够取得HMD 100的各传感器的检测值、照相机61的拍摄图像数据。传感器控制部124所输出的数据也可以是包含检测值的数字数据。并且，传感器控制部124也可以输出根据各传感器的检测值进行运算处理后的结果数据。例如，传感器控制部124对多个传感器的检测值进行合并处理，作为所谓的传感器融合(sensor fusion)处理部来发挥功能。通过执行传感器融合，传感器控制部124输出根据传感器的检测值而求出的数据(例如，图像显示部20的运动轨迹数据、图像显示部20的相对坐标数据等)。传感器控制部124也可以具有与连接于连接器11B的装置之间收发与数据传送相关的各种控制数据的功能。

显示控制部122和/或传感器控制部124也可以利用CPU等处理器执行程序，从而利用软件与硬件的协作来实现。即，显示控制部122和传感器控制部124由处理器构成，通过执行程序来执行上述动作。在该例中，显示控制部122和传感器控制部124也可以通过使构成控制部120的处理器执行程序来实现。换言之，控制部120、显示控制部122以及传感器控制部124也可以通过使处理器执行程序而发挥功能。这里，处理器也可另称为计算机。

并且，显示控制部122和传感器控制部124也可以由DSP(Digital SignalProcessor：数字信号处理器)或FPGA(Field Programmable Gate Array：现场可编程门阵列)等程序化的硬件构成。并且，也可以对显示控制部122和传感器控制部124进行集成而构成SoC(System-on-a-Chip：系统芯片)-FPGA。

电源控制部126与I/F部110所具有的连接器11B和连接器11C连接。电源控制部126根据从连接器11B、11C供给的电力，对连接装置10的各部分和图像显示部20进行电源供给。并且，也可以构成为在电源控制部126中内置电压转换电路(省略图示)，从而能够向连接装置10和图像显示部20的各部分供给不同的电压。电源控制部126也可以由逻辑电路或FPGA等程序化的半导体器件构成。并且，电源控制部126也可以由与显示控制部122和/或传感器控制部124共用的硬件(包含处理器)构成。

显示控制部122、传感器控制部124以及电源控制部126可以具有用于进行数据处理的工作存储器，也可以利用控制部120所具有的RAM(省略图示)的工作区来进行处理。

控制部120从右显示单元22所具有的EEPROM 215读出数据，根据读出的数据来设定显示控制部122和传感器控制部124的动作。并且，控制部120根据操作部140的操作使包括显示控制部122、传感器控制部124和电源控制部126在内的各部分进行动作。并且，控制部120对经由I/F部110与显示控制部122、传感器控制部124和电源控制部126连接的装置进行识别，并对显示控制部122、传感器控制部124和电源控制部126进行控制以执行与各装置相适应的动作。

并且，控制部120控制对LED指示器67进行通电的开始和停止。例如，与照相机61开始和停止拍摄的时机相对应地，使LED指示器67点亮或闪烁。

非易失性存储部130是非易失性地存储控制部120所处理的数据等的存储装置。非易失性存储部130例如是HDD(Hard Disk Drive：硬盘驱动器)等磁记录装置或使用了闪存等半导体存储元件的存储装置。

并且，连接装置10也可以具有可充电电池(省略图示)，构成为从该电池向连接装置10和图像显示部20的各部分供给电力。

PC 300具有控制部310、非易失性存储部320、显示部330、I/F(接口)部341以及通信部345。控制部310(电子设备控制部)具有CPU或微计算机等处理器(省略图示)，该控制部310利用该处理器来执行程序，从而对PC 300的各部分进行控制。控制部310也可以具有对由处理器(所谓的计算机)执行的控制程序进行非易失性存储的ROM以及构成处理器的工作区的RAM。

非易失性存储部320对由控制部310执行的程序和由控制部310处理的数据进行非易失性存储。非易失性存储部130例如是HDD等磁记录装置或使用了闪存等半导体存储元件的存储装置。

非易失性存储部320存储例如包含影像在内的内容的内容数据321。内容数据321是能够供控制部310进行处理的格式的文件，包含影像数据，也可以包含声音数据。

并且，非易失性存储部320存储作为控制部310所执行的基本控制程序的操作系统(OS)、以OS为平台进行动作的应用程序等。并且，非易失性存储部320存储当执行应用程序时要处理的数据或作为处理结果的数据。

显示部330所具有的显示面板331和触摸传感器332与控制部310连接。显示面板331根据控制部310的控制来显示各种图像。触摸传感器332检测触摸操作，将表示检测出的操作的数据输出到控制部310。触摸传感器332所输出的数据是表示触摸传感器332的操作位置的坐标数据等。

I/F部341是与HMD 100连接的接口，相当于本发明的输出部。I/F部341例如执行依据HDMI接口、USB接口等标准的通信。I/F部341具有用于连接线缆(例如，线缆2)的连接器(省略图示)和对连接器所传送的信号进行处理的接口电路(省略图示)。I/F部341是具有连接器和接口电路的接口基板，其与安装有控制部310的处理器等的主基板连接。或者，构成I/F部341的连接器和接口电路安装在PC 300的主基板上。在本实施方式中，I/F部341具有HDMI接口和USB接口，该I/F部341通过HDMI线缆2A和USB线缆2B与连接器11A、11B连接。控制部310例如利用HDMI线缆2A来输出影像数据，利用USB线缆2B从连接装置10接收与传感器的输出值相关的数据等。I/F部341能够独立地执行基于HDMI线缆2A的通信和基于USB线缆2B的通信。并且，I/F部341也可以是无线通信接口。在该情况下，I/F部341可以是在安装了包含RF部的通信电路的接口基板或主基板上所安装的电路。

通信部345是与HMD 100之间执行数据通信的通信接口。通信部345可以是能够连接线缆的有线通信接口，也可以是无线通信接口。例如，也可以是与Ethernet(注册商标)对应的有线LAN接口、或与IEEE802.11标准对应的无线LAN接口。

控制部310通过如上述那样执行程序而作为输入输出控制部311、检测值取得部312、位置检测部313以及图像调整部315来发挥功能。

输入输出控制部311检测使用者的输入。控制部310根据输入输出控制部311所检测出的输入，执行显示于显示部330的画面的切换等显示控制、应用程序的执行开始或结束等动作。并且，输入输出控制部311对基于I/F部341和通信部345的数据的输入输出进行控制。

控制部310执行用于检测输入的处理不同的两种工作模式。即，切换地执行主机设备显示模式和HMD显示模式，在该主机设备显示模式下，检测使用者对PC 300进行的输入操作，在该HMD显示模式下，将对HMD 100的操作检测为对PC 300的输入操作。主机设备显示模式与本发明的通常操作模式对应，HMD显示模式与本发明的外部操作模式对应。

在主机设备显示模式下，输入输出控制部311根据从触摸传感器332输入的数据来检测用户的输入。

在HMD显示模式下，输入输出控制部311取得输入到I/F部341的数据来作为表示对HMD 100的操作的操作数据。操作数据是从连接装置10的连接器11B经由USB接口输出的数据。操作数据的实体是HMD 100所具有的传感器的输出值或连接装置10对传感器的输出值进行处理后的数据。

检测值取得部312从通过I/F部341连接的连接装置10中取得与HMD 100所具有的各传感器的检测值相关的数据。检测值取得部312从连接装置10取得照相机61的拍摄图像数据以及与距离传感器64、照度传感器65、EEPROM 215、6轴传感器235、磁传感器237、温度传感器239等的检测值相关的数据。检测值取得部312所取得的数据是被传感器控制部124处理后的数据，也可以是包含各传感器的检测值的数据、被传感器控制部124统计处理后的数据。

位置检测部313根据检测值取得部312所取得的数据来检测HMD 100的位置。更详细来说，位置检测部313检测PC 300与图像显示部20的相对位置。这里，位置检测部313所检测的相对位置可以是图像显示部20和PC 300所存在的空间中的位置，也可以包含图像显示部20与显示部330的相对朝向。例如，也可以是表示以图像显示部20为基准的情况下的显示部330的位置和/或方向的信息。并且，例如，也可以是表示以PC 300为基准的情况下的图像显示部20的位置和/或方向的信息。并且，例如，也可以包含在图像显示部20和PC 300所存在的空间中设定的三维坐标系的坐标。

在后面对位置检测部313的位置检测进行叙述。

PC 300向连接装置10输出的影像数据除了再现内容数据321的影像数据之外，还可以是PC 300通过显示部330显示的画面的影像数据。在该情况下，连接装置10与显示部330显示相同的画面，进行所谓的镜像显示。

[1-3.显示系统的校准]

图6是示出求出PC 300相对于图像显示部20的相对位置的处理的说明图，尤其示出了校准处理。图7是示出显示系统1的动作的流程图，尤其示出了校准处理中的PC 300的动作。

在图6中，将使用者透过图像显示部20看到的视野用标号VR表示，将照相机61的拍摄范围用标号VC表示。在该例中，拍摄范围VC与视野VR重叠，但不一致。拍摄范围VC与视野VR也可以一致，拍摄范围VC也可以包含在视野VR中。

如图6所示，在照相机61的拍摄范围VC中存在PC 300的状态下，使用显示系统1来执行校准。

在本实施方式中，在显示部330中设定基准点P1，在图像显示部20中设定基准位置P2。基准点P1是使用者能够在视觉上识别的显示，是所谓的标记。PC 300能够通过图像处理从照相机61的拍摄图像数据中检测基准点P1。基准位置P2在图像显示部20中被设定为位置的基准，可以是假想的位置，也可以不存在表示基准位置P2的显示或物体。

基准点P1是可明显看到的物体或位置即可，不需要新设置作为基准点P1的显示或物体。例如，可以将显示部330的4个角部中的1个点设为基准点P1等、将显示部330的图案或形状的特定位置设为基准点P1。

图7是示出显示系统1的动作的流程图，示出了进行校准的PC 300的动作。

在校准中，使用者使头部或图像显示部20移动以使基准点P1位于在使用者的视野VR中预先设定的位置(步骤S11)。在视野VR中的设定位置与基准点P1重叠时，使用者对图像显示部20或PC 300进行用于确定位置的操作(步骤S12)。例如，使用者进行敲击图像显示部20的前部框架27的操作。能够利用6轴传感器235将该操作检测为加速度。并且，在图像显示部20搭载有敲击传感器(省略图示)的情况下，能够根据敲击传感器的检测值来检测该操作。步骤S12的操作也可以是由触摸传感器332检测的操作。并且，在步骤S12中，PC 300也可以检测基于声音的操作。即，在PC 300搭载有麦克风并且控制部310能够对由麦克风收集的声音进行处理的结构中，控制部310能够执行将声音转换成文本的声音识别处理，或者，检测出预先登记的模式下的声音的声音指令检测处理。在该结构中，控制部310也可以在步骤S12中将使用者所发出的声音检测为输入操作。

控制部310取得检测到步骤S12的操作时的照相机61的拍摄图像数据，从而求出照相机61的拍摄图像数据中的基准点P1的位置(步骤S13)。由此，照相机61的拍摄图像数据中的位置与佩戴着图像显示部20的使用者的视野VR中的位置是对应的。因此，当在照相机61的拍摄图像数据中呈现出PC 300的情况下，能够根据该拍摄图像数据来确定PC 300相对于视野VR的相对位置。

控制部310取得与6轴传感器235和磁传感器237的输出值相关的数据(步骤S14)。在步骤S14中取得的传感器的输出值表示基准点P1与视野VR的设定位置重叠的状态下的、图像显示部20的基准位置。例如，通过对6轴传感器235的输出值进行累积，能够求出图像显示部20从基准位置移动的方向和移动量。并且，根据磁传感器237的输出值，能够求出图像显示部20相对于图像显示部20的基准位置的相对方向。因此，能够求出图像显示部20与PC300的相对位置。

控制部310生成包含有在步骤S14中取得的输出值的校准数据，并将该校准数据存储于非易失性存储部320(步骤S15)，然后结束本处理。

例如，步骤S13和S15由位置检测部313来执行，步骤S14由检测值取得部312来执行。

在图7所示的校准处理中，使PC 300的基准点P1与视野VR的设定位置一致，从而与图像显示部相对于图像显示部的基准位置的相对位置关系对应起来。在该处理中生成的校准数据例如是表示基准点P1与视野VR的相对位置的基准的数据。在该校准中，不仅可以使视野VR的规定位置与基准点P1重叠，还可以在步骤S11中采用将PC 300配置成与图像显示部20分开预先设定的距离的方法。例如，也可以在步骤S11中通过图像显示部20来显示如下图像，该图像用于引导将PC 300放置在与图像显示部20分开规定的距离的位置。该图像可以是表示PC 300在分开了规定的距离的位置处被看到时的尺寸的直线、矩形、点等标记。使用者只要对PC 300与自己的相对位置进行调整以使PC 300被看成与图像显示部20的标记重叠，然后使基准点P1与规定位置一致来进行步骤S12的操作即可。

[1-4.HMD的显示方式]

图8、图9以及图10是分别示出本实施方式的显示系统1的显示方式例的图。在图8、图9以及图10中用视野VR来表示佩戴着图像显示部20的使用者能够透过图像显示部20看到的视野。并且，在这些图所示的例子中，图像显示部20将图像显示为使用者能够看到的显示区域与视野VR的大小和位置相同并重叠。本发明也能够应用在图像显示部20的显示区域比视野VR小的结构中。

图8示出了主机设备显示模式的显示系统1的显示方式。主机设备显示模式是根据PC 300对触摸传感器332的操作来执行各种动作的工作模式。在主机设备显示模式下，PC300将作为用户接口来发挥功能的各种图像显示于显示部330。在主机设备显示模式下，HMD100不显示图像，或者显示出与显示部330所显示的画面不同的图像。

在图8的例子中，在显示部330中显示出配置了多个图标的图像来作为用户接口。并且，图像显示部20不显示图像。因此，在视野VR中看不到图像显示部20的显示图像、或者显示出表示显示已关闭的图标等。

在HMD显示模式下，利用HMD 100所具有的传感器来检测的操作被PC 300受理为对PC 300的输入操作。在该情况下，PC 300从连接装置10取得包含有传感器的输出值或对传感器的输出值进行处理后的结果的数据，根据所取得的数据来进行处理。因此，在HMD显示模式下，由于图像显示部20所显示的显示图像201作为操作的基准来使用，因此显示图像201的可见性优先于显示部330的显示图像。

图9示出了HMD显示模式下的显示系统1的显示方式。在HMD显示模式下，PC 300通过HDMI线缆2A来输出显示部330所显示的图像的图像数据。因此，能够通过显示部330和图像显示部20来显示相同的图像，进行所谓的镜像。

在HMD显示模式下，根据图像显示部20与PC 300的位置关系，在视野VR中包含显示部330的情况下，使用者可重叠看到图像显示部20的显示图像和显示部330的显示图像。由于图像显示部20和显示部330显示相同的图像，所以使用者不需要看到图像显示部20的显示图像和显示部330的显示图像的双方，例如，只要能够清楚地看到任意一方即可。

因此，在本实施方式中，显示系统1在HMD显示模式下根据图像显示部20的视野VR中是否包含显示部330来切换与显示相关的控制。

在图9中用标号VA来表示由图像显示部20显示出图像的显示区域。显示区域VA是使用者利用半透半反镜261、281所发出的图像光而识别到的区域，实际上无意限定在显示区域存在于图9所示的位置的情况。在图9的例子中，显示区域VA配置在大致整个视野VR内，但显示区域VA也可以比视野VR小。

图9是在HMD显示模式下在视野VR中包含显示部330的情况的例子。并且，在图9的例子中作为外景的显示部330与显示区域VA重叠。在图像显示部20中显示有与显示部330所显示的图像相同的显示图像201。在图像显示部20中，显示图像201以与透过视野VR而被看作外景的显示部330的位置重叠的方式显示。显示图像201是根据PC 300向连接装置10输出的影像数据而显示于图像显示部20的图像，是对显示部330的显示图像进行镜像的图像。

当在HMD显示模式下在视野VR中包含显示部330的情况下，PC 300将显示部330的显示状态调整为与作为通常工作状态的主机设备显示模式不同的状态。具体来说，控制部310使显示部330的显示亮度成为比主机设备显示模式低的亮度或者关闭显示。在图9的例子中，关闭显示部330的显示。在图9中，PC 300被看作是透过图像显示部20的外景，因此用虚线来图示PC 300。通过该控制，显示部330所显示的图像的可见性降低，因此佩戴着图像显示部20的使用者不容易看到显示部330的显示图像。因此，使用者可良好地看到图像显示部20所显示的显示图像201。

由于显示图像201的显示位置与显示部330的位置一致，所以显示图像201像显示于显示部330的图像那样被使用者看到。

并且，当在HMD显示模式下在视野VR中包含显示部330的情况下，根据图像显示部20到显示部330的距离来调整由图像显示部20显示出显示图像201的情况下的会聚角。

图10是在HMD显示模式下在视野VR中不包含显示部330的情况的例子，显示部330位于显示区域VA之外。在图像显示部20上镜像显示有与显示部330所显示的图像相同的显示图像201。由于不需要使显示图像201的显示尺寸或位置与显示部330一致，所以显示图像201的显示位置和显示尺寸没有限制。例如，能够按照可显示于显示区域VA的最大尺寸或者初始设定的显示尺寸来进行显示，从而提高可见性。并且，显示位置也可以是显示区域VA的中心。例如，显示图像201的显示位置和显示尺寸也可以是默认设定的。作为默认设定的一例，设定成在整个显示区域VA中显示出显示图像201。

在显示部330不与显示区域VA重叠的情况下，PC 300也可以在显示部330中显示图像。在该情况下，显示部330显示图像的显示状态与主机设备显示模式相同。并且，也可以在HMD显示模式下始终关闭显示部330的显示。

在视野VR中包含显示部330的情况是指佩戴着HMD 100的使用者能够透过图像显示部20将PC 300的显示部330看作外景的情况。这里，透过图像显示部20的右眼RE和左眼LE的视野(即使用者所看到的外景的范围)能够根据图像显示部20的方向来求出。并且，如图4所示，在照相机61的视场角、与透过图像显示部20看到外景时的右眼RE和左眼LE的视野之间的关系是已知的情况下，控制部310能够根据照相机61的拍摄图像数据来判定显示部330是否已进入视野。因此，能够根据上述的校准数据和照相机61的拍摄图像数据等，判定在视野VR中是否包含显示部330。

[1-5.显示系统的动作]

图11是示出与显示系统1的显示相关的动作的流程图，尤其示出了PC 300的动作。在本实施方式中，HMD 100根据PC 300经由HDMI线缆2A输出的影像数据来显示图像，PC 300进行基于图像显示部20与PC 300的相对位置的显示控制。

例如，以检测出PC 300通过线缆2与连接装置10连接的情况为条件来开始图11的动作。

首先，在PC 300中，指示或识别是执行HMD显示模式来作为显示模式还是执行主机设备显示模式来作为显示模式(步骤S21)。在步骤S21中，通过使用者对PC300的操作来指定显示模式，控制部310检测所指定的显示模式。或者，在步骤S21中，控制部310也可以识别在PC 300中设定的显示模式。

并且，在开始图11的动作时，作为初始设定，也可以设定是执行HMD显示模式来作为显示模式还是执行主机设备显示模式来作为显示模式。关于初始设定，可以由使用者操作PC 300来进行设定，也可以是所谓的默认设定。

在执行主机设备显示模式的情况下，控制部310开始将检测出触摸传感器332的操作的检测数据设为对PC 300的操作数据的处理(步骤S22)。控制部310停止基于线缆2的影像数据的输出(步骤S23)，并结束本处理。另外，在主机设备显示模式下，如果是与显示部330的显示图像以外的图像或影像相关的影像数据，则PC 300也可以输出该影像数据。例如，在步骤S23中，控制部310也可以将再现内容数据321的影像数据经由线缆2输出到连接装置10。

另外，在主机设备显示模式下，PC 300也可以通过线缆2来输出影像数据，在该情况下，只要连接装置10的控制部120或显示控制部122停止显示，便能够实现同样的动作。在该情况下，PC 300可以对连接装置10输出使显示停止的控制数据，也可以将该控制数据嵌入到影像数据中。或者，使用者也可以对连接装置10进行操作而使显示停止。

并且，在主机设备显示模式下，控制部310也可以在步骤S23之后不结束处理，而是返回到步骤S21。并且，例如，当在执行步骤S23的期间或要执行步骤S23时使用者进行了指示切换到HMD显示模式的操作的情况下，控制部310也可以转移到步骤S24而开始HMD显示模式。

在执行HMD显示模式的情况下，控制部310开始将经由线缆2从连接装置10取得的与传感器的输出值相关的数据设为对PC 300的操作数据的处理(步骤S24)。

控制部310经由USB线缆2B从连接装置10取得照相机61的拍摄图像数据和各传感器的输出值(步骤S25)。在步骤S25中，控制部310至少取得拍摄图像数据和距离传感器64的输出值。步骤S25例如由检测值取得部312来执行。

控制部310判定在照相机61的拍摄图像数据中是否包含显示部330(步骤S26)。在步骤S26中，控制部310例如通过图案匹配从拍摄图像数据中检测显示部330的图像。

在判定为显示部330未包含在拍摄图像数据中的情况下(步骤S26；否)，控制部310转移到后述的步骤S37。

在判定为显示部330包含在拍摄图像数据中的情况下(步骤S26；是)，控制部310根据在步骤S25中取得的传感器的输出值来检测显示部330的位置和姿势(步骤S27)。在步骤S27中，控制部310例如根据SLAM(Simultaneous Localization and Mapping：同时定位和映射)的执行和距离传感器64的检测值来求出图像显示部20与显示部330的相对位置。并且，控制部310也可以利用拍摄图像数据来检测显示部330的基准点P1，根据检测出的基准点P1的位置来求出显示部330相对于图像显示部20的相对位置。

控制部310根据在步骤S27中求出的位置和姿势，映射出三维空间中的显示部330的位置和姿势(步骤S28)。显示部330的位置和姿势用以基准位置P2为原点或基准点的三维坐标来表示。

控制部310与显示部330的位置和方向相对应地将显示图像201配置在三维空间中(步骤S29)。控制部310将显示图像201配置成与显示部330平行并与显示部330重叠的面。换言之，在佩戴着图像显示部20的使用者进行观察时，显示图像201是与显示部330重叠的平面。控制部310针对图像显示部201的四个角部的位置或中心的位置等、能够确定显示图像201的位置的基准位置，求出以基准位置P2为原点或基准点的三维坐标。在这里配置的显示图像201是对显示于显示部330的图像进行镜像后的图像，例如，是构成操作系统的用户接口的图像。

控制部310确定由图像显示部20显示出图像的范围中的显示部330的位置(步骤S30)。由图像显示部20显示出图像的范围例如是图9所示的显示区域VA。并且，该范围在HMD100中也可称为半透半反镜261、281，但更详细来说，是指利用OLED单元221的OLED面板223或OLED单元241的OLED面板243形成图像的区域。

控制部310设定显示图像201的会聚角和显示尺寸(步骤S31)。在步骤S31中，控制部310将图像的会聚角设定为使显示图像201被看作与显示部330重叠的平面。PC 300输出如下的影像数据：该影像数据包含由图像显示部20的右显示单元22显示的图像的图像数据、和由左显示单元24显示的图像的图像数据。控制部310对右显示单元22用的图像中的显示图像201的位置和左显示单元24用的图像中的显示图像201的位置进行调整，从而调整使用者的左眼LE和右眼RE的会聚角。

控制部310进行关闭显示面板331的显示或变更显示亮度的处理(步骤S32)，然后开始向连接装置10输出影像数据(步骤S33)。当在步骤S32中对显示亮度进行变更的情况下，显示面板331的显示亮度被设定为比主机设备显示模式低的亮度。

这里，连接装置10通过显示控制部122对输入到I/F部110的影像数据进行解码，开始由右显示单元22和左显示单元24进行显示的处理。

步骤S26～S33例如由图像调整部315来执行。

在显示开始后，控制部310判定视野VR是否发生了移动(步骤S34)。这里，视野VR的移动是指视野VR相对于显示部330的相对位置的移动，相当于图像显示部20相对于PC 300的移动。在步骤S34中，图像调整部315根据位置检测部313的检测值来进行判定。并且，以下的步骤S35～S40由图像调整部315来执行。

控制部310在判定为视野VR没有移动的情况下(步骤S34；否)，判定是否结束显示(步骤S35)。例如，在通过对显示部330的操作等指示了显示结束的情况下(步骤S35；是)，控制部310停止对连接装置10输出影像数据而结束本处理。另一方面，在继续进行显示的情况下(步骤S35；否)，控制部310回到步骤S33。

控制部310在判定为视野VR发生了移动的情况下(步骤S34；是)，判定PC 300的位置(更具体来说是显示部330的位置)是否处于由图像显示部20显示出图像的范围之外(步骤S36)。在步骤S36中，控制部310进行基于图像显示部20与显示部330的相对位置和方向的判定。

控制部310在判定为显示部330的位置处于图像显示部20的显示范围之外的情况下(步骤S36；是)，将显示图像201的会聚角和尺寸设定为默认值(步骤S37)。例如，优先考虑可见性而将显示图像201设定为比在步骤S31中设定的尺寸大的显示尺寸，会聚角位于使用者容易看到的规定的位置。优选默认设定的会聚角被设定为在使用者观看图像显示部20的显示图像时负担或疲劳程度较轻的角度，例如，是使用者将图像显示部20的显示图像设别为位于前方20m的图像的会聚角。

控制部310将显示面板331的显示亮度设定为默认值(步骤S38)。显示亮度的默认值例如是主机设备显示模式下的显示亮度。之后，控制部310回到步骤S33。

并且，在控制部310判定为显示部330的位置不处于图像显示部20的显示范围之外的情况下(步骤S36；否)，显示部330处于图像显示部20的显示范围内。在该情况下，控制部310判定显示部330是否从图像显示部20的显示范围外移动到了范围内(步骤S39)。

在显示部330因视野VR的移动而从图像显示部20的显示范围外进入到显示范围内的情况下(步骤S39；是)，控制部310对向连接装置10输出的影像数据的状态进行初始化(步骤S40)。在初始化中，控制部310将向连接装置10输出的影像数据中的会聚角和尺寸等恢复为初始状态。控制部310回到步骤S27，再次执行用于开始输出影像数据的处理。

关于步骤S40的初始化的处理，具体来说，可列举以下例子。作为第1例，以如下处理为例，当在步骤S39中判定为显示部330的整体进入到视野VR中的情况下，使用在之前执行的步骤S29中进行了配置和处理后的显示图像。并且，作为第2处理，以如下处理为例，按照显示部330的位置来执行步骤S25之后的处理，重新设定显示图像的位置(包括深度)。除此之外，控制部310所进行的处理的具体例是任意的。

并且，在显示部330没有从图像显示部20的显示范围外移动到范围内的情况下(步骤S39；否)，即，在显示部330持续保持处于图像显示部20的显示范围内的状态的情况下，控制部310回到步骤S33。

在图7和图11所示的处理中，显示系统1也可以代替距离传感器64而使用照相机61的拍摄图像数据来检测距离。例如，显示系统1预先将如下的数据作为参照用数据存储在非易失性存储部130或非易失性存储部320中：该数据是将图像显示部20到被摄体的距离、与照相机61的拍摄图像数据中所呈现的被摄体的图像大小对应起来而得的。在该情况下，控制部310能够根据参照用数据和照相机61的拍摄图像数据中的PC 300或显示部330的图像的大小，计算出图像显示部20到PC 300或显示部330的距离。

如以上说明的那样，第1实施方式的显示系统1具有：PC 300，其具有显示部330；以及HMD 100，其具有图像显示部20。HMD 100具有：图像显示部20，其构成为能够看到外景，与外景重叠地显示图像；以及显示控制部122，其使图像显示部20显示基于从PC 300输入的数据的图像。显示系统1检测PC 300的显示部330相对于HMD 100的位置，在显示部330相对于HMD 100的位置包含在通过图像显示部20看到的外景的范围内的情况下，对图像显示部20的显示进行调整。

由此，与PC 300和HMD 100的位置关系对应地对图像显示部20的显示进行调整，因此能够与作为外部装置的PC 300的位置相对应地控制HMD 100的显示状态。

并且，在显示系统1中，图像显示部20是通过使外部光透过而能够看到外景的透过型的显示部。在显示部330相对于HMD 100的位置包含在通过图像显示部20看到的外景的范围内的情况下，显示系统1与透过图像显示部20看到的显示部330相对应地，对图像显示部20的显示区域中的图像的显示位置、显示尺寸以及形状中的至少任意一方进行调整。由此，能够适当调整透过图像显示部20看到显示部330的情况下的可见性。

并且，图像显示部20佩戴于使用者的头部，具有朝向使用者的左眼发出图像光的左显示单元24和朝向使用者的右眼发出图像光的右显示单元22。在显示系统1中，PC 300在显示部330相对于HMD 100的位置包含在通过图像显示部20看到的外景的范围内的情况下，与显示部330的位置对应地对图像显示部20所显示的图像的会聚角进行调整。由此，能够与显示部330的位置地对应地对使用者观看图像显示部20的显示图像的距离进行调整。

并且，在显示部330相对于HMD 100的位置未包含在透过图像显示部20看到的外景内的情况下，显示系统1使显示于图像显示部20的图像的会聚角成为规定的初始状态。由此，能够在透过图像显示部20看到显示部330的情况和看不到显示部330的情况下适当地切换图像显示部20的显示状态。

并且，显示系统1通过对左显示单元24和右显示单元22的显示位置进行控制，调整显示于图像显示部20的图像的会聚角。由此，能够通过对显示位置进行控制来容易地调整使用者观看图像显示部20的显示图像的距离。

PC 300具有控制部310，当在HMD 100中透过图像显示部20看到的外景内包含显示部330的情况下，控制部310将显示部330的显示设为例如图9所示的第1显示状态。并且，当在HMD 100中透过图像显示部20看到的外景内不包含显示部330的情况下，控制部310将显示部330的显示设为例如图10所示的第2显示状态。控制部310在第2显示状态下执行如下控制中的任意一个控制：使显示部330的显示成为不显示的控制以及使显示部330的亮度成为比第1显示状态低的亮度的控制。由此，通过控制部310的控制，与PC 300和HMD 100的位置关系对应地对PC 300的显示部330的显示状态进行控制。因此，能够与PC 300和HMD 100的位置关系对应地对PC 300的显示部330的显示状态进行适当调整。

显示系统1能够切换地执行HMD显示模式(外部操作模式)和主机设备显示模式(通常操作模式)，在该HMD显示模式下，根据对HMD 100的操作来控制PC 300的动作，在该主机设备显示模式下，不进行基于对HMD 100的操作的、PC 300的动作控制。在HMD显示模式下，PC 300根据显示部330相对于HMD 100的位置来执行图像显示部20的显示控制。并且，在主机设备显示模式下，PC 300执行如下控制中的任意一个控制：使显示部330的显示成为不显示的控制以及使显示部330的亮度成为比外部操作模式低的亮度的控制。由此，与不根据HMD 100的操作对PC 300的动作进行控制的情况和根据HMD 100的操作对PC 300的动作进行控制的情况分别对应地，进行与PC 300的位置对应的图像显示部20的显示控制。

PC 300具有：位置检测部313，其求出显示部330相对于HMD 100的位置；以及图像调整部315，其对向HMD 100输出的数据进行处理。在位置检测部313所检测出的显示部330的位置包含在通过图像显示部20看到的外景的范围内的情况下，图像调整部315进行调整。在该调整中，与透过图像显示部20看到的显示部330相对应地，对图像显示部20的显示区域中的图像的显示位置、显示尺寸以及形状中的至少任意一方进行调整。由此，能够利用PC300的功能，与PC 300的位置相对应地控制HMD 100的显示状态。

在上述实施方式中，控制部310通过对右眼RE用的图像和左眼LE用的图像中的图像的显示位置进行调整来控制会聚角，从而对使用者感知到图像显示部20的显示图像201的视觉距离进行控制。

在能够通过右显示单元22和左显示单元24所具有的光学系统对使用者感知到图像显示部20的显示图像的视觉距离进行调整的情况下，图像显示部20也可以代替会聚角的控制而进行基于该光学系统控制的调整。例如，也可以构成为对左显示单元24和右显示单元22的虚像的焦点位置进行调整。也就是说，也可以对光学系统进行控制，以使得使用者感知显示图像201是处于与显示部330相同位置的图像。在该情况下，能够通过调整虚像的焦点位置来调整使用者观看图像显示部20的显示图像的距离。因此，能够使看到显示图像201的距离与PC 300的显示部330的位置对应，能够更好地协调HMD 100的显示和PC 300的显示。

作为上述光学系统，列举了具有能够在连接右眼RE和左眼LE的左右方向上移动的透镜的结构。在该结构中，在右显示单元22和左显示单元24中分别配置有能够沿左右方向移动的透镜。透镜例如也可以配置在右光学系统251与半透半反镜261之间和左光学系统252与半透半反镜281之间。并且，也可以在右光学系统251和左光学系统252的内部配置透镜。通过使分别入射到右眼RE和左眼LE的图像光的位置与透镜的位置对应地沿左右方向移动，能够使会聚角发生变化。在该例子中，采用了由控制部120来控制透镜的移动的结构，控制部310通过将影像数据和指定透镜位置的控制数据输出到连接装置10，能够实现控制部310所计算出的会聚角。

并且，作为由图像显示部20输出图像光的光学系统，也可以具有全息显示装置。在该情况下，图像显示部20例如具有光源和对来自光源的光进行调制的空间光调制器(SLM：Spatial Light Modulator)。SLM例如可以使用利用了液晶的反射型空间光相位调制器(LCOS(Liquid Crystal On Silicon)-SLM)。在该结构中，连接装置10向SLM输出显示数据，从而利用SLM对从光源发出的参照光进行调制，成像出立体像。在该情况下，根据从PC 300输出到连接装置10的影像数据或PC 300所输出的影像数据对显示控制部122所生成的显示数据进行调整，从而能够调整图像显示部20所成像出的立体像的焦距。因此，在本实施方式中也可以代替调整会聚角的控制，通过在构成为全息显示装置的图像显示部20中对立体像的焦距进行控制，能够调整使用者观看图像显示部20所显示的像的距离。

[2.第2实施方式]

图12是构成第2实施方式的显示系统1A的各部分的框图。

显示系统1A构成为在通过第1实施方式说明的显示系统1中使HMD 100具有控制装置10A来代替连接装置10。控制装置10A具有控制部121，控制部121对从PC 300输入的影像数据进行处理。除了控制部121和关联的各部分的结构之外，显示系统1A具有与显示系统1同样的结构部。对与显示系统1相同的结构部赋予相同的标号而省略说明。

控制部121与控制部120(图5)同样，具有CPU或微计算机等处理器(省略图示)，该控制部121利用该处理器来执行程序，从而通过软件和硬件的协作对HMD 100的各部分进行控制。并且，控制部121也可以由程序化的硬件构成。

控制部121与非易失性存储部130、操作部140和连接部145连接。并且，控制部121具有位置检测部123和图像调整部125。位置检测部123与位置检测部313同样，检测HMD 100的位置。更详细来说，位置检测部123根据图像显示部20所具有的传感器的输出值，检测PC300与图像显示部20的相对位置。并且，例如，如第1实施方式所说明的那样，控制部121也可以执行使控制部310根据照相机61的拍摄图像数据来求出与被摄体的距离的处理。

位置检测部123所检测的相对位置也可以是图像显示部20和PC 300所存在的空间中的位置。并且，也可以包含图像显示部20与显示部330的相对朝向。例如，也可以是表示以图像显示部20为基准的情况下的显示部330的位置和/或方向的信息。并且，例如，也可以是表示以PC 300为基准的情况下的图像显示部20的位置和/或方向的信息。并且，例如，也可以包含在图像显示部20和PC 300所存在的空间中设定的三维坐标系的坐标。

图像调整部125进行输入到I/F部110的影像数据的图像处理。图像调整部125所执行的图像处理与在第1实施方式和第2实施方式中说明的图像调整部315的处理相同。

例如，图像调整部125按照HMD 100的规格对输入到I/F部110的影像数据进行分辨率转换(缩放)、帧率转换、色调校正、数据格式的变更等处理。

并且，控制部121判定PC 300处于主机设备显示模式还是HMD显示模式。在HMD显示模式下，控制部121对PC 300输出与传感器的输出值相关的数据。

显示系统1A与显示系统1同样，执行图7所示的校准处理。在显示系统1A执行图7的动作的情况下，步骤S13～S15由位置检测部123来执行。

并且，控制部121执行与图11所示的控制部310同样的动作。

在第2实施方式中，图像调整部125根据从PC 300输入的影像数据，通过图像显示部20来显示图像。并且，图像调整部125在HMD显示模式下与显示部330包含在视野VR中的情况和未包含在视野VR中的情况对应地对图像显示部20的显示进行控制。

图13是示出第2实施方式的显示系统1A的动作的流程图，示出了控制部121的动作。

在本实施方式中，HMD 100根据PC 300经由HDMI线缆2A输出的影像数据来显示图像，HMD 100进行基于图像显示部20与PC 300的相对位置的显示控制。

例如，以检测出PC 300通过线缆2与连接装置10连接的情况为条件来开始图13的动作。

首先，在PC 300中进行如下的指示或识别：是执行HMD显示模式来作为显示模式还是执行主机设备显示模式来作为显示模式，控制部121取得识别结果(步骤S51)。

在PC 300执行主机设备显示模式的情况下，控制部121关闭图像显示部20的显示(步骤S52)，并结束本处理。

另外，在主机设备显示模式下，在PC 300输出与显示部330的显示图像以外的图像或影像相关的影像数据的情况下，控制部121也可以通过图像显示部20来显示基于影像数据的图像。

在PC 300执行HMD显示模式的情况下，控制部121取得照相机61的拍摄图像数据和图像显示部20所具有的各传感器的输出值(步骤S53)。控制部121开始进行将与传感器的输出值相关的数据输出到PC 300的处理(步骤S54)。

控制部121判定显示部330是否包含在照相机61的拍摄图像数据中(步骤S55)。在判定为显示部330未包含在拍摄图像数据中的情况下(步骤S55；否)，控制部121转移到后述的步骤S66。

在判定为显示部330包含在拍摄图像数据中的情况下(步骤S55；是)，控制部121根据在步骤S53中取得的传感器的输出值，检测显示部330的位置和姿势(步骤S56)。控制部121根据在步骤S56中求出的位置和姿势，映射出三维空间中的显示部330的位置和姿势(步骤S57)。显示部330的位置和姿势用以基准位置P2为原点或基准点的三维坐标来表示。控制部121与显示部330的位置和方向相对应地将显示图像201配置在三维空间中(步骤S58)。

控制部121确定由图像显示部20显示出图像的范围中的显示部330的位置(步骤S59)。控制部121设定显示图像201的会聚角和显示尺寸(步骤S60)。在步骤S61中，控制部121将图像的会聚角设定为使显示图像201被看作与显示部330重叠的平面。

步骤S55～步骤S60的处理与在图11中说明的由PC 300进行的步骤S26～S31的处理相同。

控制部121对PC 300指示关闭显示面板331的显示或者变更显示亮度(步骤S61)。该指示例如是经由USB线缆2B作为控制数据发送的。当在步骤S62中对显示亮度进行变更的情况下，显示面板331的显示亮度被设定为比主机设备显示模式低的亮度。

控制部121取得PC 300所输出的影像数据而开始显示(步骤S62)。步骤S55～S62例如由图像调整部125来执行。

在显示开始后，控制部121判定视野VR是否发生了移动(步骤S63)。在步骤S63中，图像调整部125根据位置检测部123的检测值来进行判定。并且，之后的步骤S64～S69由图像调整部125来执行。并且，步骤S63～S66和S68～S69的处理与在图11中说明的由PC 300进行的步骤S34～S37和S39～S40的处理相同。

控制部121在判定为视野VR没有移动的情况下(步骤S63；否)，判定是否结束显示(步骤S64)。例如，在对HMD 100或PC 300指示了显示结束的情况下(步骤S64；是)，控制部121停止显示而结束本处理。另一方面，在继续显示的情况下(步骤S64；否)，控制部121返回到步骤S62。

控制部121在判定为视野VR发生了移动的情况下(步骤S63；是)，判定PC 300的显示部330的位置是否处于由图像显示部20显示出图像的范围之外(步骤S65)。在判定为显示部330的位置处于图像显示部20的显示范围之外的情况下(步骤S65；是)，控制部121将显示图像201的会聚角和尺寸设定为默认值(步骤S66)。

控制部121对PC 300进行将显示面板331的显示亮度设定为默认值的指示(步骤S67)。显示亮度的默认值例如是主机设备显示模式下的显示亮度。之后，控制部121回到步骤S62。

并且，在控制部310判定为显示部330的位置不处于图像显示部20的显示范围之外的情况下(步骤S65；否)，显示部330处于图像显示部20的显示范围内。在该情况下，控制部121判定显示部330是否从图像显示部20的显示范围外移动到了范围内(步骤S68)。

在显示部330因视野VR的移动而从图像显示部20的显示范围外进入到显示范围内的情况下(步骤S68；是)，控制部121对基于影像数据的显示状态进行初始化(步骤S69)。在初始化中，控制部121使显示图像201的会聚角或尺寸等恢复为初始状态。控制部121回到步骤S56，再次执行用于开始显示的处理。

并且，在显示部330没有从图像显示部20的显示范围外移动到范围内的情况下(步骤S68；否)，即，在显示部330持续保持处于图像显示部20的显示范围内的状态的情况下，控制部121回到步骤S62。

这样，在显示系统1A中具有位置检测部123，该位置检测部123以HMD 100A(显示装置)和具有显示部330的PC 300为对象来检测显示部330的位置。并且，HMD 100A具有使图像显示部20显示图像的图像调整部125(影像处理部)。在位置检测部123所检测出的显示部330的位置包含在通过图像显示部20看到的外景的范围内的情况下，图像调整部125对图像显示部20的显示进行调整。由此，HMD 100根据PC 300与HMD 100之间的位置关系对图像显示部20的显示进行调整。因此，与作为外部装置的PC 300的位置相对应地控制HMD 100的显示。

并且，在PC 300通过HDMI线缆2A对与显示部330所显示的图像相同的图像进行镜像输出的结构中，HMD 100A对图像显示部20的显示图像进行调整。即，HMD100A根据图像显示部20的方向或图像显示部20与PC 300之间的相对位置，使图像显示部20所显示的图像的显示方式发生变化。

因此，显示系统1A能够实现第1实施方式所说明的显示系统1的效果。此外，由于能够在HMD 100A中对影像数据进行处理，所以具有如下的优点：在代替PC 300而与输出影像数据的通用设备连接的情况下，能够根据图像显示部20的位置或方向来变更显示方式。

另外，本发明并不限于上述各实施方式的结构，能够在不脱离其主旨的范围内实施各种方式。

例如，在上述实施方式中，使用者透过显示部看到外景的结构并不限定于右导光板261和左导光板281使外部光透过的结构。例如也可以应用在以无法看到外景的状态显示图像的显示装置中。具体来说，也可以将本发明应用在对外景拍摄用照相机61的拍摄图像、基于该拍摄图像生成的图像或CG、基于预先存储的影像数据或从外部输入的影像数据的影像等进行显示的显示装置中。作为这种显示装置，可以包含无法看到外景的、所谓的封闭型的显示装置。并且，也可以使用如上述实施方式所说明那样与真实空间重叠地显示图像的AR显示、将拍摄到的真实空间的图像与虚拟图像组合起来的MR(Mixed Reality：混合现实)显示。或者，也可以应用在不进行显示虚拟图像的VR(Virtual Reality：虚拟现实)显示之类的处理的显示装置中。例如，作为本发明的应用对象，当然也可以包含对从外部输入的影像数据或模拟影像信号进行显示的显示装置。

并且，例如，也可以代替图像显示部20而采用例如像帽子那样佩戴的图像显示部等其他方式的图像显示部，只要具有与使用者的左眼对应地显示图像的显示部和与使用者的右眼对应地显示图像的显示部即可。并且，本发明的显示装置例如也可以构成为搭载于汽车或飞机等车辆的头戴显示器。并且，例如也可以构成为内置于头盔等身体防护器件的头戴显示器。在该情况下，能够将确定相对于使用者身体的位置的部分、和相对于该部分进行定位的部分设为佩戴部。

此外，第2实施方式的HMD 100A也可以构成为使控制装置10A和图像显示部20一体构成而佩戴于使用者的头部。并且，作为控制装置10A，也可以使用包括笔记本型计算机、平板型计算机、游戏机、移动电话、智能手机、便携式媒体播放器在内的便携式电子设备、其他专用设备等。并且，在上述实施方式中，也可以构成为连接装置10和图像显示部20通过无线通信线路来连接。

并且，在显示系统1中与HMD 100、100A连接的设备并不限定于PC 300。例如，也可以是固定式的电视接收机、固定式的个人计算机的监视器。并且，也可以代替PC 300而使用向显示面投射图像的投影仪，在该情况下，被投影仪投射图像的投射面相当于显示画面。并且，除了这些设备以外，可以代替PC 300而使用移动式或固定式的电子设备。PC 300或代替PC 300而使用的各种电子设备也可以与HMD 100、100A无线连接。例如，也可以代替连接器11A而使用Miracast(注册商标)或WirelessHD(注册商标)等无线影像通信接口。并且，可以代替连接器11B而使用无线LAN(包括WiFi(注册商标))，也可以使用Bluetooth(注册商标)。

并且，框图所示的各功能块中的至少一部分构成为可以通过硬件来实现，也可以通过硬件和软件的协作来实现，并不限定于如图示那样配置独立的硬件资源的结构。

Claims (12)

1.一种显示系统，其具有：

电子设备，其具有第1显示部；以及

显示装置，其具有第2显示部，

所述显示装置具有：

所述第2显示部，其构成为能够看到外景，与所述外景重叠地显示图像；以及

显示控制部，其使所述第2显示部显示基于从所述电子设备输入的数据的图像，

该显示系统检测所述电子设备的所述第1显示部相对于所述显示装置的位置，

在所述第1显示部相对于所述显示装置的位置包含在通过所述第2显示部看到的所述外景的范围内的情况下，对所述第2显示部的显示进行调整。

2.根据权利要求1所述的显示系统，其中，

所述第2显示部是通过使外部光透过而能够看到所述外景的透过型的显示部，

在所述第1显示部相对于所述显示装置的位置包含在通过所述第2显示部看到的所述外景的范围内的情况下，与透过所述第2显示部看到的所述第1显示部相对应地，对所述第2显示部的显示区域中的图像的显示位置、显示尺寸以及形状中的至少任意一方进行调整。

3.根据权利要求2所述的显示系统，其中，

所述第2显示部佩戴于使用者的头部，具有朝向所述使用者的左眼发出图像光的左眼用显示部、和朝向所述使用者的右眼发出图像光的右眼用显示部，

在所述第1显示部包含在透过所述第2显示部看到的所述外景内的情况下，与所述第1显示部的位置对应地对显示于所述第2显示部的图像的会聚角进行调整。

4.根据权利要求3所述的显示系统，其中，

在所述第1显示部相对于所述显示装置的位置未包含在透过所述第2显示部看到的所述外景内的情况下，使显示于所述第2显示部的图像的会聚角成为规定的初始状态。

5.根据权利要求3或4所述的显示系统，其中，

通过对所述左眼用显示部和所述右眼用显示部的显示位置进行控制，对显示于所述第2显示部的图像的会聚角进行调整。

6.根据权利要求3～5中的任意一项所述的显示系统，其中，

在所述第1显示部包含在透过所述第2显示部看到的所述外景内的情况下，与所述第1显示部的位置对应地对所述左眼用显示部和所述右眼用显示部中的虚像的焦点位置进行调整。

7.根据权利要求1～6中的任意一项所述的显示系统，其中，

所述电子设备具有电子设备控制部，当在所述显示装置中透过所述第2显示部看到的所述外景内包含所述第1显示部的情况下，该电子设备控制部使所述第1显示部的显示成为第1显示状态，当在所述显示装置中透过所述第2显示部看到的所述外景内不包含所述第1显示部的情况下，该电子设备控制部使所述第1显示部的显示成为第2显示状态，

所述电子设备控制部在所述第2显示状态下执行如下控制中的任意一个控制：使所述第1显示部的显示成为不显示的控制以及使所述第1显示部的亮度成为比所述第1显示状态低的亮度的控制。

8.根据权利要求1～7中的任意一项所述的显示系统，其中，

该显示系统能够切换地执行外部操作模式和通常操作模式，在该外部操作模式下，根据对所述显示装置的操作来控制所述电子设备的动作，在该通常操作模式下，不进行基于对所述显示装置的操作的、所述电子设备的动作控制，

在所述外部操作模式下，根据所述第1显示部相对于所述显示装置的位置来执行所述第1显示部的显示控制，在所述通常操作模式下，执行如下控制中的任意一个控制：使所述第1显示部的显示成为不显示的控制以及使所述第1显示部的亮度成为比所述外部操作模式低的亮度的控制。

9.根据权利要求1～8中的任意一项所述的显示系统，其中，

所述电子设备具有：

位置检测部，其求出所述第1显示部相对于所述显示装置的位置；以及

影像处理部，其对向所述显示装置输出的数据进行处理，

在所述位置检测部所检测出的所述第1显示部的位置包含在通过所述第2显示部看到的所述外景的范围内的情况下，所述影像处理部与透过所述第2显示部看到的所述第1显示部相对应地，对所述第2显示部的显示区域中的图像的显示位置、显示尺寸以及形状中的至少任意一方进行调整。

10.一种显示系统的控制方法，该显示系统具有电子设备和显示装置，在该显示系统的控制方法中，

在第2显示部中显示基于从所述电子设备输入到所述显示装置的数据的图像，

对所述电子设备的第1显示部相对于所述显示装置的位置进行检测，

在所述第1显示部相对于所述显示装置的位置包含在通过所述第2显示部看到的外景的范围内的情况下，对所述第2显示部的显示进行调整。

11.一种显示装置，其具有：

位置检测部，其以具有第1显示部的电子设备为对象，对所述第1显示部的位置进行检测；

第2显示部，其构成为能够看到外景，与所述外景重叠地显示图像；以及

显示控制部，其使所述第2显示部显示图像，

在所述位置检测部所检测出的所述第1显示部的位置包含在通过所述第2显示部看到的所述外景的范围内的情况下，所述显示控制部对所述第2显示部的显示进行调整。

12.一种显示装置的控制方法，该显示装置具有显示部，该显示部构成为能够看到外景，与所述外景重叠地显示图像，在该显示装置的控制方法中，

使所述显示部显示图像，

对具有显示画面的电子设备的所述显示画面的位置进行检测，

在检测出的所述显示画面的位置包含在通过所述显示部看到的所述外景的范围内的情况下，对所述显示部的显示进行调整。