CN110045935B - 处理装置、显示系统以及记录介质 - Google Patents

处理装置、显示系统以及记录介质 Download PDF

Info

Publication number
CN110045935B
CN110045935B CN201811567016.5A CN201811567016A CN110045935B CN 110045935 B CN110045935 B CN 110045935B CN 201811567016 A CN201811567016 A CN 201811567016A CN 110045935 B CN110045935 B CN 110045935B
Authority
CN
China
Prior art keywords
display
unit
image
display device
head
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811567016.5A
Other languages
English (en)
Other versions
CN110045935A (zh
Inventor
木村总志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Publication of CN110045935A publication Critical patent/CN110045935A/zh
Application granted granted Critical
Publication of CN110045935B publication Critical patent/CN110045935B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/30—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels
    • G09G3/32—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED]
    • G09G3/3208—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED] organic, e.g. using organic light-emitting diodes [OLED]
    • G09G3/3225—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED] organic, e.g. using organic light-emitting diodes [OLED] using an active matrix
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0626—Adjustment of display parameters for control of overall brightness
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00—Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02—Details of power systems and of start or stop of display operation
    • G09G2330/021—Power management, e.g. power saving
    • G09G2330/022—Power management, e.g. power saving in absence of operation, e.g. no data being entered during a predetermined time

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)
  • Stored Programmes (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供处理装置、显示系统以及记录介质，提高了便携式信息终端等处理装置与HMD等显示装置之间的协同动作的可用性。作为便携式信息终端的处理装置具有：显示部，其显示图像；连接检测部，其检测与外部的显示装置连接的情况；图像输出部，其响应于与上述显示装置连接的情况，将显示于上述显示部的图像向上述显示装置输出；以及用户界面输出部，其响应于与上述显示装置连接的情况，按照规定的亮度值将显示于上述显示部的图像切换成用户界面的显示，该用户界面用于指示执行与向上述显示装置输出的上述图像相关联的处理。

Description

处理装置、显示系统以及记录介质
技术领域
本发明涉及与显示装置进行协同动作的处理装置、包含处理装置和显示装置的显示系统、以及在处理装置中执行的程序。
背景技术
公知有作为佩戴于用户的头部而进行使用的显示装置的头部佩戴型显示装置(头戴显示器(Head Mounted Display、HMD))。考虑了通过使这样的HMD与智能手机等多功能便携式信息终端进行协同动作来提供更多样的服务。
例如，便携式信息终端通常具有镜像功能，利用该镜像功能使外部的显示装置也显示出该便携式信息终端所显示的图像或影像。如果使用该镜像功能例如使透过型HMD显示出便携式信息终端的显示图像，则用户能够一边在视野内捕捉环境中所存在的真实物体，一边在该视野内观看便携式信息终端的显示图像，非常方便。
但是，在利用现有的镜像功能将便携式信息终端的显示图像只显示于HMD的情况下，例如在便携式信息终端上再现显示的影像在显示于HMD上之后还不必要地继续显示在便携式信息终端上。此时，在便携式信息终端上，与该影像相关的操作(快进或暂停等)所需的用户界面(以下，也称为UI)例如持续保持着在不妨碍该影像的范围内较小地显示的状态。并且，在所谓的透过型HMD的情况下，用户要隔着HMD上所显示的影像来观看便携式信息终端上的UI，从而其可见性降低。其结果是，影像本身显示于HMD而容易观看，而便携式信息终端上的UI的操作性降低，从而可能导致将图像镜像到HMD的便利性和有用性降低。
因此，在使用镜像功能将便携式信息终端上的图像显示于HMD的现有的HMD-便携式信息终端的协同动作中，在可用性方面还有改善的余地。
作为相关的现有技术，在专利文献1中记载了将显示于外部装置的图标再次排列显示于透过型HMD，使得能够从HMD对图标进行操作。
并且，作为其他现有技术，在专利文献2中记载了将显示于便携式信息终端的用于个人信息输入的用户界面显示于HMD，并且在便携式信息终端上不显示所输入的个人信息。
但是，这些现有技术并没有给出针对使用了便携式信息终端的镜像功能的、HMD与便携式信息终端的协同动作中的可用性提高这一课题的解决方案。
专利文献1：日本特开2015-49883号公报
专利文献2：日本特表2016-506530号公报
发明内容
本发明的目的在于，提高便携式信息终端等处理装置与HMD等显示装置之间的、使用了镜像功能的协同动作的可用性。
为了解决上述课题，本发明的处理装置具有：显示部，其显示图像；连接检测部，其检测与外部的显示装置连接的情况；图像输出部，其响应于与所述显示装置相连接，将显示于所述显示部的图像向所述显示装置输出；以及用户界面输出部，其响应于与所述显示装置相连接，按照规定的亮度值将显示于显示部的图像切换成用户界面的显示，所述用户界面用于指示执行与向所述显示装置输出的所述图像相关联的处理。
根据该结构，当在显示装置中显示有图像时，在处理装置上将用户界面例如显示得较大，从而能够使用户的输入操作变得容易。其结果是，从操作性的观点来看，提高了处理装置与显示装置之间的协同动作的可用性。
并且，关于本发明，在规定的时间以上未操作显示于所述显示部的所述用户界面时，所述用户界面输出部将所述显示部的亮度设定为比所述规定的亮度值小的值或者设定为零。
根据该结构，在不需要对显示于显示部的用户界面进行操作并且用户不需要看到显示部时，降低显示部所消耗的电力，从而能够降低处理装置的电力消耗。其结果是，从运用成本的观点来看，提高了处理装置与显示装置之间的协同动作的可用性。
并且，关于本发明，该处理装置还具有加速度传感器，所述用户界面输出部在通过检测从所述加速度传感器取得的所述处理装置的加速度在规定的范围的周期内按照规定的值以上的振幅和/或规定的次数以上的次数发生了变化的情况，而检测到所述处理装置被摇动时，将所述显示部的亮度设定为所述规定的亮度值。
根据该结构，在显示部的显示亮度被设定得较低而不容易看到用户界面时，用户仅通过摇动处理装置便能够使显示部上的用户界面明亮地显示。其结果是，从操作性的观点来看，进一步提高了处理装置与显示装置之间的协同动作的可用性。
并且，关于本发明，该处理装置还具有姿势传感器，在利用所述姿势传感器检测到所述处理装置的所述显示部朝向与重力方向相反的方向时，所述用户界面输出部将所述显示部的亮度设定为规定的亮度值。
根据该结构，在显示部的显示亮度被设定得较低而不容易看到用户界面时，用户仅通过使显示部朝向与重力方向相反的“朝上”方向，便能够使显示部上的用户界面明亮地显示。其结果是，从操作性的观点来看，进一步提高了处理装置与显示装置之间的协同动作的可用性。
并且，关于本发明，所述用户界面输出部响应于与所述显示装置相连接，将用于供用户选择预先确定的多个用户界面中的任意用户界面的选择操作要素显示于所述显示部，并响应于对所述选择操作要素的操作，将显示于所述显示部的图像切换成对应的一个所述用户界面的显示。
根据该结构，用户能够使处理装置的显示部显示出与显示装置所显示的图像对应的适当的用户界面。其结果是，从操作性的观点来看，进一步提高了处理装置与显示装置之间的协同动作的可用性。
并且，关于本发明，该处理装置还具有显示尺寸指示部，该显示尺寸指示部向所述图像输出部给出与向所述显示装置输出的所述图像的显示分辨率相关的指示。
根据该结构，由于能够在显示装置上显示与显示装置相适的纵横比的图像，所以能够提高显示装置的显示区域的利用效率。其结果是，从可提供给用户的信息量的观点来看，能够提高处理装置与显示装置之间的协同动作的可用性。
并且，关于本发明，该处理装置具有运算部，所述用户界面输出部是通过在所述运算部中执行第1应用程序而实现的。
根据该结构，无需更换操作系统，仅通过简单地执行应用程序便能够容易地提高处理装置与显示装置之间的协同动作的可用性。
并且，关于本发明，向所述显示装置输出的所述图像是通过在所述运算部中执行第2应用程序而生成的，所述用户界面输出部从所述第2应用程序取得与所述第2应用程序的种类相关的信息，将显示于所述显示部的图像切换成与所述第2应用程序的种类对应的所述用户界面的显示。
根据该结构，由于处理装置使显示部自动地显示与显示装置所显示的图像对应的适当的用户界面，所以从操作性的观点来看，进一步提高了处理装置与显示装置之间的协同动作的可用性。
并且，关于本发明，所述运算部在操作系统上执行所述第1应用程序和所述第2应用程序，所述用户界面输出部将用户经由所述用户界面输入的输入信息经由所述操作系统输入到所述第2应用程序。
根据该结构，用户界面输出部能够将用户对显示于显示部的用户界面的操作信息适当地向作为输出到显示装置的图像的提供源的程序传送，而不用确定该信息的交接目的地。
由此，抑制了因设置用户界面输出部而导致运算部的处理负荷增加，从顺畅性的观点来看，提高了处理装置与显示装置之间的协同动作的可用性。
并且，关于本发明，所述显示装置具有构成为能够看到外景的显示区域，在佩戴于使用者的头部时，利用所述显示区域在所述使用者的视线前方与外景重叠地显示所述图像，并且具有拍摄外景的照相机，在根据从所述显示装置所具有的所述照相机取得的外景的拍摄图像，判断为所述显示部未进入到所述使用者的视野范围内时，所述用户界面输出部将所述显示部的显示亮度设定为比所述规定的亮度值小的值或者设定为零。
根据该结构，在显示部未进入到使用者的视野范围内从而不太可能操作显示部上的用户界面时，使显示部的亮度降低，能够避免处理装置的无用的电力消耗。其结果是，从运用成本的观点来看，能够提高HMD与处理装置之间的协同动作的可用性。
并且，关于本发明，在根据从所述显示装置所具有的所述照相机取得的外景的拍摄图像，判断为所述显示部进入到了所述使用者的视野范围内时，所述用户界面输出部将向所述显示部输出的图像的亮度设定为所述规定的亮度值。
根据该结构，在显示部进入到使用者的视野范围内从而很有可能操作显示部上的用户界面时，能够提高显示部上的用户界面的亮度值而容易看到。其结果是，从操作性的观点来看，能够提高HMD与处理装置之间的协同动作的可用性。
并且，关于本发明，在根据从所述显示装置所具有的所述照相机取得的外景的拍摄图像，判断为所述显示部进入到了所述使用者的视野范围内时，与判断为所述显示部未进入到所述使用者的视野范围内时相比，所述图像输出部使向所述显示装置输出的所述图像的亮度降低或者设定为零。
根据该结构，在显示部进入到使用者的视野范围内从而很有可能操作显示部上的用户界面时，在显示装置中，降低与作为外景的显示部的画面重叠显示的图像的亮度。其结果是，能够进一步提高显示部上的用户界面的可见性，从操作性的观点来看，提高了HMD与处理装置之间的协同动作的可用性。
并且，为了解决上述课题，本发明是具有上述任意的处理装置和显示装置的显示系统，该显示装置具有构成为能够看到外景的显示区域，在佩戴于使用者的头部时，利用所述显示区域在所述使用者的视线前方与外景重叠地显示所述图像。
根据该结构，能够实现如下的显示系统：尤其是能够提高HMD与处理装置之间的协同动作的可用性。
并且，为了解决上述课题，本发明是一种程序，利用处理装置的运算部来执行该程序，该处理装置具有：显示部，其显示图像；连接检测部，其检测与外部的显示装置连接的情况；图像输出部，其响应于与所述显示装置相连接，将显示于所述显示部的图像向所述显示装置输出；以及所述运算部，所述程序使所述运算部作为用户界面输出部来发挥功能，该用户界面输出部响应于与所述显示装置相连接，按照规定的亮度值将显示于所述显示部的图像切换成用户界面的显示，该用户界面用于指示执行与所述图像相关联的处理。
根据该结构，当在显示装置中显示有图像时，在处理装置上将用户界面例如显示得较大，从而能够使用户的输入操作变得容易。其结果是，从操作性的观点来看，提高了处理装置与显示装置之间的协同动作的可用性。
附图说明
图1是构成本发明一个实施方式的显示系统的HMD和便携式信息终端的外观图。
图2是示出HMD和便携式信息终端的结构的图。
图3是显示于便携式信息终端的图像的一例的图。
图4是示出现有的利用镜像功能显示于HMD的图像的一例的图。
图5是示出利用便携式信息终端显示于HMD的图像的一例的图。
图6是示出便携式信息终端所显示的用户界面的显示画面的一例的图。
图7是示出便携式信息终端所显示的用户界面的显示画面的另一例的图。
图8是示出便携式信息终端所显示的用户界面的显示画面的又一例的图。
标号说明
1：显示系统；10：连接装置；11、304：连接器；20：图像显示部；21：右保持部；22：右显示单元；23：左保持部；24：左显示单元；25、301：9轴传感器；26：右导光板；27：前部框架；28：左导光板；40：连接线缆；42：通信线缆；61：照相机；102、112：接收部(Rx)；104、114：OLED单元；106、204：照相机I/F；202：发送部(Tx)；206：电源部；208：操作部；210、310：控制部；212、316：非易失性存储部；214、318：通信I/F部；220：显示控制部；222：照相机控制部；303：显示部；314：无线通信部；320：显示面板；322：触摸传感器；330：应用部；332：连接检测部；334：图像输出部；336：显示尺寸指示部；338：用户界面(UI)输出部；340：显示亮度设定部；342：照相机图像识别部；344：操作系统(OS)；400、404、406：图像；402：显示区域；500：键盘UI；502、504、506：按钮；508：识别显示；510：影像再现UI；512：再现按钮；514：快进按钮；516：后退按钮；518：暂停按钮；520：停止按钮；530：游戏UI；532：触控板UI；534：十字键UI。
具体实施方式
图1是示出应用了本发明实施方式的显示系统1的结构的图。
显示系统1具有作为处理装置的便携式信息终端300和作为针对便携式信息终端300的外部显示装置的HMD(Head Mounted Display：头部佩戴型显示装置)100。
HMD 100是如下的显示装置：该显示装置具有构成为能够看到外景的显示区域，在佩戴于使用者(以下，也称为用户)的头部时利用上述显示区域在使用者的视线前方生成图像。
图像显示部20是佩戴于使用者的头部的佩戴体，在本实施方式中具有眼镜形状。图像显示部20的主体具有右保持部21、左保持部23以及前部框架27，在该主体上具有右显示单元22、左显示单元24、右导光板26以及左导光板28。
右保持部21和左保持部23分别从前部框架27的两端部向后方延伸，如眼镜的镜腿(边撑)那样，将图像显示部20保持于使用者的头部。
右显示单元22和左显示单元24例如使用由有机电致发光来进行发光的OLED(Organic Light Emitting Diode：有机电致发光二极管)构成，分别输出使用者的右眼用和左眼用的图像光。
右导光板26和左导光板28例如是棱镜。右导光板26使外部光透过而引导至使用者的右眼，并且将来自设置于右保持部21的右显示单元22的右图像光引导至使用者的右眼，从而使右眼看到图像。并且，左导光板28使外部光透过而引导至使用者的左眼，并且将来自设置于左保持部23的左显示单元24的左图像光引导至使用者的左眼，使左眼看到图像。
由此，图像显示部20一边令使用者能够看到外景，一边利用右显示单元22和左显示单元24的图像光令使用者看到虚像以显示图像。
图像显示部20还具有配置于右显示单元22的照相机61。照相机61例如通过设置于图像显示部20的前部框架27的孔来取得与图像显示部20的朝向对应的用户的可见范围内的环境图像。照相机61例如是具有CCD或CMOS等摄像元件和摄像镜头等的数字照相机。
图像显示部20通过连接线缆40与连接装置10连接。连接装置10在箱形的外壳(也称为壳体或主体)中具有连接器11，该连接装置10经由连接器11与便携式信息终端300连接。连接装置10经由连接器11来接收从便携式信息终端300输出的图像，对图像显示部20的右显示单元22和左显示单元24进行控制而对用户显示接收到的图像。并且，连接装置10经由连接器11向便携式信息终端300发送来自照相机61的图像数据。
连接装置10的连接器11例如是USB(Universal Serial Bus：通用串行总线)连接器。
便携式信息终端300具有：9轴传感器301，其检测便携式信息终端300的朝向或动作；显示部303，其显示图像；以及连接器304。
便携式信息终端300的连接器304例如是USB(Universal Serial Bus)连接器，连接器304与连接器11例如通过作为USB线缆的通信线缆42来连接。
在本实施方式中，作为处理装置的便携式信息终端300例如是智能手机。但是，便携式信息终端300也可以是平板型计算机、笔记本型计算机等便携式计算机。
图2是示出构成显示系统1的HMD 100和便携式信息终端300的结构的图。如上述那样，HMD 100由通过连接线缆40互相连接的连接装置10和图像显示部20构成。
除了照相机61之外，图像显示部20的右显示单元22还具有接收部(Rx)102、OLED单元104以及照相机I/F(接口)106。Rx 102从连接装置10接收作为右眼用的图像信号的右图像信号并输出到OLED单元104。OLED单元104例如由OLED(省略图示)和驱动OLED的驱动电路(省略图示)构成。OLED单元104根据接收到的右图像信号，朝向右导光板26输出右图像光。并且，照相机I/F 106接收从连接装置10发送的针对照相机61的控制信号，并且将来自照相机61的图像信号向连接装置10发送。
图像显示部20的左显示单元24具有接收部(Rx)112和OLED单元114。接收部(Rx)112从连接装置10接收作为左眼用的图像信号的左图像信号并输出到OLED单元114。OLED单元114与OLED单元104同样，例如由OLED(省略图示)和驱动OLED的驱动电路(省略图示)构成。OLED单元114根据接收到的左图像信号，朝向左导光板28输出左图像光。
图像显示部20的各部分通过经由连接线缆40从连接装置10的电源部206供给的电力来进行动作。图像显示部20也可以具有进行来自电源部206的电源输入的分配或电压转换等的电源电路(省略图示)。
连接装置10具有发送部(Tx)202、照相机I/F 204、电源部206、操作部208、控制部210、非易失性存储部212以及通信I/F(接口)部214。Tx 202将控制部210所输出的右图像信号和左图像信号分别向图像显示部20的Rx 102和112发送。
非易失性存储部212是非易失性地存储由控制部210处理的数据等的存储装置。非易失性存储部212例如是HDD(Hard Disk Drive：硬盘驱动器)等磁记录装置或使用了闪存等半导体存储元件的存储装置。
在本实施方式中，通信I/F部214例如依据USB通信标准而与便携式信息终端300之间进行有线通信。
在本实施方式中，电源部206根据经由通信线缆42和通信I/F部214从便携式信息终端300供给的电力，进行对连接装置10的各部分和图像显示部20的电源供给，其中，该通信线缆42例如是与连接器11连接的USB线缆。电源部206也可以构成为内置有电压转换电路(省略图示)并且能够向连接装置10和图像显示部20的各部分供给不同的电压。并且，电源部206可以由逻辑电路或FPGA等器件构成。另外，电源部206并不限于上述结构，也可以不基于从便携式信息终端300供给的电力，而基于来自连接装置10所具有的可充电的电池(省略图示)的电力，对连接装置10的各部分和图像显示部20进行电源供给。
操作部208由能够供用户操作的按钮或开关构成，用于向控制部210输入指示或数据。
控制部210例如是具有CPU(Central Processing Unit：中央处理单元)等处理器的计算机。控制部210也可以构成为具有写入了程序的ROM(Read Only Memory：只读存储器)、用于临时存储数据的RAM(Random Access Memory：随机存取存储器)等。并且，作为功能要素(或功能单元)，控制部210具有显示控制部220和照相机控制部222。
控制部210所具有的这些功能要素例如是通过使作为计算机的控制部210执行程序而实现的。另外，上述计算机程序能够预先存储在可由计算机读取的任意存储介质中。
也可以代替上述程序而使控制部210所具有的上述功能要素的全部或一部分分别由包含一个以上的电子电路部件的硬件构成。这样的硬件可以包含DSP(DigitalSignalProcessor：数字信号处理器)或FPGA(Field Programmable Gate Array：现场可编程门阵列)等程序化的硬件。
显示控制部220经由通信I/F部214来接收来自便携式信息终端300的图像数据，生成用于进行图像显示部20上的显示的右图像信号和左图像信号。并且，显示控制部220将所生成的右图像信号和左图像信号分别经由Tx 202向图像显示部20的Rx102和112发送。由此，在图像显示部20中对用户显示从便携式信息终端300输出的图像。
照相机控制部222经由照相机I/F 204取得照相机61所拍摄到的图像。并且，照相机控制部222经由通信I/F部214将从照相机61取得的图像的图像数据向便携式信息终端300发送。
便携式信息终端300具有9轴传感器301、显示部303、控制部310、无线通信部314、非易失性存储部316以及通信I/F(接口)部318。
显示部303由显示面板320和触摸传感器322构成。显示面板320例如是液晶显示面板，触摸传感器322例如是触摸传感器。除了在显示面板320上显示图像之外，显示部303还在显示面板320上显示按钮等用户界面(UI)，与触摸传感器322协作而取得来自用户的输入。
9轴传感器301与加速度传感器和姿势传感器对应。9轴传感器301检测便携式信息终端300的壳体的加速度(3轴)、角速度(3轴)、地磁(3轴)，从而检测出便携式信息终端300的朝向(姿势)和移动。9轴传感器301例如由作为运动传感器(惯性传感器)的3轴加速度传感器和3轴陀螺仪(角速度)传感器以及作为3轴地磁传感器的磁传感器构成。
无线通信部314是无线收发器。控制部310经由无线通信部314来访问因特网，从构成万维网的各种服务器等取得包含图像信息的各种信息。
在本实施方式中，通信I/F部318例如依据USB通信标准而与连接装置10的通信I/F部214之间进行有线通信。但是，通信I/F部318与通信I/F部214之间的通信并不限于依据USB通信标准的有线通信，也可以依照包含有线和无线的其他各种通信标准来进行。
非易失性存储部316非易失性地存储由控制部310执行的程序、由控制部310处理的数据。非易失性存储部316例如是HDD等磁记录装置或使用了闪存等半导体存储元件的存储装置。
非易失性存储部316存储作为由控制部310执行的基本控制程序的操作系统(OS)、以OS为平台来工作的应用程序等。并且，非易失性存储部316对在执行应用程序时要处理的数据或处理结果数据进行存储。
控制部310是运算部，具有CPU(Central Processing Unit)或微型计算机等处理器(省略图示)，通过利用该处理器来执行程序，从而对便携式信息终端300的各部分进行控制。控制部310也可以具有非易失性地存储由处理器执行的控制程序的ROM(Read OnlyMemory)和构成处理器的工作区的RAM(Random Access Memory)。
而且，作为功能要素(或功能单元)，控制部310具有应用部330、连接检测部332、图像输出部334、显示尺寸指示部336以及用户界面(UI)输出部338。并且，控制部310具有照相机图像识别部342和操作系统(OS)344。UI输出部338还包含显示亮度设定部340作为功能要素。
控制部310所具有的这些功能要素是通过使作为计算机的控制部310执行程序而实现的。另外，上述计算机程序可以预先存储在非易失性存储部316中，也可以预先存储在可由计算机读取的任意存储介质中。
连接检测部332、图像输出部334、显示尺寸指示部336、UI输出部338、显示亮度设定部340以及照相机图像识别部342是通过使控制部310执行第1应用程序而实现的。第1应用程序例如被保存在非易失性存储部316中。
但是，并不限于此，UI输出部338可以不是作为第1应用程序而是作为OS 344的一部分来实现。
应用部330是通过使控制部310执行第2应用程序而实现的，例如进行在显示部303中显示动态图像(即，影像)或静态图像等、预先定义的任意处理。例如，通过控制部310经由无线通信部314从万维网上的服务器等下载第2应用程序并存储在非易失性存储部316中。
另外，以下，也将应用程序和通过执行应用程序而实现的功能要素称为“应用”或“APP”。
OS 344是通过使控制部310执行例如预先存储于非易失性存储部316的OS程序而实现的。OS 344具有器件驱动器，该器件驱动器用于使包括便携式信息终端300所具有的9轴传感器301、显示部303以及通信I/F部318在内的各种器件进行动作。并且，OS 344向应用部330等应用提供各种应用编程接口(API、ApplicationProgramming Interface)。API是通常通过给出指令代码和自变量来执行规定的处理、并将与该指令和自变量对应的数据或状态作为响应来回送的软件函数。另外，以下，“指示OS 344”或“经由OS 344来设定”例如可通过调用用于执行该指示或设定的对应的上述API、或者设定OS 344内的对应的参数来实现。
在OS 344上分别执行实现上述UI输出部338等的第1应用程序和实现应用部330的第2应用程序。
连接检测部332例如经由OS 344来取得通信I/F部318的状态信息，从而检测出便携式信息终端300与外部的显示装置连接的情况，将已与显示装置连接的通知发送到图像输出部334和UI输出部338。在本实施方式中，外部的显示装置是HMD 100。
并且，连接检测部332从由通信I/F部318取得的状态中取得与便携式信息终端300连接的显示装置的型号信息，并将该型号信息发送到显示尺寸指示部336。
此外，连接检测部332取得通信I/F部318的状态信息，从而检测便携式信息终端300与外部的显示装置的连接被解除的情况，将与显示装置的连接已解除的通知发送到图像输出部334和UI输出部338。
图像输出部334响应于与作为外部的显示装置的例如HMD 100连接的情况，利用OS344所具有的镜像功能将显示于显示部303的图像向HMD 100输出。这里，显示于显示部303的图像是指由OS 344生成的图像或由应用部330(即，通过在控制部310中执行第2应用程序而)生成的图像。
具体来说，图像输出部334对OS 344指定目前显示于显示部303的前景图像，从而指示为利用镜像功能将该前景图像向作为外部的显示装置的HMD 100输出。
并且，图像输出部334接受与向HMD 100输出的图像的尺寸相关的指示(图像尺寸指示)，指示OS 344将依照所接受的图像尺寸指示的图像向HMD 100输出。
显示尺寸指示部336将与向该显示装置输出的图像的尺寸相关的指示(图像尺寸指示)发送到图像输出部334，使得在与便携式信息终端300连接的显示装置中显示尺寸与该显示装置的显示区域相适的图像。在非易失性存储部316中预先保存有为连接于便携式信息终端300的各种型号的显示装置而设定的与该显示装置相适的图像尺寸的指定，作为尺寸信息。
显示尺寸指示部336根据从连接检测部332发送的显示装置的型号信息，参照上述尺寸信息，确定与所连接的显示装置相适的图像尺寸。然后，显示尺寸指示部336根据所确定的图像尺寸，生成图像尺寸指示，并发送到图像输出部334。
在本实施方式中，特别是在上述尺寸信息和显示尺寸指示中分别包含有与适合显示于该型号的显示装置的图像的纵横比相关的信息(纵横比信息)和与纵横比相关的指示(纵横比指示)。该纵横比信息和纵横比指示可以是表示使要显示的图像为纵长的纵向还是横长的横向的值。
例如，在该尺寸信息中，作为与HMD 100的横长的显示区域402(图5)相适的图像尺寸，与HMD 100的型号相对应地存储有包含对横长的横向图像进行指定的纵横比信息在内的图像尺寸的指定。另外，除了纵横比之外，在尺寸信息和图像尺寸指示中还可以包含有显示装置的显示区域内的图像大小或图像显示位置的指示等。并且，上述纵横比除了直接表示图像的纵横尺寸之比外，还可以表示该图像的纵横方向的显示分辨率之比。并且，上述图像大小除了直接表示该图像的尺寸之外，还可以表示纵横方向的显示分辨率。在该意义下，包含上述纵横比和/或图像大小在内的图像尺寸指示与关于显示分辨率的指示对应。
当便携式信息终端300与HMD 100连接时，显示尺寸指示部336根据从连接检测部332发送的HMD 100的型号信息来参照上述尺寸信息。然后，显示尺寸指示部336从上述尺寸信息中确定与HMD 100相适的、包含对横长的横向图像进行指示的纵横比信息在内的图像尺寸。显示尺寸指示部336根据所确定的图像尺寸，生成包含对横向图像进行指示的纵横比指示在内的图像尺寸指示，并发送到图像输出部334。
如上述那样，图像输出部334指示OS 344将依照接受到的图像尺寸指示的图像向HMD 100输出。由此，通过镜像功能显示于HMD 100的图像成为与HMD 100的横长的显示区域相适的横向图像。
可以根据与便携式信息终端300连接的显示装置的名称、昵称、简称等能够识别的信息，利用图像输出部334从网络等取得图像尺寸信息，从而代替上述方式。具体来说，从通信I/F部318或显示部303输入与便携式信息终端300连接的显示装置的名称等能够识别的信息。然后，图像输出部334根据该名称等，经由无线通信部314从因特网取得与该名称对应的显示装置的上述显示分辨率的相关信息等，从而能够生成图像尺寸指示。
图3示出了在便携式信息终端300中例如由OS 344在显示部303上显示的菜单的图像400。在图示的例子中，所显示的图像400的朝向是纵长的纵向。在该情况下，当便携式信息终端300与HMD 100连接时，图像输出部334使用OS 344的镜像功能将基于显示部303上的图像400的图像显示于HMD 100。这里，当图像输出部334如现有的便携式信息终端那样将图3所示的图像400直接显示于HMD 100时，HMD100的用户在HMD 100的显示区域内会看到图4所示的图像。
即，在基于镜像功能的现有的图像显示中，例如在HMD 100上的横长的显示区域402的中央附近显示出与便携式信息终端300的显示部303上的纵长的图像400相同的图像404。在该情况下，如图示那样，实际用于图像显示仅是HMD 100的显示区域402的中央的一部分，从显示区域402的利用效率这一观点来看，是低效的显示。
与此相对，在本发明的便携式信息终端300中，显示尺寸指示部336发送图像尺寸指示，由此，图像输出部334输出与HMD 100的显示区域402相适的纵横比的图像，因此能够提高显示区域402的利用效率。
图5是示出在使用了本发明的便携式信息终端300的情况下通过镜像功能显示于HMD 100的图像的例子的图。在图示的例子中，由OS 344生成的菜单图像通过镜像功能在HMD 100的横长的显示区域402中显示为横长的横向图像406。
在图示的例子中，所显示的菜单图像的生成源是OS 344。当图像输出部334根据图像尺寸指示来对OS 344指定横向图像时，OS 344可生成与横向图像相适的菜单图像，并输出到显示部303。其结果是，显示于HMD 100的图像也成为由OS 344生成的上述与横向图像相适的菜单图像。图5所示的图像406是由OS 344生成的与横向图像相适的菜单图像的例子。作为一例，图像406构成为在图3所示的图像400的左右添加了通过将图像400沿左右方向翻页而显示的图像部分。
另外，显示于显示部303的图像有时可以不是由OS 344本身生成的，而由在OS344上执行的应用(例如应用部330)来显示。在OS 344上执行的这种应用通常从OS 344读入是纵向图像还是横向图像的指定而进行向显示部303的输出。因此，即使在由应用部330生成的图像的情况下，如果图像输出部334对OS 344指定横向图像，则也能够向显示部303输出由应用部330生成的横向图像。其结果是，显示在HMD 100上的图像也成为与HMD 100相适的横向图像。
返回到图2，UI输出部338响应于经由通信线缆42和连接器304与HMD 100连接的情况，将显示于显示部303的图像切换成用户界面的显示，该用户界面用于指示执行与该图像相关联的处理。
此时，将显示部303的亮度值设定为默认的亮度值Id而进行用户界面的显示。以下，也将用户界面简称为UI。
这里，作为规定的亮度值的默认的亮度值Id例如可以是预先确定的100％、75％等表示相对于最大亮度的亮度比的固定值。或者，默认的亮度值Id可以是由用户预先确定并保存在非易失性存储部316中的、与亮度比相关的设定值。
对上述UI显示的切换是通过以下方式来进行的：将至此为止显示于显示部303的图像设定为背景图像，将包含UI的图像设定为前景而显示在显示部303中。在该情况下，由于至此为止所显示的图像作为背景图像而被虚拟地持续输出到显示部303，所以通过镜像功能向HMD 100持续输出该图像。通常，除非改变对镜像对象图像进行指定的OS内的参数的设定值，否则基于OS的镜像功能的图像输出的对象不会改变。
具体来说，当HMD 100与便携式信息终端300连接时，UI输出部338指示OS 344将至此为止显示于显示部303的图像设定为背景图像。并且，UI输出部338生成对预先定义的多个互相不同的UI中的一个UI(默认UI)进行显示的UI显示画面。然后，UI输出部338指示OS344将所生成的UI的显示画面设定为前景图像而显示在显示部303中。此时，UI输出部338指示OS 344将该UI显示画面的显示亮度设定为默认的亮度值Id。由此，默认UI的显示画面在显示部303上以默认亮度值Id显示。
另外，在上述预先定义的多个互相不同的UI中例如包含用于显示软键盘以输入文本的键盘UI、和/或用于输入与影像再现相关的指示的影像再现UI。并且，在上述UI中例如可包含触控板UI和/或十字键UI，其中，该触控板UI显示出平板(pad)以取得触摸传感器322上的手指等的触摸位置坐标，该十字键UI显示出十字键以取得显示面板320上的光标坐标的坐标值的增减输入。
这些UI代替作为显示于HMD 100的图像的生成源的OS 344或应用部330所提供的UI来指示执行与该图像相关联的处理。具体来说，UI输出部338将用户经由显示于显示部303的UI输入的输入信息，经由OS 344输入到OS 344本身和/或由第2应用程序实现的应用部330。更具体来说，例如按照如下方式进行由UI输出部338在显示部303中显示的UI对由OS344或应用部330提供的UI的代替动作。
通常，智能手机等便携式信息终端所具有的OS具有用于文本输入、影像再现的开始、停止、快进等控制、触摸传感器322上的触摸位置坐标的取得以及光标坐标的增减之类的标准动作的标准API。OS 344或应用部330将分别执行的菜单显示或影像再现(动态图像再现)等动作的控制所需的、用于文本输入或影像再现控制等的UI显示于显示部303。然后，在操作了这些UI时，OS 344或应用部330调用用于文本输入或影像再现控制等的、OS 344所提供的对应的标准API。被调用的标准API例如将表示所输入的文本或动态图像再现开始等指示的数据分别保存在OS 344所提供的对应的缓冲器(例如，非易失性存储部316内的特定地址的存储区域)中。在这些缓冲器中例如可包含文本缓冲器、影像再现控制的指令缓冲器、触摸坐标缓冲器和/或光标坐标缓冲器。OS 344或应用部330通过读出上述缓冲器的数据，取得由用户对上述UI进行操作而输入的文本或指示。
与此相对，在用户操作了该UI时，UI输出部338在显示部303中显示的键盘UI、影像再现UI等UI代替OS 344和/或应用部330来调用对应的标准API。被调用的标准API与上述同样，将与上述操作对应的数据保存在OS 344内的上述文本缓冲器、影像再现控制的指令缓冲器等。由此，OS 344或应用部330能够取得用户经由UI输出部338在显示部303中显示的UI的输入。即，OS 344或应用部330所提供的UI被由UI输出部338在显示部303中显示的UI代替。
UI输出部338还响应于便携式信息终端300与HMD 100连接的情况，将用于供用户选择上述预先定义的多个UI中的任意UI的选择操作要素作为进行上述UI的显示的UI显示画面的一部分来显示在显示部303中。然后，UI输出部338响应于用户针对这些选择操作要素的操作，使用默认的亮度值Id将显示于显示部303的图像切换成对应的一个UI的显示。
选择操作要素可以是显示于显示部303的按钮、标签等。由此，用户能够将显示于显示部303的例如默认UI的显示切换成其他适当的UI的显示。
在将UI显示于显示部303时，UI输出部338还始终将预先确定的识别显示508显示于显示部303，该识别显示508用于供照相机图像识别部342判断显示部303是否进入到了HMD 100的用户的视野范围内。在后面对照相机图像识别部342的动作进行叙述。
图6是示出从连接检测部332接收到已与显示装置连接的通知时，由UI输出部338在显示部303中显示的UI显示画面的一例的图。在图示的例子中，例如与作为默认的用户界面的键盘UI 500一起显示有作为选择操作要素的按钮502、504、506。被写成“键盘”的按钮502是与目前显示于显示部303的键盘UI 500对应的选择操作要素。被写成“影像”的按钮504和被写成“游戏”的按钮506分别是与未显示于显示部303的作为其他用户界面的影像再现UI和游戏UI对应的选择操作要素。并且，在图6～图8中，显示于显示部303的识别显示508例如是特定的条形码。
在图6的例子中，由于按钮504和506是与未显示于显示部303的用户界面对应的选择操作要素，所以按照比与显示于显示部303的用户界面对应的按钮502低的亮度进行显示。由此，示出了按钮504和506是与未显示于显示部303的用户界面对应的选择操作要素。
对于图6所示的画面，当用户例如通过触摸等对作为选择操作要素的按钮504进行操作时，如图7所示，UI输出部338响应于该操作将与按钮504对应的影像再现UI 510显示于显示部303。
在图7所示的例子中，与按钮504对应的影像再现UI 510包含再现按钮512、快进按钮514、后退按钮516、暂停按钮518以及停止按钮520。并且，在显示部303中，与目前显示的影像再现UI 510对应的按钮504按照比与目前未显示的用户界面对应的按钮502、506高的亮度来进行显示。
另一方面，当用户通过触摸等在图6所示的画面或图7所示的画面中对按钮506进行操作时，如图8所示，UI输出部338响应于该操作将与按钮506对应的游戏UI 530显示于显示部303。
在图8所示的例子中，游戏UI 530由触控板UI 532和十字键UI 534构成。并且，在显示部303中，与目前显示的游戏UI 530对应的按钮506按照比与目前未显示的用户界面对应的按钮502、504高的亮度进行显示。
另外，在图6～图8的例子中，为了区分与显示于显示部303的用户界面对应的按钮(即，选择操作要素)、和与未显示的用户界面对应的按钮，对按钮的显示亮度进行了改变。
但是，上述区分手段并不限于此。也可以代替按钮的显示亮度而使按钮的显示颜色不同，从而对与显示于显示部303的用户界面对应的按钮、和与未显示于显示部303的用户界面对应的按钮进行区分显示。
并且，在本实施方式中，通过由用户对按钮504等进行操作，UI输出部338将与该按钮对应的UI的显示画面显示于显示部303，但并不限于此。例如，在应用部330将显示于显示部303的图像向HMD 100输出时，UI输出部338也可以将与实现应用部330的第2应用程序的种类对应的UI显示于显示部303。具体来说，UI输出部338首先从第2应用程序(相应地，应用部330)取得与第2应用程序的种类相关的信息。然后，UI输出部338将显示于显示部303的图像切换成与第2应用程序的种类对应的UI的显示。
回到图2，在UI输出部338将任意的UI显示于显示部303之后，UI输出部338的显示亮度设定部340计测在未对所显示的该UI进行操作的状态下经过的时间。然后，在规定的时间以上未操作显示于显示部303的UI时，显示亮度设定部340将显示部303的亮度设定为比默认的亮度值Id小的值或者设定为零。具体来说，显示亮度设定部340指示OS 344将目前设定在显示部303的前景图像中的UI显示画面的显示亮度值设定为比默认的亮度值Id小的规定值Ids或者设定为零。由此，能够降低未使用UI时的便携式信息终端300的耗电。另外，关于是否操作了UI的判断，例如可以通过判断触摸传感器322是否检测到显示面板320上的任意场所被用户的手指等触摸来进行。
并且，显示亮度设定部340根据从作为加速度传感器来发挥功能的9轴传感器301取得的传感器数据，判断便携式信息终端300是否被用户摇动。然后，在被摇动时，显示亮度设定部340将显示部303的亮度设定为规定的默认的亮度值Id而显示UI。由此，例如在显示部303的显示亮度为默认值Id以下而不容易看到UI时，用户可以摇动便携式信息终端300而使显示部303上的UI以默认的亮度值Id明亮地显示。另外，能够根据从9轴传感器301取得的传感器数据所示的、对便携式信息终端300施加的加速度的变化来检测便携式信息终端300被用户摇动的情况。例如，在检测到该加速度在规定的范围的周期内按照规定的值以上的振幅和/或规定的次数以上的次数发生了变化时，显示亮度设定部340能够判断为便携式信息终端300被用户摇动。
取而代之，或者除此之外，显示亮度设定部340还根据从也作为姿势传感器来发挥功能的9轴传感器301取得的传感器数据，判断是否检测到便携式信息终端300的显示部303朝向与重力方向相反的方向。然后，在显示部303朝向与重力方向相反的方向时，显示亮度设定部340将显示部303的亮度设定为默认的亮度值Id而显示UI。由此，例如在显示部303的显示亮度为默认值Id以下时，用户仅通过使便携式信息终端300的显示部303朝向与重力方向相反的“朝上”方向，便能够使显示部303上的UI以默认的亮度值Id来显示。
并且，在显示部303未进入到HMD 100的用户视野范围内时，显示亮度设定部340使显示部303上的UI的显示亮度比默认的亮度值Id小。具体来说，在显示部303未进入到HMD100的用户视野范围内时，如后述那样，从照相机图像识别部342向显示亮度设定部340发送视野外通知。显示亮度设定部340在接收到视野外通知时，指示OS 344将显示部303上的UI的显示亮度设定为比规定的默认亮度值Id小的值或者设定为零。由此，在由于用户没有使显示部303进入到视野范围内从而很有可能不使用显示部303上的UI时，使显示部303的亮度降低，能够防止无用的电力消耗。
并且，在显示部303进入到HMD 100的用户视野范围内时，显示亮度设定部340将显示部303上的UI的显示亮度设定为默认的亮度值Id。具体来说，在显示部303进入到HMD 100的用户视野范围内时，如后述那样，从照相机图像识别部342向显示亮度设定部340发送视野内通知。在从照相机图像识别部342接收到视野内通知时，显示亮度设定部340将显示部303的显示亮度设定为规定的默认亮度值Id。由此，在用户想要对显示部303上的UI进行操作时，仅通过使显示部303进入到视野范围内便能够使显示部303上的UI以默认的亮度值Id明亮地显示。
除此之外，在显示部303进入到HMD 100的用户视野范围内时，也可以使显示于HMD100的图像的亮度减小或者设定为零。具体来说，照相机图像识别部342也向图像输出部334发送视野内通知。然后，图像输出部334在接收到视野内通知时，指示OS 344将向HMD 100输出的图像的亮度(即，设置在显示部303的背景图像中的图像的亮度值)设定为减去规定的值或者设定为零。由此，当在视野范围内捕捉到显示部303时，用户能够更清楚地看到透过HMD 100上的图像显示而看到的显示部303上的UI。另外，图像输出部334之后在从照相机图像识别部342接收到视野外通知时，将设定在显示部303的背景图像中的图像的亮度值设定为上述减法运算等之前的值。由此，在显示部303从视野范围脱离时，用户能够以原来的亮度清楚地观看HMD 100上的图像。
照相机图像识别部342经由通信I/F部318来取得由HMD 100所具有的照相机61拍摄到的图像，判断显示部303是否进入到佩戴着HMD 100的用户的视野范围内。该判断能够通过在照相机61所拍摄到的图像中是否发现了由UI输出部338在显示部303中显示的识别显示508来进行。
当在照相机61的拍摄图像中发现了识别显示508时，照相机图像识别部342判断为显示部303进入到了用户的视野范围内。然后，照相机图像识别部342将判断为显示部303进入到了用户视野范围内的通知(视野内通知)发送给显示亮度设定部340。
并且，当在照相机61的拍摄图像中没有发现识别显示508时，照相机图像识别部342将判断为显示部303未进入到HMD 100的用户视野范围内的通知(视野外通知)发送给显示亮度设定部340。另外，如上述那样，照相机图像识别部342也可以将视野内通知和视野外通知发送给显示亮度设定部340，并且还发送给图像输出部334。
并且，在本实施方式中，识别显示508是条形码，但并不限于此。识别显示508可以是能够在照相机61的图像内识别出识别显示508的任意的形状、亮度、色彩、或者包含它们的变化的显示。例如，也可以将识别显示508设为按照规定的时间间隔闪烁或者颜色发生变化的三角形等形状简单的显示。
如以上说明的那样，作为处理装置的本实施方式的便携式信息终端300具有：显示部303，其显示图像；以及连接检测部332，其检测与作为外部的显示装置的HMD100连接的情况。并且，便携式信息终端300具有图像输出部334，该图像输出部334响应于与HMD 100连接的情况，将显示于显示部303的图像向HMD 100输出。此外，便携式信息终端300还具有用户界面输出部，该用户界面输出部响应于与HMD100连接的情况，将显示部303上的图像切换成用户界面的显示，该用户界面用于执行与对HMD 100的输出图像相关联的处理。并且，该用户界面的显示按照规定的默认亮度值Id来进行。
根据本发明的便携式信息终端300、显示系统1以及第1应用程序，当在HMD 100中显示有图像时，在显示部303上例如将UI显示得较大，从而能够使用户的输入操作变得容易。其结果是，从操作性的观点来看，提高了便携式信息终端300与HMD 100之间的协同动作的可用性。
并且，在本发明的便携式信息终端300中，在规定的时间以上未操作显示于显示部303的用户界面时，用户界面输出部338将显示部303的亮度设定为比规定的默认的亮度值Id小的值或者设定为零。
由此，在不需要对显示于显示部303的用户界面进行操作并且用户不需要看到显示部时，能够降低显示部303所消耗的电力，从而降低便携式信息终端300的电力消耗。其结果是，从运用成本的观点来看，也提高了便携式信息终端300与HMD 100之间的协同动作的可用性。
并且，本发明的便携式信息终端300具有作为加速度传感器来发挥功能的9轴传感器301。在利用9轴传感器301检测到便携式信息终端300被摇动时，用户界面输出部338将显示部303的亮度设定为规定的默认的亮度值Id。由此，在显示部303的显示亮度被设定得较低而不容易看到UI时，用户仅通过摇动便携式信息终端300便能够使显示部303上的UI明亮地显示。其结果是，从操作性的观点来看，进一步提高了便携式信息终端300与HMD 100之间的协同动作的可用性。
并且，本发明的便携式信息终端300具有还作为姿势传感器来发挥功能的9轴传感器301。在利用9轴传感器301检测到便携式信息终端300的显示部303朝向与重力方向相反的方向时，用户界面输出部338将显示部303的亮度设定为规定的默认的亮度值Id。由此，在显示部303的显示亮度被设定得较低而不容易看到UI时，用户仅通过使显示部303朝向与重力方向相反的“朝上”方向便能够使显示部303上的用户界面明亮地显示。其结果是，从操作性的观点来看，进一步提高了便携式信息终端300与HMD 100之间的协同动作的可用性。
并且，本发明的便携式信息终端300的用户界面输出部338响应于与HMD 100连接的情况，将用于供用户选择预先确定的用户界面中的任意界面的选择操作要素显示于显示部303。在便携式信息终端300中，这些选择操作要素是按钮502等。然后，用户界面输出部338响应于用户对按钮502等的操作，将显示于显示部303的图像切换成对应的一个用户界面的显示。由此，用户能够使与显示于HMD 100的图像对应的适当的用户界面显示于便携式信息终端300的显示部303。其结果是，从操作性的观点来看，进一步提高了便携式信息终端300与HMD 100之间的协同动作的可用性。
并且，本发明的便携式信息终端300具有显示尺寸指示部336，该显示尺寸指示部336向图像输出部334给出纵横比指示，该纵横比指示是与向HMD 100输出的图像的纵横比相关的指示。由此，能够将与HMD 100相适的纵横比的图像显示在HMD100上，因此能够提高HMD 100的显示区域的利用效率。其结果是，从可提供给用户的信息量的观点来看，能够提高便携式信息终端300与HMD 100之间的协同动作的可用性。
并且，本发明的便携式信息终端300具有作为运算部的控制部310，用户界面输出部338是通过在控制部310中执行第1应用程序而实现的。由此，无需更换操作系统，仅通过执行应用程序的执行便能够容易地提高便携式信息终端300与HMD 100之间的协同动作的可用性。
并且，在本发明的便携式信息终端300中，显示于显示部303并被向HMD 100输出的图像例如是通过在控制部310中执行第2应用程序而生成的。用户界面输出部338从第2应用程序取得与第2应用程序的种类相关的信息。
然后，用户界面输出部338将显示于显示部303的图像切换成与第2应用程序的种类对应的用户界面的显示。由此，便携式信息终端300使显示部303自动地显示与HMD 100所显示的图像对应的适当的用户界面，从操作性的观点来看，进一步提高了便携式信息终端300与HMD 100之间的协同动作的可用性。
并且，在本发明的便携式信息终端300中，控制部310在操作系统344上执行第1应用程序和第2应用程序。然后，用户界面输出部338将用户经由显示于显示部303的用户界面输入的输入信息经由操作系统344输入到第2应用程序。由此，用户界面输出部338能够将用户对显示部303上的用户界面进行操作的信息适当地向作为向HMD 100输出的图像的提供源的程序传送，而不用确定该信息的交接目的地。因此，能够抑制因设置用户界面输出部338而导致控制部310的处理负荷增加，从顺畅性的观点来看，提高了便携式信息终端300与HMD 100之间的协同动作的可用性。
并且，在本发明的便携式信息终端300中，HMD 100具有构成为能够看到外景的显示区域402，在佩戴于使用者的头部时利用显示区域402在使用者的视线前方与外景重叠地显示图像。并且，HMD 100具有拍摄外景的照相机61。并且，用户界面输出部338根据从HMD100所具有的照相机61取得的外景的拍摄图像，判断显示部303是否进入到了使用者的视野范围内。然后，在判断为显示部303未进入到使用者的视野范围内时，用户界面输出部338将显示部303的显示亮度设定为比规定的默认的亮度值Id小的值或者设定为零。由此，在显示部303未进入到使用者的视野范围内从而不太可能操作显示部303上的用户界面时，能够使显示部303的亮度降低，避免便携式信息终端300的无用的电力消耗。其结果是，从运用成本的观点来看，能够提高HMD 100与便携式信息终端300之间的协同动作的可用性。
并且，在本发明的便携式信息终端300中，在判断为显示部303进入到了HMD100的使用者的视野范围内时，用户界面输出部338将向显示部303输出的图像的亮度设定为规定的默认的亮度值Id。该判断与上述同样，是根据从HMD 100所具有的照相机61取得的外景的拍摄图像而进行的。由此，在显示部303进入到HMD 100的使用者的视野范围内从而很有可能操作显示部303上的用户界面时，能够提高显示部303的亮度值，从而提高用户界面的可见性。其结果是，从操作性的观点来看，能够提高HMD 100与便携式信息终端300之间的协同动作的可用性。
并且，在本发明的便携式信息终端300中，在判断为显示部303进入到了HMD100的使用者的视野范围内时，图像输出部334使向HMD 100输出的图像的亮度下降。详细来说，与显示部303未进入到上述视野范围内时相比，图像输出部334使向HMD 100输出的图像的亮度降低，或者设定为零。该判断是根据从HMD 100所具有的照相机61取得的外景的拍摄图像来进行的。由此，在显示部303进入到使用者的视野范围内从而很有可能操作显示部303上的用户界面时，在HMD 100中降低与作为外景的显示部303的画面重叠显示的图像的亮度。其结果是，进一步提高了显示部303上的用户界面的可见性，从操作性的观点来看，能够进一步提高HMD 100与便携式信息终端300之间的协同动作的可用性。
另外，本发明并不限于上述实施方式的结构，能够在不脱离其主旨的范围内以各种方式来实施。
例如，在上述实施方式中，HMD 100不具有OS，在便携式信息终端300内实现了OS344和UI输出部338，但并不限于此。例如，HMD 100也可以具有OS，并且具有在其OS上实现的UI输出部338，当在HMD 100中显示图像时，利用UI输出部338将该图像的操作所需的UI显示在便携式信息终端300上。在该情况下，应用部330也可以在上述OS上实现而设置在HMD 100内。
并且，在上述实施方式中，以图像显示部20与连接装置10分离而经由连接线缆40来连接的结构为例进行了说明，但连接装置10和图像显示部20也可以构成为通过无线通信线路来连接。
并且，图2所示的各要素中的至少一部分构成为可以由硬件实现，也可以通过硬件与软件的协作来实现，并不限定于如图示那样配置独立的硬件资源的结构。

Claims (13)

1.一种处理装置，其具有：
显示部，其显示图像；
连接检测部，其检测与头部佩戴型显示装置连接的情况；
图像输出部，其在所述连接检测部检测到所述头部佩戴型显示装置的连接时，将显示于所述显示部的图像向所述头部佩戴型显示装置输出；以及
用户界面输出部，其在所述连接检测部检测到所述头部佩戴型显示装置的连接时，使所述显示部按照规定的亮度值显示用户界面的显示图像，该用户界面用于指示执行与向所述头部佩戴型显示装置输出的图像相关联的处理，
所述头部佩戴型显示装置具有构成为能够看到外景的显示区域，在佩戴于使用者的头部时，利用所述显示区域在所述使用者的视线前方与外景重叠地显示从所述图像输出部输入的图像，
所述头部佩戴型显示装置具有拍摄外景的照相机，
在根据从所述头部佩戴型显示装置所具有的所述照相机取得的外景的拍摄图像，判断为所述显示部未进入到所述使用者的视野范围内时，所述用户界面输出部将所述显示部的显示亮度设定为比所述规定的亮度值小的值或者设定为零，
在根据从所述头部佩戴型显示装置所具有的所述照相机取得的外景的拍摄图像，判断为所述显示部进入到了所述使用者的视野范围内时，所述用户界面输出部将向所述显示部输出的图像的亮度设定为所述规定的亮度值。
2.根据权利要求1所述的处理装置，其中，
在规定的时间以上未操作显示于所述显示部的所述用户界面时，所述用户界面输出部将所述显示部的亮度设定为比所述规定的亮度值小的值或者设定为零。
3.根据权利要求1或2所述的处理装置，其中，
该处理装置还具有加速度传感器，
所述用户界面输出部在通过检测从所述加速度传感器取得的所述处理装置的加速度在规定的范围的周期内按照规定的值以上的振幅和/或规定的次数以上的次数发生了变化的情况，而检测到所述处理装置被摇动时，将所述显示部的亮度设定为所述规定的亮度值。
4.根据权利要求1所述的处理装置，其中，
该处理装置还具有姿势传感器，
在利用所述姿势传感器检测到所述处理装置的所述显示部朝向与重力方向相反的方向时，所述用户界面输出部将所述显示部的亮度设定为规定的亮度值。
5.根据权利要求1所述的处理装置，其中，
在所述连接检测部检测到所述头部佩戴型显示装置的连接时，所述用户界面输出部将用于供用户选择预定的多个用户界面中的任意用户界面的选择操作要素显示于所述显示部，并响应于对所述选择操作要素的操作，将所述显示部的显示图像切换成对应的一个所述用户界面的显示图像。
6.根据权利要求1所述的处理装置，其中，
该处理装置还具有显示尺寸指示部，该显示尺寸指示部向所述图像输出部给出与向所述头部佩戴型显示装置输出的所述图像的显示分辨率相关的指示。
7.根据权利要求1所述的处理装置，其中，
该处理装置具有运算部，
所述用户界面输出部是通过在所述运算部中执行第1应用程序而实现的。
8.根据权利要求7所述的处理装置，其中，
向所述头部佩戴型显示装置输出的所述图像是通过在所述运算部中执行第2应用程序而生成的，
所述用户界面输出部从所述第2应用程序取得与所述第2应用程序的种类相关的信息，将显示于所述显示部的图像切换成与所述第2应用程序的种类对应的所述用户界面的显示。
9.根据权利要求8所述的处理装置，其中，
所述运算部在操作系统上执行所述第1应用程序和所述第2应用程序，
所述用户界面输出部将用户经由所述用户界面输入的输入信息经由所述操作系统输入到所述第2应用程序。
10.一种显示系统，其具有处理装置和头部佩戴型显示装置，
该处理装置具有：
显示部，其显示图像；
连接检测部，其检测与头部佩戴型显示装置连接的情况；
图像输出部，其在所述连接检测部检测到所述头部佩戴型显示装置的连接时，将显示于所述显示部的图像向所述头部佩戴型显示装置输出；以及
用户界面输出部，其在所述连接检测部检测到所述头部佩戴型显示装置的连接时，使所述显示部按照规定的亮度值显示用户界面的显示图像，该用户界面用于指示执行与向所述头部佩戴型显示装置输出的图像相关联的处理，
该头部佩戴型显示装置具有构成为能够看到外景的显示区域，在佩戴于使用者的头部时，利用所述显示区域在所述使用者的视线前方与外景重叠地显示从所述图像输出部输入的图像，
所述头部佩戴型显示装置具有拍摄外景的照相机，
在根据从所述头部佩戴型显示装置所具有的所述照相机取得的外景的拍摄图像，判断为所述显示部未进入到所述使用者的视野范围内时，所述用户界面输出部将所述显示部的显示亮度设定为比所述规定的亮度值小的值或者设定为零，
在根据从所述头部佩戴型显示装置所具有的所述照相机取得的外景的拍摄图像，判断为所述显示部进入到了所述使用者的视野范围内时，所述用户界面输出部将向所述显示部输出的图像的亮度设定为所述规定的亮度值。
11.根据权利要求10所述的显示系统，其中，
在根据从所述头部佩戴型显示装置所具有的所述照相机取得的外景的拍摄图像，判断为所述显示部进入到了所述使用者的视野范围内时，与判断为所述显示部未进入到所述使用者的视野范围内时相比，所述图像输出部使向所述头部佩戴型显示装置输出的所述图像的亮度降低或者设定为零。
12.一种记录介质，其是记录有程序的计算机可读的非易失性记录介质，所述程序包括由处理装置执行的指令，所述指令包括以下处理：
检测所述处理装置与头部佩戴型显示装置之间的连接；
按照规定的亮度值将显示图像显示在所述处理装置的显示部上，
所述头部佩戴型显示装置具有构成为能够看到外景的显示区域，在佩戴于使用者的头部时，利用所述显示区域在所述使用者的视线前方与外景重叠地显示从图像输出部输入的图像，
所述头部佩戴型显示装置具有拍摄外景的照相机，
在根据从所述头部佩戴型显示装置所具有的所述照相机取得的外景的拍摄图像，判断为所述显示部未进入到所述使用者的视野范围内时，将所述显示部的显示亮度设定为比所述规定的亮度值小的值或者设定为零，
在根据从所述头部佩戴型显示装置所具有的所述照相机取得的外景的拍摄图像，判断为所述显示部进入到了所述使用者的视野范围内时，将向所述显示部输出的图像的亮度设定为所述规定的亮度值。
13.一种处理装置，其具有：
显示部，其显示图像；
连接检测部，其检测与外部的显示装置连接的情况；
图像输出部，其响应于与所述显示装置相连接而将显示于所述显示部的图像向所述显示装置输出；以及
用户界面输出部，其响应于与所述显示装置相连接而按照规定的亮度值将显示于所述显示部的图像切换成用户界面的显示，该用户界面用于指示执行与向所述显示装置输出的所述图像相关联的处理，
所述显示装置具有构成为能够看到外景的显示区域，在佩戴于使用者的头部时，利用所述显示区域在所述使用者的视线前方与外景重叠地显示从所述图像输出部输入的图像，
所述显示装置具有拍摄外景的照相机，
在根据从所述显示装置所具有的所述照相机取得的外景的拍摄图像，判断为所述显示部未进入到所述使用者的视野范围内时，所述用户界面输出部将所述显示部的显示亮度设定为比所述规定的亮度值小的值或者设定为零，
在根据从所述显示装置所具有的所述照相机取得的外景的拍摄图像，判断为所述显示部进入到了所述使用者的视野范围内时，所述用户界面输出部将向所述显示部输出的图像的亮度设定为所述规定的亮度值。
CN201811567016.5A 2017-12-22 2018-12-20 处理装置、显示系统以及记录介质 Active CN110045935B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-246914 2017-12-22
JP2017246914A JP7013850B2 (ja) 2017-12-22 2017-12-22 処理装置、表示システム、及びプログラム

Publications (2)

Publication Number Publication Date
CN110045935A CN110045935A (zh) 2019-07-23
CN110045935B true CN110045935B (zh) 2022-07-26

Family

ID=66950242

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811567016.5A Active CN110045935B (zh) 2017-12-22 2018-12-20 处理装置、显示系统以及记录介质

Country Status (3)

Country Link
US (1) US10823962B2 (zh)
JP (1) JP7013850B2 (zh)
CN (1) CN110045935B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111292703A (zh) * 2019-12-20 2020-06-16 深圳光启空间技术有限公司 一种屏幕亮度调节方法及装置
JP2021105782A (ja) 2019-12-26 2021-07-26 セイコーエプソン株式会社 表示システム、表示方法、及び、プログラム
JP2022056043A (ja) 2020-09-29 2022-04-08 セイコーエプソン株式会社 表示システム、表示方法及びプログラム
KR20220047446A (ko) * 2020-10-08 2022-04-18 주식회사 룩시드랩스 인지 기능 활동을 지원하기 위한 사용자 인터페이스 제공 장치 및 방법
WO2022123390A1 (ja) * 2020-12-11 2022-06-16 株式会社半導体エネルギー研究所 表示システムの動作方法
US11677835B2 (en) * 2021-10-25 2023-06-13 Adobe Inc. Reducing network bandwidth for remote content display
KR102468590B1 (ko) * 2022-06-27 2022-11-17 삼육대학교산학협력단 아이트래킹 기술 기반의 정신건강 진단 장치

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1638505A (zh) * 2004-01-05 2005-07-13 贝尔维夫有限公司 用于操作和控制便携终端中的显示器和背面衬光的装置和方法
CN102298162A (zh) * 2010-06-28 2011-12-28 深圳富泰宏精密工业有限公司 背光调节系统及方法
CN105026982A (zh) * 2012-11-20 2015-11-04 微软技术许可有限责任公司 头戴式显示器及其控制方法
WO2017096566A1 (zh) * 2015-12-09 2017-06-15 华为技术有限公司 一种显示的方法、装置及系统

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002354097A (ja) * 2001-05-30 2002-12-06 Nec Corp 携帯端末装置
JP2003279881A (ja) * 2002-03-27 2003-10-02 Hitachi Ltd 携帯情報装置
JP2009042967A (ja) * 2007-08-08 2009-02-26 Nikon Corp 情報入力表示システム、情報端末および表示装置
US8238979B2 (en) * 2009-04-14 2012-08-07 Qualcomm Incorporated System and method for mobile device display power savings
JP5630141B2 (ja) 2010-08-18 2014-11-26 ブラザー工業株式会社 画像表示システム、画像表示システムに含まれる携帯型情報処理装置のためのコンピュータプログラム、画像表示システムに含まれるヘッドマウントディスプレイ、及び画像表示方法
JP5829097B2 (ja) 2011-10-25 2015-12-09 オリンパス株式会社 頭部装着型表示装置、プログラム及び画像処理システム
US9336747B2 (en) * 2011-12-05 2016-05-10 Qualcomm Innovation Center, Inc. Display dimming to save mobile device power during webpage, web content, and device application loading
KR101522399B1 (ko) * 2011-12-23 2015-05-22 주식회사 케이티 휴대 단말에서 외부 디스플레이 기기로의 화면 표출 방법 및 그 휴대 단말
JP2013172426A (ja) * 2012-02-22 2013-09-02 Sharp Corp 携帯端末、制御方法、プログラム、及び、記録媒体
JP5517222B2 (ja) 2012-12-03 2014-06-11 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 端末装置、及びプログラム
JP6255731B2 (ja) * 2013-06-17 2018-01-10 コニカミノルタ株式会社 表示システム、表示方法および表示端末
JP6209906B2 (ja) 2013-09-05 2017-10-11 セイコーエプソン株式会社 頭部装着型表示装置、頭部装着型表示装置を制御する方法、画像表示システム
JP2015176588A (ja) * 2014-03-18 2015-10-05 株式会社東芝 表示装置、画像表示システムおよび情報処理方法
JP2016033611A (ja) * 2014-07-31 2016-03-10 セイコーエプソン株式会社 情報提供システム、表示装置、および、表示装置の制御方法
JP2017102220A (ja) * 2015-11-30 2017-06-08 セイコーエプソン株式会社 画像表示装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1638505A (zh) * 2004-01-05 2005-07-13 贝尔维夫有限公司 用于操作和控制便携终端中的显示器和背面衬光的装置和方法
CN102298162A (zh) * 2010-06-28 2011-12-28 深圳富泰宏精密工业有限公司 背光调节系统及方法
CN105026982A (zh) * 2012-11-20 2015-11-04 微软技术许可有限责任公司 头戴式显示器及其控制方法
WO2017096566A1 (zh) * 2015-12-09 2017-06-15 华为技术有限公司 一种显示的方法、装置及系统

Also Published As

Publication number Publication date
JP2019114050A (ja) 2019-07-11
US10823962B2 (en) 2020-11-03
JP7013850B2 (ja) 2022-02-01
CN110045935A (zh) 2019-07-23
US20190196185A1 (en) 2019-06-27

Similar Documents

Publication Publication Date Title
CN110045935B (zh) 处理装置、显示系统以及记录介质
KR20170126295A (ko) 헤드 마운티드 디스플레이 장치 및 그것의 제어방법
US20180246563A1 (en) Head-mounted display device, program, and method for controlling head-mounted display device
US20170038838A1 (en) Information processing system and information processing method
US20190197989A1 (en) Processing device, display system, and non-transitory computer-readable storage medium
US20240184403A1 (en) Personal digital assistant
JP2007235449A (ja) 画像装置、画像装置の通信方法、プログラム、記録媒体
KR102518404B1 (ko) 전자 장치 및 그의 시선 정보를 이용한 컨텐트 실행 방법
KR102617252B1 (ko) 전자 장치 및 그 파노라마 촬영 모드 자동 전환 방법
US20200327867A1 (en) Head mounted display system capable of displaying a virtual scene and a map of a real environment in a picture-in-picture mode, related method and related non-transitory computer readable storage medium
US11449296B2 (en) Display system, display method, and program
US11275547B2 (en) Display system, display method, and program
GB2574780A (en) Electronic device and method for controlling same
US10992926B2 (en) Head mounted display system capable of displaying a virtual scene and a real scene in a picture-in-picture mode, related method and related non-transitory computer readable storage medium
JP6995651B2 (ja) 電子機器、ウェアラブル機器および表示制御方法
US20230096793A1 (en) Wearable Camera with Mobile Device Optical Coupling
KR102477523B1 (ko) 360 비디오에서 POI(Point of Interest) 정보를 제공하기 위한 장치 및 방법
KR102629413B1 (ko) 전자 장치 및 전자 장치의 기능 실행 방법
JP6631299B2 (ja) 表示装置、表示装置の制御方法、及び、プログラム
CN117130528A (zh) 画面显示方法、装置、电子设备及存储介质
JP6693160B2 (ja) 表示装置、表示装置の制御方法、及び、プログラム
EP3734417A1 (en) Head mounted display system capable of displaying a virtual scene and a real scene in a picture-in-picture mode, related method and related non-transitory computer readable storage medium
KR101653591B1 (ko) 헤드 마운트 디스플레이 장치 및 그 동작 방법
CN117597653A (zh) 信息处理系统、信息处理装置和图像显示装置
CN117687500A (zh) 远程控制系统、远程控制器以及远程控制方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant