CN104252042B - 头部佩戴式显示装置以及头部佩戴式显示装置的控制方法 - Google Patents

头部佩戴式显示装置以及头部佩戴式显示装置的控制方法 Download PDF

Info

Publication number
CN104252042B
CN104252042B CN201410300944.0A CN201410300944A CN104252042B CN 104252042 B CN104252042 B CN 104252042B CN 201410300944 A CN201410300944 A CN 201410300944A CN 104252042 B CN104252042 B CN 104252042B
Authority
CN
China
Prior art keywords
user
display device
image
head
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410300944.0A
Other languages
English (en)
Other versions
CN104252042A (zh
Inventor
小林伸一
内山敏一
若宫仁美
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2013136054A external-priority patent/JP2015012433A/ja
Priority claimed from JP2014053187A external-priority patent/JP2015177403A/ja
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Publication of CN104252042A publication Critical patent/CN104252042A/zh
Application granted granted Critical
Publication of CN104252042B publication Critical patent/CN104252042B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02416—Detecting, measuring or recording pulse rate or heart rate using photoplethysmograph signals, e.g. generated by infrared radiation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02438—Detecting, measuring or recording pulse rate or heart rate with portable devices, e.g. worn by the patient
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays

Landscapes

  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Cardiology (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Engineering & Computer Science (AREA)
  • Physiology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Biophysics (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

本发明提供一种考虑使用者的身体状况、使用者间的个人差异而对头部佩戴式显示装置进行控制的技术。头部佩戴式显示装置具备：在佩戴于使用者的头部的状态下，供使用者视觉辨认图像的图像显示装置；配置于图像显示装置，并对使用者的生物体信息进行检测的检测部；使用图像显示装置对正在供使用者视觉辨认的图像进行控制的控制部；以及根据检测出的生物体信息的变化，将与图像的控制有关的信息即图像控制信息告知给使用者的告知部。

Description

头部佩戴式显示装置以及头部佩戴式显示装置的控制方法
技术领域
本发明涉及头部佩戴式显示装置。
背景技术
公知有在佩戴于头部的状态下使用的显示装置亦即头部佩戴式显示装置(头部佩戴式显示器(Head Mounted Display)，HMD)。头部佩戴式显示装置例如利用液晶显示器以及光源生成表示图像的图像光，并利用投射光学系统、导光板将生成的图像光导入使用者的眼睛，从而使使用者视觉辨认虚像。
在专利文献1中公开有能够对头部佩戴式显示装置进行远程操作的装置。该装置在从头部佩戴式显示装置的电源接通开始经过规定时间后，显示用于表示长时间使用了头部佩戴式显示装置这一情况的消息，从而促使使用者注意头部佩戴式显示装置的使用情况。
另外，在专利文献2中公开有如下技术，即在佩戴于手腕的脉搏测定装置中，通过对被多个受光部检测出的各个测定信号的差别进行解析，能够减少测定信号中的噪声的影响来测定脉搏。
专利文献1：日本特开2002-125137号公报
专利文献2：日本特开2013-176535号公报
非专利文献1：对内容生物体影响的调查研究报告，平成16年3月、总务省(コンテンツの生体への影響に関する調査研究報告書、平成16年3月、総務省)
非专利文献2：动态图像等影像手法的指导路线，2006年，日本放送协会，社团法人日本民间放送联盟(アニメーション等の映像手法によるガイドライン、2006年、日本放送協会、社団法人日本民間放送連盟)
但是，在专利文献1所记载的技术中，与被使用者视觉辨认的内容的种类、使用者的健康状态无关，在经过预先被规定时间后，一律进行警告消息的显示、头部佩戴式显示装置的强制停止之类用于避免长时间使用的控制。如上，在现有技术中，在经过被规定时间后，一律进行用于避免长时间使用的控制，因此存在如下课题，即存在因使用者的身体状况、使用者间的个人差异的不同，上述控制的时机过早或过迟的情况。此外，上述课题不限定于用于避免长时间使用的控制，在例如对图像光的亮度进行调整之类的其他控制时也同样存在。
另外，在专利文献2所记载的技术中，虽与以往相比能够对使用者的脉搏准确地进行检测，但存在欲将检测出的脉搏用于各种装置的控制的期望。另外，存在也欲对脉搏以外的使用者的生物体信息进行检测的课题。
发明内容
本发明是为了解决上述课题的至少一部分而完成的，能够以如下的方式来实现。
(1)根据本发明的一个方式，提供一种头部佩戴式显示装置。该头部佩戴式显示装置具备：图像显示装置，其在佩戴于使用者的头部的状态下，供使用者视觉辨认图像；检测部，其对使用者的生物体信息进行检测，并将上述生物体信息发送至上述图像显示装置；控制部，其使用上述图像显示装置对正在供使用者视觉辨认的图像进行控制；以及告知部，其根据检测出的上述生物体信息的变化，将与上述图像的控制有关的信息即图像控制信息告知给使用者。根据该方式的头部佩戴式显示装置，能够根据对每个使用者检测出的自主神经系统(Autonomic nervous system)的失调，以符合使用者的个人差异的方式对被使用者视觉辨认的图像进行控制，因此能够提高使用者的便利性。另外，通过使图像光的亮度降低等，能够减少对使用者的负担，从而能够使自主神经系统恢复到正常的状态。
(2)在上述方式的头部佩戴式显示装置的基础上，上述检测部也可以被配置为与使用者接触，并维持与使用者的接触。根据该方式的头部佩戴式显示装置，能够更加详细且更加简便地检测出使用者的生物体信息，从而容易进行与使用者的生物体信息对应的控制。
(3)在上述方式的头部佩戴式显示装置的基础上，上述生物体信息也可以是对脉搏进行确定的信息。根据该方式的头部佩戴式显示装置，能够简便地对使用者的自主神经系统的变化进行检测，从而能够进一步提高使用者的便利性。另外，不需要为了对使用者的自主神经系统的变化进行检测而配置大型装置，因此能够抑制图像显示装置的便携性的降低，并且能够提高使用者的便利性。
(4)在上述方式的头部佩戴式显示装置的基础上，上述告知部也可以根据由上述脉搏引起的心率变动的变化，将上述图像控制信息告知给使用者。根据该方式的头部佩戴式显示装置，能够简便地对使用者的自主神经系统的变化进行检测，从而能够进一步提高使用者的便利性。另外，不需要为了对使用者的自主神经系统的变化进行检测而配置大型装置，因此能够抑制图像显示装置的便携性的降低，并且能够提高使用者的便利性。
(5)在上述方式的头部佩戴式显示装置的基础上，上述生物体信息也可以是对眼睛的睁开闭合状态进行确定的信息。根据该方式的头部佩戴式显示装置，能够根据对每个使用者检测出的自主神经系统的失调，以符合使用者的个人差异的方式对被视觉辨认的图像进行控制，因此能够提高使用者的便利性。
(6)在上述方式的头部佩戴式显示装置的基础上，上述生物体信息也可以是对使用者的瞳孔的状态进行确定的信息。根据该方式的头部佩戴式显示装置，能够根据对每个使用者检测出的自主神经系统的失调，以符合使用者的个人差异的方式对被视觉辨认的图像进行控制，因此能够提高使用者的便利性。
(7)在上述方式的头部佩戴式显示装置的基础上，上述生物体信息也可以是对眼睛的充血进行确定的信息。根据该方式的头部佩戴式显示装置，通过对使用者的眼睛的充血的程度进行判断，而对专注被使用者视觉辨认的图像的程度、视觉辨认时间进行推断，从而能够根据对每个使用者检测出的身体状况的变化，对图像光进行控制，因此能够提高使用者的便利性。
(8)在上述方式的头部佩戴式显示装置的基础上，上述生物体信息也可以是对眼外肌的状态与眼内肌的状态中的至少一方进行确定的信息。根据该方式的头部佩戴式显示装置，对在使用者的眼外肌或者眼内肌积蓄的疲劳进行判断，从而能够根据与使用者的个人差异对应的眼睛疲劳，对图像光进行控制，因此能够提高使用者的便利性。
(9)在上述方式的头部佩戴式显示装置的基础上，上述生物体信息也可以是对体温进行确定的信息。根据该方式的头部佩戴式显示装置，能够与每个使用者的体温的变化对应地对显示图像进行控制，因此能够提高使用者的便利性。
(10)在上述方式的头部佩戴式显示装置的基础上，上述生物体信息也可以是对出汗进行确定的信息。根据该方式的头部佩戴式显示装置，能够与每个使用者的出汗的状态对应地对图像光进行控制，因此能够提高使用者的便利性。
(11)在上述方式的头部佩戴式显示装置的基础上，上述告知部也可以使上述控制部进行将上述图像控制信息作为图像而使用上述图像显示装置使使用者进行视觉辨认的控制。根据该方式的头部佩戴式显示装置，使用者容易识别图像控制信息，从而能够进一步提高使用者的便利性。
(12)在上述方式的头部佩戴式显示装置的基础上，上述告知部也可以将上述图像控制信息作为声音输出而使使用者识别。根据该方式的头部佩戴式显示装置，能够以不妨碍被使用者视觉辨认的图像的方式来促使使用者在视觉辨认图像的基础上还注意该图像，因此能够提高使用者的便利性。
(13)在上述方式的头部佩戴式显示装置的基础上，上述图像的控制也可以是将上述图像变更成不为使用者视觉辨认的控制。根据该方式的头部佩戴式显示装置，在检测出使用者的自主神经系统的失调、身体状况的恶化等的情况下，使被使用者视觉辨认的图像结束而实现使用者的健康状态的恢复，因此能够进一步提高使用者的便利性。
上述的本发明的各方式所具有的多个构成要素的全部并非必须，为了解决上述课题的一部分或者全部，或者为了实现本说明书所记载的效果的一部分或者全部，能够适当地对上述多个构成要素的一部分的构成要素进行变更、删除、与新的其他构成要素进行替换、删除限定内容的一部分。另外，为了解决上述课题的一部分或者全部，或者为了实现本说明书所记载的效果的一部分或者全部，也能够使上述本发明的一个方式所包括的技术特征的一部分或者全部与上述的本发明的其他方式所包括的技术特征的一部分或者全部组合，成为本发明的独立的一个方式。
例如，本发明的一个方式能够作为具备图像显示装置、检测部、控制部、告知部这四个要素中的一个以上或者所有的要素的装置来实现。即，该装置可以具有图像显示装置，也可以不具有图像显示装置。另外，装置可以具有检测部，也可以不具有检测部。另外，装置可以具有控制部，也可以不具有控制部。另外，装置可以具有告知部，也可以不具有告知部。图像显示装置例如也可以在佩戴于使用者的头部的状态下，供使用者视觉辨认图像。检测部例如也可以配置于上述图像显示装置，对使用者的生物体信息进行检测。控制部也可以对上述图像进行控制。告知部也可以根据检测出的上述生物体信息的变化，将与上述图像的控制有关的信息即图像控制信息告知给使用者。这样的装置例如能够作为头部佩戴式显示装置来实现，但也能够作为头部佩戴式显示装置以外的其他装置来实现。根据上述的方式，能够解决提高以及简化装置的操作性、使装置一体化、提高使用装置的使用者的便利性等各种课题中的至少一个。上述的头部佩戴式显示装置的各方式的技术特征的一部分或者全部均能够应用于该装置。
本发明也能够通过头部佩戴式显示装置以外的各种方式来实现。例如，能够通过头部佩戴式显示装置的控制方法、头部佩戴式显示系统、用于实现头部佩戴式显示系统的功能的计算机程序、记录该计算机程序的记录介质、包括该计算机程序并具体化在载波内的数据信号等方式来实现。
附图说明
图1是表示头部佩戴式显示装置的外观结构的说明图。
图2是功能性地表示头部佩戴式显示装置的结构的框图。
图3是表示通过图像光生成部射出图像光的样子的说明图。
图4是表示脉搏波形数据的一个例子的说明图。
图5是表示心跳间隔的时间推移的一个例子的说明图。
图6是表示心跳间隔的最大差的时间推移的一个例子的说明图。
图7是表示显示控制处理的流程的说明图。
图8是表示被使用者视觉辨认的视场的一个例子的说明图。
图9是表示被使用者视觉辨认的视场的一个例子的说明图。
图10是表示被使用者视觉辨认的视场的一个例子的说明图。
图11是表示第二实施方式的头部佩戴式显示装置的外观结构的说明图。
图12是功能性地表示第二实施方式的头部佩戴式显示装置的结构的框图。
图13是表示第二实施方式的显示控制处理的流程的说明图。
图14是表示变形例的头部佩戴式显示装置的外观结构的说明图。
图15是表示变形例的头部佩戴式显示装置的外观结构的说明图。
图16是表示变形例的头部佩戴式显示装置的外观结构的说明图。
图17是表示变形例的头部佩戴式显示装置的外观结构的说明图。
具体实施方式
接下来，结合实施方式并按以下的顺序对本发明的实施方式进行说明。
A.第一实施方式：
A-1.头部佩戴式显示装置的结构：
A-2.脉搏与自主神经系统的关系：
A-3.显示控制处理：
B.第二实施方式：
C.变形例：
A.第一实施方式：
A-1.头部佩戴式显示装置的结构：
图1是表示头部佩戴式显示装置100的外观结构的说明图。头部佩戴式显示装置100是佩戴于头部的显示装置，也被称为头部佩戴式显示器(Head Mounted Display，HMD)。第一实施方式的头部佩戴式显示装置100是供使用者视觉辨认虚像的同时也能够直接视觉辨认外景的光学透射式的头部佩戴式显示装置。此外，在本说明书中，为了方便起见，也将使用者通过头部佩戴式显示装置100进行视觉辨认的虚像称为“显示图像”。另外，也将射出根据图像数据生成的图像光的情况称为“对图像进行显示”。
头部佩戴式显示装置100具备在佩戴于使用者的头部的状态下供使用者视觉辨认虚像的图像显示部20、和对图像显示部20进行控制的控制部10(控制器10)。
图像显示部20是佩戴于使用者的头部的佩戴体，在第一实施方式中具有眼镜形状。图像显示部20包括右保持部21、右显示驱动部22、左保持部23、左显示驱动部24、右光学像显示部26、左光学像显示部28以及脉搏传感器61。此外，图像显示部20相当于权利要求中的“图像显示装置”。右光学像显示部26以及左光学像显示部28分别配置为在使用者佩戴了图像显示部20时位于使用者的右眼前以及左眼前。右光学像显示部26的一端与左光学像显示部28的一端在使用者佩戴了图像显示部20时与使用者的眉间对应的位置被相互连接。
右保持部21是设置为从作为右光学像显示部26的另一端的端部ER延伸至使用者佩戴图像显示部20时与使用者的侧头部对应的位置的部件。相同地，左保持部23是设置为从作为左光学像显示部28的另一端的端部EL延伸至使用者佩戴图像显示部20时与使用者的侧头部对应的位置的部件。右保持部21以及左保持部23如眼镜的镜腿(眼镜腿的挂耳部分)那样，将图像显示部20保持于使用者的头部。
右显示驱动部22与左显示驱动部24配置于使用者佩戴图像显示部20时与使用者的头部对置的一侧。此外，以下，也将右保持部21以及左保持部23仅总称为“保持部”，将右显示驱动部22以及左显示驱动部24仅总称为“显示驱动部”，将右光学像显示部26以及左光学像显示部28仅总称为“光学像显示部”。
显示驱动部22、24包括液晶显示器241、242(Liquid Crystal Display，以下也称为“LCD241、242”)、投射光学系统251、252等(参照图3)。显示驱动部22、24的详细结构后述。作为光学部件的光学像显示部26、28包括导光板261、262(参照图2)与调光板。导光板261、262由透光性的树脂材料等形成，将从显示驱动部22、24输出的图像光导入使用者的眼睛。调光板是薄板状的光学元件，配置为覆盖作为与使用者眼睛的一侧相反的一侧的图像显示部20的表面侧。调光板对导光板261、262进行保护，从而抑制导光板261、262的损伤、污垢附着等。另外，通过对调光板的透光率进行调整，能够对进入使用者眼睛的外部光量进行调整从而对视觉辨认虚像的容易性进行调整。此外，可以省略调光板。
脉搏传感器61是对图像显示部20的佩戴者即使用者的脉搏进行检测的传感器。脉搏传感器61是在将图像显示部20佩戴于使用者的头部的状态下配置于图像显示部20的靠使用者侧的非接触式传感器。脉搏传感器61通过发光二极管朝向使用者的生物体内(例如，鼻子)照射光，接收与在生物体内因心脏跳动而变化的血液流动对应的反射光。血液所含有的血红蛋白具有针对某波段的光较强的吸收光谱，因此被接收的反射光伴随着在血管中流动的血液容量(血液流量)的变化而变化。将反射光转换成电信号来进行检测，从而取得表示血液流量的电压值进而取得使用者的脉搏波形。
图像显示部20还具有用于将图像显示部20与控制部10连接的连接部40。连接部40包括与控制部10连接的主体线缆48、右线缆42、左线缆44、以及连结部件46。右线缆42与左线缆44是主体线缆48分支成两根的线缆。右线缆42从右保持部21的延伸方向的前端部AP插入右保持部21的壳体内，与右显示驱动部22连接。相同地，左线缆44从左保持部23的延伸方向的前端部AP插入左保持部23的壳体内，与左显示驱动部24连接。连结部件46设置于主体线缆48与右线缆42以及左线缆44的分支点，具有用于连接耳机插头30的插口。右耳机32以及左耳机34从耳机插头30延伸。
图像显示部20与控制部10经由连接部40进行各种信号的传送。在主体线缆48中与连结部件46相反一侧的端部和控制部10分别设置有相互嵌合的连接器(未图示)。通过主体线缆48的连接器与控制部10的连接器的嵌合/嵌合解除，而将控制部10与图像显示部20连接或者分开。例如，能够采用金属电缆、光纤作为右线缆42、左线缆44以及主体线缆48。
控制部10是用于对头部佩戴式显示装置100进行控制的装置。控制部10包括决定键11、亮灯部12、显示切换键13、触控屏14、亮度切换键15、方向键16、菜单键17、以及电源开关18。决定键11对按下操作进行检测，并输出决定由控制部10操作了的内容的信号。亮灯部12根据其发光状态来通知头部佩戴式显示装置100的动作状态。头部佩戴式显示装置100的动作状态例如有电源的接通/断开等。亮灯部12例如使用LED(Light Emitting Diode：发光二极管)。显示切换键13对按下操作进行检测，并输出例如将内容动态图像的显示模式切换成3D与2D的信号。触控屏14对使用者的手指在触控屏14的操作面上的操作进行检测，并输出与检测内容对应的信号。触控屏14能够采用静电式、压力检测式、光学式之类的各种触控屏。亮度切换键15对按下操作进行检测，并输出对图像显示部20的亮度进行增减的信号。方向键16对与上下左右方向对应的键的按下操作进行检测，并输出与检测内容对应的信号。电源开关18对开关的滑动操作进行检测，从而切换头部佩戴式显示装置100的电源接通状态。
图2是功能性地表示头部佩戴式显示装置100的结构的框图。如图2所示，控制部10具有输入信息取得部110、存储部120、电源130、操作部135、CPU140、接口180、发送部51(Tx51)以及发送部52(Tx52)。操作部135接受使用者所进行的操作，并由决定键11、显示切换键13、触控屏14、亮度切换键15、方向键16、菜单键17以及电源开关18构成。
输入信息取得部110取得与使用者所进行的操作输入对应的信号。与操作输入对应的信号例如有对配置于操作部135的触控屏14、方向键16、电源开关18的操作输入。电源130向头部佩戴式显示装置100的各部分供给电力。电源130例如能够使用充电电池。存储部120储存有各种计算机程序。存储部120由ROM、RAM等构成。CPU140读出并执行被储存于存储部120的计算机程序，从而作为操作系统150(OS150)、传感器控制部165、显示控制部190、声音处理部170以及图像处理部160发挥功能。
传感器控制部165对脉搏传感器61所检测的使用者的脉搏波形的数据(以下，也简称为“脉搏波形数据”)进行解析。传感器控制部165根据解析出的脉搏波形数据，当在脉搏波形中存在阈值以上的变化的情况下，根据控制信号将该情况发送至各部分。此外，脉搏传感器61以及传感器控制部165相当于权利要求中的“检测部”。
显示控制部190生成对右显示驱动部22以及左显示驱动部24进行控制的控制信号。具体而言，显示控制部190通过控制信号单独地控制右LCD控制部211对右LCD241的驱动打开/关闭、右背光灯控制部201对右背光灯221的驱动打开/关闭、左LCD控制部212对左LCD242的驱动打开/关闭、左背光灯控制部202对左背光灯222的驱动打开/关闭等。由此，显示控制部190对利用右显示驱动部22以及左显示驱动部24各自进行的图像光的生成以及射出进行控制。例如，显示控制部190使右显示驱动部22以及左显示驱动部24这双方生成图像光、仅使一方生成图像光或者使双方均不生成图像光。另外，显示控制部190根据从传感器控制部165发送的控制信号，生成用于使图像显示部20显示规定消息的控制信号。此外，显示控制部190相当于权利要求中的“控制部”。
显示控制部190经由发送部51以及发送部52发送针对右LCD控制部211与左LCD控制部212的各个控制信号。另外，显示控制部190发送针对右背光灯控制部201与左背光灯控制部202的各个控制信号。
图像处理部160取得内容所包含的图像信号。图像处理部160从已取得的图像信号分离垂直同步信号VSync、水平同步信号HSync等同步信号。另外，图像处理部160根据已分离的垂直同步信号VSync、水平同步信号HSync的周期，并利用PLL(Phase Locked Loop：锁相回路)电路等(未图示)生成时钟信号PCLK。图像处理部160使用A/D转换电路等(未图示)将分离同步信号得到的模拟图像信号转换成数字图像信号。然后，图像处理部160将转换后的数字图像信号作为对象图像的图像数据(RGB数据)，以帧为单位储存于存储部120内的DRAM。此外，图像处理部160也可以根据需要，对图像数据执行分辨率变换处理、亮度、彩度的调整之类的各种色调修正处理、梯形校正处理等图像处理。
图像处理部160经由发送部51、52分别发送已生成的时钟信号PCLK、垂直同步信号VSync、水平同步信号HSync、储存于存储部120内的DRAM的图像数据。此外，也将经由发送部51发送的图像数据称为“右眼用图像数据”，将经由发送部52发送的图像数据称为“左眼图像数据”。发送部51、52作为用于进行控制部10与图像显示部20之间的串行传送的收发机发挥功能。
声音处理部170取得内容所包含的声音信号，对已取得的声音信号进行放大，并供给至与连结部件46连接的右耳机32内的扬声器(未图示)以及左耳机34内的扬声器(未图示)。此外，例如在采用Dolby(注册商标)系统的情况下，对声音信号进行处理，从而从右耳机32以及左耳机34分别输出例如改变了频率等的不同声音。另外，声音处理部170根据从传感器控制部165发送的控制信号，向耳机32、34输出规定声音。
接口180是用于将成为内容的供给源的各种外部机器OA与控制部10连接的接口。外部机器OA例如有个人计算机(PC)、便携电话终端、游戏终端等。接口180例如能够使用USB接口、微型USB接口、存储卡用接口等。
图像显示部20具备右显示驱动部22、左显示驱动部24、作为右光学像显示部26的右导光板261、作为左光学像显示部28的左导光板262、以及脉搏传感器61。
右显示驱动部22包括接收部53(Rx53)、作为光源发挥功能的右背光灯控制部201(右BL控制部201)以及右背光灯221(右BL221)、作为显示元件发挥功能的右LCD控制部211以及右LCD241、以及右投射光学系统251。右背光灯控制部201与右背光灯221作为光源发挥功能。右LCD控制部211与右LCD241作为显示元件发挥功能。此外，也将右背光灯控制部201、右LCD控制部211、右背光灯221、以及右LCD241总称为“图像光生成部”。
接收部53作为用于进行控制部10与图像显示部20之间的串行传送的接收器发挥功能。右背光灯控制部201根据输入的控制信号，对右背光灯221进行驱动。右背光灯221例如是LED、电致发光(EL)等发光体。右LCD控制部211根据经由接收部53输入的时钟信号PCLK、垂直同步信号VSync、水平同步信号HSync、以及右眼用图像数据对右LCD241进行驱动。右LCD241是将多个像素配置为矩阵状的透射式液晶面板。
右投射光学系统251由使从右LCD241射出的图像光成为并行状态的光束的准直透镜构成。作为右光学像显示部26的右导光板261使从右投射光学系统251输出的图像光沿着规定光路反射并且导入使用者的右眼RE。此外，也将右投射光学系统251与右导光板261总称为“导光部”。
左显示驱动部24具有与右显示驱动部22相同的结构。左显示驱动部24包括接收部54(Rx54)、作为光源发挥功能的左背光灯控制部202(左BL控制部202)以及左背光灯222(左BL202)、作为显示元件发挥功能的左LCD控制部212以及左LCD242、以及左投射光学系统252。左背光灯控制部202与左背光灯222作为光源发挥功能。左LCD控制部212与左LCD242作为显示元件发挥功能。此外，也将左背光灯控制部202、左LCD控制部212、左背光灯222、左LCD242总称为“图像光生成部”。另外，左投射光学系统252由使从左LCD242射出的图像光成为并行状态的光束的准直透镜构成。作为左光学像显示部28的左导光板262使从左投射光学系统252输出的图像光沿着规定光路反射并且导入使用者的左眼LE。此外，也将左投射光学系统252与左导光板262总称为“导光部”。
图3是表示通过图像光生成部射出图像光的样子的说明图。右LCD241通过对配置为矩阵状的各像素位置的液晶进行驱动，使透过右LCD241的光的透过率变化，从而将从右背光灯221照射的照明光IL调制为表示图像的有效的图像光PL。对于左侧而言也相同。此外，如图3所示，在第一实施方式中，虽采用了背光灯方式，但也可以设为使用前侧照明方式、反射方式射出图像光的结构。
A-2.脉搏与自主神经系统之间的关系：
公知有若在头部佩戴式显示装置100的使用者的自主神经系统产生一些异常，则作为生物体信息之一的心率的变动幅度发生变化。图4是表示脉搏波形数据的一个例子的说明图。图4示出了在将横轴设为时间轴时取得的使用者的血液流量的变化。脉搏波形是跳动期间PT与无跳动期间NT交替地反复的波形。在一个跳动期间PT，血液流量伴随着时间经过按波峰P、波谷Q、波峰R、波谷S、以及波峰T的顺序变化。此外，波峰P、波谷Q、波峰R、波谷S、以及波峰T示出了与无跳动期间NT的血液流量Q0的血液流量的差成为最大的顶点。波峰R与血液流量Q0的血液流量的差比波峰P、波谷Q、波谷S、以及波峰T的血液流量与血液流量Q0的差大。而且，某跳动期间PT(1)的波峰R(1)与其接下来的跳动期间PT(2)的波峰R(2)之间的间隔是脉搏RR间隔。在不存在心率不齐等循环器官系统疾病的情况下，能够推断为脉搏与心跳相同，因此能够视为在脉搏RR间隔较短的情况下，心跳RR间隔也较短，每单位时间的心脏的跳动的次数较多，在脉搏RR间隔较长的情况下，心跳RR间隔也较长，每单位时间的心脏的跳动的次数较少。
图5是表示心跳RR间隔的时间推移的一个例子的说明图。图5示出了在将横轴设为时间轴时根据健康状态良好的使用者的脉搏波形数据计算出的心跳RR间隔的变化。公知有健康状态良好的使用者的心跳RR间隔在约900毫秒(ms)～约950ms之间周期性地变化。在本说明书中，将心脏跳动的规定次数(例如，100次)的心跳RR间隔的最大值MXrr与最小值MNrr的差称为“心跳RR间隔的最大差DR”。在健康状态良好的使用者的情况下，对于自主神经系统而言，交感神经与副交感神经始终作用并且欲保持平衡，因此心跳具有恒定的律动，从而心跳RR间隔的最大差DR约为50ms。
图6是表示心跳RR间隔的最大差DR的时间推移的一个例子的说明图。公知有若使用者的健康状态不良，则使用者的自主神经系统不正常地发挥功能，或者心跳RR间隔的最大差DR减少并接近零，即心跳RR间隔接近恒定值。如图6所示，在比时间t1靠后的区域AR，最大差DR逐渐减小，在该情况下可知有可能使用者的自主神经系统产生了一些异常。
A-3.显示控制处理：
图7是表示显示控制处理的流程的说明图。显示控制处理是在图像显示部20开始显示内容等动态图像(图像)后，检测出作为使用者的生物体信息的脉搏波形，根据脉搏波形的变化，在图像显示部20显示规定消息的处理。
在显示控制处理中，首先若操作部135接受在图像显示部20显示图像的规定操作，则根据接受到的操作在图像显示部20显示图像(步骤S11)。若在图像显示部20显示图像，则脉搏传感器61对作为使用者的生物体信息的脉搏波形数据进行检测并取得该脉搏波形数据(步骤S12)。此外，在图像显示部20显示内容的图像的情况下，脉搏传感器61始终取得脉搏波形数据。接下来，传感器控制部165根据从开始取得脉搏波形数据到经过规定时间(例如，30分钟)而取得的脉搏波形数据，对作为基准的心跳RR间隔的最大差DR进行计算(步骤S13)。
若计算出基准的心跳RR间隔的最大差DR的值(步骤S13)，则传感器控制部165对在基准的心跳RR间隔的最大差DR与在规定期间(例如，1分钟期间)内取得的心跳RR间隔的最大差DR的差是否产生阈值以上(例如，基准的最大差DR的10％以上)的差进行监视(步骤S14)。当未检测出在心跳RR间隔的最大差DR的差存在阈值以上的差的情况下(步骤S14：否)，传感器控制部165继续对在心跳RR间隔的最大差DR是否产生阈值以上的差进行监视(步骤S14)。当检测出在心跳RR间隔的最大差DR存在阈值以上的差的情况下(步骤S14：是)，显示控制部190使图像显示部20显示结束内容的动态图像的主旨的注意消息(步骤S15)。
图8以及图9是表示被使用者视觉辨认的视场VR的一个例子的说明图。图8示出了将注意消息显示于图像显示部20前的视场VR，图9示出了将注意消息显示于图像显示部20后的视场VR。如图8所示，在使用者视觉辨认的视场VR中包括外景SC与显示图像VI。使用者在显示图像VI的范围内，也能够以重叠的方式视觉辨认外景SC。在图9所示的视场VR中，相对于图8所示的视场VR而言，不同之处仅在于包括注意消息MS1这一点，其他点都相同。如图9所示，显示控制部190使语句“暂停动态图像，休息一下吧”作为注意消息MS1显示在图像显示部20上。此外，显示控制部190以及图像显示部20相当于权利要求中的“告知部”。
在将注意消息MS1显示于图像显示部20后(图7的步骤S15)，操作部135对使显示于图像显示部20的动态图像结束的操作进行监视(步骤S16)。在进行了使动态图像结束的操作的情况下(步骤S16：是)，控制部10结束显示控制处理。
在步骤S16的处理中，在未进行使动态图像结束的操作的情况下(步骤S16：否)，传感器控制部165对心跳RR间隔的最大差DR是否继续保持产生了阈值以上的差不变的状态进行判定(步骤S17)。在心跳RR间隔的最大差DR中，在不产生阈值以上的差的情况下(步骤S17：否)，传感器控制部165再次对在心跳RR间隔的最大差DR是否产生阈值以上的差进行监视(步骤S14)。
在步骤S17的处理中，当是保持在心跳RR间隔的最大差DR产生了阈值以上的差不变的状态的情况下(步骤S17：是)，显示控制部190使图像显示部20显示强制结束内容的动态图像的主旨的警告消息(步骤S18)。图10是表示被使用者视觉辨认的视场VR的一个例子的说明图。如图10所示，在使用者的视场VR中包括通过图像显示部20显示的“1分钟后，强制结束”的警告消息MS2。
在将警告消息MS2显示于图像显示部20后(图7的步骤S18)，操作部135对使显示于图像显示部20的动态图像结束的操作进行监视(步骤S19)。在进行了使动态图像结束的操作的情况下(步骤S19：是)，控制部10使显示控制处理结束。
在步骤S19的处理中，在未进行使动态图像结束的操作的情况下(步骤S19：否)，显示控制部190在从使警告消息MS2在图像显示部20显示到经过作为规定时间的1分钟期间内待机(步骤S20)。在未经过规定时间的情况下(步骤S20：否)，显示控制部190继续对使动态图像结束的操作进行监视(步骤S19)。在经过了规定时间的情况下(步骤S20：是)，显示控制部190进行使在图像显示部20显示的内容的动态图像成为非显示的强制结束(步骤S21)，控制部10使显示控制处理结束。此外，注意消息MS1以及警告消息MS2相当于权利要求中的图像控制信息。
如以上说明的那样，在第一实施方式的头部佩戴式显示装置100中，脉搏传感器61检测并取得作为使用者的生物体信息的脉搏波形数据，供传感器控制部165对心跳RR间隔的最大差DR进行计算。当检测出在心跳RR间隔的最大差DR存在阈值以上的差的情况下，图像显示部20显示注意消息MS1或者警告消息MS2。因此，在第一实施方式的头部佩戴式显示装置100中，根据针对每个使用者检测出的自主神经系统的失调，以符合使用者的个人差异的方式对显示图像进行控制，因此能够提高使用者的便利性。
另外，在第一实施方式的头部佩戴式显示装置100中，根据检测出的脉搏波形数据中的心跳RR间隔的最大差DR，将注意消息MS1以及警告消息MS2显示于图像显示部20，因此能够简便地对使用者的自主神经系统的变化进行检测，从而能够进一步提高使用者的便利性。另外，不需要为了对使用者的自主神经系统的变化进行检测而配置大型的装置，因此能够抑制图像显示部20的便携性的降低，并且提高使用者的便利性。
另外，在第一实施方式的头部佩戴式显示装置100中，在图像显示部20显示注意消息MS1以及警告消息MS2，通过视觉信息促使使用者停止视听内容。因此，在第一实施方式的头部佩戴式显示装置100中，使用者容易识别注意消息MS1以及警告消息MS2，从而能够进一步提高使用者的便利性。
另外，在第一实施方式的头部佩戴式显示装置100中，当在将警告消息MS2显示于图像显示部20后，未进行使显示于图像显示部20的动态图像结束的操作的情况下，进行强制结束动态图像。因此，在第一实施方式的头部佩戴式显示装置100中，在检测出使用者的自主神经系统失调、身体状况恶化等的情况下，为了使显示图像结束而实现使用者的健康状态的恢复，能够进一步提高使用者的便利性。
B.第二实施方式：
图11是表示第二实施方式的头部佩戴式显示装置100f的外观结构的说明图。图12是功能性地表示第二实施方式的头部佩戴式显示装置100f的结构的框图。如图11以及图12所示，在第二实施方式的头部佩戴式显示装置100f中代替第一实施方式的脉搏传感器61，而配置有耳式体温计66、右肌动电流描记器64以及左肌动电流描记器65、右眼拍摄照相机37f以及左眼拍摄照相机38f。另外，如图12所示，第二实施方式的控制部10f具有对通过右眼拍摄照相机37f以及左眼拍摄照相机38f拍摄到的图像进行处理的拍摄图像处理部166。
耳式体温计66是通过插入使用者的耳朵来测定使用者的体温的体温计。此外，所谓对体温进行测定是指对体温为多少摄氏度进行测定，也可以说是对体温的高低进行确定。在第二实施方式中，耳式体温计66代替第一实施方式的右耳机32而配置。此外，在第二实施方式中，与第一实施方式不同，左耳机34是输出声音的单声道耳机。
右肌动电流描记器64是佩戴于使用者的右太阳穴附近的使用了表面电极的肌动电流描记器。右肌动电流描记器64使电流在佩戴有右肌动电流描记器64的太阳穴附近流动，对产生的电压值进行检测，由此对使用者的用于使右眼RE移动的眼外肌、眼内肌的伸缩进行确定。若眼外肌、眼内肌伸缩，则检测出的电压值变化。右肌动电流描记器64将检测出的电压值作为控制信号发送至传感器控制部165f。左肌动电流描记器65是佩戴于使用者的左太阳穴附近的使用了表面电极的肌动电流描记器。左肌动电流描记器65以与右肌动电流描记器64相同的方式对使用者的左眼LE的眼外肌、眼内肌的伸缩进行确定。另外，左肌动电流描记器65将检测出的电压值作为控制信号发送至传感器控制部165f。以下，也将右肌动电流描记器64与左肌动电流描记器65合并而仅称为“肌动电流描记器64、65”。如图11所示，肌动电流描记器64、65形成为能够维持与使用者接触的状态。
右眼拍摄照相机37f是对使用者的右眼RE进行拍摄的照相机。另外，左眼拍摄照相机38f是对使用者的左眼LE进行拍摄的照相机。右眼拍摄照相机37f以及左眼拍摄照相机38f将用RGB分量表示拍摄到的图像的图像信号发送至拍摄图像处理部166。此外，以下，也将右眼拍摄照相机37f与左眼拍摄照相机38f合并仅称为“眼睛拍摄照相机37f、38f”。
拍摄图像处理部166针对基于从眼睛拍摄照相机37f、38f发送的图像信号的图像进行用于对识别为红色的像素进行确定的二值化。拍摄图像处理部166例如进行将R分量为150以上、绿色分量(G分量)为100以下、蓝色分量(B分量)为100以下的像素识别为红色像素、将除此以外的像素识别为红色以外的像素的二值化。拍摄图像处理部166将针对拍摄图像进行了二值化的结果发送至传感器控制部165f。
另外，传感器控制部165f针对从肌动电流描记器64、65发送的电压值进行傅立叶转换(FT)，将电压值伴随着时间经过的变化分解成各频率的强度。若使用者疲劳累加，则例如眼外肌痉挛，从而存在传感器控制部165f对高频电压值的变化进行检测的情况。
另外，传感器控制部165f当在对从拍摄图像处理部166发送的拍摄图像的各像素进行了二值化的结果中检测出识别为红色的像素的比例增多的变化的情况下，判定为使用者的眼睛中的红色血管的面积增加。即，在该情况下，考虑为使用者的眼睛的充血程度变得严重，因此传感器控制部165f判断为使用者产生异常。此外，所谓权利要求中对眼睛的充血进行确定除了判定眼睛是否充血之外，也包括对眼睛的充血为何种程度进行确定。
图13是表示第二实施方式的显示控制处理的流程的说明图。第二实施方式的显示控制处理与图7所示的第一实施方式的步骤S12、步骤S13、步骤S14、步骤S17不同，其他的步骤相同。在显示控制处理中，若在图像显示部20显示图像(步骤S11)，则作为使用者的各种生物体信息，传感器控制部165f检测并取得由耳式体温计66检测出的体温、由肌动电流描记器64、65检测出的基于眼外肌以及眼内肌的伸缩的各频率的强度、由眼睛拍摄照相机37f、38f以及拍摄图像处理部166拍摄到的拍摄图像的红色像素的比例(步骤S22)。
接下来，传感器控制部165f对已取得的每个生物体信息的基准进行设定(步骤S23)。传感器控制部165f定期地(例如，每隔30秒)取得并存储由耳式体温计66测定出的使用者的体温。传感器控制部165f在头部佩戴式显示装置100f起动后开始取得体温，计算5分钟的平均值即平均体温。传感器控制部165f将比平均体温高或者低两摄氏度(2℃)以上的体温(以下，也称为“异常体温”)设定为体温的基准阈值。另外，传感器控制部165f将在开始定期地(每隔30秒)拍摄使用者的两眼的图像后经过5分钟的拍摄图像的红色像素个数相对于整体像素个数的平均比例的110％设定为基准的阈值。另外，传感器控制部165f相对于对肌动电流描记器64、65所取得的电压值进行了傅立叶转换的值，将规定值以上的高频率、并且规定值以上的强度设定为基准阈值。
接下来，传感器控制部165f对通过任意的传感器检测出的值是否超过三个生物体信息内被设定的基准进行判定(步骤S24)。例如，在检测出比平均体温高两度以上的体温的情况下(步骤S24：是)，传感器控制部165f判断为使用者的身体状况产生异常，并显示注意消息(步骤S15)。
另外，相同地传感器控制部165f在检测出其他的生物体信息超过被设定基准的值的情况下，也显示注意消息。例如，在眼睛拍摄照相机37f、38f的拍摄图像中的红色像素个数的比例为阈值异常的情况下(步骤S24：是)，传感器控制部165f判断为使用者的眼睛的充血的程度变得严重，并显示注意消息(步骤S15)。另外，传感器控制部165f在相对于对肌动电流描记器64、65所取得的电压值进行了傅立叶转换的值，对规定值以上的频率并且规定值以上的强度进行了检测的情况下(步骤S24：是)，传感器控制部165f判断为使用者的眼外肌或者眼内肌产生异常，并显示注意消息(步骤S15)。
在步骤S16的处理中，在未进行使动态图像结束的操作的情况下(步骤S16：否)，传感器控制部165f对超过了被设定的基准的生物体信息是否依然保持超过基准的状态进行判定(步骤S27)，然后进行各种处理。
如以上说明的那样，在第二实施方式的头部佩戴式显示装置100f中，传感器控制部165f根据作为生物体信息通过拍摄图像处理部166对两眼的拍摄图像进行了二值化的像素比例，对使用者的眼睛的充血的程度进行判断，并进行显示控制处理。因此，在第二实施方式的头部佩戴式显示装置100f中，通过对使用者的眼睛的充血的程度进行判断，从而对使用者专注于显示图像的程度、视觉辨认时间进行推断，根据对每个使用者检测出的身体状况的变化，对显示图像进行控制，因此能够提高使用者的便利性。
另外，在第二实施方式的头部佩戴式显示装置100f中，传感器控制部165f根据作为使用者的生物体信息基于使用者的使眼睛移动的眼外肌或者内外筋的动作的肌电图的变化，对使用者的身体状况的异常进行检测，并进行显示控制处理。因此，在第二实施方式的头部佩戴式显示装置100f中，通过对在使用者的眼外肌或者眼内肌累加的疲劳进行判断，并根据与使用者的个人差异对应的眼睛的疲劳，能够对显示图像进行控制，因此能够提高使用者的便利性。
另外，在第二实施方式的头部佩戴式显示装置100f中，肌动电流描记器64、65形成为能够维持与使用者接触的状态。因此，在第二实施方式的头部佩戴式显示装置100f中，能够更加详细且更加简便地对使用者的生物体信息进行检测，从而容易进行与使用者的生物体信息对应的控制。
另外，在第二实施方式的头部佩戴式显示装置100f中，传感器控制部165f根据作为使用者的生物体信息的由耳式体温计66测定出的使用者的体温对使用者的异常体温进行检测，并进行显示控制处理。因此，在第二实施方式的头部佩戴式显示装置100f中，与使用者各自的体温的变化对应地对显示图像进行控制，因此能够提高使用者的便利性。
C.变形例：
此外，本发明不限定于上述实施方式，能够在不脱离其主旨的范围内以各种方式来实施，例如，能够进行如下的变形。
C1.变形例1：
图14以及图15是表示变形例的头部佩戴式显示装置的外观结构的说明图。在该变形例的头部佩戴式显示装置100a以及头部佩戴式显示装置100b中，相对于上述实施方式的头部佩戴式显示装置100而言，图像显示部20中配置脉搏传感器61的位置不同，其他方面与上述实施方式相同。如图14所示，在头部佩戴式显示装置100a中，在使用者将图像显示部20佩戴于头部时，在与使用者的右耳的上部对置的位置配置有脉搏传感器62，在与使用者的左耳的上部对置的位置配置有脉搏传感器63。另外，如图15所示，在头部佩戴式显示装置100b中，在使用者将图像显示部20佩戴于头部时，在与使用者的右太阳穴对置的位置配置有脉搏传感器62b，在与使用者的左太阳穴对置的位置配置有脉搏传感器63b。在该变形例中，在与上述实施方式的脉搏传感器61不同的位置配置有脉搏传感器62、63、62b、63b，但即便是该头部佩戴式显示装置100a、100b，也能够对使用者的脉搏进行检测。此外，在头部佩戴式显示装置100a、100b中，在图像显示部20的右、左配置有脉搏传感器，但也可以仅配置于其中一方，并且，也可以配置于其他的部分。
C2.变形例2：
图16是表示变形例的头部佩戴式显示装置100c的外观结构的说明图。如图16所示，在头部佩戴式显示装置100c中，与上述实施方式的不同之处在于，代替脉搏传感器61，而将右眼拍摄照相机37、左眼拍摄照相机38配置于图像显示部20c，其他的结构与上述实施方式相同。此外，也将右眼拍摄照相机37以及左眼拍摄照相机38仅总称为“眼睛拍摄照相机”。右眼拍摄照相机37以及左眼拍摄照相机38是对使用者的右眼以及左眼分别进行拍摄的小型的CCD照相机。在头部佩戴式显示装置100c中，传感器控制部165对眼睛拍摄照相机37、38分别拍摄到的使用者的右眼以及左眼的图像进行解析，从而对右眼以及左眼中的每一个眼睑的睁开闭合情况进行判定。传感器控制部165针对眼睛拍摄照相机37、38拍摄到的使用者的右眼以及左眼中的每一个进行眼睑的睁开闭合状态的模式匹配，从而对眼睑闭合的状态、眼睑闭合一半的半睁眼睛的状态等进行判定。另外，传感器控制部165进行模式匹配从而对使用者的右眼以及左眼中的每一个瞳孔的大小进行测定。
若使用者过于专注显示于图像显示部20的内容的动态图像，则每单位时间的眨眼的次数减少，从而可能产生干眼症等状态。因此，在头部佩戴式显示装置100c中，传感器控制部165在图7的步骤S13以及步骤S14的处理中，对在规定期间内取得的每单位时间的眨眼次数进行计算(步骤S13)，从而也可以对每单位时间的眨眼次数是否减少为被预先决定的阈值以上进行监视(步骤S14)。
另外，公知有若作为自主神经系统之一的交感神经兴奋，则与不兴奋的状态相比，瞳孔进一步打开。因此，在头部佩戴式显示装置100c中，传感器控制部165对在规定期间内取得的瞳孔的大小进行计算(步骤S13)，从而也可以对瞳孔的大小是否变化为被预先决定的阈值以上进行监视(步骤S14)。在该变形例的头部佩戴式显示装置100c中，与上述实施方式不同，即使不取得脉搏系数据，根据由眼睛拍摄照相机37、38取得的图像，也能够对显示于图像显示部20的图像进行控制。此外，在头部佩戴式显示装置100c中，作为对生物体信息进行检测的检测部，能够使用眼睛拍摄照相机37、38，但也可以通过红外线传感器，检测使用者的眼睛的睁开闭合状态。在该变形例的头部佩戴式显示装置100c中，根据使用者的眼睛的睁开闭合状态或者瞳孔的状态将注意消息MS1以及警告消息MS2显示于图像显示部20。因此，根据对每个使用者检测出的自主神经系统的失调，以符合使用者的个人差异的方式对显示图像进行控制，因此能够提高使用者的便利性。
C3.变形例3：
在上述实施方式中，虽将使显示于图像显示部20的内容的动态图像结束的主旨的注意消息MS1以及警告消息MS2作为图像而显示，但关于使用者视听的内容的视听的停止的催促方法不限定于此，能够进行各种变形。例如，代替注意消息MS1以及警告消息MS2，声音处理部170也可以使用耳机32、34，输出与停止使用者视听内容有关的声音。在该变形例中，能够以不妨碍被使用者视觉辨认的显示图像的方式促使使用者注意，因此能够提高使用者的便利性。
另外，在上述实施方式中，作为与显示于图像显示部20的图像的控制有关的信息，使注意消息MS1以及警告消息MS2在图像显示部20显示，但不限定于此，能够进行各种变形。例如，也可以将使右背光灯221与左背光灯222中的至少一方的亮度降低的消息显示于图像显示部20。在该变形例中，即使不停止内容的动态图像的再生，通过降低图像光的亮度，也能够减少对使用者的负担，而使自主神经系统恢复到正常的状态。
C4.变形例4：
在上述实施方式中，心跳RR间隔的最大差DR作为一个例子，列举100次的心脏跳动中的心跳RR间隔的最大值MXrr与最小值MNrr的差，但不限定于此，能够进行各种变形。例如，可以是50次、200次的心脏跳动，也可以是每单位时间所包含的心脏跳动中的心跳RR间隔的最大值MXrr与最小值MNrr的差。另外，作为心跳RR间隔的最大差DR中的差的阈值，列举10％为例子，但不限定于此，能够进行各种变形。例如，可以是20％，也可以利用时间(ms)来进行定义。另外，上述数字也可以是通过操作部135由使用者任意地变更的方式。
C5.变形例5：
在上述实施方式中，使用者的脉搏被非接触式的脉搏传感器61检测出，但对使用者的生物体信息进行检测的方法不限定于接触式或者非接触式等，能够进行各种变形。例如，也可以不是对反射光进行受光的脉搏传感器61，而是对透过了生物体内的透过光进行受光的非接触式的脉搏传感器61。在该情况下，将透过光的脉搏传感器61佩戴于使用者的耳垂，从而能够对使用者的脉搏进行检测。另外，作为使用者的生物体信息，可以与上述实施方式不同，不对血液流量的变化进行检测，而对血压的变化进行检测。例如，在与使用者的太阳穴对置的图像显示部20的部分配置以接触式对血压进行检测的传感器，从而能够对使用者的血压的变化进行检测。
另外，在上述实施方式中，在控制部10形成操作部135，但操作部135的方式能够进行各种变形。例如，也可以是与控制部10分体且具有作为操作部135的用户接口的方式。在该情况下，操作部135与形成有电源130等的控制部10分体，因此能够使其小型化，来提高使用者的操作性。另外，将对操作部135的动作进行检测的9轴传感器形成于操作部135，根据检测出的动作进行各种操作，从而使用者能够直感地对头部佩戴式显示装置100进行操作。
例如，图像光生成部也可以构成为具备有机EL(有机电致发光，Organic Electro-Luminescence)的显示器、有机EL控制部。另外，例如，图像生成部除了LCD之外，也能够使用LCOS(Liquid crystal on silicon：硅基液晶,LCOS为注册商标)、数字/微镜/设备等。另外，例如，也能够将本发明应用于激光网膜投影式的头部佩戴式显示器。在为激光网膜投影式的情况下，所谓“图像光生成部中能够射出图像光的区域”能够定义为被使用者的眼睛识别的图像区域。
另外，例如头戴显示器也可以设为光学像显示部仅对使用者眼睛的一部分进行覆盖的方式，换言之光学像显示部不对使用者的眼睛完全进行覆盖的方式的头戴显示器。另外，头戴显示器也可以设为所谓的单眼类型的头戴显示器。另外，头戴显示器不限定于光学透射式，也可以是使用者无法以透过的方式视觉辨认外景SC的非透射式、影像透射式。
图17是表示变形例的头部佩戴式显示装置的外观结构的说明图。在图17(A)的例子的情况下，与图1所示的头部佩戴式显示装置100的不同之处是图像显示部20d代替右光学像显示部26而具备右光学像显示部26d、以及代替左光学像显示部28而具备左光学像显示部28d。右光学像显示部26d形成为比上述实施方式的光学部件小，配置于头部佩戴式显示装置100d的佩戴时的使用者的右眼的斜上方。相同地，左光学像显示部28d形成为比上述实施方式的光学部件小，配置在头部佩戴式显示装置100d被佩戴时使用者的左眼的斜上方。在图17(B)的例子的情况下，与图1所示的头部佩戴式显示装置100的不同之处是图像显示部20e代替右光学像显示部26而具备右光学像显示部26e、以及代替左光学像显示部28而具备左光学像显示部28e。右光学像显示部26e形成为比上述实施方式的光学部件小，配置在头戴显示器被佩戴时使用者的右眼的斜下方。左光学像显示部28e形成为比上述实施方式的光学部件小，配置在头戴显示器被佩戴时使用者的左眼的斜下方。如上，只要光学像显示部配置于使用者的眼睛的附近即可。另外，形成光学像显示部的光学部件的大小也任意，能够作为光学像显示部仅对使用者的眼睛的一部分进行覆盖的方式，换言之光学像显示部不对使用者的眼睛完全进行覆盖的方式的头部佩戴式显示装置100而实现。
另外，耳机可以采用耳挂型、头戴型，也可以省略。另外，例如也可以构成为搭载于汽车、飞机等交通工具的头戴显示器。另外，例如也可以构成为内置于头盔等身体护具的头戴显示器。
上述实施方式的头部佩戴式显示装置100的结构始终为一个例子，能够进行各种变形。例如，也可以省略设置于控制部10的方向键16、触控屏14的一方、在方向键16、触控屏14的基础上或者代替方向键16、触控屏14而设置操作用棒等其他操作用接口。另外，控制部10也可以是能够供键盘、鼠标等输入设备连接的结构，从而从键盘、鼠标接受输入。
另外，作为图像显示部，也可以代替如眼镜那样佩戴的图像显示部20，而采用例如像帽子那样佩戴的图像显示部之类的其他方式的图像显示部。另外，能够适当地省略耳机32、34。
另外，在上述实施方式中，头部佩戴式显示装置100可以向使用者的左右眼导入表示相同图像的图像光而使使用者视觉辨认二维图像，也可以向使用者的左右眼导入表示不同图像的图像光而使使用者视觉辨认三维图像。
另外，在上述实施方式中，可以将通过硬件实现的结构的一部分置换成软件，相反也可以将通过软件实现的结构的一部分置换成硬件。例如，在上述实施方式中，图像处理部160、声音处理部170通过CPU140读出并执行计算机程序而实现，但上述功能部也可以通过硬件电路来实现。
另外，在通过软件实现本发明的功能的一部分或者全部的情况下，该软件(计算机程序)能够以储存于计算机能够读取的记录介质的形式提供。在本发明中，所谓“计算机能够读取的记录介质”不限定于软盘、CD-ROM那样的便携式的记录介质，也包括各种RAM、ROM等计算机内的内部存储装置、硬盘等固定于计算机的外部存储装置。
另外，在上述实施方式中，如图1以及图2所示，控制部10与图像显示部20形成为单独的结构，但针对控制部10与图像显示部20的结构不限定于此，能够进行各种变形。例如，可以在图像显示部20的内部形成有形成于控制部10的结构的全部，也可以仅形成有一部分。另外，可以单独地形成上述实施方式中的电源130，且是能够更换的结构。也可以将形成于控制部10的结构以重合的方式形成于图像显示部20。例如，也可以将图2所示的CPU140形成于控制部10与图像显示部20这双方，也可以设为独立地划分形成于控制部10的CPU140与形成于图像显示部20的CPU进行的功能的结构。
另外，也可以是将控制部10与图像显示部20一体化，并佩戴于使用者的衣服的可以穿戴的计算机的方式。
C6.变形例6：
在上述实施方式中，为了对使用者的身体状况的变化进行检测，而能够使用各种传感器(例如，脉搏传感器61)，但传感器不限定于上述，能够进行各种变形。例如，代替第二实施方式的头部佩戴式显示装置100f的肌动电流描记器64、65，也可以使用附着于使用者的皮肤，从而对使用者的出汗的状态进行检测的出汗计。在该变形例中使用的出汗计是换气舱室式的出汗计，对经由舱室前的空气水分与包含经由舱室后的汗的空气水分这两个湿度进行测定，由此对使用者的出汗量进行测定。在测定出的每单位时间的使用者的出汗量为被预先设定的阈值以上的情况下，传感器控制部165f判定为使用者的身体状况产生异常。在该变形例中，根据每个使用者的出汗的状态对显示图像进行控制，因此能够提高使用者的便利性。此外，所谓权利要求中的对出汗进行确定除了进行使用者是否出汗的判定之外，也包括对使用者的出汗的程度进行确定。
另外，对使用者的出汗的状态进行检测的传感器也可以使用换气舱室式的出汗计以外的部件。例如，使两个电极与使用者的皮肤接触，对两个电极间的电阻值进行测定，从而在附着于使用者的皮肤的汗的量较多的情况下，电阻值变小，因此也可以根据测定出的电阻值对汗的量进行确定。另外，也可以使用能够对氯离子进行检测的氯离子传感器，对附着于使用者的皮肤的汗进行确定。
在上述实施方式中，列举具体例对供各种传感器安装的位置进行了说明，但供各种传感器安装的位置能够进行各种变形。例如，对使用者的体温进行测定的耳式体温计66也可以安装于使用者的左耳。另外，为了对使用者的体温进行测量，作为耳式体温计66以外的体温计，也可以使用夹入腋下来进行测定的体温计。
另外，为了对眼睛的充血进行判定，使用右眼拍摄照相机37f、38f，但通过使用近红外线的LED，也能够对使用者的眼睛的充血的状态进行确定。血液所含有的血红蛋白吸收近红外线，因此将近红外线向眼睛照射，并对其反射光进行检测，从而能够对使用者的眼睛的充血的状态进行确定。另外，反射率在使用者的眼睛内、黑眼珠、白眼珠处也不同，因此通过将近红外线向眼睛照射，能够对瞳孔的大小进行确定。另外，在上述第二实施方式中，拍摄图像处理部166对使用者的眼睛的拍摄图像进行了二值化，但也可以不必进行二值化，而是根据RGB分量，对红色的像素的比例进行确定。
另外，根据向使用者的眼睛照射的近红外线的反射光对反射率进行测定，从而能够判定眼睛的表面的水分的状态，进而也能够对干眼症的程度进行确定。另外，在第二实施方式中，传感器控制部165f根据眼睛拍摄照相机37f、38f拍摄到的使用者的眼睛的图像，并与被预先设定的干眼症的状态的眼睛模式匹配，从而也能够对干眼症的程度进行确定。另外，也可以在使眼睛闭上后睁开眼睛，预先设定直至破坏泪膜的时间(Break Up Time)，从而根据眨眼的间隔，使使用者视觉辨认注意消息。
在上述第二实施方式中，例如如超过基准体温或者小于基准体温的体温异常那样，通过从开始取得使用者的体温到经过一定期间的相对于平均温度的变化，判定使用者的身体状况的异常，但使用者的身体状况的异常的判定方法不限定于此，能够进行各种变形。例如，在作为使用者的体温测定出35度以下或者38度以上的情况下，传感器控制部165f也可以判定为使用者的身体状况存在异常。另外，上述阈值的温度也可以由使用者任意地设定。另外，对于使用者的眼睛的充血的判定而言，预先也可以将使用者各自的数据中的红色像素个数的比例设定为阈值，也可以是注意消息与红色的像素数的比例对应地不同的方式。
另外，在上述第二实施方式的显示控制处理中，在相对于多个生物体信息内的一个基准检测出异常的情况下，显示注意消息，但也可以通过多个生物体信息的异常的组合，来进行显示控制处理。
在上述第二实施方式中，通过肌动电流描记器64、65，检测出与使用者的眼睛的眼外肌以及眼内肌的伸缩对应地变化的电压值，但传感器控制部165f也可以进行仅基于眼外肌或者眼内肌的伸缩的控制。
在上述实施方式中，对使用者的生物体信息进行检测的脉搏传感器61、肌动电流描记器64、65等通过有线连接于头部佩戴式显示装置100的图像显示部20，但检测部与头部佩戴式显示装置100中的生物体信息的收发信号的方法能够进行各种变形。例如，也可以通过无线在检测部与头部佩戴式显示装置100之间收发信号生物体信息。作为通过无线收发信号生物体信息的方法能够列举使用了蓝牙(Bluetooth(注册商标))、无线LAN(LocalArea Network局域网)、NFC(Near Field Communication近场通信)的方法等。
在上述实施方式中，耳机32、34输出声音，但使使用者识别声音的信息的方法不限定于此，能够进行各种变形。例如，可以通过扬声器输出声音，也可以通过骨传导的振动而使使用者识别声音的信息。另外，关于警告音等，也可以利用颤音，对使用者进行警告。
在上述第二实施方式中，耳式体温计66对使用者的体温进行了测定，但对使用者的体温进行测定的装置能够进行各种变形。例如，放射温度计对从使用者放射的红外线、可见光线的强度进行测定，从而也可以对使用者的体温进行测定。放射温度计不与使用者接触而能够对使用者的体温进行测定，因此未必需要与使用者接触，从而使用的便利性良好。
另外，在上述实施方式中，作为使用者的生物体信息的检测部使用了脉搏传感器61、肌动电流描记器64、65，但使用者的生物体信息的检测部不限定于上述，能够进行各种变形。例如，检测部也可以是对使用者的步数进行测定的万步计(注册商标)，除了步数之外，也可以是对使用者的一天的步行、事务等各种活动的消耗卡路里进行测定的活动量计。另外，也可以是对睡眠中的使用者的翻身、胸部的动作进行检测，而对使用者的睡眠中的状态进行确定的睡眠计。
本发明不限定于上述实施方式、变形例，能够在不脱离其主旨的范围内以各种结构来实现。例如，为了解决上述课题的一部分或者全部，或者为了实现上述效果的一部分或者全部，与在发明的概要栏记载的各方式中的技术特征对应的实施方式、变形例中的技术特征能够适当地进行替换、组合。另外，只要未将该技术特征说明为在本说明书中为必须的，则能够适当地删除。
附图标记说明
10...控制部；11...决定键；12...亮灯部；13...显示切换键；14...触控屏；15...亮度切换键；16...方向键；17...菜单键；18...电源开关；20...图像显示部(图像显示装置、告知部)；21...右保持部；22...右显示驱动部；23...左保持部；24...左显示驱动部；26...右光学像显示部；28...左光学像显示部；30...耳机插头；32...右耳机(告知部)；34...左耳机(告知部)；37...右眼拍摄照相机(检测部)；38...左眼拍摄照相机(检测部)；40...连接部；42...右线缆；44...左线缆；46...连结部件；48...主体线缆；51、52...发送部；53、54...接收部；61、62、63...脉搏传感器(检测部)；64...右肌动电流描记器；65...左肌动电流描记器；66...耳式体温计；100...头部佩戴式显示装置；110...输入信息取得部；120...存储部；130...电源；135...操作部；140...CPU；150...操作系统；160...图像处理部；165...传感器控制部(检测部)；166...拍摄图像处理部；170...声音处理部；180...接口；190...显示控制部(控制部)；201...右背光灯控制部；202...左背光灯控制部；211...右LCD控制部；212...左LCD控制部；221...右背光灯；222...左背光灯；241...右LCD；242...左LCD；251...右投射光学系统；252...左投射光学系统；261...右导光板；262...左导光板；VSync...垂直同步信号；HSync...水平同步信号；PCLK...时钟信号；MXrr...心跳间隔的最大值；MNrr...心跳间隔的最小值；Q0...血液流量；t1...时间；OA...外部机器；SC...外景；LE...左眼；RE...右眼；VI...显示图像；IL...照明光；PL...图像光；EL、ER...端部；AP...前端部；DR...心跳间隔的最大差；AR...区域；VR...视场；RR...心跳间隔；PT...跳动期间；NT...无跳动期间；MS1...注意消息(图像控制信息)；MS2...警告消息(图像控制信息)。

Claims (11)

1.一种头部佩戴式显示装置，其特征在于，具备：
图像显示装置，其在佩戴于使用者的头部的状态下，供使用者视觉辨认图像；
检测部，其对使用者的生物体信息进行检测，所述生物体信息是对脉搏进行确定的信息；
控制部，其使用所述图像显示装置对正在供使用者视觉辨认的图像进行控制；以及
告知部，其根据检测出的所述生物体信息的变化，将与所述图像的控制有关的信息即图像控制信息告知给使用者，
在所述图像显示装置显示图像之后，所述检测部对规定时间内的脉搏波形数据进行检测，所述控制部基于所述脉搏波形数据对基准的心跳间隔的最大差进行计算，
在计算出基准的心跳间隔的最大差的值之后，所述控制部对基准的心跳间隔的最大差、与在计算出基准的心跳间隔的最大差的值之后规定期间内取得的心跳间隔的最大差的差是否在阈值以上进行监视，
在基准的心跳间隔的最大差、与在计算出基准的心跳间隔的最大差的值之后规定期间内取得的心跳间隔的最大差的差在阈值以上的情况下，所述图像显示装置显示结束图像显示的主旨的规定的消息，
在所述图像显示装置显示图像后，在所述图像显示装置显示规定的消息。
2.根据权利要求1所述的头部佩戴式显示装置，其特征在于
所述检测部被配置为与使用者接触，并维持与使用者的接触。
3.根据权利要求1所述的头部佩戴式显示装置，其特征在于，
所述告知部根据由所述脉搏引起的心率变动的变化，将所述图像控制信息告知给使用者。
4.根据权利要求1~3中任一项所述的头部佩戴式显示装置，其特征在于，
所述告知部使所述控制部进行将所述图像控制信息作为图像而使用所述图像显示装置使使用者进行视觉辨认的控制。
5.根据权利要求1~3中任一项所述的头部佩戴式显示装置，其特征在于，
所述告知部将所述图像控制信息作为声音输出而使使用者识别。
6.根据权利要求4所述的头部佩戴式显示装置，其特征在于，
所述告知部将所述图像控制信息作为声音输出而使使用者识别。
7.根据权利要求1~3中任一项所述的头部佩戴式显示装置，其特征在于，
所述图像的控制是将所述图像变更成不为使用者视觉辨认的控制。
8.根据权利要求4所述的头部佩戴式显示装置，其特征在于，
所述图像的控制是将所述图像变更成不为使用者视觉辨认的控制。
9.根据权利要求5所述的头部佩戴式显示装置，其特征在于，
所述图像的控制是将所述图像变更成不为使用者视觉辨认的控制。
10.根据权利要求6所述的头部佩戴式显示装置，其特征在于，
所述图像的控制是将所述图像变更成不为使用者视觉辨认的控制。
11.一种头部佩戴式显示装置的控制方法，其特征在于，
所述头部佩戴式显示装置具备：图像显示装置，其在佩戴于使用者的头部的状态下供使用者视觉辨认图像；控制部，其使用所述图像显示装置对正在供使用者视觉辨认的图像进行控制；以及检测部，其对使用者的生物体信息进行检测，所述生物体信息是对脉搏进行确定的信息，
所述控制方法包括：
使所述检测部检测所述生物体信息的步骤；以及
根据检测出的所述生物体信息的变化，将与所述图像的控制有关的信息即图像控制信息告知给使用者的步骤，
并包括：
在所述图像显示装置显示图像之后，所述检测部对规定时间内的脉搏波形数据进行检测，所述控制部基于所述脉搏波形数据对基准的心跳间隔的最大差进行计算的步骤；
在计算出基准的心跳间隔的最大差的值之后，所述控制部对基准的心跳间隔的最大差、与在计算出基准的心跳间隔的最大差的值之后规定期间内取得的心跳间隔的最大差的差是否在阈值以上进行监视的步骤；
在基准的心跳间隔的最大差、与在计算出基准的心跳间隔的最大差的值之后规定期间内取得的心跳间隔的最大差的差在阈值以上的情况下，所述图像显示装置显示结束图像显示的主旨的规定的消息的步骤；以及
在所述图像显示装置显示图像后，在所述图像显示装置显示规定的消息的步骤。
CN201410300944.0A 2013-06-28 2014-06-27 头部佩戴式显示装置以及头部佩戴式显示装置的控制方法 Active CN104252042B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2013136054A JP2015012433A (ja) 2013-06-28 2013-06-28 頭部装着型表示装置および頭部装着型表示装置の制御方法
JP2013-136054 2013-06-28
JP2014053187A JP2015177403A (ja) 2014-03-17 2014-03-17 頭部装着型表示装置および頭部装着型表示装置の制御方法
JP2014-053187 2014-03-17

Publications (2)

Publication Number Publication Date
CN104252042A CN104252042A (zh) 2014-12-31
CN104252042B true CN104252042B (zh) 2019-06-18

Family

ID=52115064

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410300944.0A Active CN104252042B (zh) 2013-06-28 2014-06-27 头部佩戴式显示装置以及头部佩戴式显示装置的控制方法

Country Status (2)

Country Link
US (1) US10302944B2 (zh)
CN (1) CN104252042B (zh)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI516804B (zh) * 2014-01-02 2016-01-11 廣達電腦股份有限公司 頭戴式顯示裝置及其背光調整方法
EP2921899B1 (en) * 2014-03-21 2018-07-04 Samsung Electronics Co., Ltd Head-mounted display and method of operating the same
CN104063092B (zh) * 2014-06-16 2016-12-07 青岛歌尔声学科技有限公司 一种触摸屏控制方法及装置
KR20160017854A (ko) * 2014-08-06 2016-02-17 삼성디스플레이 주식회사 표시 장치의 블링크 장치 및 블링크 유도 방법
US9699436B2 (en) * 2014-09-16 2017-07-04 Microsoft Technology Licensing, Llc Display with eye-discomfort reduction
CN104656257A (zh) * 2015-01-23 2015-05-27 联想(北京)有限公司 信息处理方法及电子设备
IL237447B (en) * 2015-02-26 2018-01-31 Ashkenazi Asaf A wearable optical display system for unobstructed viewing
US10545714B2 (en) * 2015-09-04 2020-01-28 Samsung Electronics Co., Ltd. Dual screen head mounted display
ITUB20154761A1 (it) * 2015-10-29 2017-04-29 Resono Ophthalmic S R L Sistema di elettrodo e relativo dispositivo per il trattamento di patologie dell?occhio, in particolare dell?occhio secco
CN107209391A (zh) * 2015-11-10 2017-09-26 深圳市柔宇科技有限公司 一种头戴式显示设备及其显示方法
CN105595960A (zh) * 2015-12-17 2016-05-25 中国科学院苏州生物医学工程技术研究所 头戴式干眼检测装置
US10438410B2 (en) * 2015-12-22 2019-10-08 Intel Corporation Text enhancements for head-mounted displays
JP2017183826A (ja) * 2016-03-28 2017-10-05 京セラ株式会社 ヘッドマウントディスプレイ
CN105866954B (zh) * 2016-06-13 2019-04-19 深圳市虚拟增强现实科技有限公司 一种多功能的虚拟现实眼镜
CN106527662A (zh) * 2016-11-04 2017-03-22 歌尔科技有限公司 一种虚拟现实设备及其显示屏的控制方法、装置
WO2018117753A1 (en) * 2016-12-23 2018-06-28 Samsung Electronics Co., Ltd. Electronic device and method of controlling the same
JP2018148257A (ja) * 2017-03-01 2018-09-20 セイコーエプソン株式会社 頭部装着型表示装置およびその制御方法
US10203506B1 (en) * 2017-05-08 2019-02-12 Facebook Technologies, Llc Apparatus, system, and method for adjusting head-mounted display straps with telescoping assemblies
KR102469720B1 (ko) 2017-10-31 2022-11-23 삼성전자주식회사 전자 장치 및 이를 이용한 눈의 충혈도 판단 방법
CN107907998A (zh) * 2017-11-08 2018-04-13 歌尔股份有限公司 头戴显示设备的用户安全保护方法、设备和系统
CN110095866B (zh) * 2018-01-29 2020-07-28 京东方科技集团股份有限公司 增强现实装置、增强现实系统及其信息提示方法
US20190278368A1 (en) * 2018-03-07 2019-09-12 International Business Machines Corporation Cognitive blue light adjustment for improved circadian rhythm
US11091168B2 (en) * 2019-01-31 2021-08-17 Toyota Motor Engineering & Manufacturing North America, Inc. Autonomous driving support systems including vehicle headrest monitoring devices and methods incorporating the same
CN110062156B (zh) * 2019-03-28 2020-08-28 努比亚技术有限公司 一种拍照方法、穿戴式设备及存储介质
US11792500B2 (en) * 2020-03-18 2023-10-17 Snap Inc. Eyewear determining facial expressions using muscle sensors
JP2022056043A (ja) * 2020-09-29 2022-04-08 セイコーエプソン株式会社 表示システム、表示方法及びプログラム
JP2022122203A (ja) * 2021-02-09 2022-08-22 ソニー・オリンパスメディカルソリューションズ株式会社 制御装置、医療用観察システム、制御方法およびプログラム
DE102021212331B4 (de) 2021-11-02 2024-05-08 Sivantos Pte. Ltd. Verfahren zum Überprüfen einer menschlichen Körperfunktion
CN114859557B (zh) * 2022-04-22 2024-02-09 歌尔股份有限公司 头戴式装备的控制方法、头戴式装备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09149339A (ja) * 1995-11-21 1997-06-06 Olympus Optical Co Ltd 映像表示システム
CN101141568A (zh) * 2006-09-08 2008-03-12 索尼株式会社 图像拾取设备和图像拾取方法
WO2012157195A1 (ja) * 2011-05-19 2012-11-22 パナソニック株式会社 画像表示システムおよび３次元用メガネ
JP2013114123A (ja) * 2011-11-30 2013-06-10 Seiko Epson Corp 透過型表示装置、表示方法および表示プログラム

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3946725A (en) * 1974-03-26 1976-03-30 Vladimir Mikhailovich Bolshov Method for controlling the level of anaesthesia in surgery and apparatus for effecting same
US5406952A (en) * 1993-02-11 1995-04-18 Biosyss Corporation Blood pressure monitoring system
JP3348956B2 (ja) 1994-03-24 2002-11-20 ソニー株式会社 表示装置
JPH07287187A (ja) 1994-04-18 1995-10-31 Olympus Optical Co Ltd 映像表示装置
JP3679506B2 (ja) * 1996-06-03 2005-08-03 キヤノン株式会社 表示装置
JPH11237581A (ja) 1998-02-20 1999-08-31 Shimadzu Corp ヘッドマウントディスプレイ装置
JPH11299734A (ja) 1998-04-21 1999-11-02 Kao Corp 眼の充血度の測定方法及び装置
JP3478282B2 (ja) 2001-07-09 2003-12-15 ソニー株式会社 遠隔操作装置とその制御方法
JP2004236187A (ja) 2003-01-31 2004-08-19 Nikon Corp ヘッドマウントディスプレイ装置
US7076290B2 (en) * 2003-10-10 2006-07-11 Medtronic, Inc. Method and apparatus for detecting and discriminating arrhythmias
JP2006158479A (ja) 2004-12-03 2006-06-22 Nikon Corp 映像表示装置
JP5228305B2 (ja) 2006-09-08 2013-07-03 ソニー株式会社 表示装置、表示方法
US20090198145A1 (en) * 2008-02-06 2009-08-06 Chow Harrison Compositions, methods, and systems for rapid induction and maintenance of continuous rem sleep
US8487758B2 (en) * 2009-09-02 2013-07-16 Medtronic Minimed, Inc. Medical device having an intelligent alerting scheme, and related operating methods
US8380294B2 (en) * 2009-10-06 2013-02-19 Medtronic, Inc. Cardiac risk stratification
JP5322179B2 (ja) 2009-12-14 2013-10-23 国立大学法人東京農工大学 感性評価装置、感性評価方法、及び感性評価プログラム
JP5625688B2 (ja) * 2010-02-01 2014-11-19 セイコーエプソン株式会社 生体情報測定装置
US8531355B2 (en) * 2010-07-23 2013-09-10 Gregory A. Maltz Unitized, vision-controlled, wireless eyeglass transceiver
US8170654B1 (en) * 2010-10-13 2012-05-01 Medtronic, Inc. Sequential discrimination approach for detecting treatable cardiac rhythms
JP5829687B2 (ja) * 2011-08-24 2015-12-09 株式会社日立メディコ 磁気共鳴撮影装置
JP6036122B2 (ja) 2012-02-02 2016-11-30 セイコーエプソン株式会社 脈波測定装置及びプログラム
JP2013077013A (ja) 2012-11-20 2013-04-25 Sony Corp 表示装置、表示方法
TWI486630B (zh) * 2013-03-27 2015-06-01 聚晶半導體股份有限公司 適應性調整頭戴式顯示器的方法與頭戴式顯示器
US9264803B1 (en) * 2013-06-05 2016-02-16 Google Inc. Using sounds for determining a worn state of a wearable computing device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09149339A (ja) * 1995-11-21 1997-06-06 Olympus Optical Co Ltd 映像表示システム
CN101141568A (zh) * 2006-09-08 2008-03-12 索尼株式会社 图像拾取设备和图像拾取方法
WO2012157195A1 (ja) * 2011-05-19 2012-11-22 パナソニック株式会社 画像表示システムおよび３次元用メガネ
JP2013114123A (ja) * 2011-11-30 2013-06-10 Seiko Epson Corp 透過型表示装置、表示方法および表示プログラム

Also Published As

Publication number Publication date
CN104252042A (zh) 2014-12-31
US20150002373A1 (en) 2015-01-01
US10302944B2 (en) 2019-05-28

Similar Documents

Publication Publication Date Title
CN104252042B (zh) 头部佩戴式显示装置以及头部佩戴式显示装置的控制方法
KR101988110B1 (ko) 생체신호연동 가상현실 교육 시스템 및 방법
JP2015177403A (ja) 頭部装着型表示装置および頭部装着型表示装置の制御方法
CN106471419B (zh) 管理信息显示
JP6398157B2 (ja) 頭部装着型表示装置および頭部装着型表示装置の制御方法
KR102080747B1 (ko) 이동 단말기 및 그것의 제어 방법
CN104423045B (zh) 头部佩戴型显示装置
CN112130329B (zh) 头部佩戴型显示装置以及头部佩戴型显示装置的控制方法
CN106199963B (zh) 显示装置及其控制方法以及计算机程序
US9081416B2 (en) Device, head mounted display, control method of device and control method of head mounted display
JP6316941B2 (ja) 神経機能状態の監視
US20150015460A1 (en) Head mounted display device and control method for head mounted display device
JP2015046092A (ja) 画像処理装置とこれを有する頭部装着型表示装置
JP6036291B2 (ja) 表示装置、表示システム、および、表示装置の制御方法
US9805612B2 (en) Interest-attention feedback method for separating cognitive awareness into different left and right sensor displays
CN107077011A (zh) 光照感知增强方法、计算机程序产品、头戴式计算装置和照明系统
JP2016082466A (ja) 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、コンピュータープログラム
CN105319716A (zh) 显示装置、显示装置的控制方法及程序
JP6268778B2 (ja) 頭部装着型表示装置および頭部装着型表示装置の制御方法
JP6337534B2 (ja) 頭部装着型表示装置および頭部装着型表示装置の制御方法
KR101769506B1 (ko) 뇌파를 이용한 스마트 글라스의 구동 방법
JP2017151576A (ja) 訓練装置、訓練方法、プログラム
KR101727155B1 (ko) 뇌파를 이용한 스마트 글라스
JP2015012433A (ja) 頭部装着型表示装置および頭部装着型表示装置の制御方法
TW200416581A (en) Vision-driving control system and control method thereof

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant