JPH10127769A - Display unit - Google Patents

Display unit

Info

Publication number
JPH10127769A
JPH10127769A JP8284896A JP28489696A JPH10127769A JP H10127769 A JPH10127769 A JP H10127769A JP 8284896 A JP8284896 A JP 8284896A JP 28489696 A JP28489696 A JP 28489696A JP H10127769 A JPH10127769 A JP H10127769A
Authority
JP
Japan
Prior art keywords
user
signal
mounting
mounting means
blink
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP8284896A
Other languages
Japanese (ja)
Other versions
JP3363327B2 (en
Inventor
Shogo Fukushima
省吾 福島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Electric Works Co Ltd
Original Assignee
Matsushita Electric Works Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Works Ltd filed Critical Matsushita Electric Works Ltd
Priority to JP28489696A priority Critical patent/JP3363327B2/en
Priority to US08/842,037 priority patent/US6123661A/en
Publication of JPH10127769A publication Critical patent/JPH10127769A/en
Application granted granted Critical
Publication of JP3363327B2 publication Critical patent/JP3363327B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a display unit of favorable usability in which a user can be more relaxed and refreshed. SOLUTION: A display unit main body 1 is composed of an installation band 3 as an installation means to be mounted on a head part of a user for installation, a display part 2 continuously provided with the installation band 3 to be positioned before the eyes of the user, a sound means such as a headphone continuously provided with the installation band 3 to generate sound, and optical sensors 4a, 4b embedded in the installation band 3 at parts where it gets in contact with the forehead of the user. By installing the display unit main body 1 on the head part of the user, the position of the optical sensors 4a, 4b to face the forehead of the user is decided. A signal processing means to detect a pulse rate and a blink rate based on output signals of the optical sensors 4a, 4b is provided.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、使用者の頭部に搭
載して使用するディスプレイ装置に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a display device mounted on a head of a user for use.

【0002】[0002]

【従来の技術】近年、使用者の頭部に搭載して眼前に位
置するディスプレイ部に映像を映し出す頭部搭載型ディ
スプレイ装置(Head Mounted Display :HMD)が提供
されている。この種のディスプレイ装置は、ディスプレ
イ部に映し出される3次元立体視映像又は2次元映像を
見たり、ヘッドホン等で再生される音声を聞くことによ
り、一人で映像や音声(音楽)を楽しむことができる。
2. Description of the Related Art In recent years, a head mounted display (HMD) has been provided which is mounted on a user's head and projects an image on a display unit located in front of the user. This type of display device allows one to enjoy video and audio (music) alone by watching a three-dimensional stereoscopic video or two-dimensional video projected on a display unit, or by listening to audio reproduced by headphones or the like. .

【0003】[0003]

【発明が解決しようとする課題】ところで、この種のデ
ィスプレイ装置においては、使用者の脈拍あるいは瞬目
を検出し、映像を映し出す状態や音声を発する状態等を
変更させたり外部機器を連動制御したりすることによっ
て使用者をリラックス・リフレッシュさせようとするも
のがあった。しかしながら、従来構成のものでは、使用
者の脈拍を検出するために脈拍センサを耳たぶや手の指
などに装着する必要があり、脈拍センサの装着に手間が
かかるとともに装着された脈拍センサが煩わしくリラッ
クス状態を妨げることがあるという不具合があった。
By the way, in this type of display device, the pulse or blink of the user is detected, the state of projecting an image, the state of emitting sound, and the like are changed, and an external device is interlocked and controlled. Or to make the user relax and refresh. However, in the case of the conventional configuration, it is necessary to attach the pulse sensor to the earlobe or the finger of the hand in order to detect the pulse of the user, and it takes time to attach the pulse sensor, and the attached pulse sensor is troublesome and relaxing. There was a problem that the state could be disturbed.

【0004】また、使用者の瞬目を検出するものとして
は、赤外光を眼球に照射しその反射光を検出する方式の
もの(特開平6−121254号公報参照)があった
が、この方式では、赤外光を眼球に照射する必要がある
ため気分的にリラックスできなかったり、赤外光を眼球
に照射するための光軸の調整に手間がかかるという不具
合があった。
Further, as a method for detecting a blink of a user, there is a method for irradiating an eyeball with infrared light and detecting a reflected light thereof (see Japanese Patent Application Laid-Open No. 6-121254). In the method, it is necessary to irradiate the infrared light to the eyeball, so that the user cannot feel relaxed, or the adjustment of the optical axis for irradiating the infrared light to the eyeball is troublesome.

【0005】本発明は上記事由に鑑みて為されたもので
あり、その目的は、使い勝手が良く使用者をよりリラッ
クス、リフレッシュさせることができるディスプレイ装
置を提供することにある。
The present invention has been made in view of the above circumstances, and an object of the present invention is to provide a display device which is easy to use and can relax and refresh a user.

【0006】[0006]

【課題を解決するための手段】請求項1の発明は、上記
目的を達成するために、使用者の頭部に搭載して装着す
る装着手段と、装着手段に連設され使用者の眼前に位置
し映像を映し出すディスレイ部と、装着手段に連設され
音声を発する音響手段と、装着手段に設けられ光を使用
者の額に向かって放射してその反射光を受光し受光量に
応じた信号を出力する光センサとでディスプレイ装置本
体が構成され、光センサの出力信号に基づいて使用者の
脈拍数を求める信号処理手段を有することを特徴とする
ものであり、ディスプレイ装置本体を装着手段によって
使用者の頭部に装着するだけで別途脈拍センサを耳たぶ
や手の指などに装着することなしに使い勝手良く脈拍数
を求めることができるので、使用者の脈拍数に応じて例
えば映像や音声の状態を変化させたり外部機器を連動制
御したりすることにより、使用者をリラックス、リフレ
ッシュさせることができる。
According to a first aspect of the present invention, there is provided a mounting means mounted on a head of a user and mounted on the head of the user, the mounting means being connected to the mounting means and in front of a user's eyes. A display section for projecting and displaying an image, an acoustic means connected to the mounting means for emitting sound, and a light provided on the mounting means for emitting light toward the forehead of the user and receiving the reflected light thereof according to the amount of received light The display device main body is constituted by an optical sensor for outputting a signal, and a signal processing unit for obtaining a pulse rate of the user based on the output signal of the optical sensor is provided. The pulse rate can be determined easily without having to separately attach a pulse sensor to the earlobe or fingers of the user just by attaching it to the user's head. of By or interlock control an external device or to change the status, can relax the user, it is refreshed.

【0007】請求項2の発明は、使用者の頭部に搭載し
て装着する装着手段と、装着手段に連設され使用者の眼
前に位置し映像を映し出すディスレイ部と、装着手段に
連設され音声を発する音響手段と、装着手段に設けられ
光を使用者の額に向かって放射してその反射光を受光し
受光量に応じた信号を出力する光センサとでディスプレ
イ装置本体が構成され、光センサの出力信号に基づいて
使用者の瞬目を検出する信号処理手段を有することを特
徴とするものであり、ディスプレイ装置本体を装着手段
によって使用者の頭部に装着するだけで光を照射するた
めの光軸調整を行なうことなしに使い勝手良く使用者の
瞬目を検出することができるので、使用者の瞬目に応じ
て例えば映像や音声の状態を変化させたり外部機器を連
動制御したりすることにより、使用者をリラックス、リ
フレッシュさせることができる。また、眼球に光を直接
照射する必要がないので、可視光を利用することも可能
となる。
According to a second aspect of the present invention, there is provided a mounting means mounted on the head of a user and mounted thereon, a display unit connected to the mounting means and positioned in front of the user's eyes to project an image, and connected to the mounting means. The display device main body is composed of an acoustic means for emitting a sound and an optical sensor provided on the mounting means for emitting light toward the forehead of the user, receiving the reflected light and outputting a signal corresponding to the amount of received light. A signal processing means for detecting a blink of the user based on an output signal of the optical sensor, wherein the light is emitted only by mounting the display device main body on the user's head by the mounting means. Since the user's blink can be detected easily without adjusting the optical axis for irradiation, the state of video and audio can be changed according to the user's blink, and external devices can be linked and controlled. To do And it makes it possible to relax the user, to refresh. Further, since there is no need to directly irradiate the eyeball with light, visible light can be used.

【0008】請求項3の発明は、使用者の頭部に搭載し
て装着する装着手段と、装着手段に連設され使用者の眼
前に位置し映像を映し出すディスレイ部と、装着手段に
連設され音声を発する音響手段と、装着手段に設けられ
光を使用者の額に向かって放射してその反射光を受光し
受光量に応じた信号を出力する光センサとでディスプレ
イ装置本体が構成され、光センサの出力信号に基づいて
使用者の脈拍数及び瞬目を検出する信号処理手段を有す
ることを特徴とするものであり、ディスプレイ装置本体
を装着手段によって使用者の頭部に装着するだけで別途
脈拍センサを耳たぶや手の指などに装着することなしに
使い勝手良く脈拍数を求めることができるとともに、光
を照射するための光軸調整を行なうことなしに使い勝手
良く使用者の瞬目を検出することができるので、使用者
の脈拍数や瞬目に応じて例えば映像や音声の状態を変化
させたり外部機器を連動制御したりすることにより、使
用者をリラックス、リフレッシュさせることができる。
また、眼球に光を直接照射する必要がないので、可視光
を利用することも可能となる。
According to a third aspect of the present invention, there is provided a mounting means mounted on the head of the user and mounted thereon, a display portion connected to the mounting means and positioned in front of the user to project an image, and connected to the mounting means. The display device main body is composed of an acoustic means for emitting a sound and an optical sensor provided on the mounting means for emitting light toward the forehead of the user, receiving the reflected light and outputting a signal corresponding to the amount of received light. A signal processing means for detecting the pulse rate and blinking of the user based on the output signal of the optical sensor, wherein the display device body is mounted on the head of the user by the mounting means. The pulse rate can be obtained easily without attaching a pulse sensor separately to the earlobe or the finger of the hand, and the user's blink is easy to use without adjusting the optical axis for irradiating light. It is possible to detect, by or interlock control an external device or change the state of, for example, video and audio in response to the pulse rate or the blinking of a user, it is possible to relax the user, is refreshed.
Further, since there is no need to directly irradiate the eyeball with light, visible light can be used.

【0009】請求項4の発明は、請求項1又は請求項3
の発明において、光センサを装着手段に複数個配置し、
信号処理手段が、各光センサの出力信号を加算した加算
信号に基づいて使用者の脈拍数を求めるので、脈拍数の
検出精度を高めることができる。請求項5の発明は、請
求項1乃至請求項4の発明において、信号処理手段が、
光センサの出力信号を使用者の脈拍に対応した脈拍信号
と使用者の瞬目に対応した瞬目信号とに弁別するので、
脈拍信号や瞬目信号に応じて映像や音声の状態を変化さ
せたり外部機器を連動制御するようにすることが可能と
なる。
[0009] The invention of claim 4 is the invention of claim 1 or claim 3.
In the invention of the above, a plurality of optical sensors are arranged on the mounting means,
Since the signal processing means obtains the pulse rate of the user based on the addition signal obtained by adding the output signals of the respective optical sensors, the detection accuracy of the pulse rate can be improved. According to a fifth aspect of the present invention, in the first to fourth aspects, the signal processing means comprises:
Since the output signal of the optical sensor is discriminated into a pulse signal corresponding to the pulse of the user and a blink signal corresponding to the blink of the user,
It is possible to change the state of video and audio in accordance with the pulse signal and the blink signal, and to control interlocking of external devices.

【0010】請求項6の発明は、請求項1乃至請求項5
の発明において、光センサを両眼それぞれの上方に位置
するように装着手段に配置し、左右対称となる位置の光
センサ同士の出力信号に基づいて一方の眼だけの瞬目に
よる合図を検出する合図検出手段を信号処理手段に付加
したので、使用者の瞬目による合図に応じて例えば映像
や音声の状態を変化させたり外部機器を連動制御したり
することにより、使用者をリラックス、リフレッシュさ
せることができる。
[0010] The invention of claim 6 is the first to fifth aspects of the present invention.
In the invention of the above, the optical sensor is arranged on the mounting means so as to be located above both eyes, and a signal from a blink of only one eye is detected based on an output signal of the optical sensor at a symmetrical position. Since the signal detection means is added to the signal processing means, the user is relaxed and refreshed by, for example, changing the state of video and audio or controlling the external device in conjunction with the signal by the user's blink. be able to.

【0011】請求項7の発明は、請求項1乃至請求項6
の発明において、瞬目信号により使用者の閉眼状態を検
知し閉眼状態が所定時間継続されると音響手段の音量を
小さくするので、使用者の入眠状態を妨げるのを防止で
きる。請求項8の発明は、請求項1乃至請求項6の発明
において、瞬目信号により使用者の閉眼状態を検知し閉
眼状態が所定時間継続されると電源がオフされるので、
使用者の入眠状態を妨げるのを防止できるとともに、省
電力化を図ることができる。
[0011] The invention of claim 7 is the first to sixth aspects of the present invention.
According to the invention, the closed state of the user is detected by the blink signal, and when the closed state is continued for a predetermined time, the volume of the sound means is reduced, so that the sleep state of the user can be prevented from being hindered. According to an eighth aspect of the present invention, in the first to sixth aspects of the present invention, the power is turned off when the eye closed state of the user is detected by the blink signal and the eye closed state is continued for a predetermined time.
In addition to preventing the user from falling asleep, the power saving can be achieved.

【0012】[0012]

【発明の実施の形態】図1に本実施形態のディスプレイ
装置本体の外観斜視図を示し、図2に要部回路ブロック
図を示す。本実施形態は、図1に示すように、使用者の
頭部に搭載して装着するための装着手段たる装着バンド
3と、装着バンド3に連設され使用者の眼前に位置する
ディスレイ部2と、装着バンド3に連設され音声を発生
するヘッドホン等の音響手段(図示せず)と、装着バン
ド3の使用者の額と接触する部位に埋め込まれた光セン
サ4a,4bとで、ディスプレイ装置本体1を構成して
いる。すなわち、ディスプレイ装置本体1を使用者の頭
部に装着することによって光センサ4a,4bが使用者
の額と対向する位置が決まる。なお、光センサの数は2
つに限定するものではなく、1つでも3つ以上でもよ
い。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS FIG. 1 is a perspective view showing the appearance of a display device main body according to the present embodiment, and FIG. 2 is a circuit block diagram of a main part. In this embodiment, as shown in FIG. 1, a mounting band 3 as mounting means for mounting on a user's head for mounting, and a display unit 2 connected to the mounting band 3 and located in front of the user's eyes. And a sound means (not shown) such as headphones connected to the wearing band 3 and generating sound, and optical sensors 4a and 4b embedded in portions of the wearing band 3 that come into contact with the forehead of the user. The apparatus main body 1 is configured. That is, the position where the optical sensors 4a and 4b face the user's forehead is determined by mounting the display device main body 1 on the user's head. The number of optical sensors is 2
The number is not limited to one and may be one or three or more.

【0013】ディスプレイ部2は、左眼、右眼に対応し
て設けてある液晶ディスプレイ2a,2bで映像機器か
らの映像を映し出す。なお、ディスプレイ部2において
映し出す映像は3次元立体映像でも2次元の映像でもよ
く、またその併用でもよい。このような映像を映し出す
技術は周知なので説明を省略する。以下、本実施形態の
特徴となる部分を図2を参照しながら説明する。
The display unit 2 displays images from video equipment on liquid crystal displays 2a and 2b provided corresponding to the left and right eyes. The video projected on the display unit 2 may be a three-dimensional video, a two-dimensional video, or a combination thereof. The technology for projecting such images is well known and will not be described. Hereinafter, a characteristic part of the present embodiment will be described with reference to FIG.

【0014】光センサ4a,4bは、それぞれ発光素子
としての発光ダイオード5a,5bと受光素子6a,6
bとで構成され、発光ダイオード駆動回路15a,15
bによって発光ダイオード5a,5bの光を使用者の額
に放射して、その反射光を受光素子6a,6bで受光
し、その受光量に応じた信号を出力するようになってい
る。
The light sensors 4a and 4b include light emitting diodes 5a and 5b as light emitting elements and light receiving elements 6a and 6b, respectively.
b, and the light emitting diode drive circuits 15a, 15
b, the light of the light emitting diodes 5a and 5b is emitted to the user's forehead, the reflected light is received by the light receiving elements 6a and 6b, and a signal corresponding to the amount of received light is output.

【0015】光センサ4a,4bの出力信号、つまり、
受光素子6a,6bの出力信号は、後述の信号処理手段
へ入力される。ところで、光センサ4a,4bは、発光
ダイオード5a,5bによって使用者の額表面を照射
し、その反射光を受光素子6a,6bで受光するもので
あるが、受光素子6a,6bの受光量、つまり、反射光
の量が使用者の血液中のヘモグロビンによる光吸収量の
影響を受けて変化するので、血液量の変化すなわち脈拍
が検出できるのである。
The output signals of the optical sensors 4a and 4b, that is,
The output signals of the light receiving elements 6a and 6b are input to signal processing means described later. The light sensors 4a and 4b irradiate the forehead surface of the user with the light emitting diodes 5a and 5b and receive the reflected light by the light receiving elements 6a and 6b. That is, since the amount of reflected light changes under the influence of the amount of light absorbed by hemoglobin in the blood of the user, a change in blood volume, that is, a pulse can be detected.

【0016】上述の信号処理手段は、光センサ4a,4
bの出力信号に基づいて使用者の脈拍数及び瞬目を検出
するための手段であって、各光センサ4a,4bの出力
信号を別々に増幅する増幅フィルタ回路8と、増幅フィ
ルタ回路8にて増幅された各光センサ4a,4bの出力
信号を加算して出力する加算回路9と、加算回路9の出
力信号を脈拍成分(脈拍信号)と瞬目成分(瞬目信号)
とに弁別して出力する弁別回路としてのフィルタ回路1
1と、フィルタ回路11の出力である脈拍信号、瞬目信
号それぞれを所定のしきい値と比較してノイズを除去す
るしきい値回路10と、を有している。したがって、し
きい値回路10から出力される脈拍信号より脈拍数を求
めることができ、瞬信号により瞬目を検出できるのであ
る。なお、光センサが1つの場合は、加算回路9は不要
である。
The above-mentioned signal processing means comprises the optical sensors 4a, 4
b) a means for detecting the pulse rate and blinking of the user based on the output signal of b, the amplification filter circuit 8 for separately amplifying the output signals of the optical sensors 4a and 4b, and the amplification filter circuit 8 An addition circuit 9 for adding and outputting the amplified output signals of the optical sensors 4a and 4b, and a pulse component (pulse signal) and a blink component (blink signal) of the output signal of the addition circuit 9.
Circuit 1 as a discriminating circuit for discriminating and outputting
1 and a threshold circuit 10 that compares each of the pulse signal and the blink signal output from the filter circuit 11 with a predetermined threshold to remove noise. Therefore, the pulse rate can be obtained from the pulse signal output from the threshold circuit 10, and the blink can be detected from the blink signal. When there is one optical sensor, the adder circuit 9 is unnecessary.

【0017】光センサ4a,4bにより検出される脈拍
信号には様々なノイズが重畳されているが、本実施形態
では、光センサ4a,4bの出力信号を加算回路9によ
って加算しているので、光センサが1つの場合に比べて
フィルタ回路11に入力する信号のS/N比が向上す
る。このため、フィルタ回路11の要求仕様が緩いもの
となり、設計が容易になるとともに、電気的なノイズフ
ィルタを設ける必要もない。
Although various noises are superimposed on the pulse signals detected by the optical sensors 4a and 4b, in the present embodiment, the output signals of the optical sensors 4a and 4b are added by the adding circuit 9, so that The S / N ratio of the signal input to the filter circuit 11 is improved as compared with the case where one optical sensor is provided. For this reason, the required specifications of the filter circuit 11 are loosened, the design becomes easy, and it is not necessary to provide an electric noise filter.

【0018】ところで、本実施形態では、フィルタ回路
11において弁別されしきい値回路10から出力される
瞬目信号に基づいて使用者の閉眼状態が一定時間継続し
て検出されると、電子ボリューム回路21によって音声
のボリュームが低減されるので、使用者の入眠状態を妨
げないようにすることができる。また、使用者の閉眼状
態が一定時間継続して検出されると、電源制御回路22
によって電子ボリューム回路21及び映像フェードアウ
ト回路23への電源供給を遮断するようにしてもよく、
このようにすれば、使用者の入眠状態を妨げないように
することができるとともに、電源をオフすることによっ
て省電力化を図ることができる。
In this embodiment, when the closed state of the user is continuously detected for a predetermined time based on the blink signal output from the threshold circuit 10 after being discriminated by the filter circuit 11, the electronic volume circuit Since the volume of the sound is reduced by 21, it is possible to prevent the user from falling asleep. When the closed state of the user is continuously detected for a certain period of time, the power supply control circuit 22
The power supply to the electronic volume circuit 21 and the video fade-out circuit 23 may be cut off by
With this configuration, it is possible to prevent the user from falling asleep, and to save power by turning off the power.

【0019】而して、ディスプレイ装置本体1を装着バ
ンド3によって使用者の頭部に装着するだけで別途脈拍
センサを耳たぶや手の指などに装着することなしに使い
勝手良く脈拍数を求めることができるとともに、光を照
射するための光軸調整を行なうことなしに使い勝手良く
使用者の瞬目を検出することができるから、使用者の脈
拍数や瞬目に応じて例えば映像や音声の状態を変化させ
たり外部機器を連動制御したりすることにより、使用者
をリラックス、リフレッシュさせることができる。ま
た、眼球に光を直接照射する必要がないので、可視光を
利用することも可能となる。
Thus, the pulse rate can be easily obtained without wearing a pulse sensor separately on the earlobe or the finger of the user only by mounting the display device main body 1 on the user's head by the wearing band 3. It is possible to detect the blink of the user easily without adjusting the optical axis for irradiating the light, so that, for example, the state of the video and audio can be changed according to the pulse rate and the blink of the user. The user can be relaxed and refreshed by changing and controlling the external device in conjunction. Further, since there is no need to directly irradiate the eyeball with light, visible light can be used.

【0020】また、本実施形態では、光センサ4a,4
bを両眼それぞれの上方に位置するように装着バンド3
に配置してあるので、左右対称となる位置の光センサ4
a,4b同士の出力信号に基づいて一方の眼だけの瞬目
による合図を検出する合図検出手段を設け、使用者の瞬
目による合図に応じて例えば映像や音声の状態を変化さ
せたり外部機器を連動制御したりするようにしてもよ
い。一例として、右眼の瞬目の合図によって、液晶ディ
スプレイ2a,2bの輝度を調整したり、ヘッドホンの
音量を調節するようにすることができる。
In this embodiment, the optical sensors 4a, 4a
Wearing band 3 so that b is positioned above both eyes
The optical sensor 4 at a symmetrical position
a signal detecting means for detecting a signal of blinking of only one eye based on output signals of the a and 4b, for example, changing the state of video or audio according to the signal of blinking of the user, or changing an external device. May be controlled in conjunction with each other. As an example, the brightness of the liquid crystal displays 2a and 2b can be adjusted or the volume of the headphones can be adjusted by a signal of a blink of the right eye.

【0021】ところで、本実施形態では、光センサ4
a,4bの出力信号に基づいてフィルタ回路11にて脈
拍成分と瞬目成分とを弁別しているが、光センサ4a,
4bを上下方向に配置して、使用者の額部の上部、下部
に光センサ4a,4bが対向するようにし、光センサ4
a,4bの出力信号の差をとることにより、脈拍成分を
相殺し瞬目成分のみを抽出するようにしてもよい。した
がって、瞬目を検出することで、瞬目に応じて例えば映
像や音声の状態を変化させたり外部機器を連動制御した
りすることにより、使用者をリラックス、リフレッシュ
させることができる。
In the present embodiment, the optical sensor 4
Although the pulse component and the blink component are discriminated by the filter circuit 11 based on the output signals of the optical sensors 4a and 4b,
4b is arranged vertically so that the optical sensors 4a and 4b face the upper and lower parts of the user's forehead, respectively.
By taking the difference between the output signals a and 4b, the pulse component may be canceled and only the blink component may be extracted. Therefore, by detecting a blink, the user can be relaxed and refreshed by, for example, changing the state of video and audio or controlling the external device in conjunction with the blink.

【0022】なお、光センサは、それぞれ一対の発光素
子と受光素子とで構成してもよいし、受光素子、発光素
子、受光素子の3つを組み合わせたものを用いてもよ
い。
The optical sensor may be constituted by a pair of light emitting element and light receiving element, respectively, or may be a combination of light receiving element, light emitting element and light receiving element.

【0023】[0023]

【発明の効果】請求項1の発明は、使用者の頭部に搭載
して装着する装着手段と、装着手段に連設され使用者の
眼前に位置し映像を映し出すディスレイ部と、装着手段
に連設され音声を発する音響手段と、装着手段に設けら
れ光を使用者の額に向かって放射してその反射光を受光
し受光量に応じた信号を出力する光センサとでディスプ
レイ装置本体が構成され、光センサの出力信号に基づい
て使用者の脈拍数を求める信号処理手段を有するので、
ディスプレイ装置本体を装着手段によって使用者の頭部
に装着するだけで別途脈拍センサを耳たぶや手の指など
に装着することなしに使い勝手良く脈拍数を求めること
ができるから、使用者の脈拍数に応じて例えば映像や音
声の状態を変化させたり外部機器を連動制御したりする
ことにより、使用者をリラックス、リフレッシュさせる
ことができるという効果がある。
According to the first aspect of the present invention, there is provided a mounting means mounted on a user's head and mounted thereon, a display portion connected to the mounting means and positioned in front of the user to project an image, and The display device body is composed of an acoustic means that is continuously provided and emits a sound, and an optical sensor that is provided on the mounting means and emits light toward the forehead of the user, receives the reflected light, and outputs a signal according to the amount of received light. Since it has a signal processing means for determining the pulse rate of the user based on the output signal of the optical sensor,
The pulse rate can be determined conveniently without mounting a separate pulse sensor on the earlobe or fingers of the user just by mounting the display device body on the user's head by the mounting means. In response, for example, by changing the state of the video or audio or by interlocking control of the external device, there is an effect that the user can be relaxed and refreshed.

【0024】請求項2の発明は、使用者の頭部に搭載し
て装着する装着手段と、装着手段に連設され使用者の眼
前に位置し映像を映し出すディスレイ部と、装着手段に
連設され音声を発する音響手段と、装着手段に設けられ
光を使用者の額に向かって放射してその反射光を受光し
受光量に応じた信号を出力する光センサとでディスプレ
イ装置本体が構成され、光センサの出力信号に基づいて
使用者の瞬目を検出する信号処理手段を有するので、デ
ィスプレイ装置本体を装着手段によって使用者の頭部に
装着するだけで光を照射するための光軸調整を行なうこ
となしに使い勝手良く使用者の瞬目を検出することがで
きるから、使用者の瞬目に応じて例えば映像や音声の状
態を変化させたり外部機器を連動制御したりすることに
より、使用者をリラックス、リフレッシュさせることが
できるという効果がある。また、眼球に光を直接照射す
る必要がないので、可視光を利用することも可能とな
る。
According to a second aspect of the present invention, there is provided a mounting means mounted on the head of the user and mounted thereon, a display section connected to the mounting means and positioned in front of the user's eyes to project an image, and connected to the mounting means. The display device main body is composed of an acoustic means for emitting a sound and an optical sensor provided on the mounting means for emitting light toward the forehead of the user, receiving the reflected light and outputting a signal corresponding to the amount of received light. Since it has signal processing means for detecting the blink of the user based on the output signal of the optical sensor, the optical axis adjustment for irradiating light only by mounting the display device body on the head of the user by the mounting means. The user's blink can be detected easily without performing, so that the user can change the state of the video and audio according to the user's blink, or control the external device in conjunction with it, for example. Person Box, there is an effect that can be refreshed. Further, since there is no need to directly irradiate the eyeball with light, visible light can be used.

【0025】請求項3の発明は、使用者の頭部に搭載し
て装着する装着手段と、装着手段に連設され使用者の眼
前に位置し映像を映し出すディスレイ部と、装着手段に
連設され音声を発する音響手段と、装着手段に設けられ
光を使用者の額に向かって放射してその反射光を受光し
受光量に応じた信号を出力する光センサとでディスプレ
イ装置本体が構成され、光センサの出力信号に基づいて
使用者の脈拍数及び瞬目を検出する信号処理手段を有す
るので、ディスプレイ装置本体を装着手段によって使用
者の頭部に装着するだけで別途脈拍センサを耳たぶや手
の指などに装着することなしに使い勝手良く脈拍数を求
めることができるとともに、光を照射するための光軸調
整を行なうことなしに使い勝手良く使用者の瞬目を検出
することができるから、使用者の脈拍数や瞬目に応じて
例えば映像や音声の状態を変化させたり外部機器を連動
制御したりすることにより、使用者をリラックス、リフ
レッシュさせることができるという効果がある。また、
眼球に光を直接照射する必要がないので、可視光を利用
することも可能となる。
According to a third aspect of the present invention, there is provided a mounting means mounted on the head of the user and mounted thereon, a display portion connected to the mounting means and positioned in front of the user's eyes to project an image, and connected to the mounting means. The display device main body is composed of an acoustic means for emitting a sound and an optical sensor provided on the mounting means for emitting light toward the forehead of the user, receiving the reflected light and outputting a signal corresponding to the amount of received light. Since it has signal processing means for detecting the pulse rate and blinking of the user based on the output signal of the optical sensor, the pulse sensor is separately attached to the ear lobe just by mounting the display device body on the user's head by the mounting means. The pulse rate can be obtained easily without being attached to the finger of the hand, and the blink of the user can be detected easily without adjusting the optical axis for irradiating light. Et al., By or interlock control an external device or change the state of, for example, video and audio in response to the pulse rate or the blinking of a user, there is an effect that a user relax, it can be refreshed. Also,
Since it is not necessary to directly irradiate the eyeball with light, it is possible to use visible light.

【0026】請求項4の発明は、請求項1又は請求項3
の発明において、光センサを装着手段に複数個配置し、
信号処理手段が、各光センサの出力信号を加算した加算
信号に基づいて使用者の脈拍数を求めるので、脈拍数の
検出精度を高めることができるという効果がある。請求
項5の発明は、請求項1乃至請求項4の発明において、
信号処理手段が、光センサの出力信号を使用者の脈拍に
対応した脈拍信号と使用者の瞬目に対応した瞬目信号と
に弁別するので、脈拍信号や瞬目信号に応じて映像や音
声の状態を変化させたり外部機器を連動制御するように
することが可能となる。
The invention of claim 4 is the invention of claim 1 or claim 3.
In the invention of the above, a plurality of optical sensors are arranged on the mounting means,
Since the signal processing means obtains the pulse rate of the user based on the addition signal obtained by adding the output signals of the respective optical sensors, there is an effect that the detection accuracy of the pulse rate can be improved. The invention according to claim 5 is the invention according to claims 1 to 4,
The signal processing means discriminates the output signal of the optical sensor into a pulse signal corresponding to the pulse of the user and a blink signal corresponding to the blink of the user. Can be changed or the external device can be interlocked.

【0027】請求項6の発明は、請求項1乃至請求項5
の発明において、光センサを両眼それぞれの上方に位置
するように装着手段に配置し、左右対称となる位置の光
センサ同士の出力信号に基づいて一方の眼だけの瞬目に
よる合図を検出する合図検出手段を信号処理手段に付加
したので、使用者の瞬目による合図に応じて例えば映像
や音声の状態を変化させたり外部機器を連動制御したり
することにより、使用者をリラックス、リフレッシュさ
せることができるという効果がある。
[0027] The invention of claim 6 is the invention of claims 1 to 5.
In the invention of the above, the optical sensor is arranged on the mounting means so as to be located above both eyes, and a signal from a blink of only one eye is detected based on an output signal of the optical sensor at a symmetrical position. Since the signal detection means is added to the signal processing means, the user is relaxed and refreshed by, for example, changing the state of the video or audio or controlling the external device in conjunction with the signal by the blink of the user. There is an effect that can be.

【0028】請求項7の発明は、請求項1乃至請求項6
の発明において、瞬目信号により使用者の閉眼状態を検
知し閉眼状態が所定時間継続されたると音響手段の音量
を小さくするので、使用者の入眠状態を妨げるのを防止
できるという効果がある。請求項8の発明は、請求項1
乃至請求項6の発明において、瞬目信号により使用者の
閉眼状態を検知し閉眼状態が所定時間継続されると電源
がオフされるので、使用者の入眠状態を妨げるのを防止
できるとともに、省電力化を図ることができるという効
果がある。
[0028] The invention of claim 7 is the first to sixth aspects of the present invention.
In the present invention, since the eye closed state of the user is detected by the blink signal and the sound volume of the sound means is reduced when the eye closed state is continued for a predetermined time, it is possible to prevent the user from falling asleep. The invention of claim 8 is the invention of claim 1
According to the sixth aspect of the present invention, since the eye-closed state of the user is detected based on the blink signal and the power is turned off when the eye-closed state is continued for a predetermined time, it is possible to prevent the user from falling asleep and prevent the user from falling asleep. There is an effect that electric power can be achieved.

【図面の簡単な説明】[Brief description of the drawings]

【図1】実施形態を示す外観斜視図である。FIG. 1 is an external perspective view showing an embodiment.

【図2】同上の要部回路ブロック図である。FIG. 2 is a main part circuit block diagram of the same.

【符号の説明】[Explanation of symbols]

1 ディスプレイ装置本体 2 ディスプレイ部 2a,2b 液晶ディスプレイ 3 装着バンド 4a,4b 光センサ DESCRIPTION OF SYMBOLS 1 Display apparatus main body 2 Display part 2a, 2b Liquid crystal display 3 Wearing band 4a, 4b Optical sensor

Claims (8)

【特許請求の範囲】[Claims] 【請求項1】 使用者の頭部に搭載して装着する装着手
段と、装着手段に連設され使用者の眼前に位置し映像を
映し出すディスレイ部と、装着手段に連設され音声を発
する音響手段と、装着手段に設けられ光を使用者の額に
向かって放射してその反射光を受光し受光量に応じた信
号を出力する光センサとでディスプレイ装置本体が構成
され、光センサの出力信号に基づいて使用者の脈拍数を
求める信号処理手段を有することを特徴とするディスプ
レイ装置。
1. A mounting device mounted on a head of a user for mounting, a display portion connected to the mounting device and positioned in front of the user and displaying an image, and a sound connected to the mounting device and emitting sound. And a light sensor provided on the mounting means for emitting light toward the user's forehead, receiving the reflected light, and outputting a signal corresponding to the amount of light received. A display device comprising signal processing means for obtaining a pulse rate of a user based on a signal.
【請求項2】 使用者の頭部に搭載して装着する装着手
段と、装着手段に連設され使用者の眼前に位置し映像を
映し出すディスレイ部と、装着手段に連設され音声を発
する音響手段と、装着手段に設けられ光を使用者の額に
向かって放射してその反射光を受光し受光量に応じた信
号を出力する光センサとでディスプレイ装置本体が構成
され、光センサの出力信号に基づいて使用者の瞬目を検
出する信号処理手段を有することを特徴とするディスプ
レイ装置。
2. A mounting means mounted on the head of a user for mounting, a display unit connected to the mounting means and positioned in front of the user to display an image, and a sound connected to the mounting means and emitting sound. And a light sensor provided on the mounting means for emitting light toward the user's forehead, receiving the reflected light, and outputting a signal corresponding to the amount of light received. A display device comprising signal processing means for detecting a blink of a user based on a signal.
【請求項3】 使用者の頭部に搭載して装着する装着手
段と、装着手段に連設され使用者の眼前に位置し映像を
映し出すディスレイ部と、装着手段に連設され音声を発
する音響手段と、装着手段に設けられ光を使用者の額に
向かって放射してその反射光を受光し受光量に応じた信
号を出力する光センサとでディスプレイ装置本体が構成
され、光センサの出力信号に基づいて使用者の脈拍数及
び瞬目を検出する信号処理手段を有することを特徴とす
るディスプレイ装置。
3. A mounting means mounted on the head of the user for mounting, a display unit connected to the mounting means and positioned in front of the user to display an image, and a sound connected to the mounting means and emitting sound. And a light sensor provided on the mounting means for emitting light toward the user's forehead, receiving the reflected light, and outputting a signal corresponding to the amount of light received. A display device comprising signal processing means for detecting a pulse rate and blinking of a user based on a signal.
【請求項4】 光センサを装着手段に複数個配置し、信
号処理手段は、各光センサの出力信号を加算した加算信
号に基づいて使用者の脈拍数を求めることを特徴とする
請求項1又は請求項3記載のディスプレイ装置。
4. The apparatus according to claim 1, wherein a plurality of optical sensors are arranged on the mounting means, and the signal processing means obtains a pulse rate of the user based on an addition signal obtained by adding output signals of the respective optical sensors. Or the display device according to claim 3.
【請求項5】 信号処理手段は、光センサの出力信号を
使用者の脈拍に対応した脈拍信号と使用者の瞬目に対応
した瞬目信号とに弁別することを特徴とする請求項1乃
至請求項4記載のディスプレイ装置。
5. The apparatus according to claim 1, wherein the signal processing unit discriminates an output signal of the optical sensor into a pulse signal corresponding to the pulse of the user and a blink signal corresponding to the blink of the user. The display device according to claim 4.
【請求項6】 光センサを両眼それぞれの上方に位置す
るように装着手段に配置し、左右対称となる位置の光セ
ンサ同士の出力信号に基づいて一方の眼だけの瞬目によ
る合図を検出する合図検出手段を信号処理手段に付加し
たことを特徴とする請求項1乃至請求項5記載のディス
プレイ装置。
6. An optical sensor is disposed on the mounting means so as to be located above each of the two eyes, and a signal from a blink of only one eye is detected based on an output signal between the optical sensors at symmetrical positions. 6. The display device according to claim 1, wherein a signal detecting means for performing the operation is added to the signal processing means.
【請求項7】 瞬目信号により使用者の閉眼状態を検知
し閉眼状態が所定時間継続されると音響手段の音量を小
さくすることを特徴とする請求項5又は請求項6記載の
ディスプレイ装置。
7. The display device according to claim 5, wherein the eye-closed state of the user is detected based on the blink signal, and the volume of the sound means is reduced when the eye-closed state is continued for a predetermined time.
【請求項8】 瞬目信号により使用者の閉眼状態を検知
し閉眼状態が所定時間継続されると電源がオフされるこ
とを特徴とする請求項5又は請求項6記載のディスプレ
イ装置。
8. The display device according to claim 5, wherein a power supply is turned off when an eye closed state of the user is detected by a blink signal and the eye closed state is continued for a predetermined time.
JP28489696A 1996-05-28 1996-10-28 Display device Expired - Fee Related JP3363327B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP28489696A JP3363327B2 (en) 1996-10-28 1996-10-28 Display device
US08/842,037 US6123661A (en) 1996-05-28 1997-04-23 Relax refresh system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP28489696A JP3363327B2 (en) 1996-10-28 1996-10-28 Display device

Publications (2)

Publication Number Publication Date
JPH10127769A true JPH10127769A (en) 1998-05-19
JP3363327B2 JP3363327B2 (en) 2003-01-08

Family

ID=17684454

Family Applications (1)

Application Number Title Priority Date Filing Date
JP28489696A Expired - Fee Related JP3363327B2 (en) 1996-05-28 1996-10-28 Display device

Country Status (1)

Country Link
JP (1) JP3363327B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000235366A (en) * 1998-12-18 2000-08-29 Semiconductor Energy Lab Co Ltd Goggle type display system
WO2009001449A1 (en) * 2007-06-27 2008-12-31 Pioneer Corporation Listening device
US9086567B2 (en) 1998-12-18 2015-07-21 Semiconductor Energy Laboratory Co., Ltd. Display system
JP2017033007A (en) * 2000-01-17 2017-02-09 株式会社半導体エネルギー研究所 Electronic device
JP2017058853A (en) * 2015-09-15 2017-03-23 株式会社コーエーテクモゲームス Information processing apparatus, operation control method, and operation control program
CN111225646A (en) * 2017-11-06 2020-06-02 保迪弗兰德有限公司 Massage chair for performing brain massage
JP2022516358A (en) * 2019-01-17 2022-02-25 アップル インコーポレイテッド Head-mounted display with face interface for sensing physiological conditions

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2018147192A1 (en) * 2017-02-13 2019-11-07 学校法人帝京大学 Pulse wave detection apparatus and method

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000235366A (en) * 1998-12-18 2000-08-29 Semiconductor Energy Lab Co Ltd Goggle type display system
US9086567B2 (en) 1998-12-18 2015-07-21 Semiconductor Energy Laboratory Co., Ltd. Display system
US9201244B2 (en) 1998-12-18 2015-12-01 Semiconductor Energy Laboratory Co., Ltd. Goggle type display system
JP2017033007A (en) * 2000-01-17 2017-02-09 株式会社半導体エネルギー研究所 Electronic device
US10467961B2 (en) 2000-01-17 2019-11-05 Semiconductor Energy Laboratory Co., Ltd. Display system and electrical appliance
US10522076B2 (en) 2000-01-17 2019-12-31 Semiconductor Energy Laboratory Co., Ltd. Display system and electrical appliance
WO2009001449A1 (en) * 2007-06-27 2008-12-31 Pioneer Corporation Listening device
JP2017058853A (en) * 2015-09-15 2017-03-23 株式会社コーエーテクモゲームス Information processing apparatus, operation control method, and operation control program
CN111225646A (en) * 2017-11-06 2020-06-02 保迪弗兰德有限公司 Massage chair for performing brain massage
JP2022516358A (en) * 2019-01-17 2022-02-25 アップル インコーポレイテッド Head-mounted display with face interface for sensing physiological conditions
US11740475B2 (en) 2019-01-17 2023-08-29 Apple Inc. Head-mounted display with facial interface for sensing physiological conditions

Also Published As

Publication number Publication date
JP3363327B2 (en) 2003-01-08

Similar Documents

Publication Publication Date Title
US6123661A (en) Relax refresh system
JP2005318973A (en) Biological sensor apparatus, content reproducing method and content reproducing apparatus
US5551879A (en) Dream state teaching machine
US7835529B2 (en) Sound canceling systems and methods
US20070239225A1 (en) Training device and method to suppress sounds caused by sleep and breathing disorders
JP2008099834A (en) Display device and display method
US11565172B2 (en) Information processing apparatus, information processing method, and information processing apparatus-readable recording medium
JPH09182193A (en) Hearing aid
JPH10315799A (en) Asleep-driving prevention device
JPH10127769A (en) Display unit
JP3779150B2 (en) Computer game device controlled by EEG biofeedback
JP3363313B2 (en) Chair system
US5896457A (en) Light enhanced sound device and method
WO2013009672A1 (en) Audio input device
KR20010020394A (en) Eyewear comprising a visual entertainment system
JP2000193910A (en) Display device
JP2005034484A (en) Sound reproduction device, image reproduction device, and image and sound reproduction method
JP3054295B2 (en) headphone
JP2502433B2 (en) Relaxation system
KR101709410B1 (en) Apparatus for relaxation via brainwave entrainment with a mirror
KR20050096675A (en) Apparatus and method for generating pulsating noise in audio device
JPH0915527A (en) Head-mounted video display device
JPH1175140A (en) Head mounted video display device and video display controller
KR100274033B1 (en) Head mount display
KR20200109673A (en) Chair, Headrest and Sound Reproducing Apparatus Therefor

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20021001

LAPS Cancellation because of no payment of annual fees