JP3363327B2 - Display device - Google Patents
Display deviceInfo
- Publication number
- JP3363327B2 JP3363327B2 JP28489696A JP28489696A JP3363327B2 JP 3363327 B2 JP3363327 B2 JP 3363327B2 JP 28489696 A JP28489696 A JP 28489696A JP 28489696 A JP28489696 A JP 28489696A JP 3363327 B2 JP3363327 B2 JP 3363327B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- signal
- blink
- pulse
- display device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、使用者の頭部に搭
載して使用するディスプレイ装置に関するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a display device mounted on a user's head and used.
【０００２】[0002]
【従来の技術】近年、使用者の頭部に搭載して眼前に位
置するディスプレイ部に映像を映し出す頭部搭載型ディ
スプレイ装置（Head Mounted Display :ＨＭＤ）が提供
されている。この種のディスプレイ装置は、ディスプレ
イ部に映し出される３次元立体視映像又は２次元映像を
見たり、ヘッドホン等で再生される音声を聞くことによ
り、一人で映像や音声（音楽）を楽しむことができる。2. Description of the Related Art In recent years, there has been provided a head mounted display (HMD) which is mounted on the head of a user and projects an image on a display located in front of the user. This type of display device allows one person to enjoy the image and the sound (music) by watching the three-dimensional stereoscopic image or the two-dimensional image displayed on the display unit and listening to the sound reproduced by headphones or the like. .
【０００３】[0003]
【発明が解決しようとする課題】ところで、この種のデ
ィスプレイ装置においては、使用者の脈拍あるいは瞬目
を検出し、映像を映し出す状態や音声を発する状態等を
変更させたり外部機器を連動制御したりすることによっ
て使用者をリラックス・リフレッシュさせようとするも
のがあった。しかしながら、従来構成のものでは、使用
者の脈拍を検出するために脈拍センサを耳たぶや手の指
などに装着する必要があり、脈拍センサの装着に手間が
かかるとともに装着された脈拍センサが煩わしくリラッ
クス状態を妨げることがあるという不具合があった。By the way, in this type of display device, the pulse or blink of the user is detected, and the state of displaying an image or the state of emitting a sound is changed or the external device is interlocked and controlled. There was something that tried to make the user relaxed and refreshed. However, in the conventional configuration, it is necessary to attach the pulse sensor to the earlobe or finger of the hand in order to detect the pulse of the user, and it takes time to attach the pulse sensor and the attached pulse sensor is troublesome and relaxing. There was a problem that it could hinder the state.
【０００４】また、使用者の瞬目を検出するものとして
は、赤外光を眼球に照射しその反射光を検出する方式の
もの（特開平６−１２１２５４号公報参照）があった
が、この方式では、赤外光を眼球に照射する必要がある
ため気分的にリラックスできなかったり、赤外光を眼球
に照射するための光軸の調整に手間がかかるという不具
合があった。As a method for detecting the blink of the user, there is a method of irradiating the eyeball with infrared light and detecting the reflected light (see Japanese Patent Laid-Open No. 6-1212254). In the method, there is a problem that it is necessary to irradiate the infrared light to the eyeball, so that it is not possible to relax feeling, and it takes time and effort to adjust the optical axis for irradiating the infrared light to the eyeball.
【０００５】本発明は上記事由に鑑みて為されたもので
あり、その目的は、使用者の脈拍や瞬目を検出し映像信
号や音声の状態を変化させたり外部機器を連動制御する
頭部搭載型のディスプレイ装置において、使い勝手が良
く使用者をリラックス、リフレッシュさせることを可能
とするディスプレイ装置を提供することにある。The present invention has been made in view of the above circumstances, and an object thereof is to detect a user's pulse or blink and detect a video signal.
Change the status of audio signals and audio, and control external devices in conjunction
In the head-mounted display device, use without permission is well lira a user box, it allows to refresh
It is to provide a de-spray apparatus to.
【０００６】[0006]
【課題を解決するための手段】請求項１の発明は、上記
目的を達成するために、使用者の頭部に搭載して装着す
る装着手段と、装着手段に連設され使用者の眼前に位置
し映像を映し出すディスプレイ部と、装着手段に連設さ
れ音声を発する音響手段と、装着手段に設けられ光を使
用者の額に向かって放射してその反射光を受光し受光量
に応じた信号を出力する光センサとでディスプレイ装置
本体が構成され、光センサの出力信号に基づいて使用者
の脈拍数を求める信号処理手段を有し、信号処理手段
は、光センサの出力信号を使用者の脈拍に対応した脈拍
信号と使用者の瞬目に対応した瞬目信号とに弁別するこ
とを特徴とするものであり、ディスプレイ装置本体を装
着手段によって使用者の頭部に装着するだけで別途脈拍
センサを耳たぶや手の指などに装着することなしに使い
勝手良く脈拍数を求めることができ、また、脈拍信号や
瞬目信号に応じて映像や音声の状態を変化させたり外部
機器を連動制御するようにすることが可能となり、使用
者をリラックス、リフレッシュさせることが可能とな
る。 In order to achieve the above object, the invention of claim 1 is to mount the device on the user's head and mount it, and to connect the mounting device to the front of the user's eyes. position and a de-spray Lee unit for projecting an image, a sound means for emitting sound is provided continuously to the mounting means, to the amount of light received by the light receiving the reflected light radiating toward the forehead of the user with light provided mounting means A display device main body is configured with an optical sensor that outputs a signal corresponding to the display device , and has a signal processing unit that obtains a pulse rate of the user based on the output signal of the optical sensor.
Is the pulse signal corresponding to the user's pulse
And characterized in the this <br/> to discriminate the signal and blinking signal corresponding to the blink of a user, separately pulse by simply attached to the head of the user by the mounting means the display device main body You can easily find the pulse rate without attaching the sensor to the earlobe or finger of your hand.
Change the state of video and audio according to the blink signal
It becomes possible to control the equipment interlocked and used
Relax the person, it is possible to refresh
It
【０００７】請求項２の発明は、使用者の頭部に搭載し
て装着する装着手段と、装着手段に連設され使用者の眼
前に位置し映像を映し出すディスプレイ部と、装着手段
に連設され音声を発する音響手段と、装着手段に設けら
れ光を使用者の額に向かって放射してその反射光を受光
し受光量に応じた信号を出力する光センサとでディスプ
レイ装置本体が構成され、光センサの出力信号に基づい
て使用者の瞬目を検出する信号処理手段を有し、信号処
理手段は、光センサの出力信号を使用者の脈拍に対応し
た脈拍信号と使用者の瞬目に対応した瞬目信号とに弁別
することを特徴とするものであり、ディスプレイ装置本
体を装着手段によって使用者の頭部に装着するだけで光
を照射するための光軸調整を行なうことなしに使い勝手
良く使用者の瞬目を検出することができ、また、脈拍信
号や瞬目信号に応じて映像や音声の状態を変化させたり
外部機器を連動制御するようにすることが可能となり、
使用者をリラックス、リフレッシュさせることが可能と
なる。また、眼球に光を直接照射する必要がないので、
可視光を利用することも可能となる。[0007] The second aspect of the present invention includes a mounting means for mounting by mounting on the head of a user, and Di spray Lee unit for projecting the position and image in front of the eyes of the user are provided continuously to the mounting means, the mounting means The main body of the display device is composed of an acoustic means that is provided in series and that emits sound, and an optical sensor that is provided in the wearing means and emits light toward the user's forehead to receive the reflected light and output a signal according to the amount of received light. It is configured having a signal processing means for detecting a blink of the user based on the output signal of the optical sensor, signal processing
The processing means corresponds the output signal of the optical sensor to the pulse of the user.
Discriminating between the pulse signal and the blink signal corresponding to the user's blink
The user can easily detect the blink of the user without adjusting the optical axis to irradiate the light just by mounting the display device body on the user's head by the mounting means. Can also be pulse
Change the state of video and audio according to the signal and blink signal
It becomes possible to control the external equipment in conjunction with
It is possible to relax and refresh the user
Become. Also , since it is not necessary to directly illuminate the eyeball with light,
It is also possible to use visible light.
【０００８】請求項３の発明は、使用者の頭部に搭載し
て装着する装着手段と、装着手段に連設され使用者の眼
前に位置し映像を映し出すディスプレイ部と、装着手段
に連設され音声を発する音響手段と、装着手段に設けら
れ光を使用者の額に向かって放射してその反射光を受光
し受光量に応じた信号を出力する光センサとでディスプ
レイ装置本体が構成され、光センサの出力信号に基づい
て使用者の脈拍数及び瞬目を検出する信号処理手段を有
し、信号処理手段は、光センサの出力信号を使用者の脈
拍に対応した脈拍信号と使用者の瞬目に対応した瞬目信
号とに弁別することを特徴とするものであり、ディスプ
レイ装置本体を装着手段によって使用者の頭部に装着す
るだけで別途脈拍センサを耳たぶや手の指などに装着す
ることなしに使い勝手良く脈拍数を求めることができる
とともに、光を照射するための光軸調整を行なうことな
しに使い勝手良く使用者の瞬目を検出することができ、
また、脈拍信号や瞬目信号に応じて映像や音声の状態を
変化させたり外部機器を連動制御するようにすることが
可能となり、使用者をリラックス、リフレッシュさせる
ことが可能となる。また、眼球に光を直接照射する必要
がないので、可視光を利用することも可能となる。[0008] The invention of claim 3, a mounting means for mounting by mounting on the head of a user, and Di spray Lee unit for projecting the position and image in front of the eyes of the user are provided continuously to the mounting means, the mounting means The main body of the display device is composed of an acoustic means that is provided in series and that emits sound, and an optical sensor that is provided in the wearing means and emits light toward the user's forehead to receive the reflected light and output a signal according to the amount of received light. is configured, have a signal processing means for detecting the pulse rate and blink of the user based on the output signal of the optical sensor
However, the signal processing means outputs the output signal of the optical sensor to the pulse of the user.
Pulse signal corresponding to the beat and blink signal corresponding to the user's blink
It is characterized by discriminating between the pulse rate and the pulse rate by simply attaching the display device body to the user's head by the attaching means without attaching a pulse sensor to the earlobe or fingers of the hand. It is possible to obtain the number and to detect the blink of the user conveniently without adjusting the optical axis for irradiating light .
Also, depending on the pulse signal and blink signal, the state of video and audio can be
It is possible to change or control external equipment in conjunction.
It becomes possible to relax and refresh the user . Further , since it is not necessary to directly irradiate the eyeball with light, it is possible to use visible light.
【０００９】[0009]
【００１０】請求項４の発明は、請求項１乃至請求項３
の発明において、光センサを両眼それぞれの上方に位置
するように装着手段に配置し、左右対称となる位置の光
センサ同士の出力信号に基づいて一方の眼だけの瞬目に
よる合図を検出する合図検出手段を信号処理手段に付加
したので、使用者の瞬目による合図に応じて例えば映像
や音声の状態を変化させたり外部機器を連動制御したり
することによって使用者をリラックス、リフレッシュさ
せることが可能となる。 The invention of claim 4 is the first to third aspects of the invention.
In the invention described above, the optical sensor is arranged in the mounting means so as to be located above each of the eyes, and the cue due to the blink of only one eye is detected based on the output signals of the optical sensors at the symmetrical positions. Having added signaled detection means to the signal processing means, relaxing user blink interlocking control or thus used for persons to e.g. an external device or to change the state of the video and audio in response to cues, refreshing It becomes possible.
【００１１】請求項５の発明は、請求項１乃至請求項４
の発明において、瞬目信号により使用者の閉眼状態を検
知し閉眼状態が所定時間継続されると音響手段の音量を
小さくするので、使用者の入眠状態を妨げるのを防止で
きる。請求項６の発明は、請求項１乃至請求項４の発明
において、瞬目信号により使用者の閉眼状態を検知し閉
眼状態が所定時間継続されると電源がオフされるので、
使用者の入眠状態を妨げるのを防止できるとともに、省
電力化を図ることができる。The invention of claim 5 is the invention of claims 1 to 4.
In the invention, the eye-closed state of the user is detected by the blink signal, and when the eye-closed state is continued for a predetermined time, the volume of the acoustic means is reduced, so that it is possible to prevent the user from disturbing the sleep state. According to a sixth aspect of the present invention, in the first to fourth aspects of the invention, the eye-closed state of the user is detected by the blink signal and the power is turned off when the eye-closed state continues for a predetermined time.
It is possible to prevent the user from falling asleep and to save power.
【００１２】[0012]
【発明の実施の形態】図１に本実施形態のディスプレイ
装置本体の外観斜視図を示し、図２に要部回路ブロック
図を示す。本実施形態は、図１に示すように、使用者の
頭部に搭載して装着するための装着手段たる装着バンド
３と、装着バンド３に連設され使用者の眼前に位置する
ディスプレイ部２と、装着バンド３に連設され音声を発
生するヘッドホン等の音響手段（図示せず）と、装着バ
ンド３の使用者の額と接触する部位に埋め込まれた光セ
ンサ４ａ，４ｂとで、ディスプレイ装置本体１を構成し
ている。すなわち、ディスプレイ装置本体１を使用者の
頭部に装着することによって光センサ４ａ，４ｂが使用
者の額と対向する位置が決まる。なお、光センサの数は
２つに限定するものではなく、１つでも３つ以上でもよ
い。DESCRIPTION OF THE PREFERRED EMBODIMENTS FIG. 1 shows an external perspective view of a display device body of the present embodiment, and FIG. In the present embodiment, as shown in FIG. 1, a mounting band 3 as a mounting means for mounting and mounting on the head of the user, and a mounting band 3 connected to the mounting band 3 and positioned in front of the user's eyes. > and di spray Lee unit 2, an acoustic means of the headphones or the like for generating a sound is continuously provided to the mounting band 3 (not shown), an optical sensor 4a embedded in a portion in contact with the forehead of the user of the mounting band 3 , 4b constitute the display device body 1. That is, by mounting the display device body 1 on the head of the user, the positions where the optical sensors 4a and 4b face the forehead of the user are determined. The number of photosensors is not limited to two, and may be one or three or more.
【００１３】ディスプレイ部２は、左眼、右眼に対応し
て設けてある液晶ディスプレイ２ａ，２ｂで映像機器か
らの映像を映し出す。なお、ディスプレイ部２において
映し出す映像は３次元立体映像でも２次元の映像でもよ
く、またその併用でもよい。このような映像を映し出す
技術は周知なので説明を省略する。以下、本実施形態の
特徴となる部分を図２を参照しながら説明する。The display unit 2 displays the image from the image device on the liquid crystal displays 2a and 2b provided corresponding to the left eye and the right eye. The image displayed on the display unit 2 may be a 3D stereoscopic image, a 2D image, or a combination thereof. A technique for displaying such an image is well known, and therefore its explanation is omitted. The features of this embodiment will be described below with reference to FIG.
【００１４】光センサ４ａ，４ｂは、それぞれ発光素子
としての発光ダイオード５ａ，５ｂと受光素子６ａ，６
ｂとで構成され、発光ダイオード駆動回路１５ａ，１５
ｂによって発光ダイオード５ａ，５ｂの光を使用者の額
に放射して、その反射光を受光素子６ａ，６ｂで受光
し、その受光量に応じた信号を出力するようになってい
る。The optical sensors 4a and 4b are light emitting diodes 5a and 5b as light emitting elements and light receiving elements 6a and 6b, respectively.
and the light emitting diode drive circuits 15a and 15b.
Light emitted from the light emitting diodes 5a and 5b is emitted to the user's forehead by b, and the reflected light is received by the light receiving elements 6a and 6b, and a signal corresponding to the received light amount is output.
【００１５】光センサ４ａ，４ｂの出力信号、つまり、
受光素子６ａ，６ｂの出力信号は、後述の信号処理手段
へ入力される。ところで、光センサ４ａ，４ｂは、発光
ダイオード５ａ，５ｂによって使用者の額表面を照射
し、その反射光を受光素子６ａ，６ｂで受光するもので
あるが、受光素子６ａ，６ｂの受光量、つまり、反射光
の量が使用者の血液中のヘモグロビンによる光吸収量の
影響を受けて変化するので、血液量の変化すなわち脈拍
が検出できるのである。The output signals of the optical sensors 4a and 4b, that is,
The output signals of the light receiving elements 6a and 6b are input to the signal processing means described later. By the way, the optical sensors 4a and 4b illuminate the forehead surface of the user with the light emitting diodes 5a and 5b and receive the reflected light by the light receiving elements 6a and 6b. In other words, the amount of reflected light changes under the influence of the amount of light absorbed by hemoglobin in the blood of the user, so that a change in blood amount, that is, a pulse can be detected.
【００１６】上述の信号処理手段は、光センサ４ａ，４
ｂの出力信号に基づいて使用者の脈拍数及び瞬目を検出
するための手段であって、各光センサ４ａ，４ｂの出力
信号を別々に増幅する増幅フィルタ回路８と、増幅フィ
ルタ回路８にて増幅された各光センサ４ａ，４ｂの出力
信号を加算して出力する加算回路９と、加算回路９の出
力信号を脈拍成分（脈拍信号）と瞬目成分（瞬目信号）
とに弁別して出力する弁別回路としてのフィルタ回路１
１と、フィルタ回路１１の出力である脈拍信号、瞬目信
号それぞれを所定のしきい値と比較してノイズを除去す
るしきい値回路１０と、を有している。したがって、し
きい値回路１０から出力される脈拍信号より脈拍数を求
めることができ、瞬信号により瞬目を検出できるのであ
る。なお、光センサが１つの場合は、加算回路９は不要
である。The above-mentioned signal processing means includes the optical sensors 4a, 4a.
The amplification filter circuit 8 for separately amplifying the output signals of the respective optical sensors 4a and 4b, which is means for detecting the pulse rate and blink of the user based on the output signal of b, is provided in the amplification filter circuit 8. And output signals of the optical sensors 4a and 4b amplified and added, and an output signal of the adding circuit 9 is a pulse component (pulse signal) and a blink component (blink signal).
Filter circuit 1 as a discrimination circuit for discriminating and outputting
1 and a threshold circuit 10 for removing noise by comparing the pulse signal and the blink signal output from the filter circuit 11 with predetermined threshold values. Therefore, the pulse rate can be obtained from the pulse signal output from the threshold circuit 10, and the blink can be detected by the instantaneous signal. If there is only one optical sensor, the adder circuit 9 is unnecessary.
【００１７】光センサ４ａ，４ｂにより検出される脈拍
信号には様々なノイズが重畳されているが、本実施形態
では、光センサ４ａ，４ｂの出力信号を加算回路９によ
って加算しているので、光センサが１つの場合に比べて
フィルタ回路１１に入力する信号のＳ／Ｎ比が向上す
る。このため、フィルタ回路１１の要求仕様が緩いもの
となり、設計が容易になるとともに、電気的なノイズフ
ィルタを設ける必要もない。Various noises are superposed on the pulse signals detected by the optical sensors 4a and 4b, but in the present embodiment, the output signals of the optical sensors 4a and 4b are added by the adder circuit 9, so that The S / N ratio of the signal input to the filter circuit 11 is improved as compared with the case where there is one optical sensor. Therefore, the required specifications of the filter circuit 11 are loose, the design is easy, and it is not necessary to provide an electrical noise filter.
【００１８】ところで、本実施形態では、フィルタ回路
１１において弁別されしきい値回路１０から出力される
瞬目信号に基づいて使用者の閉眼状態が一定時間継続し
て検出されると、電子ボリューム回路２１によって音声
のボリュームが低減されるので、使用者の入眠状態を妨
げないようにすることができる。また、使用者の閉眼状
態が一定時間継続して検出されると、電源制御回路２２
によって電子ボリューム回路２１及び映像フェードアウ
ト回路２３への電源供給を遮断するようにしてもよく、
このようにすれば、使用者の入眠状態を妨げないように
することができるとともに、電源をオフすることによっ
て省電力化を図ることができる。By the way, in this embodiment, when the user's eye-closed state is continuously detected for a certain period of time based on the blinking signal discriminated in the filter circuit 11 and output from the threshold circuit 10, the electronic volume circuit is detected. Since the volume of the sound is reduced by 21, the user can be prevented from disturbing the sleep state of the user. When the user's eyes closed state is continuously detected for a certain period of time, the power control circuit 22
The power supply to the electronic volume circuit 21 and the video fade-out circuit 23 may be cut off by
With this configuration, it is possible to prevent the user from falling asleep and to save power by turning off the power.
【００１９】而して、ディスプレイ装置本体１を装着バ
ンド３によって使用者の頭部に装着するだけで別途脈拍
センサを耳たぶや手の指などに装着することなしに使い
勝手良く脈拍数を求めることができるとともに、光を照
射するための光軸調整を行なうことなしに使い勝手良く
使用者の瞬目を検出することができるから、使用者の脈
拍数や瞬目に応じて例えば映像や音声の状態を変化させ
たり外部機器を連動制御したりすることにより、使用者
をリラックス、リフレッシュさせることができる。ま
た、眼球に光を直接照射する必要がないので、可視光を
利用することも可能となる。Thus, by simply mounting the display device main body 1 on the user's head with the mounting band 3, it is possible to obtain the pulse rate in a convenient manner without separately mounting the pulse sensor on the earlobe or finger of the hand. In addition, the blink of the user can be detected easily without adjusting the optical axis for irradiating the light, so that, for example, the state of video and audio can be determined according to the pulse rate and blink of the user. The user can be relaxed and refreshed by changing or interlocking the external device. Further, since it is not necessary to directly irradiate the eyeball with light, it is possible to use visible light.
【００２０】また、本実施形態では、光センサ４ａ，４
ｂを両眼それぞれの上方に位置するように装着バンド３
に配置してあるので、左右対称となる位置の光センサ４
ａ，４ｂ同士の出力信号に基づいて一方の眼だけの瞬目
による合図を検出する合図検出手段を設け、使用者の瞬
目による合図に応じて例えば映像や音声の状態を変化さ
せたり外部機器を連動制御したりするようにしてもよ
い。一例として、右眼の瞬目の合図によって、液晶ディ
スプレイ２ａ，２ｂの輝度を調整したり、ヘッドホンの
音量を調節するようにすることができる。Further, in this embodiment, the optical sensors 4a, 4a
Wear the band 3 so that b is located above each eye.
Since it is placed in the
A cue detection means for detecting a cue caused by a blink of only one eye based on the output signals of a and 4b is provided, and, for example, the state of video or audio is changed according to the cue caused by the blink of the user, or an external device. May be interlocked. As an example, the brightness of the liquid crystal displays 2a and 2b can be adjusted and the volume of the headphones can be adjusted by the blink of the right eye.
【００２１】ところで、本実施形態では、光センサ４
ａ，４ｂの出力信号に基づいてフィルタ回路１１にて脈
拍成分と瞬目成分とを弁別しているが、光センサ４ａ，
４ｂを上下方向に配置して、使用者の額部の上部、下部
に光センサ４ａ，４ｂが対向するようにし、光センサ４
ａ，４ｂの出力信号の差をとることにより、脈拍成分を
相殺し瞬目成分のみを抽出するようにしてもよい。した
がって、瞬目を検出することで、瞬目に応じて例えば映
像や音声の状態を変化させたり外部機器を連動制御した
りすることにより、使用者をリラックス、リフレッシュ
させることができる。By the way, in this embodiment, the optical sensor 4 is used.
The pulse component and the blink component are discriminated by the filter circuit 11 based on the output signals of a and 4b.
4b are arranged in the vertical direction so that the optical sensors 4a and 4b face the upper and lower portions of the forehead of the user.
The pulse component may be canceled out and only the blink component may be extracted by taking the difference between the output signals of a and 4b. Therefore, by detecting the blinking, the user can be relaxed and refreshed by changing the state of video and audio according to the blinking or controlling the external device in conjunction.
【００２２】なお、光センサは、それぞれ一対の発光素
子と受光素子とで構成してもよいし、受光素子、発光素
子、受光素子の３つを組み合わせたものを用いてもよ
い。The optical sensor may be composed of a pair of a light emitting element and a light receiving element, or may be a combination of three light receiving elements, a light emitting element and a light receiving element.
【００２３】[0023]
【発明の効果】請求項１の発明は、使用者の頭部に搭載
して装着する装着手段と、装着手段に連設され使用者の
眼前に位置し映像を映し出すディスプレイ部と、装着手
段に連設され音声を発する音響手段と、装着手段に設け
られ光を使用者の額に向かって放射してその反射光を受
光し受光量に応じた信号を出力する光センサとでディス
プレイ装置本体が構成され、光センサの出力信号に基づ
いて使用者の脈拍数を求める信号処理手段を有し、信号
処理手段は、光センサの出力信号を使用者の脈拍に対応
した脈拍信号と使用者の瞬目に対応した瞬目信号とに弁
別するので、ディスプレイ装置本体を装着手段によって
使用者の頭部に装着するだけで別途脈拍センサを耳たぶ
や手の指などに装着することなしに使い勝手良く脈拍数
を求めることができるという効果があり、また、脈拍信
号や瞬目信号に応じて映像や音声の状態を変化させたり
外部機器を連動制御するようにすることが可能となり、
使用者をリラックス、リフレッシュさせることが可能と
なる。 The invention of claim 1 according to the present invention includes: a mounting means for mounting by mounting on the head of a user, and Di spray Lee unit for projecting an image located in front of the eyes of the user are provided continuously to the mounting means, the mounting Display device with acoustic means that is connected to the means and emits sound, and an optical sensor that is provided in the wearing means and emits light toward the user's forehead to receive the reflected light and output a signal according to the amount of received light The main body is configured and has signal processing means for obtaining the pulse rate of the user based on the output signal of the optical sensor.
The processing means corresponds the output signal of the optical sensor to the pulse of the user.
The pulse signal and the blink signal corresponding to the user's blink.
Since it is different , there is an effect that it is possible to easily find the pulse rate by simply attaching the display device main body to the head of the user by the attaching means and without separately attaching the pulse sensor to the earlobe or finger of the hand . , Again, pulse
Change the state of video and audio according to the signal and blink signal
It becomes possible to control the external equipment in conjunction with
It is possible to relax and refresh the user
Become.
【００２４】請求項２の発明は、使用者の頭部に搭載し
て装着する装着手段と、装着手段に連設され使用者の眼
前に位置し映像を映し出すディスプレイ部と、装着手段
に連設され音声を発する音響手段と、装着手段に設けら
れ光を使用者の額に向かって放射してその反射光を受光
し受光量に応じた信号を出力する光センサとでディスプ
レイ装置本体が構成され、光センサの出力信号に基づい
て使用者の瞬目を検出する信号処理手段を有し、信号処
理手段は、光センサの出力信号を使用者の脈拍に対応し
た脈拍信号と使用者の瞬目に対応した瞬目信号とに弁別
するので、ディスプレイ装置本体を装着手段によって使
用者の頭部に装着するだけで光を照射するための光軸調
整を行なうことなしに使い勝手良く使用者の瞬目を検出
することができるという効果があり、また、脈拍信号や
瞬目信号に応じて映像や音声の状態を変化させたり外部
機器を連動制御するようにすることが可能となり、使用
者をリラックス、リフレッシュさせることが可能とな
る。また、眼球に光を直接照射する必要がないので、可
視光を利用することも可能となる。The invention of claim 2 includes a mounting means for mounting by mounting on the head of a user, and Di spray Lee unit for projecting the position and image in front of the eyes of the user are provided continuously to the mounting means, the mounting means The main body of the display device is composed of an acoustic means that is provided in series and that emits sound, and an optical sensor that is provided in the wearing means and emits light toward the user's forehead to receive the reflected light and output a signal according to the amount of received light. It is configured having a signal processing means for detecting a blink of the user based on the output signal of the optical sensor, signal processing
The processing means corresponds the output signal of the optical sensor to the pulse of the user.
Discriminating between the pulse signal and the blink signal corresponding to the user's blink
Therefore , the effect that the blink of the user can be detected easily by simply mounting the display device main body on the head of the user by the mounting means and without adjusting the optical axis for irradiating the light is provided. Yes, the pulse signal
Change the state of video and audio according to the blink signal
It becomes possible to control the equipment interlocked and used
Relax the person, it is possible to refresh
It Further , since it is not necessary to directly irradiate the eyeball with light, it is possible to use visible light.
【００２５】請求項３の発明は、使用者の頭部に搭載し
て装着する装着手段と、装着手段に連設され使用者の眼
前に位置し映像を映し出すディスプレイ部と、装着手段
に連設され音声を発する音響手段と、装着手段に設けら
れ光を使用者の額に向かって放射してその反射光を受光
し受光量に応じた信号を出力する光センサとでディスプ
レイ装置本体が構成され、光センサの出力信号に基づい
て使用者の脈拍数及び瞬目を検出する信号処理手段を有
し、信号処理手段は、光センサの出力信号を使用者の脈
拍に対応した脈拍信号と使用者の瞬目に対応した瞬目信
号とに弁別するので、ディスプレイ装置本体を装着手段
によって使用者の頭部に装着するだけで別途脈拍センサ
を耳たぶや手の指などに装着することなしに使い勝手良
く脈拍数を求めることができるとともに、光を照射する
ための光軸調整を行なうことなしに使い勝手良く使用者
の瞬目を検出することができるという効果があり、ま
た、脈拍信号や瞬目信号に応じて映像や音声の状態を変
化させたり外部機器を連動制御するようにすることが可
能となり、使用者をリラックス、リフレッシュさせるこ
とが可能となる。また、眼球に光を直接照射する必要が
ないので、可視光を利用することも可能となる。 The invention of claim 3, a mounting means for mounting by mounting on the head of a user, and Di spray Lee unit for projecting the position and image in front of the eyes of the user are provided continuously to the mounting means, the mounting means The main body of the display device is composed of an acoustic means that is provided in series and that emits sound, and an optical sensor that is provided in the wearing means and emits light toward the user's forehead to receive the reflected light and output a signal according to the amount of received light. is configured, have a signal processing means for detecting the pulse rate and blink of the user based on the output signal of the optical sensor
However, the signal processing means outputs the output signal of the optical sensor to the pulse of the user.
Pulse signal corresponding to the beat and blink signal corresponding to the user's blink
Since discrimination on the item, it is possible to determine the usability better pulse rate without attaching an additional pulse sensor by simply attaching the head of the user by the mounting means a display device main body such as the earlobe or finger of the hand in In addition, there is an effect that the blink of the user can be detected conveniently without the need to adjust the optical axis for irradiating the light.
In addition, the video and audio conditions are changed according to the pulse signal and blink signal.
It is possible to make it possible to interlock and control external equipment
It becomes possible to relax and refresh the user . Also, it is necessary to directly illuminate the eyeball with light.
Since it does not exist, it is possible to use visible light.
【００２６】[0026]
【００２７】請求項４の発明は、請求項１乃至請求項３
の発明において、光センサを両眼それぞれの上方に位置
するように装着手段に配置し、左右対称となる位置の光
センサ同士の出力信号に基づいて一方の眼だけの瞬目に
よる合図を検出する合図検出手段を信号処理手段に付加
したので、使用者の瞬目による合図に応じて例えば映像
や音声の状態を変化させたり外部機器を連動制御したり
することによって使用者をリラックス、リフレッシュさ
せることが可能になるという効果がある。The invention of claim 4 relates to claim 1 to claim 3.
In the invention described above, the optical sensor is arranged in the mounting means so as to be located above each of the eyes, and the cue due to the blink of only one eye is detected based on the output signals of the optical sensors at the symmetrical positions. Having added signaled detection means to the signal processing means, relaxing user blink interlocking control or thus used for persons to e.g. an external device or to change the state of the video and audio in response to cues, refreshing there is effect that to become possible to.
【００２８】請求項５の発明は、請求項１乃至請求項４
の発明において、瞬目信号により使用者の閉眼状態を検
知し閉眼状態が所定時間継続されると音響手段の音量を
小さくするので、使用者の入眠状態を妨げるのを防止で
きるという効果がある。請求項６の発明は、請求項１乃
至請求項４の発明において、瞬目信号により使用者の閉
眼状態を検知し閉眼状態が所定時間継続されると電源が
オフされるので、使用者の入眠状態を妨げるのを防止で
きるとともに、省電力化を図ることができるという効果
がある。The invention of claim 5 is the first to fourth aspects of the invention.
In the invention described above, the eye-closed state of the user is detected by the blink signal, and when the eye-closed state continues for a predetermined time, the volume of the acoustic means is reduced, so that there is an effect that it is possible to prevent the user from falling asleep. According to a sixth aspect of the present invention, in the first to fourth aspects of the invention, the eye-closed state of the user is detected by the blink signal and the power is turned off when the eye-closed state continues for a predetermined time, so that the user falls asleep. It is possible to prevent the state from being disturbed and to save power.
【図１】実施形態を示す外観斜視図である。FIG. 1 is an external perspective view showing an embodiment.
【図２】同上の要部回路ブロック図である。FIG. 2 is a circuit block diagram of a main part of the above.
１ ディスプレイ装置本体 ２ ディスプレイ部 ２ａ，２ｂ 液晶ディスプレイ ３ 装着バンド ４ａ，４ｂ 光センサ 1 Display device body 2 Display section 2a, 2b liquid crystal display 3 wearing bands 4a, 4b optical sensor
───────────────────────────────────────────────────── フロントページの続き (58)調査した分野(Int.Cl.7，ＤＢ名) A61M 21/00 A61B 5/02 321 A61B 5/10 310 H04N 5/64 511 ─────────────────────────────────────────────────── ─── Continuation of front page (58) Fields surveyed (Int.Cl. 7 , DB name) A61M 21/00 A61B 5/02 321 A61B 5/10 310 H04N 5/64 511
Claims (6)
段と、装着手段に連設され使用者の眼前に位置し映像を
映し出すディスプレイ部と、装着手段に連設され音声を
発する音響手段と、装着手段に設けられ光を使用者の額
に向かって放射してその反射光を受光し受光量に応じた
信号を出力する光センサとでディスプレイ装置本体が構
成され、光センサの出力信号に基づいて使用者の脈拍数
を求める信号処理手段を有し、信号処理手段は、光セン
サの出力信号を使用者の脈拍に対応した脈拍信号と使用
者の瞬目に対応した瞬目信号とに弁別することを特徴と
するディスプレイ装置。And mounting means as claimed in claim 1] is mounted by mounting on the head of a user, and Di spray Lee unit for projecting the position and image in front of the eyes of the user are provided continuously to the mounting means, the sound is continuously provided in the mounting means The display device main body is composed of an acoustic means that emits light and an optical sensor that is provided in the mounting means and that emits light toward the user's forehead and receives the reflected light and outputs a signal according to the amount of received light. a signal processing means for determining the pulse rate of the user on the basis of the output signal of the signal processing means, the light sensor
Use the output signal of the service with the pulse signal corresponding to the user's pulse
A display device that distinguishes from a blink signal corresponding to the blink of a person .
段と、装着手段に連設され使用者の眼前に位置し映像を
映し出すディスプレイ部と、装着手段に連設され音声を
発する音響手段と、装着手段に設けられ光を使用者の額
に向かって放射してその反射光を受光し受光量に応じた
信号を出力する光センサとでディスプレイ装置本体が構
成され、光センサの出力信号に基づいて使用者の瞬目を
検出する信号処理手段を有し、信号処理手段は、光セン
サの出力信号を使用者の脈拍に対応した脈拍信号と使用
者の瞬目に対応した瞬目信号とに弁別することを特徴と
するディスプレイ装置。A mounting means 2. A mounting mounted on the head of a user, and Di spray Lee unit for projecting the position and image in front of the eyes of the user are provided continuously to the mounting means, the sound is continuously provided in the mounting means The display device main body is composed of an acoustic means that emits light and an optical sensor that is provided in the mounting means and that emits light toward the user's forehead and receives the reflected light and outputs a signal according to the amount of received light. Has a signal processing means for detecting the blink of the user based on the output signal of the optical sensor.
Use the output signal of the service with the pulse signal corresponding to the user's pulse
A display device that distinguishes from a blink signal corresponding to the blink of a person .
段と、装着手段に連設され使用者の眼前に位置し映像を
映し出すディスプレイ部と、装着手段に連設され音声を
発する音響手段と、装着手段に設けられ光を使用者の額
に向かって放射してその反射光を受光し受光量に応じた
信号を出力する光センサとでディスプレイ装置本体が構
成され、光センサの出力信号に基づいて使用者の脈拍数
及び瞬目を検出する信号処理手段を有し、信号処理手段
は、光センサの出力信号を使用者の脈拍に対応した脈拍
信号と使用者の瞬目に対応した瞬目信号とに弁別するこ
とを特徴とするディスプレイ装置。And mounting means wherein mounting mounted on the head of a user, and Di spray Lee unit for projecting the position and image in front of the eyes of the user are provided continuously to the mounting means, the sound is continuously provided in the mounting means The display device main body is composed of an acoustic means that emits light and an optical sensor that is provided in the mounting means and that emits light toward the user's forehead and receives the reflected light and outputs a signal according to the amount of received light. a signal processing means for detecting the pulse rate and blink of the user based on the output signal of the signal processing means
Is the pulse signal corresponding to the user's pulse
Display device comprising the this <br/> to discriminate in the blink signal corresponding to the blink signal and the user.
るように装着手段に配置し、左右対称となる位置の光セ
ンサ同士の出力信号に基づいて一方の眼だけの瞬目によ
る合図を検出する合図検出手段を信号処理手段に付加し
たことを特徴とする請求項１乃至請求項３記載のディス
プレイ装置。4. An optical sensor is located above each eye.
The optical sensor at the symmetrical position.
Based on the output signals of the sensors, the blink of only one eye
A signal detecting means for detecting a signal is added to the signal processing means.
It claims 1 to請 Motomeko 3 wherein the display device is characterized in that the.
し閉眼状態が所定時間継続されると音響手段の音量を小
さくすることを特徴とする請求項１乃至請求項４記載の
ディスプレイ装置。5. A user's eyes closed state is detected by a blink signal.
If the closed eyes state continues for a predetermined time, the volume of the acoustic
Claims 1 to, characterized in that fence 4 display apparatus as claimed.
し閉眼状態が所定時間継続されると電源がオフされるこ
とを特徴とする請求項１乃至請求項４記載のディスプレ
イ装置。 6. A user's eyes closed state is detected by a blink signal.
If the eyes are closed for a certain period of time, the power will be turned off.
DOO claims 1 to 4, wherein the display device and said.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP28489696A JP3363327B2 (en) | 1996-10-28 | 1996-10-28 | Display device |
| US08/842,037 US6123661A (en) | 1996-05-28 | 1997-04-23 | Relax refresh system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP28489696A JP3363327B2 (en) | 1996-10-28 | 1996-10-28 | Display device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH10127769A JPH10127769A (en) | 1998-05-19 |
| JP3363327B2 true JP3363327B2 (en) | 2003-01-08 |
Family
ID=17684454
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP28489696A Expired - Fee Related JP3363327B2 (en) | 1996-05-28 | 1996-10-28 | Display device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3363327B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2018147192A1 (en) * | 2017-02-13 | 2018-08-16 | 学校法人帝京大学 | Pulse wave detection device and method |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4566311B2 (en) * | 1998-12-18 | 2010-10-20 | 株式会社半導体エネルギー研究所 | Goggles type display device |
| US6483484B1 (en) | 1998-12-18 | 2002-11-19 | Semiconductor Energy Laboratory Co., Ltd. | Goggle type display system |
| TWM244584U (en) | 2000-01-17 | 2004-09-21 | Semiconductor Energy Lab | Display system and electrical appliance |
| WO2009001449A1 (en) * | 2007-06-27 | 2008-12-31 | Pioneer Corporation | Listening device |
| JP2017058853A (en) * | 2015-09-15 | 2017-03-23 | 株式会社コーエーテクモゲームス | Information processing apparatus, operation control method, and operation control program |
| WO2019088388A1 (en) * | 2017-11-06 | 2019-05-09 | 주식회사 바디프랜드 | Massage chair for performing brain massage |
| CN113498503A (en) * | 2019-01-17 | 2021-10-12 | 苹果公司 | Head mounted display with facial interface for sensing physiological conditions |
-
1996
- 1996-10-28 JP JP28489696A patent/JP3363327B2/en not_active Expired - Fee Related
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2018147192A1 (en) * | 2017-02-13 | 2018-08-16 | 学校法人帝京大学 | Pulse wave detection device and method |
| JPWO2018147192A1 (en) * | 2017-02-13 | 2019-11-07 | 学校法人帝京大学 | Pulse wave detection apparatus and method |
Also Published As
| Publication number | Publication date |
|---|---|
| JPH10127769A (en) | 1998-05-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US5409445A (en) | Brain wave synchronizer | |
| US6071229A (en) | Video or compact disk encoder/decoder for brain wave synchronizer | |
| US5551879A (en) | Dream state teaching machine | |
| JP2005318973A (en) | Biological sensor apparatus, content reproducing method and content reproducing apparatus | |
| KR101404329B1 (en) | Imaging apparatus, display apparatus, imaging method, and display method | |
| US6042533A (en) | Apparatus and method for relieving motion sickness | |
| US10175935B2 (en) | Method of virtual reality system and implementing such method | |
| US6123661A (en) | Relax refresh system | |
| JP2008099834A (en) | Display device and display method | |
| US8979731B2 (en) | Calming device | |
| US20050047624A1 (en) | Reproduction apparatus with audio directionality indication of the location of screen information | |
| JP3363327B2 (en) | Display device | |
| US20070239225A1 (en) | Training device and method to suppress sounds caused by sleep and breathing disorders | |
| US6228021B1 (en) | Apparatus and method for relieving motion sickness | |
| WO2008029570A1 (en) | Display device and display method | |
| CN101179711A (en) | Imaging apparatus and method | |
| JP2009049951A (en) | Imaging apparatus and imaging method | |
| JP2002166050A (en) | Method of computer game using bio feed back of brain wave and its apparatus | |
| JP2001523353A (en) | Eyewear with visual entertainment system | |
| JP2000193910A (en) | Display device | |
| JP3363190B2 (en) | Relax / refresh device | |
| KR100274033B1 (en) | Head mount display | |
| JP2003203282A (en) | Warning device and warning system | |
| JP2005192581A (en) | Ear mounted type implement and program | |
| KR200286413Y1 (en) | Sound sensitive vibrator |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20021001 |
|
| LAPS | Cancellation because of no payment of annual fees |