JP2016139881A - Head mount display - Google Patents

Head mount display Download PDF

Info

Publication number
JP2016139881A
JP2016139881A JP2015012863A JP2015012863A JP2016139881A JP 2016139881 A JP2016139881 A JP 2016139881A JP 2015012863 A JP2015012863 A JP 2015012863A JP 2015012863 A JP2015012863 A JP 2015012863A JP 2016139881 A JP2016139881 A JP 2016139881A
Authority
JP
Japan
Prior art keywords
display screen
sound
microphone
display
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015012863A
Other languages
Japanese (ja)
Other versions
JP6528263B2 (en
Inventor
正時 須藤
Masatoki Sudo
正時 須藤
マウリシオ クグレ
Kugler Mauricio
マウリシオ クグレ
晃輔 深谷
Kosuke Fukaya
晃輔 深谷
ヤナ マコヴニコバ
Jana Makovnikova
ヤナ マコヴニコバ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nagoya Institute of Technology NUC
Original Assignee
Nagoya Institute of Technology NUC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nagoya Institute of Technology NUC filed Critical Nagoya Institute of Technology NUC
Priority to JP2015012863A priority Critical patent/JP6528263B2/en
Publication of JP2016139881A publication Critical patent/JP2016139881A/en
Application granted granted Critical
Publication of JP6528263B2 publication Critical patent/JP6528263B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Studio Devices (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a head mount display that can also visualize sound information on a dead angle hiding behind something at a front side of the visual field, and visually notifies danger information and further danger information on a rear side to a user.SOLUTION: In a heat mount display having a display screen unit 12 for displaying an image corresponding to information, a microphone 16 for collecting surrounding sounds is mounted in a frame 14, and a sound identifying device 18 is freely detachably mounted in a frame 14. When sounds collected by the microphone 16 have registered frequencies, the sound identifying device instructs to display corresponding flashing light and/or picture on a display screen unit 12. A portable power source 24 for supplying power to the display screen unit 12, the microphone 16 and the sound identifying device 18 is affixed to the sound identifying device 18. When the sounds collected by the microphone 16 are identified to have specific frequencies registered in the sound identifying device 18, the flashing light or/and picture corresponding to the information is displayed on the display screen unit 12.SELECTED DRAWING: Figure 1

Description

本発明は、音の大小に関わらず重要な音を可視化し、使用者に、主に危険情報を視覚的に伝えることができるヘッドマウントディスプレイに関する。   The present invention relates to a head-mounted display that can visualize important sounds regardless of the magnitude of the sound and can visually convey dangerous information mainly to a user.

近年、使用者の頭部に装着されるタイプの画像表示装置、いわゆるヘッドマウントディスプレイ(Head Mounted Display : HMD)が広く知られている。   2. Description of the Related Art In recent years, an image display device of a type that is worn on a user's head, a so-called head mounted display (HMD) is widely known.

このヘッドマウントディスプレイは、使用者の眼前に配置され、画像を表示する表示部と、この表示部を支持する支持部材と、表示部に電力を供給するためのバッテリーと、から構成されている(特許文献1、2参照)。 This head-mounted display is arranged in front of the user's eyes and includes a display unit that displays an image, a support member that supports the display unit, and a battery that supplies power to the display unit ( (See Patent Documents 1 and 2).

人(主に健常者)は脳の働きにより、音の大小に関わらず重要な音を判断し、危険を回避している。 Humans (mainly healthy people) use the brain to judge important sounds regardless of their magnitude and avoid danger.

音の大小を画像に変換し、ディスプレイに表示する画像表示装置なるものもあった(特許文献3参照)。 Some image display devices convert the magnitude of sound into an image and display it on a display (see Patent Document 3).

しかし、現段階ではニューラルネットワークを利用した音認識装置では音の大小に関わらず重要性の取捨選択が非常に難しい。 However, at the present stage, it is very difficult to select the importance of the sound recognition device using the neural network regardless of the size of the sound.

また、聴覚障害者(特に中途難聴者)にとって、屋外での音の判別が難しく、後方視界は非常に重要であるが、後方から近づいて来る音を知る方法、手段が何ら確立できていない。 Also, it is difficult for a hearing impaired person (especially a hearing-impaired person) to distinguish sounds outdoors, and the rear view is very important, but no method or means for knowing the sound approaching from behind has been established.

特許第5413385号公報Japanese Patent No. 5413385 特許第5030595号公報Japanese Patent No. 5030595 特開2012−181178号公報JP 2012-181178 A

本発明は上記欠点に鑑み、前方視界におけるモノの陰に隠れた目視では確認できない死角の音情報をも可視化し、使用者に危険性を視覚的に伝えることができ、さらには後方の危険性も伝えることができるヘッドマウントディスプレイを提供することである。   In view of the above-mentioned drawbacks, the present invention also visualizes blind spot sound information that cannot be confirmed by visual hiding behind the object in the front field of view, and can visually convey the danger to the user. Is to provide a head-mounted display that can also communicate.

本発明に係るヘッドマウントディスプレイは、情報に応じた画像を表示する表示画面部が配設されてなるヘッドマウントディスプレイにおいて、周囲の音を集音するマイクを、フレームに配し、マイクが集音した音が、予め登録された特定の周波数である場合に、その情報に対応する点滅光または/および絵図を表示画面部に表示指示する音判別装置を、マイク、画像表示部とそれぞれ接続可能に、フレームに着脱自在に配し、表示画面部、マイク、音判別装置に電力を供給するポータブル電源を、音判別装置に付設し、マイクにより集音した音が、音判別装置にて特定の周波数と判別したときに、表示画面部にその情報に対応する点滅光または/および絵図を表示することを特徴とする、
または、後方画像を撮影するカメラをフレームに配し、マイクにより集音した音が後方からであり、登録された特定の周波数と判別したときに、初めに点滅光を表示画面部に表示し、その後、使用者の歩行が停止した状態となった際、カメラによる後方画像を表示画面部に表示することを特徴とする、
または、フレームを眼鏡型とし、一方のレンズの内側に表示画面部を配し、表示画面部の裏面側に不透過部材を配したことを特徴とする、
または、加速度センサーを音判別装置と接続して付設し、この加速度センサーによる使用者の歩行停止の検知により、カメラによる後方画像を表示画面部へ表示させることを特徴とするものである。
A head-mounted display according to the present invention is a head-mounted display having a display screen portion that displays an image according to information. A microphone that collects ambient sounds is arranged in a frame, and the microphone collects sound. When the sound is a specific frequency registered in advance, a sound discriminating device that instructs the display screen unit to display blinking light or / and picture corresponding to the information can be connected to the microphone and the image display unit, respectively. A portable power supply, which is detachably mounted on the frame and supplies power to the display screen, microphone, and sound discrimination device, is attached to the sound discrimination device, and the sound collected by the microphone has a specific frequency at the sound discrimination device. When it is determined that, blinking light or / and picture corresponding to the information is displayed on the display screen part,
Or, when the camera that shoots the rear image is arranged in the frame, the sound collected by the microphone is from the rear, and when it is determined as the registered specific frequency, the flashing light is first displayed on the display screen, After that, when the user's walking is stopped, the rear image by the camera is displayed on the display screen,
Or, the frame is a spectacle type, the display screen portion is arranged inside one lens, and the opaque member is arranged on the back side of the display screen portion,
Alternatively, an acceleration sensor is connected to the sound discriminating device, and a rear image by the camera is displayed on the display screen unit when the acceleration sensor detects that the user has stopped walking.

本発明に係るヘッドマウントディスプレイによれば、マイクにより前方視界におけるモノの陰に隠れた目視では確認できない死角の音をも集音し、この音情報を可視化し、使用者に危険情報を視覚的に伝えることができる。 According to the head-mounted display according to the present invention, a sound of a blind spot that cannot be confirmed visually by a microphone is collected by a microphone, the sound information is visualized, and danger information is visually displayed to the user. Can tell.

また、マイクにより後方の音を集音できるため、後方の危険情報も視覚的に伝えることができる。 Moreover, since the sound behind can be collected by the microphone, the danger information behind can also be visually conveyed.

また、後方画像を撮影するカメラを配することにより、後方からの危険情報を、初めに点滅光により使用者に伝えた後、使用者の歩行が停止した状態となった際には、画像にて、明確、かつ視覚的に伝えることができ、危険を早期に回避することが可能となる。 Also, by arranging a camera that captures the rear image, the danger information from the rear is first communicated to the user by flashing light, and then when the user stops walking, the image is displayed. Can be communicated clearly and visually, and danger can be avoided at an early stage.

また、フレームを眼鏡型とし、一方の眼鏡レンズの内側(顔面側)に表示画面部を、表示画面部の裏面側(眼鏡レンズ側)に不透過部材を、配することにより、表示画面部の表示を見易くすることができる。 Further, the frame is made of glasses, and the display screen unit is arranged on the inner side (face side) of one spectacle lens and the non-transparent member is arranged on the back side (glasses lens side) of the display screen unit. The display can be made easy to see.

また、加速度センサーを配することにより、使用者の歩行停止を検知した場合にのみ、カメラによる後方画像を表示画面部へ表示させ、使用者の歩行の安全性を確保することができる。 Further, by providing the acceleration sensor, only when the user's walking stop is detected, the rear image by the camera can be displayed on the display screen unit, and the safety of the user's walking can be ensured.

本発明に係るヘッドマウントディスプレイの分解斜視図であり、下部に部分拡大側面図を示す。It is a disassembled perspective view of the head mounted display which concerns on this invention, and shows a partial expanded side view in the lower part. 同、使用状態を示す3面図。The 3rd figure which shows a use condition similarly. 同、表示画面部に表示される絵図の説明図。Explanatory drawing of the pictorial image displayed on a display screen part similarly. 同、音を可視化するフローチャート図であり、(a)は音認識、(b)は音方向。It is a flowchart figure which visualizes a sound similarly, (a) is sound recognition, (b) is a sound direction. 別の例を示す斜視図。The perspective view which shows another example. さらに別の例を示す斜視図であり、下部に部分拡大図を示す。It is a perspective view which shows another example, and shows a partial enlarged view in the lower part. さらに別の例を示す斜視図および正面図であり、下部にマイクの集音方向を示す。It is the perspective view and front view which show another example, and shows the sound-collection direction of a microphone at the lower part. さらに別の例を示す斜視図。The perspective view which shows another example. 表示画面部の配置可能範囲を示す平面図。The top view which shows the arrangement | positioning possible range of a display screen part.

前方視界においてモノの陰に隠れた目視では確認できない死角の音情報の可視化、後方の危険性を伝えるという目的を、画像を表示する表示画面部と、周囲の音を集音するマイクと、後方画像を撮影するカメラと、集音した音情報に対応する点滅光、絵図または画像を表示画面部に表示指示する音判別装置と、により実現した。 In the front field of view, the information of the blind spot that cannot be confirmed by visual observation hidden behind the object, the purpose of conveying the danger of the rear, the display screen that displays the image, the microphone that collects the surrounding sound, and the rear This is realized by a camera that captures an image and a sound discriminating device that instructs to display a flashing light, a picture, or an image corresponding to the collected sound information on the display screen.

本発明は、以下の実施形態に限定されるものではなく、発明の範囲を逸脱しない限り、適宜変更、修正、改良を加え得るものである。 The present invention is not limited to the following embodiments, and changes, modifications, and improvements can be added as appropriate without departing from the scope of the invention.

本発明に係るヘッドマウントディスプレイを図1−4に基づいて説明する。 A head mounted display according to the present invention will be described with reference to FIGS.

本例のヘッドマウントディスプレイ10の基本構成は、情報に応じた画像を表示する表示画面部12がフレーム14に配設されてなるものである。 The basic configuration of the head mounted display 10 of this example is such that a display screen 12 for displaying an image corresponding to information is disposed on a frame 14.

本例において、フレーム14は眼鏡型に形成され、フロント部14aとテンプル部14bとにより構成し、さらにテンプル部14bを二分割し、テンプル部14bに対してテンプル部14cを着脱可能とし、その着脱は接続端子構造としてある。 In this example, the frame 14 is formed in a spectacle shape, and includes a front part 14a and a temple part 14b. The temple part 14b is further divided into two parts, and the temple part 14c can be attached to and detached from the temple part 14b. Is a connection terminal structure.

周囲の音を集音するマイク16をフレーム14に配し、マイク16が集音した音が、予め登録された特定の周波数である場合に、その情報に対応する点滅光および絵図を表示画面部12に表示指示する音判別装置18を、マイク、画像表示部12とそれぞれ接続可能に、フレーム14に着脱自在に配してある。 When a microphone 16 that collects ambient sounds is arranged in the frame 14 and the sound collected by the microphone 16 has a specific frequency registered in advance, a flashing light and a picture corresponding to the information are displayed on the display screen unit. A sound discriminating device 18 for instructing display on the frame 12 is detachably attached to the frame 14 so as to be connectable to the microphone and the image display unit 12.

本例において、マイク16はフレーム14のテンプル部14bに所定間隔を隔てて前後方向に一対配してあり、このため、前後方で発する音の集音性が向上する。 In this example, the microphones 16 are arranged in a pair in the front-rear direction at a predetermined interval on the temple portion 14b of the frame 14, so that the sound collecting property of sound emitted in the front-rear direction is improved.

さらに、音の種類および方向の判断は、テンプル部14bに配した二つのマイク16a、16bの水平方向の離間距離(本例では約数cmの距離が必要)の違いを利用して行われる(図4参照)。 Further, the determination of the type and direction of the sound is performed using the difference in the horizontal separation distance between the two microphones 16a and 16b arranged in the temple portion 14b (in this example, a distance of about several centimeters is necessary) ( (See FIG. 4).

このため、マイク16a、16bは集音する音に対して水平であることが重要であるが、前後どちらか一方を水平に配置すればよい。 For this reason, it is important that the microphones 16a and 16b are horizontal with respect to the sound to be collected, but either one of the microphones 16a and 16b may be arranged horizontally.

予め登録されている周波数は、自動車の接近音、警笛音、自転車の接近音、ベル音、緊急車両が発するサイレン音、等である Pre-registered frequencies are car approach sounds, horn sounds, bicycle approach sounds, bell sounds, siren sounds emitted by emergency vehicles, etc.

この際、音は任意にスマートフォン等のデジタル携帯端末を介しBluetooth(登録商標)等の近距離無線通信により登録することが可能であり、また音判別装置18へ任意の音を登録することも可能である。 At this time, the sound can be arbitrarily registered by short-range wireless communication such as Bluetooth (registered trademark) via a digital portable terminal such as a smartphone, and any sound can be registered in the sound discrimination device 18. It is.

また、音判別装置18はフレーム14のテンプル部14b下方に着脱自在に配してあるが、フレーム14の他の個所とすることは自由である。 Further, although the sound discriminating device 18 is detachably disposed below the temple portion 14b of the frame 14, the sound discriminating device 18 can be freely set at other portions of the frame 14.

また、加速度センサー20が音判別装置18に接続して付設されている。 An acceleration sensor 20 is attached to the sound discrimination device 18.

この加速度センサー20は、使用者が携行し、その歩行または歩行停止を検出するためのものである。 The acceleration sensor 20 is carried by the user and detects the walking or stopping of walking.

後方画像を撮影するカメラ22を、フレーム14に配してある。 A camera 22 for taking a rear image is arranged on the frame 14.

本例において、カメラ22は後方画像を効果的に撮影するため、フレーム14のテンプル部14c後面に配してある。 In this example, the camera 22 is arranged on the rear surface of the temple portion 14c of the frame 14 in order to effectively capture a rear image.

予め後方の危険情報を使用者に点滅光により表示画面部12に表示させて伝えた後、カメラ22による後方画像は、使用者の歩行停止を加速度センサー20が検知した後、表示画面部12に表示するよう制御されている。 After the rear danger information is displayed on the display screen unit 12 by flashing light and transmitted to the user in advance, the rear image by the camera 22 is displayed on the display screen unit 12 after the acceleration sensor 20 detects the user's walking stop. It is controlled to display.

それぞれが接続された表示画面部12、マイク16、音判別装置18、加速度センサー20およびカメラ22へ、電力を供給するポータブル電源24が、音判別装置18に内装されている。 A portable power supply 24 that supplies power to the display screen unit 12, the microphone 16, the sound determination device 18, the acceleration sensor 20, and the camera 22 to which the respective devices are connected is incorporated in the sound determination device 18.

本例において、ポータブル電源24は充電式バッテリーである。 In this example, the portable power source 24 is a rechargeable battery.

また、表示画面部12に表示される絵図の例が図3に示してある。 An example of a picture displayed on the display screen unit 12 is shown in FIG.

マイク16が集音した危険音の周波数に応じて、図3の上段左から自動車の接近、緊急車両の接近、自転車の接近、同図の下段にはその方向を示す絵図が、音判別装置18により選択、指示される。 Depending on the frequency of the dangerous sound collected by the microphone 16, from the upper left of FIG. 3, the approach of the car, the approach of the emergency vehicle, the approach of the bicycle, a pictorial diagram showing the direction at the bottom of the figure is the sound discrimination device 18 Is selected and instructed.

なお、図中Lは眼鏡レンズ、Pはバッド、Hは一体型の眼鏡レンズを取付けるための凹部を示す。 In the figure, L denotes a spectacle lens, P denotes a pad, and H denotes a concave portion for attaching an integrated spectacle lens.

本例のヘッドマウントディスプレイ10を使用し、使用者に危険情報を視覚的に伝える方法を説明する。 A method of visually transmitting danger information to the user using the head mounted display 10 of this example will be described.

まず、使用者は本例のヘッドマウントディスプレイを通常の眼鏡と同様に、装着する。 First, the user wears the head mounted display of this example in the same manner as normal glasses.

その後、使用者は屋外を歩行する。 Thereafter, the user walks outdoors.

使用者が歩行中、ヘッドマウントディスプレイ10のマイク16が集音した音が、音判別装置18に予め登録された周波数である場合、その周波数に応じた危険情報を、初めに点滅光にて、次いで絵図(図3上段絵図参照)にて、表示画面部12に表示して、使用者に危険情報を視覚的に伝える。 When the sound collected by the microphone 16 of the head mounted display 10 is a frequency registered in advance in the sound discriminating device 18 while the user is walking, the danger information corresponding to the frequency is first flashed with light. Next, it is displayed on the display screen unit 12 as a pictorial chart (see the upper pictorial chart in FIG. 3) to visually convey the danger information to the user.

この際、マイク16が集音した音の方向も絵図(図3下段絵図参照)として表示画面部12に表示される。 At this time, the direction of the sound collected by the microphone 16 is also displayed on the display screen unit 12 as a picture (see the lower picture in FIG. 3).

また、前方視界においてモノの陰に隠れた目視では確認できない死角の音情報をも可視化し、絵図として表示画面部12に表示させ、使用者に伝えることができ、このため使用者は危険を早期に回避することが可能となる。 In addition, it is possible to visualize blind spot sound information that cannot be confirmed visually in the front field of view, and can be displayed on the display screen unit 12 as a pictorial diagram so that it can be communicated to the user. It is possible to avoid it.

また、眼鏡レンズLは透明であるため、使用者はこの表示画面部12の表示と共に、前方視界もそのまま見ることができ、使用者の歩行に支障をきたすことはない。 Further, since the spectacle lens L is transparent, the user can see the front view as it is along with the display on the display screen unit 12, and the user's walking is not hindered.

また、マイク16が集音した音の方向が後方である場合は、カメラ22により撮影された後方画像も表示画面部12に表示することができる。 Further, when the direction of the sound collected by the microphone 16 is backward, the rear image captured by the camera 22 can also be displayed on the display screen unit 12.

このマイク16が集音した音の種類、方向は、図4(a)(b)に示すフローにより判断される。 The type and direction of the sound collected by the microphone 16 is determined by the flow shown in FIGS.

この後方画像は、加速度センサー20が使用者の歩行停止を検知した場合にのみ、表示画面部12に表示するように制御されているため、安全面上何ら問題はない。 This rear image is controlled so as to be displayed on the display screen unit 12 only when the acceleration sensor 20 detects the user's walking stop, so there is no problem in terms of safety.

また、ポータブル電源24の残量が少なくなる、または無くなった場合には、満充電された新たなポータブル電源と交換する。 Further, when the remaining amount of the portable power supply 24 is reduced or eliminated, the portable power supply 24 is replaced with a new fully charged portable power supply.

このポータブル電源24は音判別装置18内に内装されており、充電が可能、かつ取り外しができるため、容易に交換することができる。 This portable power supply 24 is built in the sound discrimination device 18 and can be charged and removed, so that it can be easily replaced.

この際、電源残量が少なくなったことを使用者に警告するため、危険情報とは異なる点滅光、点灯または絵図を表示画面部12に表示させることにより、いち早く交換することができる。 At this time, in order to warn the user that the remaining amount of power is low, the display screen unit 12 can display a flashing light, lighting, or a picture different from the danger information, so that the replacement can be quickly performed.

このように、本発明に係るヘッドマウントディスプレイによれば、前後方のいずれの危険情報音をも視覚的に使用者に伝えることができるため、聴覚障害者(特に中途難聴者)には効果的である。 As described above, according to the head mounted display according to the present invention, any danger information sound on the front and rear sides can be visually transmitted to the user, which is effective for the hearing impaired person (particularly for the hearing impaired). It is.

また、ポータブル電源24および音判別装置18はヘッドマウントブィスプレイ本体であるフレーム14とは別体としてあるため、重量が重くならず、通常の眼鏡と同様に装着することができ、使用性については何ら問題がない。 Moreover, since the portable power supply 24 and the sound discrimination device 18 are separate from the frame 14 which is a head-mounted display main body, the weight does not increase and can be worn in the same manner as normal glasses. There is no problem.

なお、本例において、前方の危険情報を伝える際、点滅光および絵図を表示画面部に表示させるものであるが、点滅光による表示を点灯表示としても良く、また後方の危険情報を伝える際、後方画像を表示できるため、絵図による表示を省略することもできる。 In this example, when transmitting the danger information in the front, the blinking light and the picture are displayed on the display screen part, but the display by the blinking light may be turned on, and when conveying the danger information in the rear, Since a rear image can be displayed, display by a pictorial diagram can be omitted.

また、図5に別の例が示してある。 FIG. 5 shows another example.

本例は、眼鏡レンズLの形状が前例と異なり、好みのデザインを選択できるようにしたものであり、自由に取替え使用に供することができる。 In this example, the shape of the spectacle lens L is different from the previous example, and a desired design can be selected, and can be freely used for replacement.

本例においても第1実施例と同様の効果を奏する。 In this example, the same effect as that of the first embodiment is obtained.

また、図6に別の例が示してある。 FIG. 6 shows another example.

本例は、屋外での使用中、太陽光のもとでも、表示画面部12に表示される絵図、画像を見易くするため、表示画面部12を眼鏡レンズLの内側(顔面側)に配し、さらに表示画面部12の前面側(眼鏡レンズL側)に不透過部材26を配し、この不透過部材26を配した表示画面部12をフレーム14に着脱自在に装着したものである。 In this example, the display screen unit 12 is arranged on the inner side (face side) of the spectacle lens L in order to make it easy to see the pictures and images displayed on the display screen unit 12 even under sunlight when used outdoors. Further, an impermeable member 26 is disposed on the front side of the display screen unit 12 (the spectacle lens L side), and the display screen unit 12 with the impermeable member 26 disposed is detachably attached to the frame 14.

本例においても第1実施例と同様の効果を奏する。 In this example, the same effect as that of the first embodiment is obtained.

また、図7に別の例が示してある。 FIG. 7 shows another example.

本例は、フレーム14のフロント部14aの両側前面形状および眼鏡レンズLの形状を変更し、マイク16a、16bをフロント部14aにも配したものである。 In this example, both the front shape on both sides of the front portion 14a of the frame 14 and the shape of the spectacle lens L are changed, and microphones 16a and 16b are also arranged on the front portion 14a.

このため、第1実施例と同様の効果に加え、集音した音の左右方向を明確に判断することができる。 For this reason, in addition to the effect similar to 1st Example, the left-right direction of the collected sound can be determined clearly.

また、図8に別の例が示してある。 FIG. 8 shows another example.

本例は、音判別装置18の制御方式および表示画面部12へ表示する点滅光の色彩、間隔、情報絵図のデザインを、外部コントローラ28により、逐次変更可能としたものである。 In this example, the control method of the sound discriminating device 18 and the color, interval, and information picture design of the flashing light displayed on the display screen unit 12 can be sequentially changed by the external controller 28.

本例においても第1実施例と同様の効果を奏すると共に、外部コントローラ28としてスマートフォンを使用する場合には、スマートフォンから電力が得られるため、ポータブル電源を省略することも可能となる。加えて、スマートフォンが受信する地震、津波等の緊急災害情報も点滅光または絵図として使用者に伝えることができる。 In this example as well, the same effects as in the first embodiment can be obtained, and when a smartphone is used as the external controller 28, since power is obtained from the smartphone, the portable power supply can be omitted. In addition, emergency disaster information such as earthquakes and tsunamis received by the smartphone can be transmitted to the user as blinking light or a picture.

また、図9に表示画面部12の配置可能範囲30が示してある。 Further, FIG. 9 shows a possible arrangement range 30 of the display screen unit 12.

本図によれば、フレーム14と顔面との間に表示画面部12が配置可能であることが理解できる。 According to this figure, it can be understood that the display screen unit 12 can be arranged between the frame 14 and the face.

本発明に係るヘッドマウントディスプレイは眼鏡として使用できる他、車載用としても利用することができる。   The head mounted display according to the present invention can be used not only as eyeglasses but also for in-vehicle use.

10 ヘッドマウントディスプレイ
12 表示画面部
14 フレーム
14a フロント部
14b テンプル部
16 マイク
18 音判別装置
20 加速度センサー
22 カメラ
24 ポータブル電源
26 不透過部材

DESCRIPTION OF SYMBOLS 10 Head mounted display 12 Display screen part 14 Frame 14a Front part 14b Temple part 16 Microphone 18 Sound discrimination device 20 Acceleration sensor 22 Camera 24 Portable power supply 26 Impermeability member

Claims (4)

情報に応じた画像を表示する表示画面部が配されてなるヘッドマウントディスプレイにおいて、
周囲の音を集音するマイクを、フレームに配し、
マイクが集音した音が、予め登録された特定の周波数である場合に、その情報に対応する点滅光または/および絵図を表示画面部に表示指示する音判別装置を、マイク、画像表示部とそれぞれ接続可能に、フレームに着脱自在に配し、
表示画面部、マイク、音判別装置に電力を供給するポータブル電源を、音判別装置に付設し、
マイクにより集音した音が、音判別装置にて特定の周波数と判別したときに、表示画面部にその情報に対応する点滅光または/および絵図を表示することを特徴とするヘッドマウントディスプレイ。
In a head-mounted display in which a display screen portion that displays an image according to information is arranged,
Place a microphone that collects ambient sounds on the frame,
When the sound collected by the microphone has a specific frequency registered in advance, a sound discriminating device for instructing to display a flashing light or / and a picture corresponding to the information on the display screen unit, the microphone, the image display unit, Each can be connected, detachable on the frame,
A portable power supply that supplies power to the display screen, microphone, and sound discrimination device is attached to the sound discrimination device.
When the sound collected by the microphone is determined to be a specific frequency by the sound determination device, a flashing light or / and a picture corresponding to the information is displayed on the display screen unit.
後方画像を撮影するカメラをフレームに配し、
マイクにより集音した音が後方からであり、登録された特定の周波数と判別したときに、初めに点滅光を表示画面部に表示し、
その後、使用者の歩行が停止した状態となった際、カメラによる後方画像を表示画面部に表示することを特徴とする請求項1記載のヘッドマウントディスプレイ。
Place the camera that captures the rear image on the frame,
When the sound collected by the microphone is from the rear and is determined to be a specific frequency registered, flashing light is first displayed on the display screen,
2. The head mounted display according to claim 1, wherein when the user stops walking, a rear image from the camera is displayed on the display screen.
フレームを眼鏡型とし、
一方のレンズの内側に表示画面部を配し、表示画面部の裏面側に不透過部材を配したことを特徴とする請求項1または請求項2記載のヘッドマウントディスプレイ。
The frame is eyeglass type,
3. The head mounted display according to claim 1, wherein a display screen portion is disposed inside one of the lenses, and an impermeable member is disposed on the back side of the display screen portion.
加速度センサーを音判別装置と接続して付設し、
この加速度センサーによる使用者の歩行停止の検知により、カメラによる後方画像を表示画面部へ表示させることを特徴とする請求項2または請求項3記載のヘッドマウントディスプレイ。

An accelerometer is connected to the sound discrimination device.
The head-mounted display according to claim 2 or 3, wherein a rear image by the camera is displayed on the display screen portion by detecting the stop of walking of the user by the acceleration sensor.

JP2015012863A 2015-01-27 2015-01-27 Head mounted display Active JP6528263B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015012863A JP6528263B2 (en) 2015-01-27 2015-01-27 Head mounted display

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015012863A JP6528263B2 (en) 2015-01-27 2015-01-27 Head mounted display

Publications (2)

Publication Number Publication Date
JP2016139881A true JP2016139881A (en) 2016-08-04
JP6528263B2 JP6528263B2 (en) 2019-06-12

Family

ID=56560505

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015012863A Active JP6528263B2 (en) 2015-01-27 2015-01-27 Head mounted display

Country Status (1)

Country Link
JP (1) JP6528263B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110139016A (en) * 2019-07-05 2019-08-16 昆山玖趣智能科技有限公司 A kind of head mounted image-sensing head multi-microphone system
JP2019152953A (en) * 2018-03-01 2019-09-12 和夫 金子 Visual support device
WO2020039678A1 (en) * 2018-08-24 2020-02-27 マクセル株式会社 Head-up display device
JP2021136521A (en) * 2020-02-26 2021-09-13 沖電気工業株式会社 Moving body surrounding monitoring device and method, and program

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220168793A (en) * 2021-06-17 2022-12-26 삼성전자주식회사 Method and electronic device to provide ambient sound when user in danger

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001013941A (en) * 1999-06-30 2001-01-19 Toshiba Corp Mounting information presenting device, method and storage medium
US20020103649A1 (en) * 2001-01-31 2002-08-01 International Business Machines Corporation Wearable display system with indicators of speakers
JP2007256915A (en) * 2006-02-22 2007-10-04 Konica Minolta Holdings Inc Video display apparatus, and method for displaying video
WO2011161866A1 (en) * 2010-06-23 2011-12-29 パナソニック株式会社 Sound field control system
JP2012008842A (en) * 2010-06-25 2012-01-12 Brother Ind Ltd Portable display and display control program
JP2012133250A (en) * 2010-12-24 2012-07-12 Sony Corp Sound information display apparatus, method and program
JP2013214856A (en) * 2012-04-02 2013-10-17 Seiko Epson Corp Head-mounted display device

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001013941A (en) * 1999-06-30 2001-01-19 Toshiba Corp Mounting information presenting device, method and storage medium
US20020103649A1 (en) * 2001-01-31 2002-08-01 International Business Machines Corporation Wearable display system with indicators of speakers
JP2007256915A (en) * 2006-02-22 2007-10-04 Konica Minolta Holdings Inc Video display apparatus, and method for displaying video
WO2011161866A1 (en) * 2010-06-23 2011-12-29 パナソニック株式会社 Sound field control system
JP2012008842A (en) * 2010-06-25 2012-01-12 Brother Ind Ltd Portable display and display control program
JP2012133250A (en) * 2010-12-24 2012-07-12 Sony Corp Sound information display apparatus, method and program
JP2013214856A (en) * 2012-04-02 2013-10-17 Seiko Epson Corp Head-mounted display device

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019152953A (en) * 2018-03-01 2019-09-12 和夫 金子 Visual support device
WO2020039678A1 (en) * 2018-08-24 2020-02-27 マクセル株式会社 Head-up display device
JPWO2020039678A1 (en) * 2018-08-24 2021-08-10 マクセル株式会社 Head-up display device
JP7186233B2 (en) 2018-08-24 2022-12-08 マクセル株式会社 head-up display device
US12057091B2 (en) 2018-08-24 2024-08-06 Maxell, Ltd. Head-up display device
CN110139016A (en) * 2019-07-05 2019-08-16 昆山玖趣智能科技有限公司 A kind of head mounted image-sensing head multi-microphone system
CN110139016B (en) * 2019-07-05 2024-06-07 昆山玖趣智能科技有限公司 Multi-microphone system of head-mounted camera
JP2021136521A (en) * 2020-02-26 2021-09-13 沖電気工業株式会社 Moving body surrounding monitoring device and method, and program

Also Published As

Publication number Publication date
JP6528263B2 (en) 2019-06-12

Similar Documents

Publication Publication Date Title
WO2016086440A1 (en) Wearable guiding device for the blind
JP6528263B2 (en) Head mounted display
JP4440878B2 (en) Image display device
CN103458838B (en) An optical device for the visually impaired
US9542958B2 (en) Display device, head-mount type display device, method of controlling display device, and method of controlling head-mount type display device
WO2016054860A1 (en) Head wearing type vision auxiliary system for patient with vision disorder
KR101885473B1 (en) Smart glass to help visually impaired
KR20100123036A (en) Walking assistance device
CN106697231A (en) Underwater virtual reality wearable system
US20170343808A1 (en) Control device
CN105319716A (en) Display device, method of controlling display device, and program
TW201617826A (en) Display device, method of controlling display device, and program
KR20120048981A (en) A versatile wearable computer for driver
KR20190136144A (en) Smart device for blind
CN106741750A (en) A kind of virtual reality protector under water
JP2015118667A (en) Approach notification device
JP2017146726A (en) Movement support device and movement support method
KR20140130893A (en) Glasses for the deaf
KR20190004490A (en) Walking guide system
CN204515275U (en) Post-positioned pick-up head formula rear-view eyeglass
US20200348540A1 (en) Eyewear with wearing status detector
TW201805689A (en) Add-on near eye display device characterized in that sharpened images are outputted onto the transparent display so that they are superposed on scenes viewed with naked eyes of the user
KR101230341B1 (en) Vision Assistant System And Method thereof
CN205983390U (en) No frame virtual reality is special dull and stereotyped
CN212181167U (en) Split type AR intelligence glasses of function enhancement mode

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180119

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181018

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181204

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20190130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190322

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190416

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190425

R150 Certificate of patent or registration of utility model

Ref document number: 6528263

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150