JP2016081372A - Display device and control method for display device - Google Patents

Display device and control method for display device Download PDF

Info

Publication number
JP2016081372A
JP2016081372A JP2014213602A JP2014213602A JP2016081372A JP 2016081372 A JP2016081372 A JP 2016081372A JP 2014213602 A JP2014213602 A JP 2014213602A JP 2014213602 A JP2014213602 A JP 2014213602A JP 2016081372 A JP2016081372 A JP 2016081372A
Authority
JP
Japan
Prior art keywords
battery
unit
display
control unit
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014213602A
Other languages
Japanese (ja)
Other versions
JP6405878B2 (en
Inventor
小林 伸一
Shinichi Kobayashi
伸一 小林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2014213602A priority Critical patent/JP6405878B2/en
Priority to US14/871,175 priority patent/US9857863B2/en
Publication of JP2016081372A publication Critical patent/JP2016081372A/en
Application granted granted Critical
Publication of JP6405878B2 publication Critical patent/JP6405878B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a display device which is driven by batteries and allows batteries to be replaced without stopping operation of the device, and to provide a control method for the display device.SOLUTION: A display device comprises: an image display part 20 which enables a user to view an image and transmits an outside scene; a first battery 131 and a second battery 132; a communication part 117; and a control part 140 which switches a power supply between the first battery 131 and the second battery 132. A control part 140 shifts an operation mode of a head mounted display device 100 from a normal operation mode to a battery replacement mode in which the power consumption of the image display part 20 and the communication part 117 is less than that in the normal operation mode when the power source is switched from the first battery 131 to the second battery 132. The communication part 117 maintains a communicable state during the battery replacement mode.SELECTED DRAWING: Figure 2

Description

本発明は、表示装置、及び、表示装置の制御方法に関する。   The present invention relates to a display device and a display device control method.

バッテリーを備える装置において、予備のバッテリーを搭載し、バッテリーを交換する際に予備のバッテリーから電源を供給するものが知られている(例えば、特許文献1参照)。特許文献1は、バッテリーの蓄電量の少ない時に回線が電力のトラブルにより不通になることの対策として、メインバッテリーとサブバッテリーとを備え、メインバッテリーの交換時に、サブバッテリーから電力を供給する携帯用電話機を開示する。   2. Description of the Related Art A device including a battery is known that includes a spare battery and supplies power from the spare battery when the battery is replaced (for example, see Patent Document 1). Patent Document 1 describes a portable device that includes a main battery and a sub-battery, and supplies power from the sub-battery when the main battery is replaced, as a countermeasure against a line being disconnected due to power problems when the amount of power stored in the battery is small. Disclose phone.

特開平8−9002号公報JP-A-8-9002

しかしながら、表示装置のように比較的消費電力量の大きい装置では、バッテリーを交換する際に、装置を停止する必要があった。例えば、特許文献1記載のサブバッテリーのように、主に使用される電源とは別にバッテリーを用意しても、この種のバッテリーを大容量化することは、大型化、重量の増大、コスト増等の観点から現実的でない。このため、バッテリーを交換する間の表示装置の消費電力を、サブバッテリー等により賄うことは現実的でなかった。
本発明は上記事情に鑑みてなされたものであり、バッテリーで駆動され、装置の動作を停止せずにバッテリーを交換することができる表示装置、及び、表示装置の制御方法を提供することを目的とする。
However, in a device having a relatively large amount of power consumption such as a display device, it is necessary to stop the device when replacing the battery. For example, even if a battery is prepared separately from the main power source as in the sub-battery described in Patent Document 1, increasing the capacity of this type of battery increases the size, weight, and cost. It is not realistic from the viewpoint of etc. For this reason, it is not practical to cover the power consumption of the display device with the sub-battery or the like while the battery is replaced.
The present invention has been made in view of the above circumstances, and an object thereof is to provide a display device that is driven by a battery and that can replace the battery without stopping the operation of the device, and a control method for the display device. And

上記目的を達成するために、本発明の表示装置は、表示装置であって、使用者に画像を視認させるとともに外景を透過する表示部と、第1のバッテリー及び第2のバッテリーと、通信部と、電源を前記第1のバッテリーと前記第2のバッテリーとで切り替える制御部と、を備え、前記制御部は、電源を前記第1のバッテリーから前記第2のバッテリーに切り替える場合に、前記表示装置の動作モードを、通常動作モードから、前記表示部及び前記通信部の消費電力が前記通常動作モードよりも小さいバッテリー交換モードに移行させ、前記通信部は、前記バッテリー交換モードにおいて、通信可能な状態を維持することを特徴とする。
本発明によれば、複数のバッテリーを効率よく利用して、装置の動作を停止させずにバッテリーを交換することができる。
In order to achieve the above object, a display device of the present invention is a display device, which allows a user to visually recognize an image and transmits an outside scene, a first battery and a second battery, and a communication unit. And a control unit that switches power between the first battery and the second battery, and the control unit displays the display when the power source is switched from the first battery to the second battery. The operation mode of the apparatus is shifted from the normal operation mode to a battery replacement mode in which power consumption of the display unit and the communication unit is smaller than that of the normal operation mode, and the communication unit can communicate in the battery replacement mode. It is characterized by maintaining the state.
According to the present invention, a plurality of batteries can be used efficiently, and the batteries can be replaced without stopping the operation of the apparatus.

また、上記表示装置において、前記表示部は、前記使用者の左眼に対応して画像を表示する第1の表示部と、前記使用者の右眼に対応して画像を表示する第2の表示部とを備え、前記制御部は、前記バッテリー交換モードで、前記第1の表示部と前記第2の表示部とのいずれか一方の表示を停止させることを特徴とする。
本発明によれば、表示部の消費電力を削減し、第2のバッテリーによって、第1のバッテリーを交換する間の電力を十分に供給できる。
In the display device, the display unit displays a first display unit that displays an image corresponding to the left eye of the user, and a second display unit displays an image corresponding to the right eye of the user. And a display unit, wherein the control unit stops display of either the first display unit or the second display unit in the battery replacement mode.
According to the present invention, the power consumption of the display unit can be reduced, and the second battery can sufficiently supply power during the replacement of the first battery.

また、上記表示装置において、前記制御部は、前記バッテリー交換モードで前記表示部に表示させる画像のフレームレートを、前記通常動作モードで前記表示部に表示させる画像のフレームレートよりも低くすることを特徴とする。
本発明によれば、第1のバッテリーを交換する間の消費電力をより一層低減し、第2のバッテリーにより電力を供給できる。
In the display device, the control unit may set a frame rate of an image to be displayed on the display unit in the battery replacement mode to be lower than a frame rate of an image to be displayed on the display unit in the normal operation mode. Features.
According to the present invention, power consumption during replacement of the first battery can be further reduced, and power can be supplied by the second battery.

また、上記表示装置において、前記制御部は、前記バッテリー交換モードにおける前記表示部の表示領域を、前記通常動作モードにおける前記表示部の表示領域よりも小さくすることを特徴とする。
本発明によれば、第1のバッテリーを交換する間の消費電力をより一層低減し、第2のバッテリーにより電力を供給できる。
In the display device, the control unit makes a display area of the display unit in the battery replacement mode smaller than a display area of the display unit in the normal operation mode.
According to the present invention, power consumption during replacement of the first battery can be further reduced, and power can be supplied by the second battery.

また、上記表示装置において、前記通信部は、前記表示装置の前記動作モードが、前記バッテリー交換モードから前記通常動作モードに移行した際に、認証を行うことなく通信が開始できるように、前記バッテリー交換モードにおいて前記通信可能な状態を維持することを特徴とする。
本発明によれば、動作モードがバッテリー交換モードから通常動作モードに移行した際に、認証を行うことなく通信を開始することができる。
In the display device, the communication unit may start the communication without performing authentication when the operation mode of the display device shifts from the battery replacement mode to the normal operation mode. The communicable state is maintained in the exchange mode.
According to the present invention, when the operation mode shifts from the battery replacement mode to the normal operation mode, communication can be started without performing authentication.

また、上記表示装置において、不揮発性の記憶部を備え、前記制御部は、前記バッテリー交換モードに移行する際に、前記記憶部に、前記制御部の動作に係るデータを記憶させ、前記動作モードを、前記バッテリー交換モードから前記通常動作モードに移行する際に、前記記憶部に記憶した前記データに基づく処理を実行することを特徴とする。
本発明によれば、バッテリー交換モードから通常動作モードに移行する際に、制御部を、バッテリー交換モードに移行する前の状態に復帰させることができる。
Further, the display device includes a non-volatile storage unit, and the control unit stores data related to operation of the control unit in the storage unit when the control unit shifts to the battery replacement mode. Is performed based on the data stored in the storage unit when shifting from the battery replacement mode to the normal operation mode.
According to the present invention, when shifting from the battery replacement mode to the normal operation mode, the control unit can be returned to the state before shifting to the battery replacement mode.

また、上記表示装置において、前記制御部は、前記第1のバッテリーが交換された場合、前記表示部で交換後の前記第1のバッテリーの残容量に基づく表示を行うことを特徴とする。
本発明によれば、第1のバッテリーの交換後に、第1のバッテリーの残容量を使用者が確認できる。
In the display device, when the first battery is replaced, the control unit performs display based on the remaining capacity of the first battery after replacement on the display unit.
According to the present invention, the user can check the remaining capacity of the first battery after the replacement of the first battery.

また、上記表示装置において、前記制御部は、前記第1のバッテリーの残容量がしきい値以上の場合に、前記第2のバッテリーを前記第1のバッテリーの電力により充電することを特徴とする。
本発明によれば、第2のバッテリーの残容量を良好な状態に保つことができる。
In the display device, the control unit charges the second battery with electric power of the first battery when a remaining capacity of the first battery is equal to or greater than a threshold value. .
According to the present invention, the remaining capacity of the second battery can be maintained in a good state.

また、上記表示装置において、前記制御部は、前記第1のバッテリーの残容量がしきい値以下の場合に、前記第1のバッテリーの交換を促す表示を前記表示部に表示させることを特徴とする。
本発明によれば、第1のバッテリーの残容量が低いことを報知し、第1のバッテリーの残容量不足による不具合を防止できる。
Further, in the display device, the control unit causes the display unit to display a display prompting replacement of the first battery when a remaining capacity of the first battery is equal to or less than a threshold value. To do.
According to the present invention, it is possible to notify that the remaining capacity of the first battery is low, and it is possible to prevent problems due to insufficient remaining capacity of the first battery.

また、上記表示装置において、前記第1のバッテリーを着脱可能に収容するバッテリー収容部を開閉する蓋と、前記蓋の開閉を検知する開閉検出部と、を備え、前記制御部は、前記開閉検出部により前記蓋の開放を検知した場合に、前記電源を前記第1のバッテリーから前記第2のバッテリーに切り替えることを特徴とする。
本発明によれば、第1のバッテリーを交換する操作に対応して、電源を速やかに第2のバッテリーに切り替えることができる。
The display device may further include a lid that opens and closes a battery housing that detachably houses the first battery, and an open / close detection unit that detects opening and closing of the lid, and the control unit includes the open / close detection unit. When the opening of the lid is detected by the unit, the power source is switched from the first battery to the second battery.
According to the present invention, the power source can be quickly switched to the second battery in response to the operation of replacing the first battery.

本発明の表示装置の制御方法は、使用者に画像を視認させるとともに外景を透過する表示部と、通信部とを備える表示装置の制御方法であって、前記表示装置の電源が第1のバッテリーから第2のバッテリーに変更された場合に、前記表示装置の動作モードを、通常動作モードから、前記表示部及び前記通信部の消費電力が前記通常動作モードよりも小さいバッテリー交換モードに移行させ、前記バッテリー交換モードにおいて、前記通信部を、通信可能な状態に維持することを特徴とする。
本発明によれば、複数のバッテリーを効率よく利用して、装置の動作を停止させずにバッテリーを交換することができる。
The display device control method of the present invention is a display device control method including a display unit that allows a user to visually recognize an image and transmits an outside scene, and a communication unit, and the power source of the display device is a first battery. When the battery is changed from the second battery to the second battery, the operation mode of the display device is changed from the normal operation mode to the battery replacement mode in which the power consumption of the display unit and the communication unit is smaller than the normal operation mode. In the battery exchange mode, the communication unit is maintained in a communicable state.
According to the present invention, a plurality of batteries can be used efficiently, and the batteries can be replaced without stopping the operation of the apparatus.

頭部装着型表示装置の外観構成を示す説明図である。It is explanatory drawing which shows the external appearance structure of a head mounted type display apparatus. 頭部装着型表示装置を構成する各部の機能ブロック図である。It is a functional block diagram of each part which comprises a head mounted display device. バッテリー収容部の構成を示す図である。It is a figure which shows the structure of a battery accommodating part. 制御部の処理手順を示すフローチャートである。It is a flowchart which shows the process sequence of a control part. バッテリー交換モードの詳細手順を示すフローチャートである。It is a flowchart which shows the detailed procedure of battery replacement mode. 図5のフローの続きを示すフローチャートである。6 is a flowchart showing a continuation of the flow of FIG. 通信システムのシステム構成を示す概略構成図である。It is a schematic block diagram which shows the system configuration | structure of a communication system. 管理テーブルを示す図である。It is a figure which shows a management table. 頭部装着型表示装置とサーバーとの通信シーケンスを示す図である。It is a figure which shows the communication sequence of a head mounting type display apparatus and a server.

[第1実施形態]
図1は、頭部装着型表示装置100の外観構成を示す説明図である。頭部装着型表示装置100は、頭部に装着する表示装置であり、ヘッドマウントディスプレイ(Head Mounted Display、HMD)とも呼ばれる。本実施形態の頭部装着型表示装置100は、使用者が、虚像を視認すると同時に外景も直接視認可能な光学透過型の頭部装着型表示装置である。なお、本明細書では、頭部装着型表示装置100によって使用者が視認する虚像を便宜的に「表示画像」とも呼ぶ。また、画像データに基づいて生成された画像光を射出することを「画像を表示する」ともいう。
[First Embodiment]
FIG. 1 is an explanatory diagram showing an external configuration of the head-mounted display device 100. The head-mounted display device 100 is a display device that is mounted on the head, and is also referred to as a head mounted display (HMD). The head-mounted display device 100 of the present embodiment is an optically transmissive head-mounted display device that allows a user to visually recognize a virtual image and at the same time directly view an outside scene. In this specification, a virtual image visually recognized by the user with the head-mounted display device 100 is also referred to as a “display image” for convenience. Moreover, emitting image light generated based on image data is also referred to as “displaying an image”.

頭部装着型表示装置100は、使用者の頭部に装着された状態において使用者に虚像を視認させる画像表示部20と、画像表示部20を制御する制御装置10と、を備えている。制御装置10は、使用者が頭部装着型表示装置100を操作するためのコントローラーとしても機能する。   The head-mounted display device 100 includes an image display unit 20 that allows a user to visually recognize a virtual image when mounted on the user's head, and a control device 10 that controls the image display unit 20. The control device 10 also functions as a controller for the user to operate the head-mounted display device 100.

画像表示部20は、使用者の頭部に装着される装着体であり、本実施形態では眼鏡形状を有している。画像表示部20は、右保持部21と、右表示駆動部22と、左保持部23と、左表示駆動部24と、右光学像表示部26と、左光学像表示部28と、カメラ61と、マイク63とを備える。右光学像表示部26及び左光学像表示部28は、それぞれ、使用者が画像表示部20を装着した際に使用者の右及び左の眼前に位置するように配置されている。右光学像表示部26の一端と左光学像表示部28の一端とは、使用者が画像表示部20を装着した際の使用者の眉間に対応する位置で、互いに接続されている。   The image display unit 20 is a mounting body that is mounted on the user's head, and has a glasses shape in the present embodiment. The image display unit 20 includes a right holding unit 21, a right display driving unit 22, a left holding unit 23, a left display driving unit 24, a right optical image display unit 26, a left optical image display unit 28, and a camera 61. And a microphone 63. The right optical image display unit 26 and the left optical image display unit 28 are arranged so as to be positioned in front of the right and left eyes of the user when the user wears the image display unit 20, respectively. One end of the right optical image display unit 26 and one end of the left optical image display unit 28 are connected to each other at a position corresponding to the eyebrow of the user when the user wears the image display unit 20.

右保持部21は、右光学像表示部26の他端である端部ERから、使用者が画像表示部20を装着した際の使用者の側頭部に対応する位置にかけて、延伸して設けられた部材である。同様に、左保持部23は、左光学像表示部28の他端である端部ELから、使用者が画像表示部20を装着した際の使用者の側頭部に対応する位置にかけて、延伸して設けられた部材である。右保持部21及び左保持部23は、眼鏡のテンプル(つる)のようにして、使用者の頭部に画像表示部20を保持する。   The right holding unit 21 extends from the end ER which is the other end of the right optical image display unit 26 to a position corresponding to the user's temporal region when the user wears the image display unit 20. It is a member. Similarly, the left holding unit 23 extends from the end EL which is the other end of the left optical image display unit 28 to a position corresponding to the user's temporal region when the user wears the image display unit 20. It is a member provided. The right holding unit 21 and the left holding unit 23 hold the image display unit 20 on the user's head like a temple of glasses.

右表示駆動部22と左表示駆動部24とは、使用者が画像表示部20を装着した際の使用者の頭部に対向する側に配置されている。なお、右表示駆動部22及び左表示駆動部24を総称して単に「表示駆動部」とも呼び、右光学像表示部26及び左光学像表示部28を総称して単に「光学像表示部」とも呼ぶ。   The right display drive unit 22 and the left display drive unit 24 are disposed on the side facing the user's head when the user wears the image display unit 20. The right display drive unit 22 and the left display drive unit 24 are collectively referred to simply as “display drive unit”, and the right optical image display unit 26 and the left optical image display unit 28 are simply referred to as “optical image display unit”. Also called.

表示駆動部22,24は、液晶ディスプレイ241,242(Liquid Crystal Display、以下「LCD241,242」とも呼ぶ)や投写光学系251,252等を含む(図2参照)。表示駆動部22,24の構成の詳細は後述する。光学部材としての光学像表示部26,28は、導光板261,262(図2参照)と調光板20Aとを備える。導光板261,262は、光透過性の樹脂等によって形成され、表示駆動部22,24から出力された画像光を使用者の眼に導く。調光板20Aは、薄板状の光学素子であり、使用者の眼の側とは反対の側である画像表示部20の表側を覆うように配置されている。調光板20Aは、光透過性がほぼゼロのもの、透明に近いもの、光量を減衰させて光を透過するもの、特定の波長の光を減衰又は反射するもの等、種々のものを用いることができる。調光板20Aの光学特性(光透過率など)を適宜選択することにより、外部から右光学像表示部26及び左光学像表示部28に入射する外光量を調整して、虚像の視認のしやすさを調整できる。本実施形態では、少なくとも、頭部装着型表示装置100を装着した使用者が外の景色を視認できる程度の光透過性を有する調光板20Aを用いる場合について説明する。調光板20Aは右導光板261、左導光板262を保護し、右導光板261、左導光板262の損傷や汚れの付着等を抑制する。
調光板20Aは、右光学像表示部26及び左光学像表示部28に対し着脱可能としてもよく、複数種類の調光板20Aを交換して装着可能としてもよいし、省略してもよい。
The display drive units 22 and 24 include liquid crystal displays 241 and 242 (Liquid Crystal Display, hereinafter also referred to as “LCDs 241 and 242”), projection optical systems 251 and 252 (see FIG. 2). Details of the configuration of the display driving units 22 and 24 will be described later. The optical image display units 26 and 28 as optical members include light guide plates 261 and 262 (see FIG. 2) and a light control plate 20A. The light guide plates 261 and 262 are formed of a light transmissive resin or the like, and guide the image light output from the display driving units 22 and 24 to the user's eyes. The dimming plate 20A is a thin plate-like optical element, and is arranged so as to cover the front side of the image display unit 20 which is the side opposite to the user's eye side. As the light control plate 20A, various ones such as one having almost zero light transmittance, one that is almost transparent, one that attenuates the amount of light and transmits light, and one that attenuates or reflects light of a specific wavelength are used. Can do. By appropriately selecting the optical characteristics (light transmittance, etc.) of the light control plate 20A, the external light amount incident on the right optical image display unit 26 and the left optical image display unit 28 from the outside is adjusted to visually recognize the virtual image. You can adjust the ease. In the present embodiment, a case will be described in which at least a light control plate 20A having such a light transmittance that a user wearing the head-mounted display device 100 can visually recognize an outside scene is used. The light control plate 20A protects the right light guide plate 261 and the left light guide plate 262, and suppresses damage to the right light guide plate 261 and the left light guide plate 262, adhesion of dirt, and the like.
The dimming plate 20A may be detachable from the right optical image display unit 26 and the left optical image display unit 28, or may be mounted by replacing a plurality of types of dimming plates 20A, or may be omitted. .

カメラ61は、右光学像表示部26の他端である端部ERに配置される。カメラ61は、使用者の眼の側とは反対側方向の外部の景色である外景を撮像し、外景画像を取得する。図1に示す本実施形態のカメラ61は、単眼カメラであるが、ステレオカメラであってもよい。
カメラ61の撮影方向すなわち画角は、頭部装着型表示装置100の表側方向、換言すれば、頭部装着型表示装置100を装着した状態における使用者の視界方向の少なくとも一部の外景を撮影する方向である。また、カメラ61の画角の広さは適宜設定可能であるが、カメラ61の撮像範囲が、使用者が右光学像表示部26、左光学像表示部28を通して視認する外界を含む範囲であることが好ましい。さらに、調光板20Aを通した使用者の視界の全体を撮影できるようにカメラ61の撮像範囲が設定されているとより好ましい。
The camera 61 is disposed at the end ER that is the other end of the right optical image display unit 26. The camera 61 captures an outside scene that is an external scenery in a direction opposite to the user's eye side, and acquires an outside scene image. The camera 61 of this embodiment shown in FIG. 1 is a monocular camera, but may be a stereo camera.
The shooting direction of the camera 61, that is, the angle of view, is taken from the front side direction of the head-mounted display device 100, in other words, at least a part of the outside scene in the user's viewing direction when the head-mounted display device 100 is mounted. Direction. In addition, although the angle of view of the camera 61 can be set as appropriate, the imaging range of the camera 61 is a range including the outside world that the user can visually recognize through the right optical image display unit 26 and the left optical image display unit 28. It is preferable. Furthermore, it is more preferable that the imaging range of the camera 61 is set so that the entire field of view of the user through the light control plate 20A can be photographed.

画像表示部20は、さらに、画像表示部20を制御装置10に接続するための接続部40を有している。接続部40は、制御装置10に接続される本体コード48と、右コード42と、左コード44と、連結部材46とを備える。右コード42と左コード44とは、本体コード48が2本に分岐したコードである。右コード42は、右保持部21の延伸方向の先端部APから右保持部21の筐体内に挿入され、右表示駆動部22に接続されている。同様に、左コード44は、左保持部23の延伸方向の先端部APから左保持部23の筐体内に挿入され、左表示駆動部24に接続される。   The image display unit 20 further includes a connection unit 40 for connecting the image display unit 20 to the control device 10. The connection unit 40 includes a main body cord 48 connected to the control device 10, a right cord 42, a left cord 44, and a connecting member 46. The right cord 42 and the left cord 44 are codes in which the main body cord 48 is branched into two. The right cord 42 is inserted into the casing of the right holding unit 21 from the distal end AP in the extending direction of the right holding unit 21 and connected to the right display driving unit 22. Similarly, the left cord 44 is inserted into the housing of the left holding unit 23 from the distal end AP in the extending direction of the left holding unit 23 and connected to the left display driving unit 24.

連結部材46は、本体コード48と、右コード42及び左コード44との分岐点に設けられ、イヤホンプラグ30を接続するためのジャックを有している。イヤホンプラグ30からは、右イヤホン32及び左イヤホン34が延伸している。イヤホンプラグ30の近傍にはマイク63が設けられている。イヤホンプラグ30からマイク63までは一本のコードにまとめられ、マイク63からコードが分岐して、右イヤホン32と左イヤホン34のそれぞれに繋がっている。   The connecting member 46 is provided at a branch point between the main body cord 48, the right cord 42 and the left cord 44, and has a jack for connecting the earphone plug 30. A right earphone 32 and a left earphone 34 extend from the earphone plug 30. A microphone 63 is provided in the vicinity of the earphone plug 30. The earphone plug 30 to the microphone 63 are combined into one cord, and the cord branches from the microphone 63 and is connected to each of the right earphone 32 and the left earphone 34.

マイク63は、例えば図1に示すように、マイク63の集音部が使用者の視線方向を向くように配置され、音声を集音して、音声信号を音声処理部190に出力する。マイク63は、例えばモノラルマイクであってもステレオマイクであってもよく、指向性を有するマイクであってもよいし、無指向性のマイクであってもよい。   For example, as shown in FIG. 1, the microphone 63 is arranged such that the sound collection unit of the microphone 63 faces the user's line of sight, collects sound, and outputs a sound signal to the sound processing unit 190. For example, the microphone 63 may be a monaural microphone or a stereo microphone, may be a directional microphone, or may be an omnidirectional microphone.

また、右コード42と左コード44とを一本のコードにまとめることも可能である。具体的には、右コード42の内部の導線を、画像表示部20の本体内部を通して左保持部23側に引き込み、左コード44内部の導線とともに樹脂で被覆して、一本のコードにまとめてもよい。   It is also possible to combine the right code 42 and the left code 44 into one code. Specifically, the lead wire inside the right cord 42 is drawn into the left holding portion 23 side through the inside of the main body of the image display unit 20, and is covered with a resin together with the lead wire inside the left cord 44 to be combined into one cord. Also good.

画像表示部20と制御装置10とは、接続部40を介して各種信号の伝送を行なう。本体コード48における連結部材46とは反対側の端部と、制御装置10とのそれぞれには、互いに嵌合するコネクター(図示略)が設けられている。本体コード48のコネクターと制御装置10のコネクターとの嵌合/嵌合解除により、制御装置10と画像表示部20とが接続されたり切り離されたりする。右コード42と、左コード44と、本体コード48とには、例えば、金属ケーブルや光ファイバーを採用できる。   The image display unit 20 and the control device 10 transmit various signals via the connection unit 40. A connector (not shown) that fits each other is provided at each of the end of the main body cord 48 opposite to the connecting member 46 and the control device 10. By fitting / releasing the connector of the main body cord 48 and the connector of the control device 10, the control device 10 and the image display unit 20 are connected or disconnected. For the right cord 42, the left cord 44, and the main body cord 48, for example, a metal cable or an optical fiber can be adopted.

制御装置10は、頭部装着型表示装置100を制御するための装置である。制御装置10は、決定キー11、点灯部12、表示切替キー13、輝度切替キー15、方向キー16、メニューキー17、及び電源スイッチ18を含むスイッチ類を備える。また、制御装置10は、使用者が指によりタッチ操作するトラックパッド14を備える。   The control device 10 is a device for controlling the head-mounted display device 100. The control device 10 includes switches including an enter key 11, a lighting unit 12, a display switching key 13, a luminance switching key 15, a direction key 16, a menu key 17, and a power switch 18. In addition, the control device 10 includes a track pad 14 that is touched by a user with a finger.

決定キー11は、押下操作を検出して、制御装置10で操作された内容を決定する信号を出力する。点灯部12は、頭部装着型表示装置100の動作状態を、その発光状態によって通知する。頭部装着型表示装置100の動作状態としては、例えば、電源のON/OFF等がある。点灯部12としては、例えば、LED(Light Emitting Diode)が用いられる。表示切替キー13は、押下操作を検出して、例えば、コンテンツ動画の表示モードを3Dと2Dとに切り替える信号を出力する。   The determination key 11 detects a pressing operation and outputs a signal for determining the content operated by the control device 10. The lighting unit 12 notifies the operation state of the head-mounted display device 100 by its light emission state. Examples of the operating state of the head-mounted display device 100 include power ON / OFF. As the lighting unit 12, for example, an LED (Light Emitting Diode) is used. The display switching key 13 detects a pressing operation and outputs a signal for switching the display mode of the content video between 3D and 2D, for example.

トラックパッド14は、トラックパッド14の操作面上での使用者の指の操作を検出して、検出内容に応じた信号を出力する。トラックパッド14としては、静電式や圧力検出式、光学式といった種々のトラックパッドを採用できる。輝度切替キー15は、押下操作を検出して、画像表示部20の輝度を増減する信号を出力する。方向キー16は、上下左右方向に対応するキーへの押下操作を検出して、検出内容に応じた信号を出力する。電源スイッチ18は、スイッチのスライド操作を検出することで、頭部装着型表示装置100の電源投入状態を切り替える。   The track pad 14 detects the operation of the user's finger on the operation surface of the track pad 14 and outputs a signal corresponding to the detected content. As the track pad 14, various track pads such as an electrostatic type, a pressure detection type, and an optical type can be adopted. The luminance switching key 15 detects a pressing operation and outputs a signal for increasing or decreasing the luminance of the image display unit 20. The direction key 16 detects a pressing operation on a key corresponding to the up / down / left / right direction, and outputs a signal corresponding to the detected content. The power switch 18 switches the power-on state of the head-mounted display device 100 by detecting a slide operation of the switch.

図2は、頭部装着型表示装置100を構成する各部の機能ブロック図である。
図2に示すように、頭部装着型表示装置100は、インターフェイス125を介して外部機器OAに接続される。インターフェイス125は、制御装置10に対して、コンテンツの供給元となる種々の外部機器OAを接続するためのインターフェイスである。インターフェイス125としては、例えば、USBインターフェイス、マイクロUSBインターフェイス、メモリーカード用インターフェイス等の有線接続に対応したインターフェイスを用いることができる。
外部機器OAは、頭部装着型表示装置100に画像を供給する画像供給装置として用いられ、例えば、パーソナルコンピューター(PC)や携帯電話端末、ゲーム端末等が用いられる。
FIG. 2 is a functional block diagram of each part constituting the head-mounted display device 100.
As shown in FIG. 2, the head-mounted display device 100 is connected to an external device OA via an interface 125. The interface 125 is an interface for connecting various external devices OA that are content supply sources to the control device 10. As the interface 125, for example, an interface corresponding to a wired connection such as a USB interface, a micro USB interface, or a memory card interface can be used.
The external device OA is used as an image supply device that supplies an image to the head-mounted display device 100. For example, a personal computer (PC), a mobile phone terminal, a game terminal, or the like is used.

頭部装着型表示装置100の制御装置10は、制御部140と、操作部111と、入力情報取得部110と、記憶部120と、送信部(Tx)51及び送信部(Tx)52とを有している。   The control device 10 of the head-mounted display device 100 includes a control unit 140, an operation unit 111, an input information acquisition unit 110, a storage unit 120, a transmission unit (Tx) 51, and a transmission unit (Tx) 52. Have.

操作部111は、使用者による操作を検出する。操作部111は、図1に示した決定キー11、表示切替キー13、トラックパッド14、輝度切替キー15、方向キー16、メニューキー17及び電源スイッチ18の各部を備える。   The operation unit 111 detects an operation by the user. The operation unit 111 includes the determination key 11, the display switching key 13, the track pad 14, the luminance switching key 15, the direction key 16, the menu key 17, and the power switch 18 illustrated in FIG.

入力情報取得部110は、使用者による操作入力に応じた信号を取得する。操作入力に応じた信号としては、例えば、トラックパッド14、方向キー16、電源スイッチ18、に対する操作入力がある。   The input information acquisition unit 110 acquires a signal corresponding to an operation input by the user. As a signal corresponding to the operation input, for example, there is an operation input to the track pad 14, the direction key 16, and the power switch 18.

記憶部120は、不揮発性の記憶装置であって、種々のコンピュータープログラムを格納している。また、記憶部120には、頭部装着型表示装置100の画像表示部20に表示する画像データが格納されていても良い。   The storage unit 120 is a nonvolatile storage device, and stores various computer programs. The storage unit 120 may store image data to be displayed on the image display unit 20 of the head-mounted display device 100.

また、制御部140には、3軸センサー113、GPS115、通信部117及び音声認識部114が接続される。3軸センサー113は3軸の加速度センサーであり、3軸センサー113の検出値を制御部140が取得可能である。GPS115は、アンテナ(図示略)を備え、GPS(Global Positioning System)信号を受信し、制御装置10の現在位置を求める。GPS115は、GPS信号に基づいて求めた現在位置や現在時刻を制御部140に出力する。また、GPS115はGPS信号に含まれる情報に基づいて現在時刻を取得し、制御装置10の制御部140が計時する時刻を修正させる機能を備えていてもよい。   In addition, a three-axis sensor 113, a GPS 115, a communication unit 117, and a voice recognition unit 114 are connected to the control unit 140. The triaxial sensor 113 is a triaxial acceleration sensor, and the control unit 140 can acquire the detection value of the triaxial sensor 113. The GPS 115 includes an antenna (not shown), receives a GPS (Global Positioning System) signal, and obtains the current position of the control device 10. The GPS 115 outputs the current position and the current time obtained based on the GPS signal to the control unit 140. Further, the GPS 115 may have a function of acquiring the current time based on information included in the GPS signal and correcting the time counted by the control unit 140 of the control device 10.

通信部117は、無線LAN(WiFi(登録商標))や、Miracast(登録商標)等の無線通信の規格や、Bluetooth(登録商標)や、Bluetooth Low Energy、RFID、Felica(登録商標)等の近距離無線通信の規格に準じた無線データ通信を実行する。
外部機器OAが、通信部117に無線接続された場合には、制御部140は、コンテンツデータを通信部117より取得して、画像表示部20に画像を表示するための制御を行う。一方、外部機器OAが、インターフェイス125に有線接続された場合には、制御部140は、コンテンツデータをインターフェイス125より取得して、画像表示部20に画像を表示するための制御を行う。よって、通信部117及びインターフェイス125を、以下総称してデータ取得部DAと呼ぶ。
データ取得部DAは、外部機器OAからコンテンツデータを取得する。データ取得部DAは、頭部装着型表示装置100が表示する画像のデータ(以下、「表示画像データ」という)を、外部機器OAから取得する。
The communication unit 117 is a wireless communication standard such as a wireless LAN (WiFi (registered trademark)), Miracast (registered trademark), Bluetooth (registered trademark), Bluetooth Low Energy, RFID, Felica (registered trademark), or the like. Execute wireless data communication in accordance with the distance wireless communication standard.
When the external device OA is wirelessly connected to the communication unit 117, the control unit 140 acquires content data from the communication unit 117 and performs control for displaying an image on the image display unit 20. On the other hand, when the external device OA is wired to the interface 125, the control unit 140 acquires content data from the interface 125 and performs control for displaying an image on the image display unit 20. Therefore, the communication unit 117 and the interface 125 are hereinafter collectively referred to as a data acquisition unit DA.
The data acquisition unit DA acquires content data from the external device OA. The data acquisition unit DA acquires image data (hereinafter referred to as “display image data”) displayed by the head-mounted display device 100 from the external device OA.

音声認識部114は、マイク63により集音され、後述する音声処理部190によりディジタルデータに変換されたディジタル音声データから特徴を抽出してモデル化する。音声認識部114は、音声の特徴を抽出してモデル化することで、複数の人の声を別々に認識して、声ごとに話している人を特定する話者認識や、音声をテキストに変換するテキスト変換を行う。また、音声認識部114は、音声認識の処理において、音声データの言語の種類を識別できる構成であってもよい。   The voice recognition unit 114 extracts features from digital voice data collected by the microphone 63 and converted into digital data by a voice processing unit 190, which will be described later, and models it. The voice recognition unit 114 extracts and models the features of the voice, recognizes the voices of a plurality of people separately, and recognizes the person who speaks for each voice, or converts the voice into text. Perform text conversion to convert. The voice recognition unit 114 may be configured to identify the language type of the voice data in the voice recognition process.

制御装置10は、第1のバッテリー131と、第2のバッテリー132と、第1のバッテリー監視IC133と、第2のバッテリー監視IC134と、バッテリー制御部135と、電源供給部137とを備える。   The control device 10 includes a first battery 131, a second battery 132, a first battery monitoring IC 133, a second battery monitoring IC 134, a battery control unit 135, and a power supply unit 137.

第1のバッテリー131は、頭部装着型表示装置100のメインバッテリーである。第1のバッテリー131は、例えば、リチウムイオン電池、リチウムポリマー電池、ニッケル水素電池等の二次電池、電気二重層キャパシター等の蓄電体、或いは、一次電池を用いて構成される。
第2のバッテリー132は、頭部装着型表示装置100のサブバッテリーである。第2のバッテリー132は、第1のバッテリー131のバッテリー交換の際に、頭部装着型表示装置100に電力を供給する。また、第2のバッテリー132は、充電が可能なバッテリーであり、第1のバッテリー131が交換されると、第1のバッテリー131により充電される。
第2のバッテリー132は、一次電池を用いてもよいが、リチウムイオン電池、リチウムポリマー電池、ニッケル水素電池等の二次電池、或いは、電気二重層キャパシター等の蓄電体、燃料電池など充電可能な構成であることが好ましい。さらに、第2のバッテリー132は、電磁誘導方式、電波受信方式、共鳴方式等を用いた非接触充電(ワイヤレス充電)により充電可能な構成とすることもできる。また、第2のバッテリー132として、太陽電池を用いてもよい。
頭部装着型表示装置100は、後述する通常動作モードにおいては、メインバッテリーである第1のバッテリー131を電源として動作する。また、後述するバッテリー交換モードでは、サブバッテリーである第2のバッテリー132を電源として動作する。第1のバッテリー131と第2のバッテリー132との切り替えは、後述するように、制御部140により行われる。
The first battery 131 is a main battery of the head-mounted display device 100. The first battery 131 is configured using, for example, a secondary battery such as a lithium ion battery, a lithium polymer battery, or a nickel metal hydride battery, a power storage unit such as an electric double layer capacitor, or a primary battery.
The second battery 132 is a sub battery of the head-mounted display device 100. The second battery 132 supplies power to the head-mounted display device 100 when the battery of the first battery 131 is replaced. The second battery 132 is a rechargeable battery, and is charged by the first battery 131 when the first battery 131 is replaced.
The second battery 132 may be a primary battery, but can be charged with a secondary battery such as a lithium ion battery, a lithium polymer battery, or a nickel metal hydride battery, a power storage unit such as an electric double layer capacitor, or a fuel cell. A configuration is preferred. Further, the second battery 132 may be configured to be chargeable by non-contact charging (wireless charging) using an electromagnetic induction method, a radio wave reception method, a resonance method, or the like. Further, a solar cell may be used as the second battery 132.
The head-mounted display device 100 operates using the first battery 131, which is the main battery, as a power source in a normal operation mode to be described later. Further, in the battery exchange mode described later, the second battery 132 that is a sub-battery operates as a power source. Switching between the first battery 131 and the second battery 132 is performed by the control unit 140 as described later.

第1のバッテリー監視IC133は、第1のバッテリー131と、バッテリー制御部135とに接続され、第1のバッテリー131の残容量を算出する。第1のバッテリー監視IC133は、例えば、第1のバッテリー131の端子電圧を測定し、測定した端子電圧に基づいて第1のバッテリー131の残容量を算出する。
第1のバッテリー監視IC133による第1のバッテリー131の残容量の算出方法は、第1のバッテリー131の放電電流を計測して積算し、積算した放電電流量に基づいて第1のバッテリー131の残容量を算出するものであってもよい。また、第1のバッテリー監視IC133は、第1のバッテリー131のインピーダンスの変化を測定して、第1のバッテリー131の残容量を算出してもよい。第1のバッテリー監視IC133は、測定した第1のバッテリー131の端子電圧と、算出した第1のバッテリー131の残容量とをバッテリー制御部135に出力する。
なお、第1のバッテリー監視IC133は、第1のバッテリー131の外装に内蔵されるものでもよいし、第1のバッテリー131と一体に設けてもよい。第1のバッテリー131は、リチウムイオン電池、リチウムポリマー電池、ニッケル水素電池等の二次電池、或いは一次電池を、パッケージに封入した電池本体(図示略)と、電池本体を収容する外装とを有する。外装には、パッケージ内部の電極に接続される端子が露出する。第1のバッテリー監視IC133は、電池本体と共に外装に収容してもよく、この場合、電池本体の電極に第1のバッテリー監視IC133が接続される。また、第1のバッテリー131の外装の端子は、第1のバッテリー監視IC133の出力端子に接続される。
The first battery monitoring IC 133 is connected to the first battery 131 and the battery control unit 135, and calculates the remaining capacity of the first battery 131. For example, the first battery monitoring IC 133 measures the terminal voltage of the first battery 131 and calculates the remaining capacity of the first battery 131 based on the measured terminal voltage.
The method for calculating the remaining capacity of the first battery 131 by the first battery monitoring IC 133 is to measure and integrate the discharge current of the first battery 131, and based on the accumulated discharge current amount, the remaining capacity of the first battery 131. The capacity may be calculated. Further, the first battery monitoring IC 133 may calculate a remaining capacity of the first battery 131 by measuring a change in impedance of the first battery 131. The first battery monitoring IC 133 outputs the measured terminal voltage of the first battery 131 and the calculated remaining capacity of the first battery 131 to the battery control unit 135.
The first battery monitoring IC 133 may be built in the exterior of the first battery 131 or may be provided integrally with the first battery 131. The first battery 131 includes a battery main body (not shown) in which a secondary battery such as a lithium ion battery, a lithium polymer battery, or a nickel metal hydride battery, or a primary battery is enclosed in a package, and an exterior that houses the battery main body. . Terminals connected to the electrodes inside the package are exposed on the exterior. The first battery monitoring IC 133 may be housed in the exterior together with the battery body. In this case, the first battery monitoring IC 133 is connected to the electrode of the battery body. The terminal on the exterior of the first battery 131 is connected to the output terminal of the first battery monitoring IC 133.

第2のバッテリー監視IC134は、第2のバッテリー132と、バッテリー制御部135とに接続され、第2のバッテリー132の残容量を算出する。第2のバッテリー監視IC134は、第1のバッテリー監視IC133と同様に、第2のバッテリー132の端子電圧を測定し、測定した端子電圧に基づいて第2のバッテリー132の残容量を算出する。
第2のバッテリー監視IC134による第2のバッテリー132の残容量の算出方法は、第2のバッテリー132の放電電流を計測して積算し、積算した放電電流量に基づいて第2のバッテリー132の残容量を算出するものであってもよい。また、第2のバッテリー監視IC134は、第2のバッテリー132のインピーダンスの変化を測定して、第2のバッテリー132の残容量を算出してもよい。第2のバッテリー監視IC134は、測定した第2のバッテリー132の端子電圧と、算出した第2のバッテリー132の残容量とをバッテリー制御部135に出力する。
なお、第2のバッテリー監視IC134は、第2のバッテリー132の本体に内蔵されるものでもよいし、又は第2のバッテリー132と一体に設けてもよい。
The second battery monitoring IC 134 is connected to the second battery 132 and the battery control unit 135 and calculates the remaining capacity of the second battery 132. Similar to the first battery monitoring IC 133, the second battery monitoring IC 134 measures the terminal voltage of the second battery 132, and calculates the remaining capacity of the second battery 132 based on the measured terminal voltage.
The second battery monitoring IC 134 calculates the remaining capacity of the second battery 132 by measuring and accumulating the discharge current of the second battery 132, and based on the accumulated amount of discharge current. The capacity may be calculated. Further, the second battery monitoring IC 134 may calculate a remaining capacity of the second battery 132 by measuring a change in impedance of the second battery 132. The second battery monitoring IC 134 outputs the measured terminal voltage of the second battery 132 and the calculated remaining capacity of the second battery 132 to the battery control unit 135.
The second battery monitoring IC 134 may be built in the main body of the second battery 132 or may be provided integrally with the second battery 132.

図3は、バッテリー収容部122の構成を示す図である。第1のバッテリー131、第2のバッテリー132、第1のバッテリー監視IC133及び第2のバッテリー監視IC134は、バッテリー収容部122内に収容される。第1のバッテリー131は、バッテリー収容部122に、着脱可能に収容される。すなわち、バッテリー収容部122は、第1のバッテリー131を着脱可能に保持する保持部(図示略)等を備える。
バッテリー収容部122は、蓋123を備える。蓋123が開かれることで、第1のバッテリー131をバッテリー収容部122から出し入れ可能になる。
バッテリー収容部122には、蓋123の開閉を検出する開閉検出部124が設けられる。開閉検出部124には、種々の方式を採用可能であるが、本実施形態では磁気検出式の開閉検出部124を採用する。開閉検出部124は、蓋123に設けられた磁石124Aと、バッテリー収容部122の本体側に設けられたホール素子124Bとを備え、磁石124Aの磁力をホール素子124Bで検出する。蓋123が開かれ、磁石124Aの磁力をホール素子124Bで検出できなくなると、開閉検出部124は、蓋123が開放されたことを示す信号を制御部140に出力する。
なお、開閉検出部124の構成は、磁石124Aと、ホール素子124Bとを備える磁気検出式の構成に限定されない。例えば、蓋123の開閉に対応して接点の導通状態と開放状態とを切り替えるトグルスイッチや、レバースイッチを備えたスイッチ式の構成を採用してもよい。或いは、開閉検出部124は、赤外線や可視光線等の光を利用して、蓋123の開閉を検出する光検出式の構成であってもよいし、凹部への凸部の挿抜を検出して、蓋123の開閉を検出するものであってもよい。
FIG. 3 is a diagram illustrating a configuration of the battery housing part 122. The first battery 131, the second battery 132, the first battery monitoring IC 133, and the second battery monitoring IC 134 are accommodated in the battery accommodating portion 122. The first battery 131 is detachably accommodated in the battery accommodating portion 122. That is, the battery housing part 122 includes a holding part (not shown) that detachably holds the first battery 131.
The battery housing part 122 includes a lid 123. When the lid 123 is opened, the first battery 131 can be taken in and out of the battery housing portion 122.
The battery housing part 122 is provided with an opening / closing detection part 124 that detects opening / closing of the lid 123. Various methods can be adopted for the opening / closing detection unit 124, but in this embodiment, a magnetic detection type opening / closing detection unit 124 is adopted. The open / close detection unit 124 includes a magnet 124A provided on the lid 123 and a Hall element 124B provided on the main body side of the battery housing 122, and detects the magnetic force of the magnet 124A by the Hall element 124B. When the lid 123 is opened and the magnetic force of the magnet 124A cannot be detected by the Hall element 124B, the open / close detection unit 124 outputs a signal indicating that the lid 123 is opened to the control unit 140.
The configuration of the open / close detection unit 124 is not limited to a magnetic detection type configuration including the magnet 124A and the Hall element 124B. For example, you may employ | adopt the switch type structure provided with the toggle switch and lever switch which switch the conduction | electrical_connection state and open state of a contact corresponding to opening and closing of the lid | cover 123. Alternatively, the open / close detection unit 124 may have a light detection type configuration that detects the opening / closing of the lid 123 using light such as infrared rays or visible light, or detects the insertion / extraction of the convex portion into the concave portion. The lid 123 may be detected by opening / closing.

バッテリー制御部135は、制御部140と、第1のバッテリー131と、第2のバッテリー132と、電源供給部137とに接続する。
バッテリー制御部135は、制御部140の制御により、頭部装着型表示装置100の電源の切り替えを行う。すなわち、バッテリー制御部135は、頭部装着型表示装置100に電力を供給するバッテリーを、第1のバッテリー131と、第2のバッテリー132とで切り替える。また、バッテリー制御部135には、第1のバッテリー131又は第2のバッテリー132が供給する電力が入力される。バッテリー制御部135は、入力された電力を電源供給部137に出力する。また、バッテリー制御部135は、制御部140の指示に従って、電源供給部137が電力を供給する供給先を制御する。
The battery control unit 135 is connected to the control unit 140, the first battery 131, the second battery 132, and the power supply unit 137.
The battery control unit 135 switches the power supply of the head-mounted display device 100 under the control of the control unit 140. That is, the battery control unit 135 switches the battery that supplies power to the head-mounted display device 100 between the first battery 131 and the second battery 132. In addition, power supplied from the first battery 131 or the second battery 132 is input to the battery control unit 135. The battery control unit 135 outputs the input power to the power supply unit 137. In addition, the battery control unit 135 controls a supply destination to which the power supply unit 137 supplies power in accordance with an instruction from the control unit 140.

電源供給部137は、バッテリー制御部135に接続する。電源供給部137は、第1のバッテリー131又は第2のバッテリー132から供給される電力を、バッテリー制御部135により指示された供給先に供給する。例えば、後述する通常動作モードでは、バッテリー制御部135から電源供給部137に、頭部装着型表示装置100の各部に電力を供給するように指示が出される。このため、電源供給部137は、頭部装着型表示装置100の各部に電力を供給する。また、後述するバッテリー交換モードでは、バッテリー制御部135から電源供給部137に、制御部140、通信部117、画像表示部20の右表示駆動部22及び左表示駆動部24に電力を供給するように指示が出される。つまり、電源供給部137は、制御部140、通信部117、及び画像表示部20の右表示駆動部22及び左表示駆動部24に電力を供給する。   The power supply unit 137 is connected to the battery control unit 135. The power supply unit 137 supplies the power supplied from the first battery 131 or the second battery 132 to the supply destination designated by the battery control unit 135. For example, in the normal operation mode described later, the battery control unit 135 instructs the power supply unit 137 to supply power to each unit of the head-mounted display device 100. For this reason, the power supply unit 137 supplies power to each unit of the head-mounted display device 100. Further, in the battery exchange mode described later, power is supplied from the battery control unit 135 to the power supply unit 137 to the control unit 140, the communication unit 117, the right display drive unit 22 and the left display drive unit 24 of the image display unit 20. Is instructed. That is, the power supply unit 137 supplies power to the control unit 140, the communication unit 117, and the right display drive unit 22 and the left display drive unit 24 of the image display unit 20.

制御部140は、記憶部120に格納されているコンピュータープログラムを読み出して実行することにより、オペレーティングシステム(OS)150、画像処理部160、表示制御部170、省電力制御部180、音声処理部190として機能する。   The control unit 140 reads out and executes a computer program stored in the storage unit 120, thereby operating the operating system (OS) 150, the image processing unit 160, the display control unit 170, the power saving control unit 180, and the sound processing unit 190. Function as.

頭部装着型表示装置100は、動作モードとして、通常動作モードと、バッテリー交換モードとを備える。頭部装着型表示装置100の動作モードの切り替えは、省電力制御部180により行われる。
通常動作モードは、頭部装着型表示装置100の各部に電力を供給する動作モードであり、少なくとも、制御部140、通信部117、画像表示部20の右表示駆動部22及び左表示駆動部24に電力を供給する。また、通常動作モードでは、図2に示す頭部装着型表示装置100の全ての機能ブロックに対し、電力を供給可能である。但し、全ての機能ブロックに同時に通電可能であることは要求されない。
バッテリー交換モードは、制御部140の制御によって、頭部装着型表示装置100の消費電力量を、通常動作モードより低くする動作モードである。例えば、第1のバッテリー131の残容量が規定値以下になった場合、又は後述するバッテリー収容部122の蓋123が開かれた場合に、制御部140は、頭部装着型表示装置100の動作モードを、通常動作モードからバッテリー交換モードに移行させる。
The head-mounted display device 100 includes a normal operation mode and a battery replacement mode as operation modes. The operation mode of the head-mounted display device 100 is switched by the power saving control unit 180.
The normal operation mode is an operation mode in which power is supplied to each unit of the head-mounted display device 100. At least the control unit 140, the communication unit 117, the right display driving unit 22 and the left display driving unit 24 of the image display unit 20 are used. To supply power. In the normal operation mode, power can be supplied to all the functional blocks of the head-mounted display device 100 shown in FIG. However, it is not required that all functional blocks can be energized simultaneously.
The battery replacement mode is an operation mode in which the power consumption of the head-mounted display device 100 is set lower than the normal operation mode under the control of the control unit 140. For example, when the remaining capacity of the first battery 131 becomes equal to or less than a specified value, or when a lid 123 of the battery housing unit 122 described later is opened, the control unit 140 operates the head-mounted display device 100. The mode is changed from the normal operation mode to the battery replacement mode.

通常動作モードでは、第1のバッテリー131が頭部装着型表示装置100の各部に電力を供給し、バッテリー交換モードでは、第2のバッテリー132が頭部装着型表示装置100の各部に電力を供給する。
また、通常動作モードからバッテリー交換モードに移行する際には、省電力制御部180の制御により、システム情報が記憶部120に記憶される。システム情報は、頭部装着型表示装置100を、バッテリー交換モードへ移行する前の通常動作モードの状態に復帰させるためのデータであり、制御部140の制御部の動作に係るデータである。システム情報には、例えば、画像表示部20に表示する画像の表示位置や、表示サイズ等、頭部装着型表示装置100の動作に関するデータが含まれる。また、バッテリー交換モードにおいては、省電力制御部180の制御により、制御部140、通信部117、画像表示部20の右表示駆動部22及び左表示駆動部24等の限られたブロックに電力が供給される。
In the normal operation mode, the first battery 131 supplies power to each part of the head-mounted display device 100, and in the battery replacement mode, the second battery 132 supplies power to each part of the head-mounted display device 100. To do.
Further, when shifting from the normal operation mode to the battery replacement mode, the system information is stored in the storage unit 120 under the control of the power saving control unit 180. The system information is data for returning the head-mounted display device 100 to the state of the normal operation mode before shifting to the battery replacement mode, and is data related to the operation of the control unit of the control unit 140. The system information includes, for example, data related to the operation of the head-mounted display device 100, such as the display position and display size of an image displayed on the image display unit 20. In the battery replacement mode, power is supplied to limited blocks such as the control unit 140, the communication unit 117, the right display drive unit 22 and the left display drive unit 24 of the image display unit 20 under the control of the power saving control unit 180. Supplied.

画像処理部160は、コンテンツに含まれる画像信号を取得する。画像処理部160は、取得した画像信号から、垂直同期信号VSyncや水平同期信号HSync等の同期信号を分離する。また、画像処理部160は、分離した垂直同期信号VSyncや水平同期信号HSyncの周期に応じて、PLL(Phase Locked Loop)回路等(図示略)を利用してクロック信号PCLKを生成する。画像処理部160は、同期信号が分離されたアナログ画像信号を、A/D変換回路等(図示略)を用いてディジタル画像信号に変換する。画像処理部160は、変換後のディジタル画像信号を、対象画像の画像データ(図中、Data)として、1フレームごとに記憶部120内のDRAMに格納する。この画像データは、例えばRGBデータである。
なお、画像処理部160は、必要に応じて、画像データに対して、解像度変換処理や、輝度、彩度の調整といった種々の色調補正処理、キーストーン補正処理等の画像処理を実行してもよい。
The image processing unit 160 acquires an image signal included in the content. The image processing unit 160 separates synchronization signals such as the vertical synchronization signal VSync and the horizontal synchronization signal HSync from the acquired image signal. Further, the image processing unit 160 generates a clock signal PCLK using a PLL (Phase Locked Loop) circuit or the like (not shown) according to the period of the separated vertical synchronization signal VSync and horizontal synchronization signal HSync. The image processing unit 160 converts the analog image signal from which the synchronization signal is separated into a digital image signal using an A / D conversion circuit or the like (not shown). The image processing unit 160 stores the converted digital image signal in the DRAM in the storage unit 120 frame by frame as image data (Data in the figure) of the target image. This image data is, for example, RGB data.
Note that the image processing unit 160 may perform image processing such as resolution conversion processing, various tone correction processing such as adjustment of luminance and saturation, and keystone correction processing on the image data as necessary. Good.

また、画像処理部160は、画像信号のフレームレートを変換する指示が省電力制御部180から入力された場合、画像信号のフレームレートを変換する変換処理を行う。
画像処理部160は、フレームレートを変換する指示が入力されると、画像信号のフレームレートが、通常動作モードのときのフレームレートよりも低くなるように画像信号、垂直同期信号(VSync)及び水平同期信号(HSync)の変換を行う。
なお、画像処理部160により変換される画像信号のフレームレートは、事前に設定されたフレームレートであってもよいし、省電力制御部180からの指示に応じて変更されるものであってもよい。例えば、省電力制御部180は、第2のバッテリー132の残容量に応じたフレームレートを画像処理部160に指示するようにしてもよい。具体的には、変換先のフレームレートが予め複数段階に設定され、第2のバッテリー132の残容量が複数段階に分けられ、フレームレートが第2のバッテリー132の残容量の段階に対応付けられる構成が挙げられる。この構成では、省電力制御部180が、第2のバッテリー132の容量に対応するフレームレートを、変換先のフレームレートとして選択する。
Further, when an instruction to convert the frame rate of the image signal is input from the power saving control unit 180, the image processing unit 160 performs a conversion process of converting the frame rate of the image signal.
When an instruction to convert the frame rate is input, the image processing unit 160 receives the image signal, the vertical synchronization signal (VSync), and the horizontal so that the frame rate of the image signal is lower than the frame rate in the normal operation mode. The synchronization signal (HSSync) is converted.
Note that the frame rate of the image signal converted by the image processing unit 160 may be a preset frame rate or may be changed according to an instruction from the power saving control unit 180. Good. For example, the power saving control unit 180 may instruct the image processing unit 160 of a frame rate corresponding to the remaining capacity of the second battery 132. Specifically, the frame rate of the conversion destination is preset in a plurality of stages, the remaining capacity of the second battery 132 is divided into a plurality of stages, and the frame rate is associated with the remaining capacity stage of the second battery 132. A configuration is mentioned. In this configuration, the power saving control unit 180 selects a frame rate corresponding to the capacity of the second battery 132 as a conversion destination frame rate.

画像処理部160は、生成されたクロック信号PCLK、垂直同期信号VSync、水平同期信号HSync、記憶部120内のDRAMに格納された画像データDataのそれぞれを送信部51、52を介して送信する。なお、送信部51を介して送信される画像データDataを「右眼用画像データ」とも呼び、送信部52を介して送信される画像データDataを「左眼用画像データ」とも呼ぶ。送信部51、52は、制御装置10と画像表示部20との間におけるシリアル伝送のためのトランシーバーとして機能する。   The image processing unit 160 transmits the generated clock signal PCLK, vertical synchronization signal VSync, horizontal synchronization signal HSync, and image data Data stored in the DRAM in the storage unit 120 via the transmission units 51 and 52, respectively. The image data Data transmitted via the transmission unit 51 is also referred to as “right eye image data”, and the image data Data transmitted via the transmission unit 52 is also referred to as “left eye image data”. The transmission units 51 and 52 function as a transceiver for serial transmission between the control device 10 and the image display unit 20.

表示制御部170は、右表示駆動部22及び左表示駆動部24を制御する制御信号を生成する。具体的には、表示制御部170は、制御信号により、右LCD制御部211による右LCD241の駆動ON/OFF、右バックライト制御部201による右バックライト221の駆動ON/OFFを個別に制御する。また、表示制御部170は、左LCD制御部212による左LCD242の駆動ON/OFF、左バックライト制御部202による左バックライト222の駆動ON/OFFを個別に制御する。これにより、表示制御部170は、右表示駆動部22及び左表示駆動部24のそれぞれによる画像光の生成及び射出を制御する。例えば、表示制御部170は、制御信号により右表示駆動部22及び左表示駆動部24を制御して、右表示駆動部22と左表示駆動部24との両方に画像光を生成させたり、一方のみに画像光を生成させたりする。また、表示制御部170は、制御信号により右表示駆動部22及び左表示駆動部24を制御して、右表示駆動部22及び左表示駆動部24の両方に画像光を生成させないようにすることもできる。
また、表示制御部170は、右LCD制御部211と左LCD制御部212とに対する制御信号のそれぞれを、送信部51及び52を介して送信する。また、表示制御部170は、右バックライト制御部201と左バックライト制御部202とに対する制御信号のそれぞれを送信する。
The display control unit 170 generates control signals for controlling the right display drive unit 22 and the left display drive unit 24. Specifically, the display control unit 170 individually controls driving ON / OFF of the right LCD 241 by the right LCD control unit 211 and driving ON / OFF of the right backlight 221 by the right backlight control unit 201 based on the control signal. . Further, the display control unit 170 individually controls ON / OFF driving of the left LCD 242 by the left LCD control unit 212 and ON / OFF driving of the left backlight 222 by the left backlight control unit 202. Thereby, the display control unit 170 controls the generation and emission of image light by the right display driving unit 22 and the left display driving unit 24, respectively. For example, the display control unit 170 controls the right display drive unit 22 and the left display drive unit 24 with a control signal, and causes both the right display drive unit 22 and the left display drive unit 24 to generate image light. Only the image light is generated. In addition, the display control unit 170 controls the right display drive unit 22 and the left display drive unit 24 according to the control signal so that both the right display drive unit 22 and the left display drive unit 24 do not generate image light. You can also.
Further, the display control unit 170 transmits control signals for the right LCD control unit 211 and the left LCD control unit 212 via the transmission units 51 and 52, respectively. In addition, the display control unit 170 transmits control signals for the right backlight control unit 201 and the left backlight control unit 202, respectively.

また、表示制御部170は、省電力制御部180によって動作モードがバッテリー交換モードに切り替えられた場合に、右バックライト221と左バックライト222との輝度を低下させる。表示制御部170は、制御信号により右バックライト制御部201及び左バックライト制御部202を制御して、右バックライト221と左バックライト222との輝度を通常動作モードのときよりも低下させる。また、表示制御部170は、右バックライト221と左バックライト222とのいずれか一方の輝度を通常動作モードのときよりも低下させてもよい。右バックライト221と左バックライト222との少なくとも一方の輝度が、通常動作モードのときよりも低くなるため、頭部装着型表示装置100の消費電力が削減される。   Further, the display control unit 170 reduces the luminance of the right backlight 221 and the left backlight 222 when the operation mode is switched to the battery replacement mode by the power saving control unit 180. The display control unit 170 controls the right backlight control unit 201 and the left backlight control unit 202 according to the control signal, and lowers the luminance of the right backlight 221 and the left backlight 222 than in the normal operation mode. In addition, the display control unit 170 may reduce the luminance of either the right backlight 221 or the left backlight 222 as compared with that in the normal operation mode. Since the luminance of at least one of the right backlight 221 and the left backlight 222 is lower than that in the normal operation mode, the power consumption of the head-mounted display device 100 is reduced.

また、表示制御部170は、省電力制御部180によって動作モードが通常動作モードからバッテリー交換モードに切り替えられる場合に、右LCD241及び左LCD242の表示領域を縮小させてもよい。表示制御部170は、制御信号により右LCD制御部211及び左LCD制御部212を制御し、右LCD241及び左LCD242の表示領域を通常動作モードにおける表示領域より縮小させる。画像が表示される右LCD241及び左LCD242の領域が縮小されることで、頭部装着型表示装置100の消費電力が削減される。また、表示制御部170は、右LCD241及び左LCD242の少なくとも一方の表示領域を通常動作モードときの表示領域よりも縮小させてもよい。   The display control unit 170 may reduce the display area of the right LCD 241 and the left LCD 242 when the power saving control unit 180 switches the operation mode from the normal operation mode to the battery replacement mode. The display control unit 170 controls the right LCD control unit 211 and the left LCD control unit 212 according to the control signal, and reduces the display area of the right LCD 241 and the left LCD 242 from the display area in the normal operation mode. By reducing the areas of the right LCD 241 and the left LCD 242 where images are displayed, the power consumption of the head-mounted display device 100 is reduced. Further, the display control unit 170 may reduce the display area of at least one of the right LCD 241 and the left LCD 242 more than the display area in the normal operation mode.

また、表示制御部170は、動作モードがバッテリー交換モードに変更された場合に、右表示駆動部22又は左表示駆動部24の表示を停止させてもよい。すなわち、表示制御部170は、右表示駆動部22又は左表示駆動部24への制御信号の出力をオフすることにより、右表示駆動部22又は左表示駆動部24の画像光の生成を停止させる。また、表示制御部170は、制御信号に右表示駆動部22又は左表示駆動部24を制御して、右表示駆動部22又は左表示駆動部24の画像光の生成を停止させてもよい。さらに、画像処理部160から送信部51又は52へのクロック信号PCLK、垂直同期信号VSync、水平同期信号HSync、画像データDataの送信を停止させることにより、右表示駆動部22又は左表示駆動部24の画像光の生成を停止させてもよい。   The display control unit 170 may stop the display of the right display driving unit 22 or the left display driving unit 24 when the operation mode is changed to the battery replacement mode. That is, the display control unit 170 stops the generation of the image light of the right display drive unit 22 or the left display drive unit 24 by turning off the output of the control signal to the right display drive unit 22 or the left display drive unit 24. . Further, the display control unit 170 may control the right display driving unit 22 or the left display driving unit 24 according to the control signal to stop the generation of image light of the right display driving unit 22 or the left display driving unit 24. Further, the right display driving unit 22 or the left display driving unit 24 is stopped by stopping the transmission of the clock signal PCLK, the vertical synchronizing signal VSync, the horizontal synchronizing signal HSync, and the image data Data from the image processing unit 160 to the transmitting unit 51 or 52. The generation of the image light may be stopped.

また、表示制御部170は、バックライト221、222の輝度と、LCD241、242の表示領域の縮小と、表示駆動部22又は24の表示の停止とを組み合わせて、画像表示部20の消費電力を削減してもよい。
省電力制御部180は、画像表示部20の表示モードを指定するモード番号を、第2のバッテリー132の残容量に応じて選択し、選択したモード番号を表示制御部170に通知する。
例えば、省電力制御部180は、第2のバッテリー132の残容量が例えば80%以下になると、表示制御部170にモード番号「1」を通知する。モード番号「1」を通知された表示制御部170は、制御信号により右バックライト制御部201及び左バックライト制御部202を制御して、右バックライト221と左バックライト222との輝度を通常動作モードのときよりも低下させる。
また、省電力制御部180は、第2のバッテリー132の残容量が例えば60%以下になると、表示制御部170にモード番号「2」を通知する。モード番号「2」を通知された表示制御部170は、制御信号により右LCD制御部211及び左LCD制御部212を制御して、右LCD241及び左LCD242の表示領域を通常動作モードときの表示領域よりも縮小させる。
また、省電力制御部180は、第2のバッテリー132の残容量が例えば40%以下になると、表示制御部170にモード番号「3」を通知する。モード番号「3」を通知された表示制御部170は、右表示駆動部22又は左表示駆動部24への制御信号の出力をオフし、右表示駆動部22又は左表示駆動部24の表示を停止させる。
これにより、右表示駆動部22と左表示駆動部24とのいずれか一方は、表示画像の表示が停止される。また、右表示駆動部22と左表示駆動部24との他方は、バックライト221(222)の輝度が抑制され、LCD241(242)の表示領域が縮小された状態となる。
In addition, the display control unit 170 combines the brightness of the backlights 221 and 222, the reduction of the display area of the LCDs 241 and 242 and the stop of the display of the display driving unit 22 or 24 to reduce the power consumption of the image display unit 20. It may be reduced.
The power saving control unit 180 selects a mode number for designating the display mode of the image display unit 20 according to the remaining capacity of the second battery 132 and notifies the display control unit 170 of the selected mode number.
For example, when the remaining capacity of the second battery 132 becomes 80% or less, for example, the power saving control unit 180 notifies the display control unit 170 of the mode number “1”. The display control unit 170 notified of the mode number “1” controls the right backlight control unit 201 and the left backlight control unit 202 in accordance with the control signal, and the brightness of the right backlight 221 and the left backlight 222 is normally set. Lower than in the operation mode.
Further, when the remaining capacity of the second battery 132 becomes 60% or less, the power saving control unit 180 notifies the display control unit 170 of the mode number “2”. The display control unit 170 notified of the mode number “2” controls the right LCD control unit 211 and the left LCD control unit 212 in accordance with the control signal, so that the display areas of the right LCD 241 and the left LCD 242 are displayed in the normal operation mode. Reduce more than.
Further, when the remaining capacity of the second battery 132 becomes 40% or less, the power saving control unit 180 notifies the display control unit 170 of the mode number “3”. The display control unit 170 notified of the mode number “3” turns off the output of the control signal to the right display drive unit 22 or the left display drive unit 24, and displays the display of the right display drive unit 22 or the left display drive unit 24. Stop.
As a result, display of the display image is stopped in either the right display drive unit 22 or the left display drive unit 24. The other of the right display drive unit 22 and the left display drive unit 24 is in a state where the luminance of the backlight 221 (222) is suppressed and the display area of the LCD 241 (242) is reduced.

省電力制御部180は、頭部装着型表示装置100の動作モードを変更する。
省電力制御部180は、開閉検出部124により蓋123が開かれたことを示す検出信号が入力された場合に、頭部装着型表示装置100の動作モードを通常動作モードからバッテリー交換モードに移行させる。また、省電力制御部180は、第1のバッテリー監視IC133により検出される第1のバッテリー131の残容量がしきい値以下に低下した場合に、頭部装着型表示装置100の動作モードを通常動作モードからバッテリー交換モードに移行させる。
The power saving control unit 180 changes the operation mode of the head-mounted display device 100.
The power saving control unit 180 shifts the operation mode of the head-mounted display device 100 from the normal operation mode to the battery replacement mode when a detection signal indicating that the lid 123 is opened by the open / close detection unit 124 is input. Let Further, the power saving control unit 180 normally sets the operation mode of the head-mounted display device 100 when the remaining capacity of the first battery 131 detected by the first battery monitoring IC 133 falls below a threshold value. Transition from the operation mode to the battery replacement mode.

省電力制御部180は、開閉検出部124により蓋123が開かれたことを示す検出信号が入力され、バッテリー交換モードに移行した場合に、蓋123が開かれた旨を表示制御部170に通知する。表示制御部170は、画像表示部20に、所定のメッセージを表示させる。このメッセージは、蓋123の開放を通知するメッセージと、準備が完了するまで第1のバッテリー131の取り外しを待機するように要請するメッセージである。
また、省電力制御部180は、第1のバッテリー131の残容量がしきい値以下に低下したことを検出してバッテリー交換モードに移行した場合、表示制御部170に、第1のバッテリー131の残容量がしきい値以下に低下した旨を通知する。表示制御部170は、画像表示部20に、所定のメッセージを表示させる。このメッセージは、第1のバッテリー131の残容量がしきい値以下に低下したことを通知するメッセージと、準備が完了するまで第1のバッテリー131の取り外しを待機するように要請するメッセージである。
The power saving control unit 180 notifies the display control unit 170 that the lid 123 has been opened when the detection signal indicating that the lid 123 has been opened is input by the open / close detection unit 124 and shifts to the battery replacement mode. To do. The display control unit 170 displays a predetermined message on the image display unit 20. This message is a message notifying the opening of the lid 123 and a message requesting to wait for the removal of the first battery 131 until the preparation is completed.
In addition, when the power saving control unit 180 detects that the remaining capacity of the first battery 131 has dropped below the threshold and shifts to the battery replacement mode, the power saving control unit 180 causes the display control unit 170 to display the first battery 131 of the first battery 131. Notify that the remaining capacity has dropped below the threshold. The display control unit 170 displays a predetermined message on the image display unit 20. This message is a message notifying that the remaining capacity of the first battery 131 has dropped below the threshold value, and a message requesting to wait for the removal of the first battery 131 until preparation is completed.

また、省電力制御部180は、バッテリー交換モードに移行すると、システム情報を記憶部120に記憶させる。システム情報は、上述のように、頭部装着型表示装置100を、バッテリー交換モードへ移行する前の、通常動作モードの状態に復帰させるためのデータである。
また、省電力制御部180は、システム情報が記憶部120に記憶されると、電源を第1のバッテリー131から第2のバッテリー132に切り替える指示をバッテリー制御部135に出力する。バッテリー制御部135は、省電力制御部180の指示に従って、電力を供給するバッテリーを第1のバッテリー131から第2のバッテリー132に変更する。また、省電力制御部180は、バッテリーが第2のバッテリー132に変更されると、電力の供給先を制御部140と、通信部117と、画像表示部20の右表示駆動部22及び左表示駆動部24とに制限する指示をバッテリー制御部135に通知する。バッテリー制御部135は、省電力制御部180からの指示に従って電源供給部137を制御し、電源供給部137が電力を供給する供給先を、制御部140と、通信部117と、画像表示部20の右表示駆動部22及び左表示駆動部24とに変更する。
バッテリー交換モードへの移行後も、通信部117には電力が供給されるため、通信部117は、バッテリー交換モードへの移行後も、接続状態にあるネットワークとの接続を維持する。通信部117は、バッテリー交換モードから通常動作モードに移行した際に、使用者の認証を行うことなく通信が開始できるように、バッテリー交換モードにおいてネットワークとの接続を維持する。このため、バッテリー交換モードから通常動作モードに復帰した後に、ネットワークに再接続するために、パスワード等の認証情報を再入力する等の操作を行う必要がない。従って、バッテリー交換による使用者の手間を軽減することができる。
また、通信部117が、例えば、無線LANによりネットワークに接続している場合、省電力制御部180は、バッテリー交換モードに移行した際に、通信部117の通信モードをパワーセーブモードに変更して、通信部117の消費電力を削減する。
さらに、通信部117が、通常動作モードにおいて、Bluetoothにより通信を行っている場合、省電力制御部180は、バッテリー交換モードに移行した際に、通信部117をBluetooth Low Energyによる通信に切り替えてもよい。
また、省電力制御部180は、RFIDや、Felica等の規格に準じた近距離無線通信が可能である場合に、バッテリー交換モードに移行した際に、通信部117を、無線LANによる通信から、近距離無線通信に切り替えてもよい。
Further, when the power saving control unit 180 shifts to the battery replacement mode, the power saving control unit 180 stores the system information in the storage unit 120. As described above, the system information is data for returning the head-mounted display device 100 to the normal operation mode before shifting to the battery replacement mode.
Further, when the system information is stored in the storage unit 120, the power saving control unit 180 outputs an instruction to switch the power source from the first battery 131 to the second battery 132 to the battery control unit 135. The battery control unit 135 changes the battery that supplies power from the first battery 131 to the second battery 132 in accordance with an instruction from the power saving control unit 180. Further, when the battery is changed to the second battery 132, the power saving control unit 180 changes the power supply destination to the control unit 140, the communication unit 117, the right display driving unit 22 and the left display of the image display unit 20. An instruction to limit to the drive unit 24 is notified to the battery control unit 135. The battery control unit 135 controls the power supply unit 137 in accordance with an instruction from the power saving control unit 180, and the control unit 140, the communication unit 117, and the image display unit 20 supply destinations to which the power supply unit 137 supplies power. The right display driving unit 22 and the left display driving unit 24 are changed.
Since power is supplied to the communication unit 117 even after the transition to the battery replacement mode, the communication unit 117 maintains the connection with the connected network even after the transition to the battery replacement mode. The communication unit 117 maintains a connection with the network in the battery replacement mode so that communication can be started without performing user authentication when the battery replacement mode is shifted to the normal operation mode. For this reason, after returning from the battery replacement mode to the normal operation mode, it is not necessary to perform an operation such as re-entering authentication information such as a password in order to reconnect to the network. Accordingly, it is possible to reduce the labor of the user due to battery replacement.
Further, when the communication unit 117 is connected to the network by, for example, a wireless LAN, the power saving control unit 180 changes the communication mode of the communication unit 117 to the power save mode when the battery replacement mode is entered. The power consumption of the communication unit 117 is reduced.
Furthermore, when the communication unit 117 performs communication by Bluetooth in the normal operation mode, the power saving control unit 180 may switch the communication unit 117 to communication by Bluetooth Low Energy when the battery replacement mode is entered. Good.
In addition, when the short-range wireless communication conforming to the standards such as RFID and Felica is possible, the power saving control unit 180 changes the communication unit 117 from the communication by the wireless LAN when shifting to the battery replacement mode. You may switch to near field communication.

省電力制御部180は、電源を第1のバッテリー131から第2のバッテリー132に切り替えた場合に、第1のバッテリー131の交換を検出する。すなわち、省電力制御部180は、第1のバッテリー131が取り外されたことを検出し、再び第1のバッテリー131が装着されたことを検出する。
省電力制御部180は、第1のバッテリー監視IC133により測定される第1のバッテリー131の端子電圧に基づいて、第1のバッテリー131が交換されたか否かを判定する。第1のバッテリー131とバッテリー制御部135との接続が解除されると、第1のバッテリー監視IC133により測定される第1のバッテリー131の端子電圧が、ローレベル又はハイインピーダンスとなる。省電力制御部180は、測定された第1のバッテリー131の端子電圧がローレベル又はハイインピーダンスとなることにより、第1のバッテリー131がバッテリー収容部122から取り外されたと判定する。この判定は、省電力制御部180が、バッテリー監視IC133が検出する電圧値と、予め設定された電圧の基準値とを比較し、その大小を判定することで行われる。
また、バッテリー収容部122に新たな第1のバッテリー131が収容され、第1のバッテリー131とバッテリー制御部135とが接続されると、第1のバッテリー監視IC133の測定する第1のバッテリー131の端子電圧が所定範囲の電圧となる。省電力制御部180は、第1のバッテリー監視IC133により測定される第1のバッテリー131の端子電圧が所定範囲の電圧となることにより、第1のバッテリー131が交換されたと判定する。ここで、省電力制御部180は、バッテリー監視IC133が検出する電圧値を、予め設定された電圧の基準値と比較し、その大小を判定する。
The power saving control unit 180 detects replacement of the first battery 131 when the power source is switched from the first battery 131 to the second battery 132. That is, the power saving control unit 180 detects that the first battery 131 is removed, and detects that the first battery 131 is attached again.
The power saving control unit 180 determines whether or not the first battery 131 has been replaced based on the terminal voltage of the first battery 131 measured by the first battery monitoring IC 133. When the connection between the first battery 131 and the battery control unit 135 is released, the terminal voltage of the first battery 131 measured by the first battery monitoring IC 133 becomes low level or high impedance. The power saving control unit 180 determines that the first battery 131 is removed from the battery housing unit 122 when the measured terminal voltage of the first battery 131 becomes low level or high impedance. This determination is performed by the power saving control unit 180 comparing the voltage value detected by the battery monitoring IC 133 with a preset reference value of the voltage and determining the magnitude thereof.
Further, when a new first battery 131 is accommodated in the battery accommodating portion 122 and the first battery 131 and the battery control portion 135 are connected, the first battery 131 measured by the first battery monitoring IC 133 is measured. The terminal voltage becomes a voltage within a predetermined range. The power saving control unit 180 determines that the first battery 131 has been replaced when the terminal voltage of the first battery 131 measured by the first battery monitoring IC 133 falls within a predetermined range. Here, the power saving control unit 180 compares the voltage value detected by the battery monitoring IC 133 with a reference value of a preset voltage, and determines its magnitude.

省電力制御部180は、第1のバッテリー131の交換を検出すると、第1のバッテリー監視IC133により算出される第1のバッテリー131の残容量に基づいて、交換された第1のバッテリー131が容量不足の状態にあるか否かを判定する。容量不足のバッテリーが交換されずに、再度バッテリー制御部135に接続された場合、頭部装着型表示装置100を通常動作モードに復帰させることができない。このため、省電力制御部180は、交換された第1のバッテリー131が容量不足の状態にあるか否かを判定する。
省電力制御部180は、第1のバッテリー131の残容量と、しきい値とを比較して、第1のバッテリー131が容量不足の状態にあるか否かを判定する。第1のバッテリー131が容量不足の状態にあると判定すると、省電力制御部180は、その旨を表示制御部170に通知する。表示制御部170は、第1のバッテリー131の交換を促す表示を画像表示部20に表示させる。また、交換後の第1のバッテリー131の残容量に基づく表示を画像表示部20に表示させてもよい。省電力制御部180は、交換後の第1のバッテリー131の残容量に基づいて頭部装着型表示装置100を駆動可能な時間を算出する。省電力制御部180は、算出した駆動可能な時間を表示制御部170に通知し、画像表示部20に表示させる。
When the power saving control unit 180 detects the replacement of the first battery 131, the capacity of the replaced first battery 131 is determined based on the remaining capacity of the first battery 131 calculated by the first battery monitoring IC 133. It is determined whether or not there is a shortage. If the battery with insufficient capacity is not replaced and connected to the battery control unit 135 again, the head-mounted display device 100 cannot be returned to the normal operation mode. Therefore, the power saving control unit 180 determines whether or not the replaced first battery 131 is in a state of insufficient capacity.
The power saving control unit 180 compares the remaining capacity of the first battery 131 with a threshold value, and determines whether or not the first battery 131 is in a state of insufficient capacity. When it is determined that the first battery 131 is in a state of insufficient capacity, the power saving control unit 180 notifies the display control unit 170 to that effect. The display control unit 170 causes the image display unit 20 to display a display that prompts replacement of the first battery 131. In addition, a display based on the remaining capacity of the first battery 131 after replacement may be displayed on the image display unit 20. The power saving control unit 180 calculates a time during which the head-mounted display device 100 can be driven based on the remaining capacity of the first battery 131 after replacement. The power saving control unit 180 notifies the display control unit 170 of the calculated drivable time and causes the image display unit 20 to display it.

また、省電力制御部180は、第1のバッテリー131が容量不足の状態にはないと判定した場合、電力を供給するバッテリーを第2のバッテリー132から第1のバッテリー131に変更するようにバッテリー制御部135に指示する。バッテリー制御部135は、省電力制御部180の指示に従って、バッテリーを第2のバッテリー132から第1のバッテリー131に変更する。また、省電力制御部180は、バッテリー制御部135に、頭部装着型表示装置100の各部に電力を供給するように指示する。バッテリー制御部135は、省電力制御部180の指示に従って、第1のバッテリー131の電力を、頭部装着型表示装置100の各部に供給するように電源供給部137を制御する。これにより、頭部装着型表示装置100の動作モードが、バッテリー交換モードから通常動作モードに変更される。
また、省電力制御部180は、記憶部120に記憶させたシステム情報をRAM等のワークメモリーに展開して復元する。その後、制御部140は、RAMに展開されたデータに基づく処理を実行する。これにより、頭部装着型表示装置100が、バッテリー交換モードへの移行前の状態に戻される。
Further, when the power saving control unit 180 determines that the first battery 131 is not in a state of insufficient capacity, the battery that supplies power is changed from the second battery 132 to the first battery 131. The controller 135 is instructed. The battery control unit 135 changes the battery from the second battery 132 to the first battery 131 in accordance with an instruction from the power saving control unit 180. In addition, the power saving control unit 180 instructs the battery control unit 135 to supply power to each unit of the head-mounted display device 100. The battery control unit 135 controls the power supply unit 137 to supply the power of the first battery 131 to each unit of the head-mounted display device 100 in accordance with an instruction from the power saving control unit 180. Thereby, the operation mode of the head-mounted display device 100 is changed from the battery exchange mode to the normal operation mode.
Further, the power saving control unit 180 restores the system information stored in the storage unit 120 by expanding it in a work memory such as a RAM. Thereafter, the control unit 140 executes processing based on the data expanded in the RAM. Thereby, the head-mounted display device 100 is returned to the state before the transition to the battery replacement mode.

また、省電力制御部180は、第1のバッテリー131が容量不足の状態にはないと判定すると、第2のバッテリー132の残容量を算出するようにバッテリー制御部135に指示する。バッテリー制御部135は、第2のバッテリー監視IC134に、第2のバッテリー132の残容量を算出させ、算出された第2のバッテリー132の残容量の情報を省電力制御部180に出力する。省電力制御部180は、入力された第2のバッテリー132の残容量に基づいて、第2のバッテリー132が満充電の状態にあるか否かを判定する。第2のバッテリー132の容量が満充電の状態ではなく、充電可能な状態にあると判定すると、省電力制御部180は、第1のバッテリー131により第2のバッテリー132を充電するようにバッテリー制御部135に指示する。   When the power saving control unit 180 determines that the first battery 131 is not in a capacity shortage state, the power saving control unit 180 instructs the battery control unit 135 to calculate the remaining capacity of the second battery 132. The battery control unit 135 causes the second battery monitoring IC 134 to calculate the remaining capacity of the second battery 132, and outputs the calculated remaining capacity information of the second battery 132 to the power saving control unit 180. The power saving control unit 180 determines whether or not the second battery 132 is fully charged based on the input remaining capacity of the second battery 132. When it is determined that the capacity of the second battery 132 is not fully charged but is in a chargeable state, the power saving control unit 180 controls the battery so that the first battery 131 charges the second battery 132. The unit 135 is instructed.

音声処理部190は、コンテンツに含まれる音声信号を取得し、取得した音声信号を増幅して、連結部材46に接続された右イヤホン32内のスピーカー(図示略)及び左イヤホン34内のスピーカー(図示略)に対して供給する。なお、例えば、Dolby(登録商標)システムを採用した場合、音声信号に対する処理がなされ、右イヤホン32及び左イヤホン34のそれぞれから、例えば周波数等が変えられた異なる音が出力される。   The audio processing unit 190 acquires an audio signal included in the content, amplifies the acquired audio signal, and a speaker (not shown) in the right earphone 32 and a speaker in the left earphone 34 (not shown) connected to the connecting member 46. (Not shown). For example, when the Dolby (registered trademark) system is adopted, processing on the audio signal is performed, and different sounds with different frequencies or the like are output from the right earphone 32 and the left earphone 34, respectively.

画像表示部20は、インターフェイス25と、右表示駆動部22と、左表示駆動部24と、右光学像表示部26としての右導光板261と、左光学像表示部28としての左導光板262と、カメラ61と、振動センサー65と、9軸センサー66とを備えている。   The image display unit 20 includes an interface 25, a right display drive unit 22, a left display drive unit 24, a right light guide plate 261 as a right optical image display unit 26, and a left light guide plate 262 as a left optical image display unit 28. A camera 61, a vibration sensor 65, and a nine-axis sensor 66.

振動センサー65は、加速度センサーを利用して構成され、図1に示すように画像表示部20の内部に配置される。図1の例では右保持部21において、右光学像表示部26の端部ERの近傍に内蔵される。振動センサー65は、使用者が端部ERを叩く操作(ノック操作)を行った場合に、この操作による振動を検出して、検出結果を制御部140に出力する。この振動センサー65の検出結果により、制御部140は、使用者によるノック操作を検出する。   The vibration sensor 65 is configured using an acceleration sensor, and is arranged inside the image display unit 20 as shown in FIG. In the example of FIG. 1, the right holding unit 21 is built in the vicinity of the end ER of the right optical image display unit 26. When the user performs an operation of hitting the end ER (knock operation), the vibration sensor 65 detects vibration caused by this operation and outputs the detection result to the control unit 140. Based on the detection result of the vibration sensor 65, the control unit 140 detects a knocking operation by the user.

9軸センサー66は、加速度(3軸)、角速度(3軸)、地磁気(3軸)を検出するモーションセンサーである。9軸センサー66は、画像表示部20に設けられているため、画像表示部20が使用者の頭部に装着されているとき、制御部140は、9軸センサー66の検出値に基づいて使用者の頭部の動きを検出できる。検出された使用者の頭部の動きから画像表示部20の向きがわかるため、制御部140は、使用者の視線方向を推定できる。   The 9-axis sensor 66 is a motion sensor that detects acceleration (3 axes), angular velocity (3 axes), and geomagnetism (3 axes). Since the 9-axis sensor 66 is provided in the image display unit 20, the control unit 140 is used based on the detection value of the 9-axis sensor 66 when the image display unit 20 is worn on the user's head. The movement of the person's head can be detected. Since the orientation of the image display unit 20 is known from the detected movement of the user's head, the control unit 140 can estimate the user's line-of-sight direction.

インターフェイス25は、右コード42と左コード44とが接続されるコネクターを備える。インターフェイス25は、送信部51から送信されるクロック信号PCLK、垂直同期信号VSync、水平同期信号HSync、画像データDataを、対応する受信部(Rx)53、54に出力する。また、インターフェイス25は、表示制御部170から送信される制御信号を、対応する受信部53、54、右バックライト制御部201又は左バックライト制御部202に出力する。
また、インターフェイス25は、カメラ61、振動センサー65及び9軸センサー66のインターフェイスである。振動センサー65による振動の検出結果や、9軸センサー66による加速度(3軸)、角速度(3軸)、地磁気(3軸)の検出結果は、インターフェイス25を介して制御装置10の制御部140に送られる。
The interface 25 includes a connector to which the right cord 42 and the left cord 44 are connected. The interface 25 outputs the clock signal PCLK, the vertical synchronization signal VSync, the horizontal synchronization signal HSync, and the image data Data transmitted from the transmission unit 51 to the corresponding reception units (Rx) 53 and 54. Further, the interface 25 outputs a control signal transmitted from the display control unit 170 to the corresponding reception units 53 and 54, the right backlight control unit 201, or the left backlight control unit 202.
The interface 25 is an interface of the camera 61, the vibration sensor 65, and the 9-axis sensor 66. The detection result of vibration by the vibration sensor 65 and the detection result of acceleration (three axes), angular velocity (three axes), and geomagnetism (three axes) by the nine-axis sensor 66 are sent to the control unit 140 of the control device 10 via the interface 25. Sent.

右表示駆動部22は、受信部53と、光源として機能する右バックライト(BL)制御部201及び右バックライト(BL)221と、表示素子として機能する右LCD制御部211及び右LCD241と、右投写光学系251とを備える。右バックライト制御部201と右バックライト221とは、光源として機能する。右LCD制御部211と右LCD241とは、表示素子として機能する。なお、右バックライト制御部201と、右LCD制御部211と、右バックライト221と、右LCD241とを総称して「画像光生成部」とも呼ぶ。   The right display driving unit 22 includes a receiving unit 53, a right backlight (BL) control unit 201 and a right backlight (BL) 221 that function as light sources, a right LCD control unit 211 and a right LCD 241 that function as display elements, A right projection optical system 251. The right backlight control unit 201 and the right backlight 221 function as a light source. The right LCD control unit 211 and the right LCD 241 function as display elements. The right backlight control unit 201, the right LCD control unit 211, the right backlight 221 and the right LCD 241 are also collectively referred to as “image light generation unit”.

受信部53は、制御装置10と画像表示部20との間におけるシリアル伝送のためのレシーバーとして機能する。右バックライト制御部201は、入力された制御信号に基づいて、右バックライト221を駆動する。右バックライト221は、例えば、LEDやエレクトロルミネセンス(EL)等の発光体である。右LCD制御部211は、受信部53を介して入力されたクロック信号PCLKと、垂直同期信号VSyncと、水平同期信号HSyncと、右眼用画像データDataと、に基づいて、右LCD241を駆動する。右LCD241は、複数の画素をマトリクス状に配置した透過型液晶パネルである。   The receiving unit 53 functions as a receiver for serial transmission between the control device 10 and the image display unit 20. The right backlight control unit 201 drives the right backlight 221 based on the input control signal. The right backlight 221 is a light emitter such as an LED or electroluminescence (EL). The right LCD control unit 211 drives the right LCD 241 based on the clock signal PCLK, the vertical synchronization signal VSync, the horizontal synchronization signal HSync, and the right eye image data Data input via the reception unit 53. . The right LCD 241 is a transmissive liquid crystal panel in which a plurality of pixels are arranged in a matrix.

右投写光学系251は、右LCD241から射出された画像光を並行状態の光束にするコリメートレンズによって構成される。右光学像表示部26としての右導光板261は、右投写光学系251から出力された画像光を、所定の光路に沿って反射させつつ使用者の右眼REに導く。   The right projection optical system 251 is configured by a collimator lens that converts the image light emitted from the right LCD 241 to light beams in a parallel state. The right light guide plate 261 as the right optical image display unit 26 guides the image light output from the right projection optical system 251 to the right eye RE of the user while reflecting the image light along a predetermined optical path.

左表示駆動部24は、右表示駆動部22と同様の構成を有している。左表示駆動部24は、受信部54と、光源として機能する左バックライト(BL)制御部202及び左バックライト(BL)222と、表示素子として機能する左LCD制御部212及び左LCD242と、左投写光学系252と、を備える。左バックライト制御部202と左バックライト222とは、光源として機能する。左LCD制御部212と左LCD242とは、表示素子として機能する。また、左投写光学系252は、左LCD242から射出された画像光を並行状態の光束にするコリメートレンズによって構成される。左光学像表示部28としての左導光板262は、左投写光学系252から出力された画像光を、所定の光路に沿って反射させつつ使用者の左眼LEに導く。   The left display drive unit 24 has the same configuration as the right display drive unit 22. The left display driving unit 24 includes a receiving unit 54, a left backlight (BL) control unit 202 and a left backlight (BL) 222 that function as light sources, a left LCD control unit 212 and a left LCD 242 that function as display elements, A left projection optical system 252. The left backlight control unit 202 and the left backlight 222 function as a light source. The left LCD control unit 212 and the left LCD 242 function as display elements. The left projection optical system 252 is configured by a collimating lens that converts the image light emitted from the left LCD 242 into a light beam in a parallel state. The left light guide plate 262 as the left optical image display unit 28 guides the image light output from the left projection optical system 252 to the left eye LE of the user while reflecting the image light along a predetermined optical path.

図4は、制御部140の処理手順を示すフローチャートである。
省電力制御部180は、バッテリー制御部135から入力される第1のバッテリー131の残容量が規定値以下であるか否かを判定する(ステップS1)。第1のバッテリー131の残容量は、第1のバッテリー監視IC133により算出され、バッテリー制御部135を介して省電力制御部180に入力される。
ステップS1の判定が肯定判定の場合(ステップS1/YES)、省電力制御部180は、バッテリー交換モードを実行する(ステップS3)。また、ステップS1の判定が否定判定の場合(ステップS1/NO)、省電力制御部180は、開閉検出部124の出力信号に基づき、バッテリー収容部122の蓋123の開閉を検出する。開閉検出部124は、蓋123の開放を検出すると、蓋123が開放されたことを示す信号を制御部140に出力する。省電力制御部180は、開閉検出部124から出力される信号を入力して、蓋123が開放されているか否かを判定する。省電力制御部180は、蓋123が開放されていると判定すると(ステップS2/YES)、バッテリー交換モードを実行する(ステップS3)。また、省電力制御部180は、蓋123が閉じていると判定すると(ステップS2/NO)、ステップS1の判定に戻り、第1のバッテリー131の残容量の測定結果がバッテリー制御部135から入力されるまで待機する。
なお、本実施形態では、図4のステップS2に示すように、省電力制御部180がフロー制御により開閉検出部124の入力信号を検出する動作を説明するが、これは便宜的な記載であって、本発明はフロー制御に限定されない。例えば、開閉検出部124が蓋123の開放を検出した場合に出力する信号(電圧値)が、制御部140に、割り込み信号として入力してもよい。この場合、制御部140(省電力制御部180)は、開閉検出部124の入力に対し割り込み制御を実行し、他の処理を実行中であっても、ステップS2で肯定判定してもよい。
FIG. 4 is a flowchart showing a processing procedure of the control unit 140.
The power saving control unit 180 determines whether or not the remaining capacity of the first battery 131 input from the battery control unit 135 is equal to or less than a specified value (step S1). The remaining capacity of the first battery 131 is calculated by the first battery monitoring IC 133 and input to the power saving control unit 180 via the battery control unit 135.
When the determination in step S1 is affirmative (step S1 / YES), the power saving control unit 180 executes the battery replacement mode (step S3). When the determination in step S1 is negative (step S1 / NO), the power saving control unit 180 detects opening / closing of the lid 123 of the battery housing unit 122 based on the output signal of the opening / closing detection unit 124. When the opening / closing detection unit 124 detects the opening of the lid 123, the opening / closing detection unit 124 outputs a signal indicating that the lid 123 has been opened to the control unit 140. The power saving control unit 180 inputs a signal output from the open / close detection unit 124 and determines whether or not the lid 123 is opened. When the power saving control unit 180 determines that the lid 123 is opened (step S2 / YES), the battery saving mode is executed (step S3). When the power saving control unit 180 determines that the lid 123 is closed (step S2 / NO), the power saving control unit 180 returns to the determination of step S1, and the measurement result of the remaining capacity of the first battery 131 is input from the battery control unit 135. Wait until
In the present embodiment, as shown in step S2 of FIG. 4, the operation in which the power saving control unit 180 detects the input signal of the open / close detection unit 124 by flow control will be described, but this is a convenient description. Thus, the present invention is not limited to flow control. For example, a signal (voltage value) output when the open / close detection unit 124 detects the opening of the lid 123 may be input to the control unit 140 as an interrupt signal. In this case, the control unit 140 (power saving control unit 180) executes interrupt control for the input of the open / close detection unit 124, and may make an affirmative determination in step S2 even if other processing is being performed.

図5及び図6は、バッテリー交換モードの詳細手順を示すフローチャートである。
省電力制御部180は、バッテリー交換モードに移行すると(ステップS11)、その旨を表示制御部170に通知する。通知を受けた表示制御部170は、所定のメッセージを画像表示部20に表示させる(ステップS12)。このメッセージは、バッテリー収容部122の蓋123が開放された状態であることを通知するメッセージである。また、表示制御部170は、上記のメッセージだけでなく、他のメッセージを表示してもよい。例えば、バッテリー交換が可能な状態になるまで第1のバッテリー131の交換を待機するように指示するメッセージを画像表示部20に表示させてもよい。
5 and 6 are flowcharts showing the detailed procedure of the battery replacement mode.
When the power saving control unit 180 shifts to the battery replacement mode (step S11), the power saving control unit 180 notifies the display control unit 170 to that effect. Receiving the notification, the display control unit 170 displays a predetermined message on the image display unit 20 (step S12). This message is a message notifying that the cover 123 of the battery housing part 122 is in an open state. Further, the display control unit 170 may display not only the above message but also other messages. For example, a message instructing to wait for the replacement of the first battery 131 until the battery can be replaced may be displayed on the image display unit 20.

次に、省電力制御部180は、システム情報を記憶部120に記憶させる(ステップS13)。システム情報には、例えば、外部機器OAから取得して、画像表示部20に表示させていた表示画像データの処理状況を示すデータや、表示画像データの画像表示部20への表示を再開する際に必要なデータが含まれる。   Next, the power saving control unit 180 stores the system information in the storage unit 120 (step S13). The system information includes, for example, data indicating the processing status of the display image data acquired from the external device OA and displayed on the image display unit 20 or when the display of the display image data on the image display unit 20 is resumed. Contains the necessary data.

次に、省電力制御部180は、電力を供給するバッテリー、すなわち電源を第1のバッテリー131から第2のバッテリー132に変更する指示をバッテリー制御部135に出力する。バッテリー制御部135は、省電力制御部180の指示に従って、電力を供給するバッテリーを第1のバッテリー131から第2のバッテリー132に切り替える(ステップS14)。   Next, the power saving control unit 180 outputs to the battery control unit 135 an instruction to change the power supply battery, that is, the power source from the first battery 131 to the second battery 132. The battery control unit 135 switches the battery that supplies power from the first battery 131 to the second battery 132 in accordance with an instruction from the power saving control unit 180 (step S14).

また、省電力制御部180は、電力の供給先を、制御部140と、通信部117と、画像表示部20の右表示駆動部22及び左表示駆動部24とに制限するようにバッテリー制御部135に指示する。バッテリー制御部135は、電源供給部137を制御して、制御装置10への電力供給を、制御部140と、通信部117と、画像表示部20の右表示駆動部22及び左表示駆動部24とに制限する(ステップS15)。バッテリー交換モードへの移行後も、通信部117に電力が供給されるため、例えば、通信部117がネットワーク接続している場合には、このネットワークとの接続を維持することができる。   Further, the power saving control unit 180 limits the supply destination of power to the control unit 140, the communication unit 117, and the right display driving unit 22 and the left display driving unit 24 of the image display unit 20. 135 is instructed. The battery control unit 135 controls the power supply unit 137 to supply power to the control device 10. The control unit 140, the communication unit 117, the right display drive unit 22 and the left display drive unit 24 of the image display unit 20. (Step S15). Since power is supplied to the communication unit 117 even after the transition to the battery replacement mode, for example, when the communication unit 117 is connected to the network, the connection with the network can be maintained.

次に、省電力制御部180は、表示制御部170に、画像表示部20の表示モードを、消費電力を低減するモードに変更するように指示し、表示制御部170は、画像表示部20の表示モードを変更する(ステップS16)。例えば、表示制御部170は、制御信号により、右表示駆動部22又は左表示駆動部24の表示を停止させる。また、省電力制御部180は、バッテリー制御部135により右表示駆動部22、及び左表示駆動部24のいずれかに対する電力供給を停止させることにより、表示を停止させてもよい。これにより、右表示駆動部22、及び左表示駆動部24のいずれか一方のみが表示を行う状態となる、消費電力量が、両方で表示する場合に比べて低減される。また、表示制御部170は、制御信号により、右バックライト221と左バックライト222との輝度を通常動作モードのときよりも低い輝度に設定してもよい。さらに、表示制御部170は、動作モードがバッテリー交換モードに変更された場合に、制御信号により、右LCD241及び左LCD242の表示領域を通常動作モードときの表示領域よりも縮小させてもよい。   Next, the power saving control unit 180 instructs the display control unit 170 to change the display mode of the image display unit 20 to a mode for reducing power consumption, and the display control unit 170 controls the display of the image display unit 20. The display mode is changed (step S16). For example, the display control unit 170 stops the display of the right display drive unit 22 or the left display drive unit 24 according to the control signal. Further, the power saving control unit 180 may stop the display by causing the battery control unit 135 to stop power supply to either the right display driving unit 22 or the left display driving unit 24. Thereby, only the right display drive part 22 and the left display drive part 24 will be in the state which displays, The power consumption amount is reduced compared with the case where it displays by both. Further, the display control unit 170 may set the luminance of the right backlight 221 and the left backlight 222 to a lower luminance than that in the normal operation mode by the control signal. Further, when the operation mode is changed to the battery replacement mode, the display control unit 170 may reduce the display area of the right LCD 241 and the left LCD 242 with the control signal as compared with the display area in the normal operation mode.

また、省電力制御部180は、バッテリー交換モードに移行した場合に、画像処理部160に、画像信号のフレームレートを、通常動作モードのときよりも低くするように指示してもよい。省電力制御部180から指示を受けた画像処理部160は、画像信号のフレームレートが、通常動作モードのときのフレームレートよりも低くなるように画像信号、垂直同期信号(VSync)、水平同期信号(HSync)の変換を行う。画像処理部160によりフレームレートを変換された画像信号は、1フレームごとに記憶部120内のDRAMに格納される。画像処理部160は、生成されたクロック信号PCLK、垂直同期信号VSync、水平同期信号HSync、記憶部120内のDRAMに格納された画像データDataのそれぞれを、送信部51、52を介して送信する。これにより、画像表示部20には、通常動作モードのときよりもフレームレートの低い画像が表示される。   Further, the power saving control unit 180 may instruct the image processing unit 160 to lower the frame rate of the image signal than in the normal operation mode when the battery switching mode is entered. Upon receiving an instruction from the power saving control unit 180, the image processing unit 160 receives the image signal, the vertical synchronization signal (VSync), and the horizontal synchronization signal so that the frame rate of the image signal is lower than the frame rate in the normal operation mode. (HSync) conversion is performed. The image signal whose frame rate has been converted by the image processing unit 160 is stored in the DRAM in the storage unit 120 for each frame. The image processing unit 160 transmits the generated clock signal PCLK, vertical synchronization signal VSync, horizontal synchronization signal HSync, and image data Data stored in the DRAM in the storage unit 120 via the transmission units 51 and 52, respectively. . As a result, an image having a lower frame rate than that in the normal operation mode is displayed on the image display unit 20.

また、表示制御部170は、省電力制御部180から通知されるモード番号に従って、画像表示部20の表示モードを変更してもよい。省電力制御部180は、画像表示部20の表示モードを指定するモード番号を、第2のバッテリー132の残容量に応じて選択し、選択したモード番号を表示制御部170に通知する。
表示制御部170は、省電力制御部180から、第2のバッテリー132の残容量が80%以下に低下したことを示すモード番号「1」が通知されると、右バックライト221と左バックライト222との輝度を通常動作モードのときよりも低下させる。また、表示制御部170は、省電力制御部180から、第2のバッテリー132の残容量が60%以下に低下したことを示すモード番号「2」が通知されると、右LCD241及び左LCD242の表示領域を通常動作モードときの表示領域よりも縮小させる。また、表示制御部170は、省電力制御部180から、第2のバッテリー132の残容量が40%以下に低下したことを示すモード番号「3」が通知されると、右表示駆動部22又は左表示駆動部24の表示を停止させる。
In addition, the display control unit 170 may change the display mode of the image display unit 20 according to the mode number notified from the power saving control unit 180. The power saving control unit 180 selects a mode number for designating the display mode of the image display unit 20 according to the remaining capacity of the second battery 132 and notifies the display control unit 170 of the selected mode number.
When the display control unit 170 is notified of the mode number “1” indicating that the remaining capacity of the second battery 132 has decreased to 80% or less from the power saving control unit 180, the display control unit 170 and the left backlight 221. The brightness with 222 is lowered as compared with the normal operation mode. Further, when the display control unit 170 is notified by the power saving control unit 180 of the mode number “2” indicating that the remaining capacity of the second battery 132 has decreased to 60% or less, The display area is reduced more than the display area in the normal operation mode. Further, when the display control unit 170 is notified of the mode number “3” indicating that the remaining capacity of the second battery 132 has decreased to 40% or less from the power saving control unit 180, the display control unit 170 or the right display driving unit 22 or The display of the left display drive unit 24 is stopped.

次に、省電力制御部180は、画像表示部20に、バッテリー交換を促すメッセージを表示させるように表示制御部170に指示する。右表示駆動部22と左表示駆動部24とのいずれか一方の表示を停止させている場合、表示制御部170は、画像の表示を停止させていない表示駆動部22(24)に、バッテリー交換を促すメッセージを表示させる(ステップS17)。   Next, the power saving control unit 180 instructs the display control unit 170 to display a message for prompting battery replacement on the image display unit 20. When the display of either one of the right display drive unit 22 and the left display drive unit 24 is stopped, the display control unit 170 replaces the battery with the display drive unit 22 (24) that has not stopped displaying images. A message for prompting is displayed (step S17).

次に、省電力制御部180は、第1のバッテリー131が交換されたか否かを判定する(ステップS18)。省電力制御部180は、第1のバッテリー監視IC133により測定され、バッテリー制御部135から入力される第1のバッテリー131の端子電圧に基づいて、第1のバッテリー131が交換されたか否かを判定する(ステップS18)。省電力制御部180は、第1のバッテリー131が交換されていないと判定する場合(ステップS18/NO)、第2のバッテリー132の残容量が規定値以下であるか否かを判定する(ステップS19)。第2のバッテリー132の残容量は、第2のバッテリー監視IC134により算出され、バッテリー制御部135を介して制御部140に入力される。省電力制御部180は、バッテリー制御部135から入力される第2のバッテリー132の残容量と、予め設定された規定値とを比較して、第2のバッテリー132の残容量が規定値以下であるか否かを判定する(ステップS19)。第2のバッテリー132の残容量が規定値以下ではない場合(ステップS19/NO)、省電力制御部180は、ステップS17の判定に戻る。また、第2のバッテリー132の残容量が規定値以下である場合(ステップS19/YES)、省電力制御部180は、終了シーケンスを実行する(ステップS20)。省電力制御部180は、終了シーケンスを開始すると、バッテリー残容量、日時等の制御装置10の動作状態に関するログを記憶部120に記憶させ、OS150をシャットダウンさせる。   Next, the power saving control unit 180 determines whether or not the first battery 131 has been replaced (step S18). The power saving control unit 180 determines whether or not the first battery 131 has been replaced based on the terminal voltage of the first battery 131 measured by the first battery monitoring IC 133 and input from the battery control unit 135. (Step S18). When determining that the first battery 131 has not been replaced (step S18 / NO), the power saving control unit 180 determines whether or not the remaining capacity of the second battery 132 is equal to or less than a specified value (step S18). S19). The remaining capacity of the second battery 132 is calculated by the second battery monitoring IC 134 and input to the control unit 140 via the battery control unit 135. The power saving control unit 180 compares the remaining capacity of the second battery 132 input from the battery control unit 135 with a preset specified value, and the remaining capacity of the second battery 132 is less than the specified value. It is determined whether or not there is (step S19). When the remaining capacity of the second battery 132 is not less than the specified value (step S19 / NO), the power saving control unit 180 returns to the determination of step S17. When the remaining capacity of the second battery 132 is equal to or less than the specified value (step S19 / YES), the power saving control unit 180 executes an end sequence (step S20). When the end sequence is started, the power saving control unit 180 causes the storage unit 120 to store a log regarding the operation state of the control device 10 such as the remaining battery capacity and the date and time, and causes the OS 150 to shut down.

省電力制御部180は、第1のバッテリー131が交換されたと判定すると(ステップS18/YES)、交換された第1のバッテリー131の残容量をバッテリー制御部135から入力する。この第1のバッテリー131の残容量は、第1のバッテリー監視IC133で算出される。省電力制御部180は、入力された第1のバッテリー131の残容量と予め設定された規定値とを比較して、第1のバッテリー131の残容量が規定値以上であるか否かを判定する(図6のステップS31)。省電力制御部180は、第1のバッテリー131の残容量が規定値以上であると判定すると(ステップS31/YES)、電力を供給するバッテリーを第2のバッテリー132から第1のバッテリー131に切り替えるようにバッテリー制御部135に指示する。バッテリー制御部135は、省電力制御部180からの指示により、電力を供給するバッテリー、すなわち電源を第2のバッテリー132から第1のバッテリー131に変更する(ステップS36)。
省電力制御部180は、ステップS13で記憶部120に記憶させたシステム情報をRAM等のワークメモリーに展開して復元する(ステップS37)。その後、制御部140は、RAMに展開されたデータに基づく処理を実行する。これにより、頭部装着型表示装置100が、バッテリー交換モードへの移行前の状態に戻る。
When determining that the first battery 131 has been replaced (step S18 / YES), the power saving control unit 180 inputs the remaining capacity of the replaced first battery 131 from the battery control unit 135. The remaining capacity of the first battery 131 is calculated by the first battery monitoring IC 133. The power saving control unit 180 compares the input remaining capacity of the first battery 131 with a preset specified value, and determines whether or not the remaining capacity of the first battery 131 is greater than or equal to the specified value. (Step S31 in FIG. 6). When the power saving control unit 180 determines that the remaining capacity of the first battery 131 is greater than or equal to the specified value (step S31 / YES), the battery that supplies power is switched from the second battery 132 to the first battery 131. The battery control unit 135 is instructed as follows. In response to an instruction from the power saving control unit 180, the battery control unit 135 changes the battery that supplies power, that is, the power source from the second battery 132 to the first battery 131 (step S36).
The power saving control unit 180 expands and restores the system information stored in the storage unit 120 in step S13 to a work memory such as a RAM (step S37). Thereafter, the control unit 140 executes processing based on the data expanded in the RAM. As a result, the head-mounted display device 100 returns to the state before the transition to the battery replacement mode.

また、省電力制御部180は、第1のバッテリー131の残容量が規定値よりも少ないと判定すると(ステップS31/NO)、表示制御部170を制御して、メッセージを画像表示部20に表示させる(ステップS32)。このメッセージは、第1のバッテリー131のバッテリー残容量が不足している旨のメッセージである。ここで、表示制御部170は、右表示駆動部22と左表示駆動部24とのいずれか一方の表示を停止させている場合には、他方にメッセージを表示させる。   When the power saving control unit 180 determines that the remaining capacity of the first battery 131 is less than the specified value (step S31 / NO), the power saving control unit 180 controls the display control unit 170 to display a message on the image display unit 20. (Step S32). This message is a message indicating that the remaining battery capacity of the first battery 131 is insufficient. Here, when the display of either one of the right display drive unit 22 and the left display drive unit 24 is stopped, the display control unit 170 displays a message on the other.

次に、省電力制御部180は、第1のバッテリー131が交換されたか否かを判定する(ステップS33)。ここで、省電力制御部180は、ステップS18と同様に、バッテリー制御部135から入力される第1のバッテリー131の端子電圧に基づいて、第1のバッテリー131が交換されたか否かを判定する。第1のバッテリー131が交換されたと判定する場合(ステップS33/YES)、省電力制御部180は、ステップS31に戻り、第1のバッテリー131の残容量が規定値以上であるか否かを判定する(ステップS31)。   Next, the power saving control unit 180 determines whether or not the first battery 131 has been replaced (step S33). Here, the power saving control unit 180 determines whether or not the first battery 131 has been replaced based on the terminal voltage of the first battery 131 input from the battery control unit 135, as in step S18. . When it is determined that the first battery 131 has been replaced (step S33 / YES), the power saving control unit 180 returns to step S31 and determines whether or not the remaining capacity of the first battery 131 is greater than or equal to a specified value. (Step S31).

また、第1のバッテリー131が交換されていないと判定する場合(ステップS33/NO)、省電力制御部180は、第2のバッテリー132の残容量が規定値以下であるか否かを判定する(ステップS34)。ここで、省電力制御部180は、バッテリー制御部135から入力される第2のバッテリー132の残容量と、予め設定された規定値とを比較して、第2のバッテリー132の残容量が規定値以下であるか否かを判定する。第2のバッテリー132の残容量が規定値以下ではない場合(ステップS34/NO)、省電力制御部180は、ステップS34の判定に戻る。また、第2のバッテリー132の残容量が規定値以下である場合(ステップS34/YES)、省電力制御部180は、終了シーケンスを実行する(ステップS35)。省電力制御部180は、終了シーケンスを開始すると、バッテリー残容量、日時等の制御装置10の動作状態に関するログを記憶部120に記憶させ、OS150をシャットダウンさせる。   When determining that the first battery 131 has not been replaced (step S33 / NO), the power saving control unit 180 determines whether or not the remaining capacity of the second battery 132 is equal to or less than a specified value. (Step S34). Here, the power saving control unit 180 compares the remaining capacity of the second battery 132 input from the battery control unit 135 with a predetermined value set in advance, and the remaining capacity of the second battery 132 is defined. It is determined whether or not it is less than or equal to the value. When the remaining capacity of the second battery 132 is not less than the specified value (step S34 / NO), the power saving control unit 180 returns to the determination of step S34. When the remaining capacity of the second battery 132 is equal to or less than the specified value (step S34 / YES), the power saving control unit 180 executes an end sequence (step S35). When the end sequence is started, the power saving control unit 180 causes the storage unit 120 to store a log regarding the operation state of the control device 10 such as the remaining battery capacity and the date and time, and causes the OS 150 to shut down.

なお、ステップS1において、第1のバッテリー131の残容量が規定値よりも多く、誤って蓋123が開放された場合の対策として、蓋123が閉まったときに、ステップS31に移行してもよい。この場合、省電力制御部180で、第1のバッテリー131の残容量の判定を行うとよい。   In step S1, when the remaining capacity of the first battery 131 is larger than the specified value and the lid 123 is accidentally opened, the process may proceed to step S31 when the lid 123 is closed. . In this case, the power saving control unit 180 may determine the remaining capacity of the first battery 131.

[第2実施形態]
図7は、本実施形態の通信システム1のシステム構成を示す概略構成図である。通信システム1は、複数の頭部装着型表示装置100を備えた表示システム2を、通信ネットワーク4を介してサーバー5に接続したシステムである。
図1では、表示システム2が備える複数の頭部装着型表示装置100を、それぞれ、頭部装着型表示装置100A、100Bとする。以下では、頭部装着型表示装置100A、100Bを区別する必要がない場合、頭部装着型表示装置100と記載する。
[Second Embodiment]
FIG. 7 is a schematic configuration diagram showing a system configuration of the communication system 1 of the present embodiment. The communication system 1 is a system in which a display system 2 including a plurality of head-mounted display devices 100 is connected to a server 5 via a communication network 4.
In FIG. 1, a plurality of head-mounted display devices 100 included in the display system 2 are referred to as head-mounted display devices 100A and 100B, respectively. Hereinafter, when it is not necessary to distinguish between the head-mounted display devices 100 </ b> A and 100 </ b> B, they are referred to as a head-mounted display device 100.

通信ネットワーク4は、公衆回線網、専用線、携帯電話回線を含む無線通信回線、及びこれらの回線のバックボーン通信回線等、各種の通信回線又はその組合せで実現され、その具体的構成は限定されない。通信ネットワーク4は、遠隔地を接続できる広域通信回線網であってもよいし、特定の施設や建物内に敷設されたLAN(Local Area Network)であってもよい。また、通信ネットワーク4は、上記各種通信回線を接続するサーバー装置、ゲートウェイ装置、ルーター装置等のネットワーク機器を含んでもよい。また、通信ネットワーク4が複数の通信回線で構成されてもよい。   The communication network 4 is realized by various communication lines such as a public line network, a dedicated line, a wireless communication line including a mobile phone line, and a backbone communication line of these lines, or a combination thereof, and its specific configuration is not limited. The communication network 4 may be a wide area communication line network that can connect remote locations, or may be a LAN (Local Area Network) laid in a specific facility or building. The communication network 4 may include network devices such as a server device, a gateway device, and a router device that connect the various communication lines. Further, the communication network 4 may be composed of a plurality of communication lines.

表示システム2は、建物内等に設置されるLAN等を利用して構成される。表示システム2は、無線通信を行う無線アクセスポイント3と、複数の頭部装着型表示装置100A、100Bとを備える。無線アクセスポイント3は、アクセスポイントやルーター等の通信装置であり、頭部装着型表示装置100Aと頭部装着型表示装置100Bとの間のデータ通信、及び頭部装着型表示装置100A、100Bと通信ネットワーク4とのデータ通信を中継する。   The display system 2 is configured using a LAN or the like installed in a building or the like. The display system 2 includes a wireless access point 3 that performs wireless communication, and a plurality of head-mounted display devices 100A and 100B. The wireless access point 3 is a communication device such as an access point or a router, and performs data communication between the head-mounted display device 100A and the head-mounted display device 100B, and the head-mounted display devices 100A and 100B. Relay data communication with the communication network 4.

頭部装着型表示装置100Aは、無線アクセスポイント3を介して他の頭部装着型表示装置100Bとのデータ通信を実行できる。また、頭部装着型表示装置100A、100Bは、無線アクセスポイント3を介して、サーバー5との間でデータ通信を実行する。なお、それぞれの頭部装着型表示装置100Aは、他の頭部装着型表示装置100Bとの間で、例えばアドホックモードで直接、無線通信を実行してもよい。また、有線の通信回線により頭部装着型表示装置100A、100Bが接続されてもよい。すなわち、表示システム2は、頭部装着型表示装置100Aが頭部装着型表示装置100Bと通信可能であれば、その構成は特に限定されない。また、通信システム1は、表示システム2が備える頭部装着型表示装置100A、100Bと、サーバー5との通信が可能な構成であればよい。   The head-mounted display device 100 </ b> A can execute data communication with another head-mounted display device 100 </ b> B via the wireless access point 3. The head-mounted display devices 100 </ b> A and 100 </ b> B execute data communication with the server 5 through the wireless access point 3. Each head-mounted display device 100A may directly perform wireless communication with another head-mounted display device 100B, for example, in an ad hoc mode. The head-mounted display devices 100A and 100B may be connected by a wired communication line. That is, the configuration of the display system 2 is not particularly limited as long as the head-mounted display device 100A can communicate with the head-mounted display device 100B. In addition, the communication system 1 may be configured to be able to communicate with the head-mounted display devices 100 </ b> A and 100 </ b> B included in the display system 2 and the server 5.

本実施形態は、頭部装着型表示装置100を産業用に応用した実施形態である。複数の機器が設置された工場内において、使用者は、頭部装着型表示装置100を装着し、機器を使用して作業を行う。この際、頭部装着型表示装置100の画像表示部20は、使用者が使用する機器のマニュアル、機器を使用する上での注意事項等の作業支援の情報を表示用データとして表示させる。この表示用データは、サーバー5が頭部装着型表示装置100に提供してもよいし、頭部装着型表示装置100の記憶部120に記憶させたものを使用してもよい。使用者は、作業支援の情報を視認しながら機器を操作することができるので、機器を安全かつ確実に操作することができる。
また、作業支援の情報として、他の使用者が機器を操作している画像(以下、操作画像という)を使用することもできる。操作画像を提供する使用者は、例えば、頭部装着型表示装置100Aを装着して、機器を操作している様子を頭部装着型表示装置100Aのカメラ61により撮影する。頭部装着型表示装置100Aは、カメラ61により撮影された操作画像を、操作画像の提供を受ける使用者の装着する頭部装着型表示装置100Bに送信する。頭部装着型表示装置100Bの使用者は、頭部装着型表示装置100Bの画像表示部20により表示される操作画像を視認しながら機器を操作することができる。従って、機器を安全かつ確実に操作することができる。
なお、この操作画像は、頭部装着型表示装置100Aが頭部装着型表示装置100Bに直接送信してもよい。また、頭部装着型表示装置100Aがサーバー5にアップロードして、サーバー5に登録された操作画像を、頭部装着型表示装置100Bにダウンロードしてもよい。
This embodiment is an embodiment in which the head-mounted display device 100 is applied for industrial use. In a factory where a plurality of devices are installed, a user wears the head-mounted display device 100 and works using the devices. At this time, the image display unit 20 of the head-mounted display device 100 displays work support information such as a manual for the device used by the user and precautions for using the device as display data. The display data may be provided by the server 5 to the head-mounted display device 100 or may be stored in the storage unit 120 of the head-mounted display device 100. Since the user can operate the device while visually recognizing work support information, the user can operate the device safely and reliably.
In addition, as work support information, an image in which another user is operating the device (hereinafter referred to as an operation image) can be used. A user who provides an operation image, for example, wears the head-mounted display device 100A and shoots the state of operating the device with the camera 61 of the head-mounted display device 100A. The head-mounted display device 100A transmits the operation image photographed by the camera 61 to the head-mounted display device 100B worn by the user who receives the operation image. A user of the head-mounted display device 100B can operate the device while visually recognizing an operation image displayed by the image display unit 20 of the head-mounted display device 100B. Accordingly, the device can be operated safely and reliably.
The operation image may be transmitted directly from the head-mounted display device 100A to the head-mounted display device 100B. Alternatively, the head-mounted display device 100A may upload to the server 5 and download an operation image registered in the server 5 to the head-mounted display device 100B.

サーバー5は、ハードウェアとしてCPU、ROM、RAM等を備える制御部6と、記憶部7とを備える。記憶部7は、不揮発性の記憶装置であって、例えば、フラッシュメモリー、EEPROM等の半導体メモリーや、フレキシブルディスク、磁気ディスク、光磁気ディスク、半導体記憶装置、ROM、CD−ROM等の可搬媒体等を用いることができる。
記憶部7は、頭部装着型表示装置100に表示させる表示用データとして、マニュアルや注意事項、修理書のデータ、操作画像等を記憶する。修理書には、機器に故障が生じた場合に、故障原因を特定するためのチェック項目や、故障原因に応じた対処方法等が記録されている。
また、記憶部7は、頭部装着型表示装置100から送信されるシステム情報を記憶する。頭部装着型表示装置100は、第1のバッテリー131の残容量が規定値以下に低下した場合に、システム情報をサーバー5に送信して、サーバー5に保存する。
The server 5 includes a control unit 6 including a CPU, ROM, RAM, and the like as hardware, and a storage unit 7. The storage unit 7 is a nonvolatile storage device, for example, a semiconductor memory such as a flash memory or an EEPROM, or a portable medium such as a flexible disk, a magnetic disk, a magneto-optical disk, a semiconductor storage device, a ROM, or a CD-ROM. Etc. can be used.
The storage unit 7 stores manuals, precautions, repair book data, operation images, and the like as display data to be displayed on the head-mounted display device 100. The repair document records check items for identifying the cause of the failure when the device has failed, a coping method according to the cause of the failure, and the like.
Further, the storage unit 7 stores system information transmitted from the head-mounted display device 100. The head-mounted display device 100 transmits system information to the server 5 and stores it in the server 5 when the remaining capacity of the first battery 131 decreases to a predetermined value or less.

図8に、記憶部7の記憶する管理テーブルを示す。
管理テーブルには、機器IDと、アカウント名と、認証情報と、進捗情報と、バッテリー残容量とが登録される。機器IDは、各頭部装着型表示装置100A,100Bを識別する情報である。アカウント名は、機器IDの示す頭部装着型表示装置100の使用を許可された使用者によって設定されたアカウント名である。認証情報は、アカウント名の使用者を認証するパスワード等の情報である。進捗情報は、アカウント名の使用者の作業の進捗状況を示す情報である。1台の頭部装着型表示装置100を複数の使用者が使用する場合、同一の機器IDに、複数のアカウント名、認証情報及び進捗情報が登録される。
バッテリー残容量は、機器IDが示す頭部装着型表示装置100の第1のバッテリー131の残容量である。頭部装着型表示装置100は、第1のバッテリー131の残容量を予め設定された時間間隔で、サーバー5に通知する。サーバー5は、頭部装着型表示装置100から通知される第1のバッテリー131の残容量を、機器IDに対応づけて管理テーブルに登録する。
FIG. 8 shows a management table stored in the storage unit 7.
In the management table, the device ID, account name, authentication information, progress information, and remaining battery capacity are registered. The device ID is information for identifying each head-mounted display device 100A, 100B. The account name is an account name set by a user who is permitted to use the head-mounted display device 100 indicated by the device ID. The authentication information is information such as a password for authenticating the user of the account name. The progress information is information indicating the progress of the work of the account name user. When a plurality of users use one head-mounted display device 100, a plurality of account names, authentication information, and progress information are registered in the same device ID.
The remaining battery capacity is the remaining capacity of the first battery 131 of the head-mounted display device 100 indicated by the device ID. The head-mounted display device 100 notifies the server 5 of the remaining capacity of the first battery 131 at a preset time interval. The server 5 registers the remaining capacity of the first battery 131 notified from the head-mounted display device 100 in the management table in association with the device ID.

図9は、頭部装着型表示装置100とサーバー5との通信シーケンスを示す図である。
頭部装着型表示装置100の制御部140は、電源オン(S101)により起動すると、通信部117の無線通信によりサーバー5に接続要求(S102)を送信する。サーバー5の制御部6は、頭部装着型表示装置100から接続要求を受信すると、頭部装着型表示装置100に認証情報の送信を要求して、頭部装着型表示装置100を認証(S121)する。頭部装着型表示装置100は、サーバー5からの要求により、アカウント名、パスワード、機器IDをサーバー5に送信する。制御部6は、頭部装着型表示装置100から受信したアカウント名、パスワードにより使用者を認証する。制御部6は、使用者の認証に成功すると、頭部装着型表示装置100と接続(S103、S122)する。
FIG. 9 is a diagram illustrating a communication sequence between the head-mounted display device 100 and the server 5.
When the control unit 140 of the head-mounted display device 100 is activated when the power is turned on (S101), the control unit 140 transmits a connection request (S102) to the server 5 by wireless communication of the communication unit 117. When receiving the connection request from the head-mounted display device 100, the control unit 6 of the server 5 requests the head-mounted display device 100 to transmit authentication information and authenticates the head-mounted display device 100 (S121). ) The head-mounted display device 100 transmits the account name, password, and device ID to the server 5 in response to a request from the server 5. The control unit 6 authenticates the user with the account name and password received from the head-mounted display device 100. If the user authentication is successful, the control unit 6 connects to the head-mounted display device 100 (S103, S122).

次に、省電力制御部180は、第1のバッテリー131の残容量をバッテリー制御部135から入力(S104)する。省電力制御部180は、バッテリー制御部135から入力される第1のバッテリー131の残容量が規定値よりも大きい場合、第1のバッテリー131の残容量をサーバー5に送信(S105)する。制御部6は、頭部装着型表示装置100から通知される第1のバッテリー131の残容量を、機器IDに対応づけて記憶部7に記憶(S123)させる。なお、バッテリー制御部135から入力される第1のバッテリー131の残容量が規定値以下の場合、省電力制御部180は後述するS111の処理に移行する。
なお、省電力制御部180は、バッテリー制御部135から第1のバッテリー131の残容量が入力されるごとに、入力された第1のバッテリー131の残容量をサーバー5に送信して、第1のバッテリー131の残容量を更新する。
また、省電力制御部180は、第1のバッテリー131の残容量が規定値以下に低下した場合も、第1のバッテリー131の残容量をサーバー5に送信してもよい。
Next, the power saving control unit 180 inputs the remaining capacity of the first battery 131 from the battery control unit 135 (S104). When the remaining capacity of the first battery 131 input from the battery control unit 135 is larger than the specified value, the power saving control unit 180 transmits the remaining capacity of the first battery 131 to the server 5 (S105). The control unit 6 stores the remaining capacity of the first battery 131 notified from the head-mounted display device 100 in the storage unit 7 in association with the device ID (S123). If the remaining capacity of the first battery 131 input from the battery control unit 135 is equal to or less than the specified value, the power saving control unit 180 proceeds to the process of S111 described later.
The power saving control unit 180 transmits the input remaining capacity of the first battery 131 to the server 5 each time the remaining capacity of the first battery 131 is input from the battery control unit 135, and the first The remaining capacity of the battery 131 is updated.
Further, the power saving control unit 180 may transmit the remaining capacity of the first battery 131 to the server 5 even when the remaining capacity of the first battery 131 falls below a specified value.

次に、制御部140は、カメラ61に撮影を実行させて、カメラ61の撮影画像からマーカー検出(S106)を行う。マーカーとは、例えばバーコード等の1次元コード、QRコード(登録商標)等の2次元コード、その他、画像として機械認識可能なマーカーである。マーカーは、例えば、作業机等の作業場所又はその近傍に付されている。使用者は、マーカー等をカメラ61に撮影させる必要があるので、画像表示部20をマーカーの方向に向けるように意識する。   Next, the control unit 140 causes the camera 61 to perform shooting and performs marker detection from the captured image of the camera 61 (S106). The marker is, for example, a one-dimensional code such as a barcode, a two-dimensional code such as a QR code (registered trademark), or any other marker that can be machine-recognized as an image. For example, the marker is attached to a work place such as a work desk or the vicinity thereof. Since the user needs to cause the camera 61 to photograph the marker or the like, the user is conscious of directing the image display unit 20 in the direction of the marker.

制御部140は、カメラ61が出力する撮影画像を解析して、マーカーの検出を実行する。制御部140は、マーカーを検出すると、検出したマーカーに記録されたデータを、通信部117によりサーバー5に送信(S107)する。マーカーに記録されたデータとは、例えば、機器を識別する情報である。制御部6は、頭部装着型表示装置100から送信されたデータを受信(S124)すると、受信したデータに対応する表示用データを頭部装着型表示装置100に送信する(S125)。   The control unit 140 analyzes the captured image output from the camera 61 and executes marker detection. When detecting the marker, the control unit 140 transmits the data recorded in the detected marker to the server 5 through the communication unit 117 (S107). The data recorded on the marker is, for example, information for identifying a device. Upon receiving the data transmitted from the head-mounted display device 100 (S124), the control unit 6 transmits display data corresponding to the received data to the head-mounted display device 100 (S125).

制御部140は、サーバー5から送信された表示用データを通信部117で受信し(S108)、画像表示部20により表示(S109)させる。頭部装着型表示装置100の使用者は、画像表示部20に表示される、作業対象となる機器のマニュアルや、機器を操作するに当たっての注意事項等を視認しながら作業を行う。これにより、作業の誤りを低減することができる。   The control unit 140 receives the display data transmitted from the server 5 by the communication unit 117 (S108) and causes the image display unit 20 to display (S109). The user of the head-mounted display device 100 performs the work while visually recognizing the manual of the device that is the work target displayed on the image display unit 20, the precautions when operating the device, and the like. Thereby, errors in work can be reduced.

頭部装着型表示装置100の使用者は、作業が終了すると、終了させた作業の作業内容を操作部111の方向キー16やトラックパッド14を操作して入力する。制御部140は、操作部111により入力された作業内容を、使用者のアカウント名と共にサーバー5に送信する。制御部6は、頭部装着型表示装置100から送信された作業内容やアカウント名を受信して、アカウント名に対応づけて記憶部7に記憶(S126)する。   When the user completes the work, the user of the head-mounted display device 100 inputs the work content of the finished work by operating the direction key 16 or the track pad 14 of the operation unit 111. The control unit 140 transmits the work content input by the operation unit 111 to the server 5 together with the user's account name. The control unit 6 receives the work content and the account name transmitted from the head-mounted display device 100, and stores them in the storage unit 7 in association with the account name (S126).

また、省電力制御部180は、バッテリー制御部135から入力される第1のバッテリー131の残容量が規定値以下に低下(S111)したことを検出した場合、サーバー5に、システム情報の送信要求を送信する。省電力制御部180は、サーバー5からシステム情報の送信を許可する情報を受信すると、システム情報をサーバー5に送信する(S112)。制御部6は、頭部装着型表示装置100から受信したシステム情報を、機器IDに対応づけて記憶部7に記憶(S126)させる。省電力制御部180は、システム情報のサーバー5への送信が完了すると、図5に示すステップS14〜S20、図6に示すステップS31〜S36の処理を行う。ステップS14〜S20の処理、図6に示すステップS31〜S36の処理の詳細については、説明を省略する。   In addition, when the power saving control unit 180 detects that the remaining capacity of the first battery 131 input from the battery control unit 135 has decreased below a predetermined value (S111), the power saving control unit 180 requests the server 5 to transmit a system information. Send. When the power saving control unit 180 receives information permitting transmission of the system information from the server 5, the power saving control unit 180 transmits the system information to the server 5 (S112). The control unit 6 stores the system information received from the head-mounted display device 100 in the storage unit 7 in association with the device ID (S126). When the transmission of the system information to the server 5 is completed, the power saving control unit 180 performs steps S14 to S20 shown in FIG. 5 and steps S31 to S36 shown in FIG. The description of the processing of steps S14 to S20 and the details of the processing of steps S31 to S36 shown in FIG. 6 will be omitted.

省電力制御部180は、第1のバッテリー131の交換を検出(S113)した場合、交換された第1のバッテリー131の残容量が規定値以上であるか否かを判定する。省電力制御部180は、交換された第1のバッテリー131の残容量が規定値以上である場合、電力を供給するバッテリーを第2のバッテリー132から第1のバッテリー131に切り替えるようにバッテリー制御部135に指示する。省電力制御部180は、電源が第2のバッテリー132から第1のバッテリー131に切り替えられると、サーバー5にシステム情報の取得要求を送信(S114)する。制御部6は、取得要求を受信(S128)すると、該当する機器IDのシステム情報を、頭部装着型表示装置100に送信(S129)する。頭部装着型表示装置100は、システム情報をサーバー5から受信(S115)すると、受信したシステム情報をRAM等のワークメモリーに展開して復元(ステップS116)する。その後、制御部140は、RAMに展開されたデータに基づく処理を実行する。これにより、頭部装着型表示装置100が、バッテリー交換モードへの移行前の状態に戻る。   When the replacement of the first battery 131 is detected (S113), the power saving control unit 180 determines whether or not the remaining capacity of the replaced first battery 131 is greater than or equal to a specified value. The power saving control unit 180 switches the battery that supplies power from the second battery 132 to the first battery 131 when the remaining capacity of the replaced first battery 131 is greater than or equal to a specified value. 135 is instructed. When the power source is switched from the second battery 132 to the first battery 131, the power saving control unit 180 transmits a system information acquisition request to the server 5 (S114). When receiving the acquisition request (S128), the control unit 6 transmits the system information of the corresponding device ID to the head-mounted display device 100 (S129). Upon receiving the system information from the server 5 (S115), the head-mounted display device 100 expands the received system information on a work memory such as a RAM (step S116). Thereafter, the control unit 140 executes processing based on the data expanded in the RAM. As a result, the head-mounted display device 100 returns to the state before the transition to the battery replacement mode.

なお、工場に、第1のバッテリー131の交換作業を行う作業台を設置して、この作業台に、第2のバッテリー132に給電する装置を設けてもよい。例えば、作業台に、コイルと、このコイルに電流を流す装置とを設けて、コイルに発生する磁束を、頭部装着型表示装置100に設けたコイルに結合させることで第2のバッテリー132を充電する。また、作業台に、第2のバッテリー132の充電に使用する電波を出力する装置を設けてもよい。また、作業台に、コイルやコンデンサーを使用した共鳴(共振)回路を作り、電界もしくは磁界を共鳴させることで第2のバッテリー132を充電してもよい。また、第2のバッテリー132として、太陽電池を使用する場合には、第1のバッテリー131の交換作業中は、工場の照明により第2のバッテリー132を充電してもよい。   Note that a work table for replacing the first battery 131 may be installed in the factory, and a device for supplying power to the second battery 132 may be provided on the work table. For example, the workbench is provided with a coil and a device for passing a current through the coil, and the second battery 132 is connected by coupling the magnetic flux generated in the coil to the coil provided in the head-mounted display device 100. Charge. In addition, a device that outputs radio waves used for charging the second battery 132 may be provided on the work table. Further, a resonance (resonance) circuit using a coil or a capacitor may be formed on the work table, and the second battery 132 may be charged by resonating an electric field or a magnetic field. When a solar cell is used as the second battery 132, the second battery 132 may be charged by factory lighting during the replacement operation of the first battery 131.

以上説明したように、本発明を適用した実施形態の頭部装着型表示装置100は、画像表示部20と、第1のバッテリー131と、第2のバッテリー132と、通信部117と、制御部140とを備える。画像表示部20は、使用者に画像を視認させるとともに外景を透過する。制御部140は、電源を第1のバッテリー131と、第2のバッテリー132とで切り替える。また、制御部140は、電源を第1のバッテリー131から第2のバッテリー132に切り替える場合に、頭部装着型表示装置100の動作モードを、通常動作モードから、画像表示部20及び通信部117の消費電力が通常動作モードよりも小さいバッテリー交換モードに移行させる。通信部117は、バッテリー交換モードにおいて、通信可能な状態を維持する。従って、複数のバッテリーを効率よく利用して、装置の動作を停止させずにバッテリーを交換することができる。   As described above, the head-mounted display device 100 according to the embodiment to which the present invention is applied includes the image display unit 20, the first battery 131, the second battery 132, the communication unit 117, and the control unit. 140. The image display unit 20 allows the user to visually recognize the image and transmits the outside scene. The control unit 140 switches the power source between the first battery 131 and the second battery 132. Further, when the power source is switched from the first battery 131 to the second battery 132, the control unit 140 changes the operation mode of the head-mounted display device 100 from the normal operation mode to the image display unit 20 and the communication unit 117. The battery is switched to the battery replacement mode in which the power consumption is lower than that in the normal operation mode. The communication unit 117 maintains a communicable state in the battery replacement mode. Therefore, it is possible to efficiently use a plurality of batteries and replace the batteries without stopping the operation of the apparatus.

また、画像表示部20は、使用者の左眼に対応して画像を表示する左表示駆動部24と、使用者の右眼に対応して画像を表示する右表示駆動部22とを備える。制御部140は、バッテリー交換モードで、左表示駆動部24と、右表示駆動部22とのいずれか一方の表示を停止させる。従って、画像表示部20の消費電力を削減し、第2のバッテリー132によって、第1のバッテリー131を交換する間の電力を十分に供給できる。   The image display unit 20 includes a left display driving unit 24 that displays an image corresponding to the left eye of the user and a right display driving unit 22 that displays an image corresponding to the right eye of the user. The control unit 140 stops the display of either the left display drive unit 24 or the right display drive unit 22 in the battery replacement mode. Therefore, the power consumption of the image display unit 20 can be reduced, and the second battery 132 can sufficiently supply power during the replacement of the first battery 131.

また、制御部140は、バッテリー交換モードで画像表示部20に表示させる画像のフレームレートを、通常動作モードで画像表示部20に表示させる画像のフレームレートよりも低くする。従って、第1のバッテリー131を交換する間の消費電力をより一層低減し、第2のバッテリー132により電力を供給できる。   Further, the control unit 140 sets the frame rate of the image displayed on the image display unit 20 in the battery replacement mode to be lower than the frame rate of the image displayed on the image display unit 20 in the normal operation mode. Accordingly, power consumption during the replacement of the first battery 131 can be further reduced, and power can be supplied by the second battery 132.

また、制御部140は、バッテリー交換モードにおける画像表示部20の表示領域を、通常動作モードにおける画像表示部20の表示領域よりも小さくする。従って、第1のバッテリー131を交換する間の消費電力をより一層低減し、第2のバッテリー132により電力を供給できる。   Further, the control unit 140 makes the display area of the image display unit 20 in the battery replacement mode smaller than the display area of the image display unit 20 in the normal operation mode. Accordingly, power consumption during the replacement of the first battery 131 can be further reduced, and power can be supplied by the second battery 132.

また、通信部117は、頭部装着型表示装置100の動作モードが、バッテリー交換モードから通常動作モードに移行した際に、認証を行うことなく通信が開始できるように、バッテリー交換モードにおいて通信可能な状態を維持する。従って、動作モードを通常動作モードに移行させた際に、認証を行うことなく通信を開始することができる。   In addition, the communication unit 117 can communicate in the battery replacement mode so that communication can be started without authentication when the operation mode of the head-mounted display device 100 shifts from the battery replacement mode to the normal operation mode. Maintain a good condition. Therefore, when the operation mode is shifted to the normal operation mode, communication can be started without performing authentication.

また、頭部装着型表示装置100は、不揮発性の記憶部120を備える。制御部140は、バッテリー交換モードに移行する際に、記憶部120に、制御部140の動作に係るデータを記憶させ、動作モードを、バッテリー交換モードから通常動作モードに移行する際に、記憶部120に記憶したデータに基づく処理を実行する。従って、バッテリー交換モードから通常動作モードに移行する際に、制御部140を、バッテリー交換モードに移行する前の状態に復帰させることができる。   The head-mounted display device 100 includes a nonvolatile storage unit 120. The control unit 140 causes the storage unit 120 to store data related to the operation of the control unit 140 when shifting to the battery replacement mode, and the storage unit when shifting the operation mode from the battery replacement mode to the normal operation mode. The process based on the data stored in 120 is executed. Therefore, when shifting from the battery replacement mode to the normal operation mode, the control unit 140 can be returned to the state before shifting to the battery replacement mode.

また、制御部140は、第1のバッテリー131が交換された場合、画像表示部20で交換後の第1のバッテリー131の残容量に基づく表示を行う。従って、第1のバッテリー131の交換後に、第1のバッテリー131の残容量を使用者が確認できる。   In addition, when the first battery 131 is replaced, the control unit 140 performs display based on the remaining capacity of the first battery 131 after replacement in the image display unit 20. Therefore, after the replacement of the first battery 131, the user can check the remaining capacity of the first battery 131.

また、制御部140は、第1のバッテリー131の残容量がしきい値以上の場合に、第2のバッテリー132を第1のバッテリー131の電力により充電する。従って、第2のバッテリー132の残容量を良好な状態に保つことができる。   In addition, the control unit 140 charges the second battery 132 with the electric power of the first battery 131 when the remaining capacity of the first battery 131 is equal to or greater than the threshold value. Therefore, the remaining capacity of the second battery 132 can be maintained in a good state.

また、制御部140は、第1のバッテリー131の残容量がしきい値以下の場合に、第1のバッテリー131の交換を促す表示を画像表示部20に表示させる。従って、第1のバッテリー131の残容量が低いことを報知し、第1のバッテリー131の残容量不足による不具合を防止できる。   In addition, when the remaining capacity of the first battery 131 is equal to or less than the threshold value, the control unit 140 causes the image display unit 20 to display a display prompting the replacement of the first battery 131. Therefore, it is possible to notify that the remaining capacity of the first battery 131 is low, and it is possible to prevent problems due to insufficient remaining capacity of the first battery 131.

また、頭部装着型表示装置100は、第1のバッテリー131を着脱可能に収容するバッテリー収容部122を開閉する蓋123と、蓋123の開閉を検知する開閉検出部124とを備える。制御部140は、開閉検出部124により蓋123の開放を検知した場合に、電源を第1のバッテリー131から第2のバッテリー132に切り替える。従って、第1のバッテリー131を交換する操作に対応して、電源を速やかに第2のバッテリー132に切り替えることができる。   The head-mounted display device 100 includes a lid 123 that opens and closes a battery housing portion 122 that detachably houses the first battery 131 and an open / close detection portion 124 that detects opening and closing of the lid 123. The control unit 140 switches the power source from the first battery 131 to the second battery 132 when the opening / closing detection unit 124 detects the opening of the lid 123. Therefore, the power supply can be quickly switched to the second battery 132 in response to the operation of replacing the first battery 131.

なお、この発明は上記実施形態の構成に限られるものではなく、その要旨を逸脱しない範囲において種々の態様において実施することが可能である。
例えば、上記実施形態において、第2のバッテリー132は、第1のバッテリー131とともにバッテリー収容部122に収容される構成として説明したが、本発明はこれに限定されず、第2のバッテリー132を制御装置10内部の他の位置に収容してもよい。また、第2のバッテリー132は、画像表示部20に設けてもよく、制御装置10に外部接続されてもよい。また、第2のバッテリー132はコネクターにより着脱可能に接続する構成であってもよいし、バッテリー制御部135に固定的に接続されて容易に着脱できない構成であってもよい。その他、第2のバッテリー132の具体的な実装形態は任意である。
In addition, this invention is not restricted to the structure of the said embodiment, In the range which does not deviate from the summary, it can be implemented in a various aspect.
For example, in the above embodiment, the second battery 132 has been described as being configured to be accommodated in the battery accommodating portion 122 together with the first battery 131, but the present invention is not limited to this, and the second battery 132 is controlled. You may accommodate in the other position inside the apparatus 10. FIG. Further, the second battery 132 may be provided in the image display unit 20 or may be externally connected to the control device 10. In addition, the second battery 132 may be configured to be detachably connected by a connector, or may be configured to be fixedly connected to the battery control unit 135 and not easily detachable. In addition, the specific mounting form of the second battery 132 is arbitrary.

また、例えば、画像表示部20に代えて、例えば帽子のように装着する画像表示部等の他の方式の画像表示部を採用してもよく、使用者の左眼に対応して画像を表示する表示部と、使用者の右眼に対応して画像を表示する表示部とを備えていればよい。また、本発明の表示装置は、例えば、自動車や飛行機等の車両に搭載されるヘッドマウントディスプレイとして構成されてもよい。また、例えば、ヘルメット等の身体防護具に内蔵されたヘッドマウントディスプレイとして構成されてもよいし、自動車のフロントガラスに用いられるヘッドアップディスプレイ(Head-up Display;HUD)であってもよい。   Further, for example, instead of the image display unit 20, another type of image display unit such as an image display unit worn like a hat may be adopted, and an image is displayed corresponding to the left eye of the user. And a display unit that displays an image corresponding to the right eye of the user. The display device of the present invention may be configured as a head mounted display mounted on a vehicle such as an automobile or an airplane. Moreover, for example, it may be configured as a head-mounted display built in a body protective device such as a helmet, or may be a head-up display (HUD) used for a windshield of an automobile.

さらに、上記実施形態では、画像表示部20と制御装置10とが分離され、接続部40を介して接続された構成を例に挙げて説明したが、制御装置10と画像表示部20とが一体に構成され、使用者の頭部に装着される構成とすることも可能である。
また、制御装置10と画像表示部20とをより長いケーブルにより接続した場合に、制御装置10として、ノート型コンピューター、タブレット型コンピューター又はデスクトップ型コンピューターを用いてもよい。また、制御装置10として、ゲーム機や携帯型電話機やスマートフォンや携帯型メディアプレーヤーを含む携帯型電子機器、その他の専用機器等を用いてもよい。ここで、制御装置10が表示画面を有する場合、バッテリー交換モードにおいて、制御装置10が備える表示画面を停止させてもよい。また、バッテリー交換モードにおいて、右表示駆動部22、左表示駆動部24、及び、制御装置10が備える表示画面のうち、いずれか1以上を表示可能な状態とし、その他の表示を停止させてもよい。
Furthermore, in the above embodiment, the image display unit 20 and the control device 10 are separated and connected by way of the connection unit 40, but the control device 10 and the image display unit 20 are integrated. It is also possible to be configured to be mounted on the user's head.
Further, when the control device 10 and the image display unit 20 are connected by a longer cable, a notebook computer, a tablet computer, or a desktop computer may be used as the control device 10. The control device 10 may be a game machine, a portable phone, a portable electronic device including a smartphone or a portable media player, other dedicated devices, or the like. Here, when the control device 10 has a display screen, the display screen included in the control device 10 may be stopped in the battery replacement mode. Further, in the battery replacement mode, any one or more of the display screens of the right display drive unit 22, the left display drive unit 24, and the control device 10 can be displayed and other displays can be stopped. Good.

また、例えば、画像表示部20において画像光を生成する構成として、有機EL(有機エレクトロルミネッセンス、Organic Electro-Luminescence)のディスプレイと、有機EL制御部とを備える構成としてもよい。また、画像光を生成する構成として、LCOS(Liquid crystal on silicon, LCoSは登録商標)や、デジタル・マイクロミラー・デバイス等を用いることもできる。また、例えば、レーザー網膜投影型のヘッドマウントディスプレイに対して本発明を適用することも可能である。すなわち、画像生成部が、レーザー光源と、レーザー光源を使用者の眼に導く光学系とを備え、レーザー光を使用者の眼に入射させて網膜上を走査し、網膜に結像させることにより、使用者に画像を視認させる構成を採用してもよい。レーザー網膜投影型のヘッドマウントディスプレイを採用する場合、「画像光生成部における画像光の射出可能領域」とは、使用者の眼に認識される画像領域として定義することができる。   For example, as a configuration for generating image light in the image display unit 20, a configuration including an organic EL (Organic Electro-Luminescence) display and an organic EL control unit may be used. Further, as a configuration for generating image light, LCOS (Liquid crystal on silicon, LCoS is a registered trademark), a digital micromirror device, or the like can be used. Further, for example, the present invention can be applied to a laser retinal projection type head mounted display. That is, the image generation unit includes a laser light source and an optical system that guides the laser light source to the user's eye, makes the laser light enter the user's eye, scans the retina, and forms an image on the retina. A configuration that allows the user to visually recognize an image may be employed. When a laser retina projection type head-mounted display is employed, the “image light emitting area in the image light generation unit” can be defined as an image area recognized by the user's eyes.

画像光を使用者の眼に導く光学系としては、外部から装置に向けて入射する外光を透過する光学部材を備え、画像光とともに使用者の眼に入射させる構成を採用できる。また、使用者の眼の前方に位置して使用者の視界の一部または全部に重なる光学部材を用いてもよい。さらに、レーザー光等を走査させて画像光とする走査方式の光学系を採用してもよい。また、光学部材の内部で画像光を導光させるものに限らず、使用者の眼に向けて画像光を屈折及び/または反射させて導く機能のみを有するものであってもよい。   As an optical system that guides image light to the user's eyes, an optical member that transmits external light that is incident from the outside toward the apparatus and that enters the user's eyes together with the image light can be employed. Moreover, you may use the optical member which is located ahead of a user's eyes and overlaps a part or all of a user's visual field. Further, a scanning optical system that scans a laser beam or the like to obtain image light may be employed. Further, the optical member is not limited to guiding the image light inside the optical member, and may have only a function of guiding the image light by refracting and / or reflecting it toward the user's eyes.

また、本発明を、MEMSミラーを用いた走査光学系を採用し、MEMSディスプレイ技術を利用した表示装置に適用することも可能である。すなわち、画像表示素子として、信号光形成部と、信号光形成部が射出する光を走査するMEMSミラーを有する走査光学系と、走査光学系により走査される光によって虚像が形成される光学部材とを備えてもよい。この構成では、信号光形成部が射出した光がMEMSミラーにより反射され、光学部材に入射し、光学部材の中を導かれて、虚像形成面に達する。MEMSミラーが光を走査することにより、虚像形成面に虚像が形成され、この虚像を使用者が眼で捉えることで、画像が認識される。この場合の光学部品は、例えば上記実施形態の右導光板261及び左導光板262のように、複数回の反射を経て光を導くものであってもよく、ハーフミラー面を利用してもよい。   Further, the present invention can be applied to a display device that employs a scanning optical system using a MEMS mirror and uses MEMS display technology. That is, as an image display element, a signal light forming unit, a scanning optical system having a MEMS mirror that scans light emitted from the signal light forming unit, and an optical member on which a virtual image is formed by light scanned by the scanning optical system May be provided. In this configuration, the light emitted from the signal light forming unit is reflected by the MEMS mirror, enters the optical member, is guided through the optical member, and reaches the virtual image forming surface. When the MEMS mirror scans the light, a virtual image is formed on the virtual image forming surface, and the user recognizes the virtual image with the eyes, thereby recognizing the image. The optical component in this case may be one that guides light through a plurality of reflections, such as the right light guide plate 261 and the left light guide plate 262 of the above embodiment, and may use a half mirror surface. .

また、本発明の表示装置は頭部装着型の表示装置に限定されず、フラットパネルディスプレイやプロジェクター等の各種の表示装置に適用できる。本発明の表示装置は、外光とともに画像光により画像を視認させるものであればよく、例えば、外光を透過させる光学部材により画像光による画像を視認させる構成が挙げられる。具体的には、上記のヘッドマウントディスプレイにおいて外光を透過する光学部材を備えた構成の他、使用者から離れた位置に固定的に、又は可動に設置された透光性の平面や曲面(ガラスや透明なプラスチック等)に画像光を投射する表示装置にも適用可能である。一例としては、車両の窓ガラスに画像光を投射し、乗車している使用者や車両の外にいる使用者に、画像光による画像とともに、車両内外の景色を視認させる表示装置の構成が挙げられる。また、例えば、建物の窓ガラスなど固定的に設置された透明また半透明、或いは有色透明な表示面に画像光を投射し、表示面の周囲にいる使用者に、画像光による画像とともに、表示面を透かして景色を視認させる表示装置の構成が挙げられる。   The display device of the present invention is not limited to a head-mounted display device, and can be applied to various display devices such as a flat panel display and a projector. The display device of the present invention may be any device that allows an image to be visually recognized by external light and image light. For example, a configuration in which an image by image light is visually recognized by an optical member that transmits external light is exemplified. Specifically, the above-described head-mounted display includes an optical member that transmits external light, and a light-transmitting plane or curved surface that is fixedly or movably installed at a position away from the user ( The present invention can also be applied to a display device that projects image light onto glass, transparent plastic, or the like. As an example, a configuration of a display device that projects image light onto a window glass of a vehicle and allows a user who is on board or a user outside the vehicle to visually recognize the scenery inside and outside the vehicle together with an image by the image light. It is done. In addition, for example, image light is projected onto a transparent, semi-transparent, or colored transparent display surface that is fixedly installed such as a window glass of a building, and is displayed together with an image by the image light to a user around the display surface. A configuration of a display device that visually recognizes a scene through the surface can be given.

また、図2に示した各機能ブロックのうち少なくとも一部は、ハードウェアで実現してもよいし、ハードウェアとソフトウェアの協働により実現される構成としてもよく、図2に示した通りに独立したハードウェア資源を配置する構成に限定されない。また、制御部140が実行するプログラムは、記憶部120または制御装置10内の記憶装置に記憶されてもよいし、外部の装置に記憶されたプログラムを通信部117又はインターフェイス125を介して取得して実行する構成としてもよい。また、制御装置10に形成された構成のうち、操作部111のみが単独の使用者インターフェイス(UI)として形成されてもよい。また、制御装置10に形成された構成が重複して画像表示部20に形成されていてもよい。例えば、図2に示す制御部140が制御装置10と画像表示部20との両方に形成されていてもよいし、制御装置10に形成された制御部140と画像表示部20に形成されたCPUとが行う機能が別々に分けられている構成としてもよい。   In addition, at least a part of each functional block shown in FIG. 2 may be realized by hardware, or may be realized by cooperation of hardware and software, as shown in FIG. It is not limited to a configuration in which independent hardware resources are arranged. Further, the program executed by the control unit 140 may be stored in the storage unit 120 or the storage device in the control device 10, or the program stored in the external device is acquired via the communication unit 117 or the interface 125. It is good also as a structure to execute. Moreover, only the operation part 111 among the structures formed in the control apparatus 10 may be formed as a single user interface (UI). Further, the configuration formed in the control device 10 may be formed in the image display unit 20 in an overlapping manner. For example, the control unit 140 illustrated in FIG. 2 may be formed in both the control device 10 and the image display unit 20, or the control unit 140 formed in the control device 10 and the CPU formed in the image display unit 20. The functions performed by and may be configured separately.

1…通信システム、2…表示システム、3…無線アクセスポイント、4…通信ネットワーク、5…サーバー、6…制御部、7…記憶部、10…制御装置、20…画像表示部(表示部)、21…右保持部、22…右表示駆動部(第2の表示部)、23…左保持部、24…左表示駆動部(第1の表示部)、25…インターフェイス、26…右光学像表示部、28…左光学像表示部、61…カメラ、63…マイク、100…頭部装着型表示装置(表示装置)、117…通信部、120…記憶部、125…インターフェイス、131…第1のバッテリー、132…第2のバッテリー、135…バッテリー制御部、137…電源供給部、140…制御部、150…オペレーティングシステム、160…画像処理部、170…表示制御部、180…省電力制御部、190…音声処理部、201…右バックライト制御部、202…左バックライト制御部、211…右LCD制御部、212…左LCD制御部、221…右バックライト、222…左バックライト、241…右LCD、242…左LCD、251…右投写光学系、252…左投写光学系、261…右導光板、262…左導光板。   DESCRIPTION OF SYMBOLS 1 ... Communication system, 2 ... Display system, 3 ... Wireless access point, 4 ... Communication network, 5 ... Server, 6 ... Control part, 7 ... Memory | storage part, 10 ... Control apparatus, 20 ... Image display part (display part), 21 ... Right holding unit, 22 ... Right display driving unit (second display unit), 23 ... Left holding unit, 24 ... Left display driving unit (first display unit), 25 ... Interface, 26 ... Right optical image display , 28 ... Left optical image display unit, 61 ... Camera, 63 ... Microphone, 100 ... Head-mounted display device (display device), 117 ... Communication unit, 120 ... Storage unit, 125 ... Interface, 131 ... First Battery 132 132 Second battery 135 Battery control unit 137 Power supply unit 140 Control unit 150 Operating system 160 Image processing unit 170 Display control unit 180 Power saving Control unit 190 ... Audio processing unit 201 ... Right backlight control unit 202 ... Left backlight control unit 211 ... Right LCD control unit 212 ... Left LCD control unit 221 ... Right backlight 222 ... Left backlight 241 ... right LCD, 242 ... left LCD, 251 ... right projection optical system, 252 ... left projection optical system, 261 ... right light guide plate, 262 ... left light guide plate.

Claims (11)

表示装置であって、
使用者に画像を視認させるとともに外景を透過する表示部と、
第1のバッテリー及び第2のバッテリーと、
通信部と、
電源を前記第1のバッテリーと前記第2のバッテリーとで切り替える制御部と、を備え、
前記制御部は、電源を前記第1のバッテリーから前記第2のバッテリーに切り替える場合に、前記表示装置の動作モードを、通常動作モードから、前記表示部及び前記通信部の消費電力が前記通常動作モードよりも小さいバッテリー交換モードに移行させ、
前記通信部は、前記バッテリー交換モードにおいて、通信可能な状態を維持する、ことを特徴とする表示装置。
A display device,
A display unit that allows the user to visually recognize the image and transmit the outside scene;
A first battery and a second battery;
A communication department;
A controller that switches power between the first battery and the second battery;
When the power source is switched from the first battery to the second battery, the control unit changes the operation mode of the display device from the normal operation mode, and the power consumption of the display unit and the communication unit is the normal operation. Move to a battery replacement mode smaller than the mode,
The communication unit maintains a communicable state in the battery replacement mode.
前記表示部は、前記使用者の左眼に対応して画像を表示する第1の表示部と、前記使用者の右眼に対応して画像を表示する第2の表示部とを備え、
前記制御部は、前記バッテリー交換モードで、前記第1の表示部と前記第2の表示部とのいずれか一方の表示を停止させる、ことを特徴とする請求項1記載の表示装置。
The display unit includes a first display unit that displays an image corresponding to the left eye of the user, and a second display unit that displays an image corresponding to the right eye of the user,
The display device according to claim 1, wherein the control unit stops display of one of the first display unit and the second display unit in the battery replacement mode.
前記制御部は、前記バッテリー交換モードで前記表示部に表示させる画像のフレームレートを、前記通常動作モードで前記表示部に表示させる画像のフレームレートよりも低くする、ことを特徴とする請求項1記載の表示装置。   2. The control unit according to claim 1, wherein a frame rate of an image displayed on the display unit in the battery replacement mode is lower than a frame rate of an image displayed on the display unit in the normal operation mode. The display device described. 前記制御部は、前記バッテリー交換モードにおける前記表示部の表示領域を、前記通常動作モードにおける前記表示部の表示領域よりも小さくする、ことを特徴とする請求項1記載の表示装置。   The display device according to claim 1, wherein the control unit makes a display area of the display unit in the battery replacement mode smaller than a display area of the display unit in the normal operation mode. 前記通信部は、前記表示装置の前記動作モードが、前記バッテリー交換モードから前記通常動作モードに移行した際に、認証を行うことなく通信が開始できるように、前記バッテリー交換モードにおいて前記通信可能な状態を維持する、ことを特徴とする請求項1から4のいずれか一項に記載の表示装置。   The communication unit is capable of the communication in the battery replacement mode so that communication can be started without authentication when the operation mode of the display device shifts from the battery replacement mode to the normal operation mode. The display device according to claim 1, wherein the state is maintained. 不揮発性の記憶部を備え、
前記制御部は、前記バッテリー交換モードに移行する際に、前記記憶部に、前記制御部の動作に係るデータを記憶させ、前記動作モードを、前記バッテリー交換モードから前記通常動作モードに移行する際に、前記記憶部に記憶した前記データに基づく処理を実行する、ことを特徴とする請求項1から5のいずれか一項に記載の表示装置。
A non-volatile storage unit;
When the control unit shifts to the battery replacement mode, the control unit stores data related to the operation of the control unit in the storage unit, and when the operation mode shifts from the battery replacement mode to the normal operation mode. 6. The display device according to claim 1, wherein processing based on the data stored in the storage unit is executed.
前記制御部は、前記第1のバッテリーが交換された場合、前記表示部で交換後の前記第1のバッテリーの残容量に基づく表示を行う、ことを特徴とする請求項1から6のいずれか一項に記載の表示装置。   The said control part performs the display based on the remaining capacity of the said 1st battery after replacement | exchange at the said display part, when the said 1st battery is replaced | exchanged, The any one of Claim 1 to 6 characterized by the above-mentioned. The display device according to one item. 前記制御部は、前記第1のバッテリーの残容量がしきい値以上の場合に、前記第2のバッテリーを前記第1のバッテリーの電力により充電する、ことを特徴とする請求項1から7のいずれか一項に記載の表示装置。   8. The control unit according to claim 1, wherein the control unit charges the second battery with electric power of the first battery when a remaining capacity of the first battery is equal to or greater than a threshold value. The display device according to any one of the above. 前記制御部は、前記第1のバッテリーの残容量がしきい値以下の場合に、前記第1のバッテリーの交換を促す表示を前記表示部に表示させる、ことを特徴とする請求項1から8のいずれか一項に記載の表示装置。   The said control part displays the display which prompts replacement | exchange of the said 1st battery on the said display part, when the remaining capacity of the said 1st battery is below a threshold value, The said display part is displayed. The display device according to any one of the above. 前記第1のバッテリーを着脱可能に収容するバッテリー収容部を開閉する蓋と、
前記蓋の開閉を検出する開閉検出部と、を備え、
前記制御部は、前記開閉検出部により前記蓋の開放を検出した場合に、前記電源を前記第1のバッテリーから前記第2のバッテリーに切り替える、ことを特徴とする請求項1から9のいずれか一項に記載の表示装置。
A lid that opens and closes a battery accommodating portion that detachably accommodates the first battery;
An opening / closing detection unit for detecting opening / closing of the lid,
The said control part switches the said power supply from the said 1st battery to the said 2nd battery, when opening of the said lid | cover is detected by the said opening / closing detection part, The any one of Claim 1 to 9 characterized by the above-mentioned. The display device according to one item.
使用者に画像を視認させるとともに外景を透過する表示部と、通信部とを備える表示装置の制御方法であって、
前記表示装置の電源が第1のバッテリーから第2のバッテリーに変更された場合に、前記表示装置の動作モードを、通常動作モードから、前記表示部及び前記通信部の消費電力が前記通常動作モードよりも小さいバッテリー交換モードに移行させ、
前記バッテリー交換モードにおいて、前記通信部を、通信可能な状態に維持する、ことを特徴とする表示装置の制御方法。
A control method for a display device comprising a display unit that allows a user to visually recognize an image and transmit an outside scene, and a communication unit,
When the power supply of the display device is changed from the first battery to the second battery, the operation mode of the display device is changed from the normal operation mode, and the power consumption of the display unit and the communication unit is changed to the normal operation mode. To a smaller battery replacement mode,
A control method for a display device, wherein the communication unit is maintained in a communicable state in the battery replacement mode.
JP2014213602A 2014-10-20 2014-10-20 Display device and control method of display device Active JP6405878B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2014213602A JP6405878B2 (en) 2014-10-20 2014-10-20 Display device and control method of display device
US14/871,175 US9857863B2 (en) 2014-10-20 2015-09-30 Display apparatus, control method for display apparatus, and program that can switch an operation mode of a display apparatus from a normal operation mode to a battery replacement mode

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014213602A JP6405878B2 (en) 2014-10-20 2014-10-20 Display device and control method of display device

Publications (2)

Publication Number Publication Date
JP2016081372A true JP2016081372A (en) 2016-05-16
JP6405878B2 JP6405878B2 (en) 2018-10-17

Family

ID=55958852

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014213602A Active JP6405878B2 (en) 2014-10-20 2014-10-20 Display device and control method of display device

Country Status (1)

Country Link
JP (1) JP6405878B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017010185A (en) * 2015-06-19 2017-01-12 セイコーエプソン株式会社 Display device, display device control method, and program
WO2019150624A1 (en) * 2018-01-31 2019-08-08 株式会社ジャパンディスプレイ Display device and display system
JP2021150696A (en) * 2020-03-17 2021-09-27 カシオ計算機株式会社 Radio communication device, terminal device, radio communication system, communication connection control method, and program

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0538057A (en) * 1991-07-31 1993-02-12 Toshiba Corp Portable communication equipment
JPH06332579A (en) * 1993-04-28 1994-12-02 Samsung Electron Co Ltd Power supply system and device provided with said power supply system
JPH089002A (en) * 1994-06-17 1996-01-12 Mimasu Kinzoku Seisakusho:Kk Portable communication equipment
JP2006186852A (en) * 2004-12-28 2006-07-13 Toshiba Corp Wireless communication apparatus and wireless communication substrate
JP2012168221A (en) * 2011-02-10 2012-09-06 Seiko Epson Corp Head mounted type display device and control method of the same
JP2013037673A (en) * 2011-07-08 2013-02-21 Panasonic Corp Information processing device and method for controlling information processing device
JP2013104987A (en) * 2011-11-14 2013-05-30 Seiko Epson Corp Head-mounted display device and method for controlling head-mounted display device
JP2013137407A (en) * 2011-12-28 2013-07-11 Brother Ind Ltd Image display device
JP2014059619A (en) * 2012-09-14 2014-04-03 Panasonic Corp Electronic apparatus

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0538057A (en) * 1991-07-31 1993-02-12 Toshiba Corp Portable communication equipment
JPH06332579A (en) * 1993-04-28 1994-12-02 Samsung Electron Co Ltd Power supply system and device provided with said power supply system
JPH089002A (en) * 1994-06-17 1996-01-12 Mimasu Kinzoku Seisakusho:Kk Portable communication equipment
JP2006186852A (en) * 2004-12-28 2006-07-13 Toshiba Corp Wireless communication apparatus and wireless communication substrate
JP2012168221A (en) * 2011-02-10 2012-09-06 Seiko Epson Corp Head mounted type display device and control method of the same
JP2013037673A (en) * 2011-07-08 2013-02-21 Panasonic Corp Information processing device and method for controlling information processing device
JP2013104987A (en) * 2011-11-14 2013-05-30 Seiko Epson Corp Head-mounted display device and method for controlling head-mounted display device
JP2013137407A (en) * 2011-12-28 2013-07-11 Brother Ind Ltd Image display device
JP2014059619A (en) * 2012-09-14 2014-04-03 Panasonic Corp Electronic apparatus

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017010185A (en) * 2015-06-19 2017-01-12 セイコーエプソン株式会社 Display device, display device control method, and program
WO2019150624A1 (en) * 2018-01-31 2019-08-08 株式会社ジャパンディスプレイ Display device and display system
JP2019134341A (en) * 2018-01-31 2019-08-08 株式会社ジャパンディスプレイ Display device and display system
JP2021150696A (en) * 2020-03-17 2021-09-27 カシオ計算機株式会社 Radio communication device, terminal device, radio communication system, communication connection control method, and program
JP7115498B2 (en) 2020-03-17 2022-08-09 カシオ計算機株式会社 Wireless communication device, terminal device, wireless communication system, communication connection control method and program

Also Published As

Publication number Publication date
JP6405878B2 (en) 2018-10-17

Similar Documents

Publication Publication Date Title
US9857863B2 (en) Display apparatus, control method for display apparatus, and program that can switch an operation mode of a display apparatus from a normal operation mode to a battery replacement mode
JP6459711B2 (en) Display device and control method of display device
US9411160B2 (en) Head mounted display, control method for head mounted display, and image display system
JP6693060B2 (en) Display system, display device, display device control method, and program
TWI615631B (en) Head-mounted display device and control method of head-mounted display device
CN108957761B (en) Display device and control method thereof, head-mounted display device and control method thereof
JP6155622B2 (en) Display device, head-mounted display device, display device control method, and head-mounted display device control method
US11536964B2 (en) Head-mounted display apparatus, display control method, and computer program
US9792710B2 (en) Display device, and method of controlling display device
JP6476643B2 (en) Head-mounted display device, information system, head-mounted display device control method, and computer program
US20160035136A1 (en) Display apparatus, method for controlling display apparatus, and program
US20160165220A1 (en) Display apparatus and method of controlling display apparatus
US20150168729A1 (en) Head mounted display device
JP2017010185A (en) Display device, display device control method, and program
JP2016004340A (en) Information distribution system, head-mounted type display device, control method of head-mounted type display device and computer program
JP6432197B2 (en) Display device, display device control method, and program
JP6600945B2 (en) Head-mounted display device, head-mounted display device control method, and computer program
JP2018142857A (en) Head mounted display device, program, and control method of head mounted display device
KR20150070874A (en) Grass type device and control method thereof
US20160035137A1 (en) Display device, method of controlling display device, and program
JP6364735B2 (en) Display device, head-mounted display device, display device control method, and head-mounted display device control method
JP2016024208A (en) Display device, method for controlling display device, and program
JP6405878B2 (en) Display device and control method of display device
JP2014155083A (en) Head-mounted type display device, control method of the same, and image display system
JP2016085634A (en) Display device, control method of display device, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170705

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180226

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180320

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180521

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180821

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180903

R150 Certificate of patent or registration of utility model

Ref document number: 6405878

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150