JP2009130494A - Control device, head-mounted display unit, program, and control method - Google Patents
Control device, head-mounted display unit, program, and control method Download PDFInfo
- Publication number
- JP2009130494A JP2009130494A JP2007301476A JP2007301476A JP2009130494A JP 2009130494 A JP2009130494 A JP 2009130494A JP 2007301476 A JP2007301476 A JP 2007301476A JP 2007301476 A JP2007301476 A JP 2007301476A JP 2009130494 A JP2009130494 A JP 2009130494A
- Authority
- JP
- Japan
- Prior art keywords
- user
- unit
- head
- movement
- power supply
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
Abstract
Description
本発明は、利用者の動きを検出し、電源を制御する技術に関するものである。 The present invention relates to a technique for detecting a user's movement and controlling a power source.
利用者の眼前で画像を表示するヘッドマウントディスプレイ装置において、利用者の頭部の動きを検出して、特定の動きに応じて画像や映像に対する制御(再生開始、一時停止等)を行ったり、利用者の頭部の動きに合わせて表示映像をスクロールさせたり、ヘッドホンの音場を動かして臨場感を向上させたりする技術が知られており、ヘッドマウントディスプレイ装置における利用者の頭部の動きの検出には、ジャイロセンサ(角速度センサ)や加速度センサ等のセンサが用いられる。 In a head mounted display device that displays an image in front of the user's eyes, it detects the movement of the user's head and performs control (reproduction start, pause, etc.) on the image and video according to the specific movement, There are known technologies for scrolling the displayed video in accordance with the movement of the user's head and moving the sound field of the headphones to improve the sense of reality, and the movement of the user's head in the head-mounted display device. A sensor such as a gyro sensor (angular velocity sensor) or an acceleration sensor is used for the detection.
これらのセンサを利用して、一定時間利用者の頭部の動きが検出されなかった場合に電源をシャットダウンすることで、省電力化を図るヘッドマウントディスプレイ装置が知られている(例えば、特許文献1参照)。 A head-mounted display device is known that uses these sensors to save power by shutting down the power supply when no movement of the user's head is detected for a certain period of time (for example, Patent Documents). 1).
特許文献1に記載の技術では、一定の頭部の動きが検出される限り、頭部の動きによる操作が制御に反映されないような状況においても、センサに電力が供給され続けるため、装置全体の電力消費が大きくなってしまうという問題があった。 In the technique described in Patent Document 1, as long as a constant head movement is detected, power is continuously supplied to the sensor even in a situation where an operation due to the head movement is not reflected in the control. There was a problem that power consumption would increase.
そこで本発明では、センサへの電力供給を停止させることにより、節電が可能な技術を提供することを目的とする。 Therefore, an object of the present invention is to provide a technique capable of saving power by stopping the power supply to the sensor.
以上の課題を解決するため、本発明は、ヘッドマウントディスプレイ装置の使用状況から、頭部動きを検出する必要が無いと判断された場合には、センサへの電力供給を停止させる。
例えば、本発明は、装置を装着している利用者の動きを検出する動き検出部と、前記利用者の使用状況に応じて、前記動き検出部の電源状態を変更する処理を実行する制御部と、を備える制御装置であって、前記制御部は、前記利用者の前記装置の使用状況が、前記動き検出部による前記利用者の動きの検出を必要とするものか否かを判断する処理と、前記利用者の動きの検出が必要な場合に、前記動き検出部の電源状態をオンにする処理と、前記利用者の動きの検出が不要な場合に、前記動き検出部の電源状態をオフにする処理と、を実行すること、を特徴とする。
In order to solve the above-described problems, the present invention stops the power supply to the sensor when it is determined from the usage state of the head-mounted display device that it is not necessary to detect head movement.
For example, the present invention provides a motion detection unit that detects the motion of a user wearing the device, and a control unit that executes a process of changing the power state of the motion detection unit according to the usage status of the user A process for determining whether or not the user's usage status of the apparatus requires detection of the user's movement by the movement detection unit. And a process for turning on the power state of the motion detection unit when detection of the user's motion is necessary, and a power state of the motion detection unit when detection of the user's motion is unnecessary. And a process of turning off.
以上のように、本発明のヘッドマウントディスプレイ装置によれば、頭部の動きを検出する必要が無い場合には、センサの電力供給を停止させるため、節電効果の高い技術を提供することができる。 As described above, according to the head mounted display device of the present invention, when it is not necessary to detect the movement of the head, the power supply of the sensor is stopped, so that a technology with a high power saving effect can be provided. .
以下、本発明を実施するための最良の形態について、図面を参照して説明する。 The best mode for carrying out the present invention will be described below with reference to the drawings.
図1、図2に、本発明の第一の実施形態に係るヘッドマウントディスプレイ装置(以下、HMDと略記する)100を示す。図1は、本発明の第一の実施形態に係るHMD100の斜視図であり、図2は、本発明の第一の実施形態に係るHMD100の側面図である。 1 and 2 show a head mounted display device (hereinafter abbreviated as HMD) 100 according to a first embodiment of the present invention. FIG. 1 is a perspective view of the HMD 100 according to the first embodiment of the present invention, and FIG. 2 is a side view of the HMD 100 according to the first embodiment of the present invention.
図示するように、本実施形態に係るHMD100は、頭部装着帯110と、音声出力部120と、筐体130A、130Bと、支持部140と、アーム部150と、表示部160と、操作部170と、を備えている。
As shown in the figure, the HMD 100 according to the present embodiment includes a
頭部装着帯110は、その両端が相対向するように、湾曲した形状に形成されている。また、頭部装着帯110は、弾性を有する材質で形成されており、利用者の頭部に装着する際に、その両端に形成されているスピーカ121A、121B(これらを区別しない場合には、単に121と表記する)を利用者の頭部の内側方向に押圧することで、HMD100を利用者の頭部に着脱自在に装着することができるようにしている。
The
頭部装着帯110の両端側には、筐体130A、130Bが連結されており、筐体130Aにはスピーカ121Aが、筐体130Bにはスピーカ121Bが、それぞれ設けられている。また、頭部装着帯110の内部には、スピーカ121A、121Bと、操作部170と、表示部160と、電源部180(図3参照)と、を電気的に連結するための信号線や、後述する筐体130Bに内蔵される電源部180から、電源を供給するための電力線等が配線されている。
音声出力部120は、音声信号を音声に変換する。本実施形態では、スピーカ121A、121Bを有し、これらは利用者の両方の耳にあてがわれて使用されるいわゆるヘッドホン用のスピーカである。図1においては、向かって右側のスピーカ121Aが左耳用のスピーカ、向かって左側のスピーカ121Bが右耳用のスピーカとなっている。これらの左右の別については、利用者の操作によって、任意に決定することができるものとしても良い。また、電源部180から電源を供給するための電力線と、音声信号を供給する音声信号線が配線されている。なお、筐体130Aと、130Bとは、お互いの対向する面に、それぞれ赤外線センサ211を備えている。赤外線センサ211は、筐体130Aに備えられる投光器(図示しない)と、筐体130Bに備えられる受光器とからなる。赤外線センサ211については後述する。
The
筐体130A、130Bは、頭部装着帯110の長手方向両端側に設けられており、筐体130A、130Bの利用者の頭部側(相対向する側)の外壁面には、スピーカ121A、121Bがそれぞれ連結されている。本実施形態においては、筐体130Bには、制御装置300と、電源部180と、が内蔵されており、さらに、スピーカ121Bとは逆側の外壁面に、操作部170が設けられている。
The
電源部180は、バッテリ17(図9参照)を有し、音声出力部120と、表示部160と、操作部170と、制御装置300と、に電力線で接続されている。さらに、筐体130Aの、スピーカ121Aとは逆側の外壁面に、HMD100の電源のオン、オフを切り替える、電源スイッチ(図示しない)が設けられている。また、電源部180は、電源制御部313により、各デバイスへの電力供給の調節を受ける。
The
電源部180と、制御装置300と、操作部170と、電源スイッチとは、筐体130A、130Bのどちらに配置されても良く、また、筐体130A、130Bが、スピーカ121A、121Bと一体となるような構成としても良い。
The
支持部140は、筐体130Bに、アーム部150の一端側を回動自在に連結する。連結方法はどのようなものでも良い。よって、利用者は、スピーカ121Aと、121Bの左右が反転するようにHMD100を装着し、表示部160が眼前に配置されるよう、アーム部150を180度回動させて、使用することも可能である。このような構成により、利用者は、表示部160を左右いずれの眼前にも配置することが出来る。
The
アーム部150は、頭部装着帯110を利用者の頭部に装着した際に、アーム部150の、筐体130A側ではない他端側に取り付けられている表示部160が、利用者の眼前に位置するように、その長手方向において湾曲している。また、内部には、電源部180から、表示部160に電源を供給する電力線と、画像信号を供給する画像信号線と、が配線されている。
The
表示部160は、アーム部150の先端に、利用者の視線に合わせて回動自在に連結されている。表示部160は、画像を表示する、表示デバイスとしてのLCD(Liquid Crystal Display)18(図9参照)と、表示された画像を拡大する光学系と、を備え、制御装置300から供給される画像信号に基づいて、画像を表示する。
The
操作部170は、操作スイッチ171A、171B、171C、171D、171Eと、さらに図示しない電源スイッチと、を備えている。操作スイッチ171A、171B、171C、171D、171Eを介して、HMD100に関する機能、例えば、再生、停止、早送り、巻戻し、制御処理のキャンセル、音量の変更等の指示を入力することができるようにされている。なお、これらのスイッチを介して操作指示が入力されると、I/F部330を介して、制御部310に送信される。
The
また、HMD100に関する操作が可能なリモコン(図示しない)を別途設けても良い。リモコンは無線又は有線によって、利用者が操作スイッチを見ながら操作することが可能である。また、リモコン内に制御装置300や、電源部180を内蔵しても良い。さらに、無線により操作を行う場合には、操作部170に、リモコン受信部172を設けるような構成としても良い。
Further, a remote controller (not shown) capable of performing operations related to the HMD 100 may be provided separately. The remote controller can be operated wirelessly or by wire while the user looks at the operation switch. Further, the
次に、本発明の第一の実施形態に係るHMD100について、図3を用いて説明する。図3は、HMD100の、機能的な構成を示すブロック図である。 Next, the HMD 100 according to the first embodiment of the present invention will be described with reference to FIG. FIG. 3 is a block diagram showing a functional configuration of the HMD 100.
まず、制御装置300について説明する。制御装置300は、図3に示すように、頭部動き検出部200と、装着状態検出部210と、アーム位置検出部220と、制御部310と、記憶部320と、I/F部330と、通信部340と、を有する。
First, the
I/F部330は、音声出力部120と、表示部160と、操作部170と、電源部180と、を制御装置300に接続する。また、HMD100と、外部機器とをデータ転送可能に接続する汎用バスとして、USB(Universal Serial Bus)や、IEEE1394等の規格に準拠する端子を備える。さらに、I/F部330は、ネットワークに接続するための無線LANモジュール16や、Bluetooth(登録商標)等のデバイス間近距離無線通信、ワンセグ(登録商標)放送を受信可能なワンセグチューナ15を備えている(図9参照)。ワンセグ放送とは、地上デジタル放送の1チャンネルあたりの帯域(6MHz)を13のセグメントに分け、そのうちの1セグメントを利用して、テレビジョン番組、テキストデータ、静止画等を提供するものである。
The I /
次に、頭部動き検出部200について説明する。頭部動き検出部200は、頭部の動きを検出する装置であり、角速度センサ(Z)201Aと、角速度センサ(X)201Bと(これらを区別しない場合には、単に201と表記する)、を備えている。頭部動き検出部200は、特定の基準軸から検出対象、すなわち利用者の頭部の動きに関する方向情報を、角速度として検出するものである。本発明の第一の実施形態に係る頭部動き検出部200においては、図1に示すように、垂直方向(利用者が直立する方向)をZ軸とし、Z軸と直交し利用者の一側面から他側面に向かう方向(スピーカ121A、121Bを貫通する方向)の軸をX軸とし、この2軸を基準軸として角速度の検出を実行する。
Next, the head
角速度センサ201としては、筐体内のミラーやファイバーでレーザ光を周回させ、筐体が方向を変えると、内部で周回しているレーザの投光から受光のタイミングが変化することを利用した光学式ジャイロ、歳差を応用して、角速度変異を検知する機械式ジャイロ、振動(一次振動)する質量に角速度が加わると、コリオリ力でそれに直交する方向にも振動(二次振動)が発生することを利用した、振動式ジャイロ等を使用することができる。ここでは、角速度センサ(Z)201A、角速度センサ(X)201Bとして、圧電セラミックスを用いた、圧電振動ジャイロを用いることとする。 As the angular velocity sensor 201, an optical type utilizing the fact that the laser light is circulated by a mirror or fiber in the casing and the timing of light reception changes from the light projection of the laser circulating inside when the casing changes direction. Gyroscope, mechanical gyroscope that detects angular velocity variation by applying precession, when angular velocity is applied to mass that vibrates (primary vibration), vibration (secondary vibration) is also generated in the direction perpendicular to it by Coriolis force It is possible to use a vibrating gyroscope using Here, a piezoelectric vibration gyro using piezoelectric ceramics is used as the angular velocity sensor (Z) 201A and the angular velocity sensor (X) 201B.
角速度センサ(Z)201Aは、図1に示すように、ヨーイング(Yaw)方向の角速度、すなわち、Z軸回りの回転角の傾きであるヨー角を検出し、角速度センサ(X)201Bは、ピッチング(Pitch)方向の角速度、すなわち、X軸の回りの回転角の傾きであるピッチ角を検出する。このようなセンサによって、HMD100は、利用者の頭部の横振り動作と、縦振り動作とを検出することができる。本実施形態においては、角速度センサ201は所定の周期(例えば、50msec)毎にサンプリングを実行し、検出結果は角速度に比例するアナログ電圧値として出力される。出力された電圧値は、A/D変換器(図示しない)によってデジタル信号へ変換され、制御装置300の制御部310へと送信される。また、A/D変換器は、制御装置300が有するような構成としても良い。
As shown in FIG. 1, the angular velocity sensor (Z) 201A detects the angular velocity in the yaw direction, that is, the yaw angle that is the inclination of the rotation angle around the Z axis, and the angular velocity sensor (X) 201B The angular velocity in the (Pitch) direction, that is, the pitch angle that is the inclination of the rotation angle around the X axis is detected. With such a sensor, the HMD 100 can detect a horizontal swing motion and a vertical swing motion of the user's head. In the present embodiment, the angular velocity sensor 201 performs sampling every predetermined cycle (for example, 50 msec), and the detection result is output as an analog voltage value proportional to the angular velocity. The output voltage value is converted into a digital signal by an A / D converter (not shown) and transmitted to the
なお、角速度センサ201の数は、上述のものに限られない。利用者が頭部をかしげる動きを検出するための、Y軸を基準軸とする角速度センサをさらに設けて、ロール角を検出できるような構成としても良く、また、1つの角速度センサによって、全ての角速度を検出できるようにしても良い。 The number of angular velocity sensors 201 is not limited to that described above. An angular velocity sensor using the Y axis as a reference axis for detecting the movement of the user's head can be further provided so that the roll angle can be detected. An angular velocity may be detected.
角速度センサ201の他にさらに加速度センサを設けても良く、角速度センサの代わりに加速度センサのみを持つような構成としても良い。 An acceleration sensor may be further provided in addition to the angular velocity sensor 201, and a configuration having only an acceleration sensor instead of the angular velocity sensor may be employed.
以下、左右方向を示す角速度センサ(Z)201Aの電圧値から求められた角速度をAV(Z)、上下方向を示す角速度センサ(X)201Bの電圧値から求められた角速度をAV(X)として説明する。 Hereinafter, the angular velocity obtained from the voltage value of the angular velocity sensor (Z) 201A indicating the left-right direction is AV (Z), and the angular velocity obtained from the voltage value of the angular velocity sensor (X) 201B indicating the vertical direction is AV (X). explain.
前述したように、装着状態検出部210は、赤外線センサ211を備えており、赤外線センサ211は、投光器と、受光器とからなる。赤外線センサ211は、投光器より赤外線ビームを投光し、受光器における赤外線ビームの受光時と、遮蔽物による遮光時と、の光量の変化を検出して、検出信号を得る。装着状態検出部210は、受光器が受光状態に切り替わったことを示す検出信号を得た際に、装着状態検出信号を制御部310へと出力する。また、制御部310は、装着状態検出部210による検出信号を取得して、赤外線受光状態であればHMD100は非装着状態であり、赤外線遮光状態であればHMD100は装着状態であると判断することが可能である。
As described above, the wearing
装着状態を検出するセンサは、上記のものに限定されず、他の光センサ等を用いても良い。 The sensor for detecting the mounting state is not limited to the above, and other optical sensors may be used.
アーム位置検出部220は、近接センサ221を有する。近接センサ221は例えば、静電容量形近接センサであり、周囲物体の接近を検出し、検出対象の移動情報や存在情報を電気信号に置き換えて、検出信号を得るものである。このような場合には、アーム部150(表示部160でも良い)に近接センサ221を取り付けることによって、筐体130A(頭部装着帯110でも良い)と、アーム部150と、の接近を検出することが可能である。アーム位置検出部220は、アーム部150と、筐体130Aとが、所定の距離以上に離れたことを示す検出信号を得た場合に、制御部310へ使用位置検出信号を出力する。また、このような構成により、制御部310は、近接センサ221からの検出信号を取得して、表示部160が使用位置(利用者の眼前)にあるか、退避位置(利用者の頭頂部付近、すなわち、支持部140を回転中心に回動させた時、頭部装着帯110と表示部160が最も接近し、重なる位置)の近傍にあるか、を判断することが可能である。
The arm
もちろん、アーム部150の位置を検出するためのセンサの種類は、上記のものに限られない。金属の存在を検出する誘導形近接センサや、磁気による直流磁界を利用したスイッチ等を使用することも可能である。
Of course, the type of sensor for detecting the position of the
記憶部320は、利用者が頭部の動きによる操作を実行することが可能な動作モードを特定するための情報が、動作モード情報として格納されている。
The
ここで、動作モードとは、実行中のコンテンツやアプリケーション等によって定められる、HMD100の作動状況である。例えば、メニュー表示、音楽再生、動画再生、静止画表示、Web画面表示、TVの視聴、アプリケーションの再生等が挙げられる。 Here, the operation mode is an operating state of the HMD 100 determined by the content or application being executed. For example, menu display, music playback, video playback, still image display, Web screen display, TV viewing, application playback, and the like can be given.
制御部310は、動作解析部311と、使用状況判断部312と、電源制御部313と、動作モード判断部314と、を備えている。
The
動作解析部311は、角速度センサ(Z)201Aと、角速度センサ(X)201Bと、から所定の周期(ここでは50msecとする)毎に検出・出力される電圧値を受信すると、当該各電圧値と、予め生成された基準値とから、頭部の動きの角速度AV(Z)と、AV(X)と、を算出する。そして、使用状況判断部312へ、電力供給停止判断処理の開始を要求する。
When the
使用状況判断部312は、動作解析部311より、電力供給停止判断処理開始要求を受け付けると、電力供給停止判断処理を実行する。また、使用状況判断部312は、装着状態検出部210より出力された装着状態検出信号、アーム位置検出部220より出力された使用位置検出信号、動作モード判断部314より出力された動作モード切替信号の何れかを受け付けると、電力供給再開判断処理を開始する。
When the usage
電源制御部313は、使用状況判断部312より頭部動き検出部200に対する電力状態の変更要求を受け付けると、電源部180からの電力供給を制御し、頭部動き検出部200の電源状態を変更して、頭部動き検出部200のオンと、オフと、を切り替える。
When the power
なお、電源部180からの電力供給を制御するためには、電源部180内部に設けられているスイッチ(リレー等)をオン、オフしても良いし、電源部180から頭部動き検出部200への電力の供給ラインの途中にスイッチ(リレー等)を設け、それをオン、オフしても良い。また、頭部動き検出部200内部に設けられているスイッチ(リレー等)をオン、オフしても良い。さらに、頭部動き検出部200が省電力で作動する動作モードを持つ場合は、省電力動作モードへ移行するような構成としても良い。
In order to control power supply from the
動作モード判断部314は、各デバイスの作動状況等から、動作モードが切り替わったことを検出して、動作モード切替信号を、使用状況判断部312へ出力する。
The operation
このようにして、制御部310は、角速度センサ201の使用状況を判断して、頭部動き検出部200の電源状態を変更する。
In this way, the
ここで、角速度センサ201の使用状況を判断する際の条件について説明する。図6は、第一の実施形態に係るHMD100において実行される、頭部動き検出部200への電力供給のON/OFFの条件を表したチャートである。
Here, conditions for determining the usage status of the angular velocity sensor 201 will be described. FIG. 6 is a chart showing ON / OFF conditions of power supply to the head
図6に示すように、制御部310は、HMD100の非装着時には、表示部160の位置や動作モードによらずに、頭部動き検出部200への電力の供給をOFFとする。
As shown in FIG. 6, when the HMD 100 is not worn, the
また、制御部310は、HMD100の装着時であって、表示部160が退避位置にある場合には、動作モードによらずに、頭部動き検出部200への電力の供給をOFFとする。
In addition, when the HMD 100 is mounted and the
さらに、制御部310は、HMD100の装着時であって、表示部160が使用位置にある場合には、頭部の動きによる操作が可能な動作モードでないとき(図6においては、動作モードが音楽再生、TV視聴であるとき)には、頭部動き検出部200への電力の供給をOFFとする。
Furthermore, when the HMD 100 is mounted and the
また、制御部310は、HMD100の装着時であって、表示部160が使用位置にある場合には、動作モードが、頭部の動きによる操作が可能な動作モードであるとき(図6においては、メニュー表示、静止画表示、Web画面表示モードであるとき)には、頭部動き検出部200への電力の供給をONとする。
In addition, when the HMD 100 is mounted and the
次に、制御部310が実行する処理について、図4、図5を用いて詳細に説明する。図4は、第一の実施形態に係るHMD100の制御部310が実行する、電力供給停止判断処理を示すフローチャートである。
Next, processing executed by the
動作解析部311は、角速度センサ(Z)201Aと、角速度センサ(X)201Bと、から送られる電圧値を受信すると、使用状況判断部312へ、電力供給停止判断処理の開始を要求する(S101)。
Upon receiving the voltage values sent from the angular velocity sensor (Z) 201A and the angular velocity sensor (X) 201B, the
使用状況判断部312は、動作解析部311より、電力供給停止判断処理の開始要求を受け付けると、装着状態検出部210により検出される検出信号を取得して、HMD100が装着状態にあるか否かを検出する(S102)。検出信号が、HMD100の装着状態を示すものであれば(YES)、ステップ103へ進み、検出信号が、HMD100の非装着状態を示すものであれば(NO)、電源制御部313に頭部動き検出部200への電力供給を停止させる要求を出力して、ステップ105へと進む。
When the usage
ステップ103において、使用状況判断部312は、アーム位置検出部220により検出される検出信号を取得して、表示部160が使用位置にあるか、退避位置にあるかを判断する。当該検出信号が、アーム部150と、筐体130Aとが、所定の距離以上離れた位置にあることを示す信号であった場合には、表示部160が使用位置にあると判断して(YES)、ステップ104へ進み、アーム部150と頭部装着帯110とが、所定の距離内にあり、近接していることを示す信号であった場合には、表示部160が退避位置にあると判断して(NO)、電源制御部313に頭部動き検出部200への電力供給を停止させる要求を出力して、ステップ105へと進む。
In step 103, the usage
ステップ104において、使用状況判断部312は、動作モード判断部314に、実行中の動作モードの検出要求を出力する。動作モード判断部314は、使用状況判断部312からの動作モードの検出要求を受け付けると、各デバイスの動作状況等から、実行中の動作モードを検出して、実行中の動作モードを特定する動作状況情報を動作解析部311へと出力する。動作解析部311は、動作モード判断部314から動作状況情報を受信すると、記憶部320の動作モード情報から、動作状況情報により特定される動作モードと一致するものがあるか否かを検索する。一致する情報が無く、実行中の動作モードが頭部の動きによる操作を実行できないものであった場合には(NO)、電源制御部313に頭部動き検出部200への電力供給を停止させる要求を出力してステップ105へと進み、一致する情報が検出され、実行中の動作モードが頭部の動きによる操作を制御に反映させることが可能なものであった場合には(YES)、処理を終了する。
In step 104, the usage
ステップ105において、電源制御部313は、使用状況判断部312より頭部動き検出部200への電力供給停止要求を受け付けると、電源部180からの電力供給を制御し、頭部動き検出部200への電力の供給を停止して、処理を終了する。
In step 105, when the power
次に、制御部310が、装着状態検出情報、使用位置検出信号、動作モード切替信号の何れかを受信した際の処理について説明する。図5は、第一の実施形態に係るHMD100の制御部310が実行する、電力供給再開判断処理を示すフローチャートである。
Next, processing when the
使用状況判断部312は、装着状態検出部210より出力された装着状態検出信号、アーム位置検出部220より出力された使用位置検出信号、動作解析部311より出力された動作モード切替信号の、何れかを受け付けると(S111)、電力供給再開判断処理を開始する。
The usage
ステップ112において、使用状況判断部312は、装着状態検出部210により検出される検出信号を取得して、HMD100が装着状態にあるか否かを検出する。検出信号が、HMD100の装着状態を示すものであれば(YES)、ステップ113へ進み、検出信号が、HMD100の非装着状態を示すものであれば(NO)、処理を終了する。
In step 112, the usage
ステップ113において、使用状況判断部312は、アーム位置検出部220により検出される検出信号を取得して、表示部160が使用位置にあるか、退避位置にあるかを判断する。表示部160が使用位置にあった場合には、ステップ114へ進み、表示部160が退避位置にあった場合には(NO)、処理を終了する。
In step 113, the use
ステップ114において、使用状況判断部312は、動作モード判断部314に、動作モードの検出要求を出力する。動作モード判断部314は、使用状況判断部312からの動作モードの検出要求を受け付けると、各デバイスの動作状況等から、実行中の動作モードを検出して、実行中の動作モードを特定する動作状況情報を動作解析部311へと出力する。動作解析部311は、動作モード判断部314から動作状況情報を受信すると、記憶部320の動作モード情報から、動作状況情報により特定される動作モードと一致するものがあるか否かを検索する。一致する情報が検出され、実行中の動作モードが頭部の動きによる操作を制御に反映させることが可能なものであった場合には(YES)、電源制御部313に、頭部動き検出部200への電力供給を再開させる要求を出力して、ステップ115へと進み、一致する情報が無く、実行中の動作モードが頭部の動きによる操作を実行できないものであった場合には(NO)、処理を終了する。
In step 114, the usage
ステップ115において、電源制御部313は、使用状況判断部312より頭部動き検出部200への電力供給再開要求を受け付けると、電源部180からの電力供給を制御し、頭部動き検出部200への電力供給を開始させて、処理を終了する。
In
以上のような構成により、第一の実施形態に係るHMD100は、装着/非装着、表示部160の位置、動作モード等の条件から、角速度センサ201の使用状況を判断して、角速度センサ201による頭部の動きの検出が必要無い場合には、頭部動き検出部200への電力供給を停止し、無駄な電力消費を避けることが可能である。
With the configuration as described above, the HMD 100 according to the first embodiment determines the usage status of the angular velocity sensor 201 from conditions such as mounting / non-mounting, the position of the
なお、頭部動き検出部200の電源状態の変更を実行する際、同時に動作解析部311の電源状態の変更を実行しても良い。このような構成によって、より高い節電効果を得ることが可能である。
When changing the power state of the head
また、動作モードは上記のものに限定されない。上記以外のコンテンツを実行するような動作モードでも良く、頭部の動きによる操作の可否についても、記憶部320に格納しておくことが可能である。なお、各動作モードにおける、頭部の動きによる操作の可否も、上述のものに限られず、どのように設定しても良い。
Further, the operation mode is not limited to the above. An operation mode for executing content other than the above may be used, and whether or not an operation can be performed by moving the head can be stored in the
なお、頭部動き検出部200の電源状態の変更は、上述の条件のみに限定されない。動作モードが角速度センサ201を必要としないものであり、HMD100の非装着状態で、さらに、表示部160が退避位置にあることの、全ての条件を満たす場合に、頭部動き検出部200への電力供給を停止するような構成としても良い。また、HMD100の装着状態と、表示部160の使用位置と、動作モードが角速度センサ201を必要とするものに切り替わったことと、の何れか1つを満たすことを条件に、頭部動き検出部200への電力供給を再開しても良い。
Note that the change in the power state of the head
ここで、HMD100のハードウェア構成について説明する。図9は、HMD100の電気的な構成を示すブロック図である。 Here, the hardware configuration of the HMD 100 will be described. FIG. 9 is a block diagram showing an electrical configuration of the HMD 100.
図9に示すように、HMD100は、主に利用者の操作からの情報の処理を実現させるCPU(Central Processing Unit)11aと、各装置への制御を担うCPU11bと、各種データを書換え可能に記憶するメモリ12と、各種のプログラム、プログラムの生成するデータ等を格納する不揮発性の補助メモリ13と、LCD18、スピーカ121、ワンセグチューナ15、無線LANモジュール16等の、各デバイスとCPU11を接続するI/F部14と、各装置への制御を担うCPU11bに接続されるバッテリ17と、を備える。制御部310は、例えば、補助メモリ13に記憶されている所定のプログラムを、メモリ12に読み込み、CPU11a、CPU11bで実行することにより実現可能である。また、動作解析部311はCPU11aで、使用状況判断部312と、電源制御部313と、動作モード判断部314とは、CPU11bで実現が可能である。
As shown in FIG. 9, the HMD 100 mainly stores a CPU (Central Processing Unit) 11 a that realizes processing of information from a user operation, a
もちろん、CPU11a、CPU11bを1つのCPUで実現することも可能である。その際は、単体のCPUが、全ての装置を集中的に制御する。
Of course, the
次に、本発明の第二の実施形態について説明する。第二の実施形態であるHMD400は、第一の実施形態と比較して異なっている点に関連する事項について、以下、図3を参照しながら、説明する。 Next, a second embodiment of the present invention will be described. The HMD 400 that is the second embodiment will be described below with reference to FIG. 3 with respect to matters that are different from the first embodiment.
第二の実施形態に係るHMD400の制御部310は、角速度センサ201の検出する角速度の値によって、角速度センサ201A、201Bの電源状態を変更する処理を実行する。
The
動作解析部311は、角速度センサ(Z)201Aと、角速度センサ(X)201Bと、の両方、あるいは、何れか一方から所定の周期(ここでは50msecとする)毎に検出・出力される電圧値を受信すると、当該各電圧値と、予め生成された基準値とから、頭部の動きの角速度を算出する。さらに、動作解析部311は、両方の角速度センサ201から当該角速度が得られた場合には、閾値Th1と、それぞれの角速度と、を比較して、両方の角速度が閾値Th1以下であった場合に、一方の角速度センサ201への電力供給の停止を、電源制御部313へと要求する。また、当該角速度が一方の角速度センサ201からしか得られなかった場合には、閾値Th2と、角速度と、を比較して、角速度が閾値Th2以上であった場合に、停止中の角速度センサ201への電力供給の再開を、電源制御部313へと要求する。
The
電源制御部313は、動作解析部311から、角速度センサ201に対する電力状態の変更要求を受け付けると、電源部180からの電力供給を制御し、角速度センサ201への電力供給を変更する。
When the power
閾値Th1は、HMD400において、利用者の頭部の動きがほとんど無い場合に、一方の角速度センサ201を停止させて、節電効果を得るために設けられている。閾値Th2は、利用者の頭部の動きが再開されたことを判断し、停止中の角速度センサ201を復帰させることによって、再び頭部の動きの検出可能とするために設けられる。従って、閾値Th1は、閾値Th2よりも小さな値に設定されることが望ましい。 The threshold Th 1 is provided in the HMD 400 to stop one angular velocity sensor 201 and obtain a power saving effect when there is almost no movement of the user's head. Threshold Th 2 determines that the movement of the user's head is restarted by restoring the angular velocity sensor 201 in the stop is provided in order to enable detection of movement of the head again. Thus, the threshold value Th 1 is desirably set to a value smaller than the threshold Th 2.
次に、第二の実施形態に係る制御部310が実行する処理について、図7を用いて詳細に説明する。図7は、第二の実施形態に係るHMD400の制御部310が、頭部動き検出部200から出力される電圧値を受信した際の処理を示すフローチャートである。
Next, processing executed by the
動作解析部311は、角速度センサ(Z)201Aと、角速度センサ(X)201Bと、の両方、あるいは、何れか一方から所定の周期(ここでは50msecとする)毎に検出・出力される電圧値を受信すると、当該各電圧値と、予め生成された基準値とから、頭部の動きの角速度を算出する(S201)。
The
次に、動作解析部311は、当該角速度が、角速度センサ(Z)201Aと、角速度センサ(X)201Bとの、両方の角速度センサ201から得られたものであるか否かを判断する(S202)。両方の角速度を取得した場合には(YES)、ステップ203へと進み、一方の角速度のみを取得した場合には(NO)、ステップ205へと進む。
Next, the
ステップ203において、動作解析部311は、閾値Th1と、算出したそれぞれの角速度と、を比較する。両方の角速度が閾値Th1以下であった場合には(YES)、一方の角速度センサ201への電力供給の停止を電源制御部313へ要求して、ステップ204へ進み、両方の角速度が閾値Th1以下でなかった場合には(NO)、処理を終了する。
In step 203, the
ステップ204において、電源制御部313は、動作解析部311より、一方の角速度センサ201への電力供給停止要求を受け付けると、電源部180からの電力供給を制御し、一方の角速度センサ201への電力の供給を停止して、処理を終了する。
In step 204, when the power
ステップ205において、動作解析部311は、閾値Th2と、算出した一つの角速度と、を比較する。角速度が閾値Th2以上であった場合には(YES)、停止中の一方の角速度センサ201への電力供給の再開を電源制御部313へ要求して、ステップ206へ進み、角速度が閾値Th2以上でなかった場合には(NO)、処理を終了する。
In step 205, the
ステップ206において、電源制御部313は、動作解析部311より、停止中の一方の角速度センサ201への電力供給再開要求を受け付けると、電源部180からの電力供給を制御し、停止中の角速度センサ201への電力の供給を再開して、処理を終了する。
In step 206, when the power
以上のような構成により、第二の実施形態に係るHMD400は、利用者による頭部の動きがほとんど無い場合には、一方の角速度センサ201の電力供給を停止させることによって、無駄な電力消費を避け、より省電力な動作が可能である。 With the configuration described above, the HMD 400 according to the second embodiment consumes unnecessary power by stopping the power supply of one angular velocity sensor 201 when there is almost no movement of the head by the user. It can avoid and operate more power-saving.
なお、電力供給の停止と再開の対象となる角速度センサ201は、角速度センサ(Z)201Aと、角速度センサ(X)201Bとの、どちらのセンサを選択しても良い。さらに、より多数のセンサを有する場合には、何れか1つのセンサを残して、残りのセンサ全ての電力供給を停止するような構成としても良い。 Note that the angular velocity sensor 201 that is the target of stopping and resuming power supply may be selected from either the angular velocity sensor (Z) 201A or the angular velocity sensor (X) 201B. Furthermore, in the case of having a larger number of sensors, it may be configured such that any one sensor is left and the power supply to all the remaining sensors is stopped.
また、ステップ203において、算出された角速度について閾値Th1以下の状態が、所定の時間以上続いた場合に、一方の角速度センサ201の電力供給を停止させるような構成としても良い。これにより、頻繁な角速度センサ201の電力供給の停止と再開を防ぐことが可能である。 Further, in step 203, the calculated angular velocity threshold value Th 1 following conditions, if continues longer than a predetermined time, it may be configured as to stop the power supply of one of the angular velocity sensor 201. Thereby, it is possible to prevent frequent stop and restart of the power supply of the angular velocity sensor 201.
次に、本発明の第三の実施形態について説明する。第三の実施形態であるHMD600は、第一の実施形態と比較して異なっている点に関連する事項について、図3を参照して以下、説明する。 Next, a third embodiment of the present invention will be described. The HMD 600 that is the third embodiment will be described below with reference to FIG. 3 with respect to points that are different from the first embodiment.
第三の実施形態に係るHMD600の制御部310は、電源部180のバッテリ17の電圧値を検出して、当該電圧値に基づいてバッテリ17に蓄電されている電力量を判断して、角速度センサ201の電源状態を変更する処理を実行する。
The
電源制御部313は、電源部180の有するバッテリ17の電圧値を検出して、当該電圧値が閾値Th3以下であった場合に、バッテリ17の充電量が少なくなったものと判断して、頭部動き検出部200への電力供給を停止させ、閾値Th3以下でなかった場合には、バッテリ17の充電量が多くなったものと判断して、頭部動き検出部200への電力の供給を再開とする。
Power
閾値Th3は、バッテリ17の残量が少なくなった場合に、頭部の動きによる操作を停止し、他の機能を優先して動作させるために設けられる。従って、充電によってバッテリ17の電圧値が、閾値Th3を超過した場合には、頭部動き検出部200への電力供給が再開される。
Threshold Th 3, when the remaining amount of the
次に、第三の実施形態に係る制御部310が実行する処理について、図8を用いて詳細に説明する。図8は、第三の実施形態に係るHMD600の制御部310が実行する、頭部動き検出部200の電源状態を変更する処理を示すフローチャートである。
Next, processing executed by the
電源制御部313は、まず、電源部180のバッテリ17の電圧値を検出する(S301)。次に、当該電圧値と、閾値Th3と、を比較して(S302)、電圧値が閾値Th3以下である場合は(YES)、ステップ303へと進み、閾値Th3以下でない場合には(NO)、ステップ304へと進む。
First, the power
ステップ303において、電源制御部313は、電源部180からの電力供給を制御し、頭部動き検出部200への電力供給を停止させて、処理を終了する。
In
ステップ304において、電源制御部313は、頭部動き検出部200に電力供給がなされているか否かを検出する。頭部動き検出部200に電力供給がなされている場合には、処理を終了し、頭部動き検出部200に電力供給がなされていない場合には、電源部180からの電力供給を制御し、停止中の頭部動き検出部200へ電力供給を再開させて(S305)、処理を終了する。
In step 304, the power
以上のような構成により、第三の実施形態に係るHMD600は、バッテリ17の残量が少なくなった際には、頭部の動きによる操作を使用しない代わりにその節電効果によって、他の機能を優先した長時間の動作が可能である。
With the configuration as described above, the HMD 600 according to the third embodiment, when the remaining amount of the
また、以上に述べた実施形態における制御装置300の適用は、HMDに限られない。頭部検出部を備える他の装置についても、適用が可能である。
Moreover, application of the
100、400、600:HMD、110:頭部装着帯、120:音声出力部、130A、130B:筐体、140:支持部、150:アーム部、160:表示部、161:LCD、170:操作部、171A、171B、171C、171D、171E:操作スイッチ、172:リモコン受信部、180:電源部、200:頭部動き検出部、210:装着状態検出部、220:アーム位置検出部、300:制御装置、310:制御部、311:動作解析部、312:使用状況判断部、313:電源制御部、314:動作モード判断部、320:記憶部、330:入出力インターフェース部。
100, 400, 600: HMD, 110: Head wearing band, 120: Audio output unit, 130A, 130B: Case, 140: Support unit, 150: Arm unit, 160: Display unit, 161: LCD, 170:
Claims (10)
前記利用者の前記装置の使用状況に応じて、前記動き検出部の電源状態を変更する制御部と、を備える制御装置であって、
前記制御部は、
前記利用者の前記装置の使用状況が、前記動き検出部による前記利用者の動きの検出を必要とするものか否かを判断する処理と、
前記利用者の動きの検出が必要な場合に、前記動き検出部の電源状態をオンにする処理と、
前記利用者の動きの検出が不要な場合に、前記動き検出部の電源状態をオフにする処理と、を実行すること、
を特徴とする制御装置。 A motion detector that detects the motion of the user wearing the device;
A control unit that changes a power supply state of the motion detection unit according to a usage situation of the device of the user,
The controller is
A process of determining whether or not the usage status of the device of the user requires detection of the movement of the user by the motion detection unit;
When it is necessary to detect the user's movement, a process of turning on the power state of the movement detection unit;
Performing a process of turning off the power state of the motion detection unit when detection of the user's motion is unnecessary,
A control device characterized by.
表示部を備え、
前記制御部は、
当該ヘッドマウントディスプレイ装置を、前記利用者が装着しているか否かを検出する処理と、
前記表示部が、前記利用者の眼前にあるか否かを検出する処理と、
前記制御部が実行する動きモードが、前記利用者の頭部動きを使用するものであるか否かを識別する処理と、
の少なくとも何れか1つの処理を実行することによって、前記使用状況を判断すること、
を特徴とするヘッドマウントディスプレイ装置。 The head mounted display device according to claim 2,
With a display,
The controller is
A process of detecting whether the user is wearing the head mounted display device; and
Processing for detecting whether or not the display unit is in front of the user;
A process for identifying whether or not the movement mode executed by the control unit uses the user's head movement;
Determining the usage status by executing at least one of the processes of:
A head-mounted display device.
前記動き検出部は、少なくとも二つ以上のセンサを備え、
前記制御部は、
前記動き検出部が検出した利用者の動きが、予め定められた大きさ以下である場合に、前記センサのうちの一のセンサ以外の他のセンサの電源状態をオフにする処理と、
前記一のセンサにより前記動き検出部が検出した利用者の動きが、予め定められた大きさ以下でない場合に、前記他のセンサの電源状態をオンにする処理と、を実行すること、
を特徴とするヘッドマウントディスプレイ装置。 The head-mounted display device according to claim 2 or 3,
The motion detection unit includes at least two sensors,
The controller is
When the movement of the user detected by the movement detection unit is equal to or less than a predetermined size, a process of turning off the power state of other sensors other than the one of the sensors;
Performing a process of turning on the power state of the other sensor when the movement of the user detected by the movement detection unit by the one sensor is not less than or equal to a predetermined magnitude;
A head-mounted display device.
バッテリを有し、
前記制御部は、
前記バッテリの残量を検出する処理と、
前記バッテリの残量が、予め定められた量よりも多い場合に、前記動き検出部の電源状態をオンにする処理と、
前記バッテリの残量が、予め定められた量よりも少ない場合に、前記動き検出部の電源状態をオフにする処理と、を実行すること、
を特徴とするヘッドマウントディスプレイ装置。 The head mounted display device according to any one of claims 2 to 4,
Have a battery,
The controller is
Processing for detecting the remaining amount of the battery;
When the remaining amount of the battery is greater than a predetermined amount, a process of turning on the power state of the motion detection unit;
Performing a process of turning off the power state of the motion detection unit when the remaining amount of the battery is less than a predetermined amount;
A head-mounted display device.
バッテリと、
前記バッテリの残量を検出する処理と、
前記バッテリの残量が、予め定められた量よりも多い場合に、前記動き検出部の電源状態をオンにする処理と、
前記バッテリの残量が、予め定められた量よりも少ない場合に、前記動き検出部の電源状態をオフにする処理と、
を実行する制御部と、を備えること、
を特徴とするヘッドマウントディスプレイ装置。 A motion detector that detects the motion of the user wearing the device;
Battery,
Processing for detecting the remaining amount of the battery;
When the remaining amount of the battery is greater than a predetermined amount, a process of turning on the power state of the motion detection unit;
When the remaining amount of the battery is less than a predetermined amount, a process of turning off the power state of the motion detection unit;
A control unit for executing
A head-mounted display device.
前記動き検出部の電源状態をオンにする処理は、前記動き検出部へ電力を供給する処理であり、
前記動き検出部の電源状態をオフにする処理は、前記動き検出部の電力供給を停止する処理、もしくは省電力モードへ移行する処理であること、
を特徴とするヘッドマウントディスプレイ装置。 The head mounted display device according to any one of claims 2 to 6,
The process of turning on the power state of the motion detection unit is a process of supplying power to the motion detection unit,
The process of turning off the power state of the motion detection unit is a process of stopping the power supply of the motion detection unit, or a process of shifting to a power saving mode.
A head-mounted display device.
利用者の使用状況が、前記利用者の動きの検出を必要とするものか否かを判断する処理と、
前記利用者の動きの検出が必要な場合に、利用者の動きを検出するセンサの電源状態をオンにする処理と、
前記利用者の動きの検出が不要な場合に、前記センサの電源状態をオフにする処理と、
を実行する制御手段、
として機能させることを特徴とするプログラム。 Computer
A process of determining whether or not the usage status of the user requires detection of the user's movement;
When it is necessary to detect the user's movement, a process of turning on the power state of a sensor that detects the movement of the user;
A process of turning off the power state of the sensor when detection of the user's movement is unnecessary;
Control means for executing,
A program characterized by functioning as
バッテリの残量を検出する処理と、
前記バッテリの残量が、予め定められた量よりも多かった場合に、利用者の動きを検出するセンサの電源状態をオンにする処理と、
前記バッテリの残量が、予め定められた量よりも少なかった場合に、前記センサの電源状態をオフにする処理と、を実行する制御手段、
として機能させることを特徴とするプログラム。 Computer
A process to detect the remaining battery level,
A process of turning on the power state of a sensor that detects the movement of the user when the remaining amount of the battery is greater than a predetermined amount;
Control means for executing a process of turning off the power supply state of the sensor when the remaining amount of the battery is less than a predetermined amount;
A program characterized by functioning as
利用者の使用状況が、前記利用者の動きの検出を必要とするものか否かを判断する処理を実行するステップと、
前記利用者の動きの検出が必要な場合に、前記センサの電源状態をオンにする処理を実行するステップと、
前記利用者の動きの検出が不要な場合に、前記センサの電源状態をオフにする処理を実行するステップと、
を有すること、
を特徴とする制御方法。 A control method for detecting a movement of a user by a sensor and performing processing corresponding to the usage status of the user,
Executing a process of determining whether the usage status of the user requires detection of the user's movement;
Executing a process of turning on the power state of the sensor when it is necessary to detect the movement of the user;
Executing a process of turning off the power state of the sensor when detection of the user's movement is unnecessary;
Having
A control method characterized by the above.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007301476A JP5217386B2 (en) | 2007-11-21 | 2007-11-21 | Control device, head mounted display device, program, and control method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007301476A JP5217386B2 (en) | 2007-11-21 | 2007-11-21 | Control device, head mounted display device, program, and control method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009130494A true JP2009130494A (en) | 2009-06-11 |
JP5217386B2 JP5217386B2 (en) | 2013-06-19 |
Family
ID=40821007
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007301476A Expired - Fee Related JP5217386B2 (en) | 2007-11-21 | 2007-11-21 | Control device, head mounted display device, program, and control method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5217386B2 (en) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102893236A (en) * | 2010-07-20 | 2013-01-23 | 英派尔科技开发有限公司 | Augmented reality proximity sensing |
JP2014503085A (en) * | 2010-09-20 | 2014-02-06 | コピン コーポレーション | Wireless interface such as Bluetooth (registered trademark) with power management function for head mounted display |
KR20170048069A (en) * | 2015-10-26 | 2017-05-08 | 엘지전자 주식회사 | System and method for controlling the same |
KR101747616B1 (en) | 2013-12-03 | 2017-06-27 | 구글 인코포레이티드 | On-head detection for head-mounted display |
CN113050823A (en) * | 2019-12-26 | 2021-06-29 | 精工爱普生株式会社 | Data processing apparatus, display system, and data processing method |
CN113132840A (en) * | 2019-12-31 | 2021-07-16 | 罗伯特·博世有限公司 | Method and device for detecting wearing state of earphone and wireless earphone |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07294844A (en) * | 1994-04-22 | 1995-11-10 | Canon Inc | Display device |
JP2002171316A (en) * | 2000-11-30 | 2002-06-14 | Toshiba Corp | Mobile communication terminal |
JP2003220039A (en) * | 2002-01-29 | 2003-08-05 | Junichi Ninomiya | Remote observation system and remote observation method for physical abnormality based on biological information and acceleration information of patient |
JP2004233904A (en) * | 2003-01-31 | 2004-08-19 | Nikon Corp | Head-mounted display |
JP2004236242A (en) * | 2003-01-31 | 2004-08-19 | Nikon Corp | Head mounted display |
JP2005286809A (en) * | 2004-03-30 | 2005-10-13 | Sharp Corp | Portable information processing apparatus |
-
2007
- 2007-11-21 JP JP2007301476A patent/JP5217386B2/en not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07294844A (en) * | 1994-04-22 | 1995-11-10 | Canon Inc | Display device |
JP2002171316A (en) * | 2000-11-30 | 2002-06-14 | Toshiba Corp | Mobile communication terminal |
JP2003220039A (en) * | 2002-01-29 | 2003-08-05 | Junichi Ninomiya | Remote observation system and remote observation method for physical abnormality based on biological information and acceleration information of patient |
JP2004233904A (en) * | 2003-01-31 | 2004-08-19 | Nikon Corp | Head-mounted display |
JP2004236242A (en) * | 2003-01-31 | 2004-08-19 | Nikon Corp | Head mounted display |
JP2005286809A (en) * | 2004-03-30 | 2005-10-13 | Sharp Corp | Portable information processing apparatus |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102893236A (en) * | 2010-07-20 | 2013-01-23 | 英派尔科技开发有限公司 | Augmented reality proximity sensing |
KR101431366B1 (en) * | 2010-07-20 | 2014-08-19 | 엠파이어 테크놀로지 디벨롭먼트 엘엘씨 | Augmented reality proximity sensing |
CN102893236B (en) * | 2010-07-20 | 2015-11-25 | 英派尔科技开发有限公司 | Augmented reality closes on detection |
US9606612B2 (en) | 2010-07-20 | 2017-03-28 | Empire Technology Development Llc | Augmented reality proximity sensing |
US10437309B2 (en) | 2010-07-20 | 2019-10-08 | Empire Technology Development Llc | Augmented reality proximity sensing |
JP2014503085A (en) * | 2010-09-20 | 2014-02-06 | コピン コーポレーション | Wireless interface such as Bluetooth (registered trademark) with power management function for head mounted display |
KR101747616B1 (en) | 2013-12-03 | 2017-06-27 | 구글 인코포레이티드 | On-head detection for head-mounted display |
KR20170048069A (en) * | 2015-10-26 | 2017-05-08 | 엘지전자 주식회사 | System and method for controlling the same |
KR102400900B1 (en) | 2015-10-26 | 2022-05-23 | 엘지전자 주식회사 | System |
CN113050823A (en) * | 2019-12-26 | 2021-06-29 | 精工爱普生株式会社 | Data processing apparatus, display system, and data processing method |
CN113132840A (en) * | 2019-12-31 | 2021-07-16 | 罗伯特·博世有限公司 | Method and device for detecting wearing state of earphone and wireless earphone |
Also Published As
Publication number | Publication date |
---|---|
JP5217386B2 (en) | 2013-06-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5217386B2 (en) | Control device, head mounted display device, program, and control method | |
US9104238B2 (en) | Systems and methods for providing enhanced motion detection | |
CN108391171B (en) | Video playing control method and device, and terminal | |
JP6250041B2 (en) | Reduction of external vibration in bone conduction speakers | |
EP2843513A1 (en) | Wearable device and method of outputting content thereof | |
WO2020253845A1 (en) | Prediction mode decoding method and apparatus and prediction mode encoding method and apparatus | |
CN110333834B (en) | Frame frequency adjusting method and device, display device and computer readable storage medium | |
US20030038928A1 (en) | Remote image projector for hand held and wearable applications | |
KR101008361B1 (en) | Apparatus and Method for Controlling Display Devices | |
CN110368689B (en) | Game interface display method, system, electronic equipment and storage medium | |
WO2021082483A1 (en) | Method and apparatus for controlling vehicle | |
JP6751205B2 (en) | Display device and control method thereof | |
CN113727027B (en) | Information processing method, information processing system, and medium | |
JP2009122476A (en) | Controller, head-mounted display device, program and control method | |
JP7234025B2 (en) | Electronic device and control method | |
CN112822522B (en) | Video playing method, device, equipment and storage medium | |
US20160204837A1 (en) | In-vehicle apparatus for communicating with wearable device and control method thereof | |
JP5365684B2 (en) | Control device and head mounted display device | |
CN112738607A (en) | Playing method, device, equipment and storage medium | |
CN111787347A (en) | Live broadcast time length calculation method, live broadcast display method, device and equipment | |
CN114339294B (en) | Method, device and equipment for confirming network jitter and storage medium | |
KR20190041069A (en) | Display device, user terminal device, display system comprising the same and control method thereof | |
CN109636715B (en) | Image data transmission method, device and storage medium | |
US20150228255A1 (en) | Electronic apparatus and control method for the same | |
CN111131272B (en) | Scheduling method, device and system of stream server, computing equipment and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20101118 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120628 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120703 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120827 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120925 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121122 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130205 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130218 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160315 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5217386 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |