JP6598317B2 - 画像表示装置および画像表示方法 - Google Patents

画像表示装置および画像表示方法 Download PDF

Info

Publication number
JP6598317B2
JP6598317B2 JP2017566547A JP2017566547A JP6598317B2 JP 6598317 B2 JP6598317 B2 JP 6598317B2 JP 2017566547 A JP2017566547 A JP 2017566547A JP 2017566547 A JP2017566547 A JP 2017566547A JP 6598317 B2 JP6598317 B2 JP 6598317B2
Authority
JP
Japan
Prior art keywords
information
unit
image display
image
state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017566547A
Other languages
English (en)
Other versions
JPWO2017138278A1 (ja
Inventor
陽次郎 堤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Publication of JPWO2017138278A1 publication Critical patent/JPWO2017138278A1/ja
Application granted granted Critical
Publication of JP6598317B2 publication Critical patent/JP6598317B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/64—Constructional details of receivers, e.g. cabinets or dust covers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146—Instrument input by gesture
    • B60K2360/1464—3D-gesture
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/166—Navigation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/167—Vehicle dynamics information
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/169—Remaining operating distance or charge
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/177—Augmented reality
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0181—Adaptation to the pilot/driver

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • General Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Instrument Panels (AREA)

Description

本発明は、画像表示装置および画像表示方法に関する。
本願は、２０１６年２月１２日に出願された日本国特願２０１６−０２５２４４号に基づき優先権を主張し、その内容をここに援用する。
近年、頭部に装着して使用する画像表示装置の開発が進められている。このような画像表示装置は、目を覆う非透過型や、目を覆わない透過型がある。非透過型では、画像のみが表示部に表示される。このため、利用者は、画像のみを視認することができる。透過型では、表示部が例えばハーフミラーである。このため、利用者は、外界の像と画像を視認することができる。
このような画像表示装置は、利用者の頭部に装着されるため、利用者が頭部を動かしたとき、外界または画像が見づらくなる場合があった。これに対して、利用者が頭部を動かした場合にも画像である文字情報を確実に伝達できる画像表示装置が提案されている（例えば、特許文献１参照）。
日本国特開２００７−１３４７８５号
しかしながら、特許文献１に記載の技術では、頭部の動きに応じて画像データを変更して表示することで、利用者が頭部を動かした場合にも画像である文字情報を確実に伝達できても、利用者の意志に基づいて表示される情報を変更することができなかった。
本発明に係る態様は、上記の点に鑑みてなされたものであり、画像表示装置の動きに応じて表示される情報を変更することができる画像表示装置および画像表示方法を提供することを目的とする。
上記技術課題を解決して係る目的を達成するために、本発明は以下の態様を採用した。
（１）本発明に係る一態様の画像表示装置は、２つ以上の情報を取得する取得部と、画像表示装置の加速度、方位および角速度のうち少なくとも１つを検出する検出部と、当該画像表示装置の状態を検出するための方位の閾値と所定時間とを状態毎に記憶し、当該画像表示装置の動作を検出するための方位の閾値と所定時間とを姿勢毎に記憶する記憶部と、前記検出部が検出した結果と前記記憶部が記憶する情報とに基づいて、前記画像表示装置の状態を判定し、前記判定した前記画像表示装置の状態に応じて、前記取得部が取得した前記２つ以上の情報から選択する情報を切り替え、前記切り替えた情報に基づく表示データを生成する画像変更部と、前記表示データを表示する表示部と、を備え、前記画像変更部は、前記検出部が検出した結果と前記記憶部が記憶する情報とに基づいて前記画像表示装置が基準姿勢と基準姿勢外の間の往復動作を所定時間内に行ったことを判別し、前記画像表示装置が基準姿勢と基準姿勢外の間の往復動作を所定時間内に行った場合に付加情報を生成する。
（２）上記（１）の態様において、前記画像変更部は、前記画像表示装置の前記基準姿勢に対する上下、左右、斜め方向のうち少なくとも１つに関する前記画像表示装置の状態を、前記検出部が検出した結果に基づいて判定するようにしてもよい。
（１）の態様において、前記画像変更部は、前記画像表示装置が基準姿勢と基準姿勢外の間の往復動作を所定時間内に行った場合に付加情報を生成してもよい。
（３）上記（１）の態様において、前記付加情報は、前記画像表示装置が利用されている状況に応じた情報であってもよい。
（４）上記（１）または（３）の態様において、前記画像表示装置の利用者が車両に乗車している場合、前記取得部は、前記車両から前記車両に関する情報を取得し、前記付加情報は、前記車両に関する情報であってもよい。
（５）本発明に係る一態様の画像表示方法は、画像表示装置の姿勢を検出するための方位の閾値と所定時間とを姿勢毎に記憶し、当該画像表示装置の動作を検出するための方位の閾値と所定時間とを姿勢毎に記憶する記憶部を備える当該画像表示装置の画像表示方法であって、２つ以上の情報を取得する取得手順と、前記画像表示装置の加速度、方位および角速度のうち少なくとも１つを検出する検出手順と、前記検出手順によって検出された結果と前記記憶部が記憶する情報とに基づいて、前記画像表示装置の状態を判定し、前記判定した前記画像表示装置の状態に応じて、前記取得手順によって取得された前記２つ以上の情報から選択する情報を切り替え、前記切り替えた情報に基づく表示データを生成する画像変更手順と、前記表示データを表示する表示手順と、前記検出手順によって検出された結果と前記記憶部が記憶する情報とに基づいて前記画像表示装置が基準姿勢と基準姿勢外の間の往復動作を所定時間内に行ったことを判別する往復運動判別手順と、を含み、前記画像変更手順において、前記往復運動判別手順で判別した結果、前記画像表示装置が基準姿勢と基準姿勢外の間の往復動作を所定時間内に行った場合に付加情報を生成する。
上記（１）または（５）の態様によれば、画像表示装置の簡易な動作により複数の表示データの変更が可能となる。
上記（２）の場合、画像表示装置の簡易な動作により、より多くの表示データを選択的に表示可能となる。
上記（１）の場合、動作パターンに応じて異なる情報の表示が可能となる。
上記（３）の場合、画像表示装置が利用されている状況に応じた付加情報の表示を画像表示装置の動作に応じて切り替えることができる。
上記（４）の場合、画像表示装置に車両に関する情報を表示することができ、表示する情報を画像表示装置の動作に応じて切り替えることができる。
第１実施形態に係るＨＭＤの概略構成を示すブロック図である。 第１実施形態に係るＨＭＤの外観の一例を示す図である。 第１実施形態に係る記憶部が記憶する状態に関する検出値の一例を示す図である。 第１実施形態に係る記憶部が記憶する動作に関する検出値の一例を示す図である。 第１実施形態に係る表示部に表示される情報の一例を示す図である。 第１実施形態に係る閾値の学習と表示画像の変更処理のフローチャートである。 第２実施形態に係るＨＭＤの概略構成を示すブロック図である。 第２実施形態に係る表示部に表示される情報の一例を示す図である。
以下、図面を参照しながら本発明の実施形態について説明する。また、以下の説明では、画像表示装置として、眼鏡型のヘッドマウントディスプレイ（以下、ＨＭＤという）を例にして説明を行う。
［第１実施形態］
図１は、本実施形態に係るＨＭＤ１の概略構成を示すブロック図である。
図１に示すように、ＨＭＤ１は、操作部１０、取得部１１、検出部１２、情報変更部１３、および表示部１４を備えている。また、検出部１２は、磁気センサー１２１（検出部）、加速度センサー１２２（検出部）、角速度センサー１２３（検出部）を備えている。
また、情報変更部１３は、記憶部１３１、制御部１３２、および画像変更部１３３を備えている。
操作部１０は、例えば機械式スイッチ、タッチパネル式スイッチ等を含む。操作部１０は、利用者が操作した結果を検出し、検出した操作指示を制御部１３２に出力する。なお、ＨＭＤ１は、操作部１０を備えていなくてもよい。この場合、ＨＭＤ１は、取得部１１が外部装置（不図示）から操作指示を取得し、取得した操作指示を制御部１３２に出力するようにしてもよい。なお、外部装置は、例えば、スマートフォン等の携帯端末、リモート・コントローラ等である。また、操作指示は、例えば、ＨＭＤ１の電源をオン状態又はオフ状態にする指示、学習モードを行う指示、表示部１４に情報を表示するか否かの指示、ＨＭＤ１がどのような状態の時にどの情報を表示させるかの指示等である。なお、学習モードとは、下向き状態、縦振り動作、横振り動作を判別するための閾値と所定時間の学習を行うモードである。下向き状態とは、利用者がうつむいた状態である。縦振り動作とは、利用者がうなずくように数回、頭を縦方向に振った状態である。横振り動作とは、利用者が頭を左右方向に数回振った状態である。
取得部１１は、有線通信方式および無線通信方式のうち少なくとも１つを含む。取得部１１は、外部装置から情報を取得し、取得した情報を画像変更部１３３に出力する。なお、外部装置から取得する情報は、例えば目的地までのナビゲーション情報、現在地や目的地の天気予報の情報、今日のスケジュールの情報等である。また、取得部１１は、外部装置から操作指示を取得した場合、取得した操作指示を制御部１３２に出力する。
検出部１２は、ＨＭＤ１の状態を検出し、検出した状態情報を制御部１３２に出力する。なお、ＨＭＤ１の状態とは、ＨＭＤ１の傾き、ＨＭＤ１の動き、ＨＭＤ１の方位等である。また、状態情報には、方位を示す情報、加速度方向を示す情報、角速度を示す情報のうち少なくとも１つが含まれている。
磁気センサー１２１は、例えば地磁気センサーであり、ＨＭＤ１の方位を検出する。磁気センサー１２１は、検出した検出値を制御部１３２に出力する。
加速度センサー１２２は、例えば３軸センサーであり、ＨＭＤ１の傾きを検出する。加速度センサー１２２は、重力加速度に基づいて加速度方向を検出し、検出した検出値を制御部１３２に出力する。
角速度センサー１２３は、例えばジャイロセンサーであり、ＨＭＤ１の回転を検出する。角速度センサー１２３は、検出した検出値を制御部１３２に出力する。
情報変更部１３は、検出部１２が検出した結果に基づいて、ＨＭＤ１の状態（例えば、ＨＭＤ１の静止状態や動作状態等）を判定し、判定したＨＭＤ１の状態に応じて、取得部１１が取得した２つ以上の情報から選択する情報を切り替え、切り替えた情報に基づく表示データを生成する。
記憶部１３１は、ＨＭＤ１が利用者に装着されているとき、下向き状態であることを検出する閾値と所定時間、縦振り動作であることを検出する閾値と所定時間、横振りであることを検出する閾値と所定時間を記憶する。記憶部１３１は、通常状態の時に表示する画像の種類を示す情報、下向き状態のときに表示する画像の種類を示す情報、縦振り動作のときに表示する画像の種類を示す情報、横振り動作のときに表示する画像の種類を示す情報を記憶する。なお、通常状態とは、利用者がＨＭＤ１を頭部に装着し、例えば正面方向を向いている状態である。
制御部１３２は、操作部１０または取得部１１が出力した操作指示を取得する。制御部１３２は、検出部１２が出力した検出値を取得する。制御部１３２は、取得した操作指示に含まれる学習モードを行う指示に応じて、取得した検出値を用いて、ＨＭＤ１の各状態（含む各動作）それぞれの閾値と所定時間の学習を行い、学習した閾値と所定時間を記憶部１３１に記憶させる。なお、ＨＭＤ１の状態とは、利用者が頭部にＨＭＤ１を装着した状態して上を向いている状態（以下、上向き状態）、正面を向いている状態（以下、正面状態）、左を向いている状態（以下、左向き状態）、右を向いている状態（以下、右向き状態）、左上を向いている状態（以下、左上向き状態）、右上を向いている状態（以下、右上向き状態）、左下を向いている状態（以下、左下向き状態）、右下を向いている状態（以下、右下向き状態）である。また、ＨＭＤ１の動作とは、利用者が頭部にＨＭＤ１を装着した状態して正面から下を向く運動、上向きから正面を向く運動、上向きから下を向く運動、正面から左を向く運動である。なお、学習モードのときの処理については、後述する。
また、制御部１３２は、画像表示を行うことを設定する指示を取得した場合、表示部１４に端末３から取得した表示情報に基づく画像を表示する表示指示を生成し、生成した表示指示を画像変更部１３３に出力する。制御部１３２は、画像表示を行わないことを設定する指示を取得した場合、表示部１４に端末３から取得した表示情報に基づく画像を表示しない非表示指示を生成し、生成した非表示指示を画像変更部１３３に出力する。
さらに、制御部１３２は、取得した検出値と記憶部１３１が記憶する閾値と所定時間に基づいて、ＨＭＤ１の状態（含む動作）を判別する。ここで、制御部１３２は、磁気センサー１２１の検出値と角速度センサー１２３の検出値を用いて状態（方向）の変化を算出する。また、制御部１３２は、磁気センサー１２１の検出値と角速度センサー１２３の検出値を用いて計算した方位の時間変化に基づいて、動作を判別する。なお、制御部１３２は、角速度センサー１２３の検出値を用いて、動作を判別するようにしてもよい。制御部１３２は、下向き状態の期間が第１所定時間継続した場合、下向き状態であると判別して、判別結果を画像変更部１３３に出力する。制御部１３２は、正面から下を向く動作、上向きから正面を向く動作、および上向きから下を向く動作のうち少なくとも１つの動作が、第２所定時間内に第１所定回数検出した場合、縦振り動作であると判別して、判別結果を画像変更部１３３に出力する。制御部１３２は、正面から右を向く動作および正面から左を向く動作を第３所定時間内に第２所定回数検出した場合、横振り動作であると判別して、判別結果を画像変更部１３３に出力する。
画像変更部１３３は、取得部１１が出力した情報を取得する。また、画像変更部１３３は、制御部１３２が出力した判別結果を取得する。画像変更部１３３は、取得した判別結果に応じて取得した情報のうちの少なくとも１つを選択し、選択した情報を用いて表示部１４に表示する画像を生成する。画像変更部１３３は、制御部１３２が表示指示を出力した場合、生成した画像を表示部１４に出力する。画像変更部１３３は、制御部１３２が非表示指示を出力した場合、生成した画像を表示部１４に出力しない。
表示部１４は、画像を投影する投影部と、例えばホログラムを利用した透過型のディスプレイを含んで構成される。表示部１４は、外界光を透過し、画像変更部１３３が出力した画像を、ホログラムを用いて表示する。なお、表示部１４は、ＨＭＤ１が眼鏡型の場合、左右両方または左右の一方が備えていてもよい。
図２は、本実施形態に係るＨＭ１の外観の一例を示す図である。
以下、利用者が地表に対して直立してＨＭＤ１を頭部に装着した場合、加速度センサー１２２の座標は、利用者から見て上下方向をｚ軸方向、左右方向をｘ軸方向、前後方向をｙ軸方向とする。加速度センサー１２２は、図２に示すように、例えばＺ軸方向の検出値が負方向であるように取り付けられている。
図２に示すように、本実施形態のＨＭＤ１は眼鏡型である。ＨＭＤ１は、左右に表示部１４Ｒ及び１４Ｌ、鼻あて１０２Ｒ及び１０２Ｌ、ブリッジ１０３、テンプル１０１Ｒ及び１０１Ｌを備えて構成されている。検出部１２は、左右のテンプル１０１Ｒ及び１０１Ｌ内に取り付けられ、操作部１０と取得部１１と記憶部１３１と制御部１３２と画像変更部１３３は、左側のテンプル１０１Ｌ内に取り付けられている。なお、図２に示した構成は一例であり、操作部１０、取得部１１、検出部１２、記憶部１３１、制御部１３２、及び画像変更部１３３が取り付けられている箇所は、これに限られない。
＜学習モードのときの処理＞
次に、学習モードのときの処理、ＨＭＤ１の状態判別について説明する。
学習モードを行う指示を取得したとき、制御部１３２は、最初に各状態を利用者に促し、上向き状態、正面状態、左向き状態、右向き状態、左上向き状態、右上向き状態、左下向き状態、右下向き状態それぞれの検出部１２の検出値を取得する。制御部１３２は、各状態の検出値を学習することで、各状態における磁気センサー１２１の検出値の閾値と所定時間、加速度センサー１２２の検出値の閾値と所定時間を決定する。なお、制御部１３２は、各状態における角速度センサー１２３の閾値と所定時間も決定するようにしてもよい。
ここで、状態を学習する学習モードのとき、制御部１３２が行う処理の一例を説明する。
制御部１３２は、ＨＭＤ１の状態に関する動作を行うことを促す指示、例えば上向き状態を促す指示を画像変更部１３３に出力する。画像変更部１３３は、上向き状態を促す指示に基づく情報を表示部１４に表示する。上向き状態を促す指示に基づく情報とは、例えば『頭を上に向けてください』である。利用者は、表示部１４に表示された情報に応じた姿勢を、所定時間（例えば２秒以上）継続する。制御部１３２は、指示を表示部１４に表示している期間の各センサーの検出値と各状態が維持されている時間を取得する。制御部１３２は、学習のため、各状態について、例えば５回の動作を促し、５回の動作時に取得した検出値を用いて各状態の検出値を学習することで、各状態における磁気センサー１２１、加速度センサー１２２それぞれの検出値の閾値を決定する。また、制御部１３２は、各状態が維持されている時間に基づいて、各状態を判別するための所定時間を決定する。
なお、制御部１３２は、利用者が状態の学習開始時と終了時に操作部１０を操作した結果に基づいて判別してもよく、各センサーの検出値が維持されている期間を状態が維持されている期間としてもよい。
学習モードを行う指示を取得したとき、制御部１３２は、次に利用者に各動作を促し、利用者が頭部にＨＭＤ１を装着した状態して正面から下を向く運動、上向きから正面を向く運動、上向きから下を向く運動、正面から左を向く運動それぞれの検出部１２の検出値を取得する。制御部１３２は、各状態の検出値を学習することで、各状態における角速度センサー１２３の検出値の閾値と所定時間を決定する。なお、制御部１３２は、各状態における磁気センサー１２１の検出値の閾値と所定時間、加速度センサー１２２の検出値の閾値と所定時間を決定するようにしてもよい。
ここで、動作を学習する学習モードのとき、制御部１３２が行う処理の一例を説明する。
制御部１３２は、例えば、正面から下を向く運動を促す指示を画像変更部１３３に出力する。画像変更部１３３は、正面から下を向く運動を促す指示に基づく情報を表示部１４に表示する。利用者は、表示部１４に表示された情報に応じた運動を、所定時間（例えば２秒以上）内に繰り返して行う。制御部１３２は、指示を表示部１４に表示している期間の各センサーの検出値を取得する。制御部１３２は、学習のため、各状態について、例えば５セットの動作を促し、５セットの動作時に取得した検出値を用いて各状態の検出値を学習することで、角速度センサー１２３の検出値の閾値を決定する。なお、１セットの動作とは、所定時間内に複数回行う、正面から下を向く運動である。また、制御部１３２は、各センサーの検出値において、例えば極大値を抽出し、抽出した極大値の期間に基づいて、各動作を判別するための所定時間を決定する。
次に、記憶部１３１が記憶する情報の一例を説明する。
図３は、本実施形態に係る記憶部１３１が記憶する状態に関する検出値の一例を示す図である。図３に示すように、記憶部１３１は、状態に、磁気センサー１２１と加速度センサー１２２の検出値を用いて算出した方位の閾値と所定時間を対応付けて記憶する。例えば、記憶部１３１は、上向き状態に、方位の閾値として（θ１２、φ１２）と所定時間としてｔ１１を対応付けて記憶する。記憶部１３１は、正面状態に、方位の閾値として（θ２２、φ２２）と所定時間としてｔ２１を対応付けて記憶する。なお、θ１２、θ２２は水平方向の方位、φ１２、φ２２は垂直方向の方位である。また、θ１２、φ１２、θ２２、φ２２は、範囲を有する値であってもよい。また、所定時間ｔ１１〜ｔ９１は、同じ値であってもよい。
図４は、本実施形態に係る記憶部１３１が記憶する動作に関する検出値の一例を示す図である。図４に示すように、記憶部１３１は、動作に、方位の変化量の閾値と所定時間を対応付けて記憶する。例えば、記憶部１３１は、正面から下向きの動作に、方位の変化量の閾値として（Δθ１０１、Δφ１０１）と所定時間としてｔ１０１を対応付けて記憶する。記憶部１３１は、上向きから正面の動作に、方位の変化量の閾値として（Δθ２０１、Δφ２０１）、所定時間としてｔ２０１を対応付けて記憶する。
＜下向き状態、縦振り動作、横振り動作の検出＞
次に、下向き状態、縦振り動作、横振り動作の検出方法について説明する。
制御部１３２は、磁気センサー１２１の検出値と加速度センサー１２２の検出値を用いて算出した方位（θ、φ）が方位の閾値（θ３２、φ３２）以上の状態が、第１所定時間ｔ３１以上継続したとき、下向き状態であると判別する。
また、制御部１３２は、方位の変化量が（Δθ１０１、Δφ１０１）以上かつ第２所定時間ｔ１０１以上（正面から下向きの動作）、方位の変化量が（Δθ２０１、Δφ２０１）以上かつ第２所定時間ｔ２０１以上（上向きから正面の動作）、方位の変化量が（Δθ３０１、Δφ３０１）以上かつ第２所定時間ｔ３０１以上（上向きから下向きの動作）のうちすくなくとも１つが第１所定回数検出されたとき、縦振り動作であると判別する。なお、制御部１３２は、方位の変化量と所定時間の組み合わせのうち、いずれの閾値を用いるかを、学習モードのときに決定するようにしてもよい。なお、制御部１３２は、例えば、角速度センサー１２３の検出値を用いて算出した角速度ωが角速度の閾値ω１１、ω２１、ω３１のうち少なくとも１つの値以上である状態が、第２所定時間（ｔ１０１、ｔ２０１、ｔ２０１）内に第２所定回数以上検出したとき、縦振り動作であると判別するようにしてもよい。
また、制御部１３２は、方位の変化量が（Δθ４０１、Δφ４０１）以上かつ第３所定時間ｔ４０１以上（正面から右向きの動作）、方位の変化量が（Δθ４０１、Δφ４０１）以上かつ第３所定時間ｔ５０１以上（正面から左向きの動作）のうち少なくとも１つが第２所定回数検出されたとき、横振り動作であると判別する。なお、制御部１３２は、方位の変化量と所定時間の組み合わせのうち、いずれの閾値を用いるかを、学習モードのときに決定するようにしてもよい。なお、制御部１３２は、例えば、角速度センサー１２３の検出値を用いて算出した加速度ωが角速度の閾値ω４１、ω５１のうち少なくとも１つの値以上である状態が、第３所定時間（ｔ４０１、ｔ５０１）内に第２所定回数以上検出したとき、横振り動作であると判別するようにしてもよい。
＜ＨＭＤ１の表示部１４に表示される情報の例＞
次に、ＨＭＤ１の表示部１４に表示される画像の例を説明する。
図５は、本実施形態に係る表示部１４に表示される情報の一例を示す図である。
画像ｇ１０１は、利用者がＨＭＤ１を頭部に装着し正面を向いている状態（通常状態）ときに表示部１４に表示される画像の一例である。通常状態のときに表示される画像は、外界の画像に、鎖線ｇ１２１で囲んだ領域の時刻情報が重なった画像である。なお、外界の画像は、画像変更部１３３が作成した画像ではなく、表示部１４を通して利用者が視認する画像である。また、鎖線ｇ１１１で囲んだ領域の情報は、利用者が予め通常状態のときに表示する情報として設定した情報であり、例えば時刻情報である。
利用者が通常状態から、頭部を下向き状態（Ｓｔ１；頭部方位下）に変えた場合には、画像ｇ１０２が表示される。下向き状態のときに表示される画像は、外界の画像に、鎖線ｇ１２１で囲んだ領域の情報が重なった画像である。鎖線ｇ１２１で囲んだ領域の情報は、利用者が予め下向き状態のときに表示する情報として設定した情報に基づく画像であり、例えば現在地または目的地の天気予報に関する情報である。すなわち、本実施形態において、ＨＭＤ１の状態が変化したとき、制御部１３２は、表示部１４に表示する情報を切り替えて変化させる。
利用者が通常状態から、縦振り動作（Ｓｔ２；頭部運動、うなずき）を行った場合には、画像ｇ１０３が表示される。縦振り動作のときに表示される画像は、外界の画像に、鎖線ｇ１１１で囲んだ領域の情報に加え、鎖線ｇ１３１で囲んだ領域の情報が重なった画像である。鎖線で囲んだ領域の情報は、利用者が予め縦振り動作のときに表示する情報として設定した情報であり、例えば現在地から目的地への道順や進路方向等のナビゲーションに関する情報である。
利用者が通常状態から、横振り動作（Ｓｔ３；頭部運動、左右）を行った場合には、画像ｇ１０４が表示される。縦振り動作のときに表示される画像は、外界の画像に、鎖線ｇ１１１で囲んだ領域の情報に加え、鎖線ｇ１４１で囲んだ領域の情報が重なった画像である。鎖線ｇ１４１で囲んだ領域の情報は、利用者が予め横振り動作のときに表示する情報として設定した情報であり、例えばスケジュールに関する情報である。
すなわち、本実施形態において、ＨＭＤ１の動作が変化したとき、制御部１３２は、表示部１４に表示する情報を追加して変化させる。なお、ＨＭＤ１の動作が、縦振り動作から横振り動作に変化した場合、制御部１３２は、画像ｇ１０３に表示した情報（時刻情報、ナビゲーション情報）に加えて、スケジュールに関する情報を加えることで、表示する情報を変化させる。換言すると、本実施形態のＨＭＤ１は、ＨＭＤ１が通常状態（基準姿勢）と通常状態（基準姿勢）外の間の往復動作を所定時間内に行った場合に、付加情報を表示させる。通常状態（基準姿勢）外とは、下向き姿勢、上向き姿勢、左向き姿勢、右向き姿勢、左上向き姿勢、右上向き姿勢、左下向き姿勢、右下向き姿勢である。また、付加情報とは、例えば、ナビゲーション情報、スケジュール情報等である。
なお、利用者には、下向き状態、縦振り動作、横振り動作のときに表示して欲しい場合と表示して欲しくない場合がある。このため、利用者は、情報をＨＭＤ１に表示したい場合、操作部１０を操作して、ＨＭＤ１に情報を表示させる指示を行い、情報をＨＭＤ１に表示したくない場合、操作部１０を操作して、ＨＭＤ１に情報を表示させない指示を行う。制御部１３２は、操作部１０が取得した指示情報に応じて、表示指示または非表示指示を生成する。画像変更部１３３は、制御部１３２が表示指示を出力した場合、取得部１１が出力した情報から検出部１２の検出値に応じた情報に基づく画像を表示部１４に表示する。または、画像変更部１３３は、制御部１３２が非表示指示を出力した場合、取得部１１が出力した情報に基づく画像を表示部１４に表示しない。
また、図５に示した例では、通常状態のとき表示部１４に時刻情報を表示し、状態が変化したとき時刻情報を他の情報へ変化させ、動作が変化したとき他の情報を加える例を示したが、これに限られない。制御部１３２は、通常状態のとき表示部１４に部位ランク情報を表示させ、すなわち情報を表示せず、状態が変化したとき他の情報を表示するように変化させ、動作が変化したときブランク情報に他の情報を加えるように制御するようにしてもよい。
＜閾値の学習と表示画像の変更処理手順＞
次に、閾値の学習と表示画像の変更処理手順を説明する。
図６は、本実施形態に係る閾値の学習と表示画像の変更処理のフローチャートである。
なお、以下の処理では、下向き状態のときに表示する情報、縦振り動作のときに表示する情報、および横振り動作のときに表示する情報それぞれを、利用者が予め設定しているとする。
（ステップＳ１）制御部１３２は、取得部１１から操作指示を取得する。続けて、制御部１３２は、取得した操作指示に学習モードを示す指示が含まれているか否かを判別する。
制御部１３２は、学習モードを示す指示が含まれていると判別した場合（ステップＳ１；ＹＥＳ）、ステップＳ２に進み、学習モードを示す指示が含まれていないと判別した場合（ステップＳ１；ＮＯ）、ステップＳ５に進む。
（ステップＳ２）制御部１３２は、利用者ｈｕが頭部にＨＭＤ１を装着しているとき各状態、各動作それぞれにおける磁気センサー１２１の検出値、および加速度センサー１２２の検出値を取得する。続けて、制御部１３２は、取得した磁気センサー１２１の検出値と加速度センサー１２２の検出値を周知の手法を用いて方位と方位の変化量を算出する。なお、制御部１３２は、利用者ｈｕが頭部にＨＭＤ１を装着しているときの各動作それぞれにおける角速度センサー１２３の検出値を取得し、取得した検出値を周知の手法を用いて角速度を算出するようにしてもよい。
（ステップＳ３）制御部１３２は、算出した各状態および各動作の方位と方位の変化量を用いて、各状態および各動作を識別する方位の閾値と方位の変化量の閾値それぞれを設定する。続けて、制御部１３２は、学習モードにおいて、各状態および各動作を行った時間を測定し、測定した時間に基づいて、各所定時間を設定する。続けて、制御部１３２は、ＨＭＤ１の状態に、ＨＭＤ１の状態を識別するための方位の閾値と所定時間を対応付けて記憶部１３１に書き込む。続けて、制御部１３２は、ＨＭＤ１の動作に、ＨＭＤ１の動作を識別するための方位の変化量の閾値と所定時間を対応付けて記憶部１３１に書き込む。
なお、制御部１３２は、算出した各動作の角速度を用いて、各動作を識別する角速度の閾値それぞれを設定し、学習モードにおいて、各動作を行った時間を測定し、測定した時間に基づいて各所定時間を設定するようにしてもよい。続けて、制御部１３２は、ＨＭＤ１の動作に、ＨＭＤ１の動作を識別するための角速度の閾値と所定時間を対応付けて記憶部１３１に書き込むようにしてもよい。制御部１３２は、処理終了後、ステップＳ１の処理に戻す。
（ステップＳ５）取得部１１は、外部装置から情報を取得し、取得した情報を画像変更部１３３に出力する。続けて、制御部１３２は、利用者ｈｕが頭部にＨＭＤ１を装着しているとき磁気センサー１２１の検出値、および加速度センサー１２２を取得する。続けて、制御部１３２は、取得した磁気センサー１２１の検出値と加速度センサー１２２の検出値を周知の手法を用いて方位と方位の変化量を算出する。
（ステップＳ６）制御部１３２は、ステップＳ５で算出した方位と方位の変化量と、記憶部１３１に記憶されている閾値とを比較する。
（ステップＳ７）制御部１３２は、ステップＳ５で算出した方位が、記憶部１３１に記憶されている下向き状態の方位の閾値以上である期間が、所定時間の閾値である第１所定時間ｔ３１以上継続して越えているか否かに応じて、下向き状態であるか否かを判別する。
制御部１３２は、下向き状態であると判別した場合（ステップＳ７；ＹＥＳ）、ステップＳ８の処理に進み、下向き状態ではないと判別した場合（ステップＳ７；ＮＯ）、ステップＳ９の処理に進む。
（ステップＳ８）制御部１３２は、下向き状態のときに表示するときに用いる情報に表示させる情報を切り替える。なお、表示部１４が表示する画像は、取得部１１が取得した情報のうちの少なくとも１つである。制御部は、ステップＳ１３に処理を進める。
（ステップＳ９）制御部１３２は、ステップＳ５で算出した方位の変化量が、記憶部１３１に記憶されている正面から下向き、上向きから正面、上向きから下向きのうち少なくとも１つの方位の変化量の閾値以上である期間が、所定時間の閾値である第２所定時間（ｔ１０１、ｔ１０２、ｔ１０３）に第１所定回数以上発生しているか否かに応じて、縦振り動作であるか否かを判別する。制御部１３２は、縦振り動作であると判別した場合（ステップＳ９；ＹＥＳ）、ステップＳ１０の処理に進み、縦振り動作ではないと判別した場合（ステップＳ９；ＮＯ）、ステップＳ１１の処理に進む。
（ステップＳ１０）制御部１３２は、縦振り動作のときに表示するときに用いる情報に表示させる情報を切り替える。制御部は、ステップＳ１３に処理を進める。
（ステップＳ１１）制御部１３２は、ステップＳ５で算出した方位の変化量が、記憶部１３１に記憶されている正面から右向き、正面から左向きのうち少なくとも１つの方位の変化量の閾値以上である期間が、所定時間の閾値である第３所定時間（ｔ４０１、ｔ５０１）に第２所定回数以上発生しているか否かに応じて、横振り動作であるか否かを判別する。制御部１３２は、横振り動作であると判別した場合（ステップＳ１１；ＹＥＳ）、ステップＳ１２の処理に進み、横振り動作ではないと判別した場合（ステップＳ１１；ＮＯ）、ステップＳ５の処理に戻す。
（ステップＳ１２）制御部１３２は、横振り動作のときに表示するときに用いる情報に表示させる情報を切り替える。制御部は、ステップＳ１３に処理を進める。
（ステップＳ１３）画像変更部１３３は、ステップＳ８、Ｓ１０、またはＳ１２で制御部１３２が切り替えた情報を用いて表示画像を生成する。続けて、表示部１４は、画像変更部１３３が生成した画像を表示する。
以上で、閾値の学習と表示画像の変更処理を終了する。
なお、上述した例では、学習モードのときに、図３に示した全ての状態の閾値を学習する例を説明したが、情報の切り替えを行う状態のみ学習するようにしてもよい。
以上のように、本実施形態によれば、画像表示装置の動き、すなわち利用者の頭部の動き（状態、動作）に応じて表示される情報を変更することができる。また、本実施形態によれば、上向き、うなずき、横振り動作等のＨＭＤ１の簡易な動作により複数の表示データの変更が可能となる。また、本実施形態によれば、ＨＭＤ１の簡易な動作により、より多くの表示データを選択的に表示可能となる。また、本実施形態によれば、動作パターンに応じて異なる情報の表示が可能となる。
［第２実施形態］
図７は、本実施形態に係るＨＭＤ１Ａの概略構成を示すブロック図である。
図７に示すように、ＨＭＤ１Ａは、操作部１０、取得部１１Ａ、検出部１２、情報変更部１３Ａ、表示部１４、および送信部１５を備えている。情報変更部１３Ａは、記憶部１３１、制御部１３２Ａ、画像変更部１３３を備えている。なお、第１実施形態におけるＨＭＤ１と同じ機能を有する機能部には同じ符号を用いて、説明を省略する。また、図７に示すように、ＨＭＤ１Ａは、車両２および端末３と通信を行う。ＨＭＤ１Ａは、例えばＢｌｕｅｔｏｏｔｈ（登録商標） ＬＥ（Ｌｏｗ Ｅｎｅｒｇｙ）（以下、ＢＬＥという）規格の通信方式を用いて車両２および端末３との通信を行う。
車両２は、検出部２１、レーダー２２、および送信部２３を備えている。なお、車両２は、車体フレーム、エンジン、操向ハンドル等（不図示）を備えている。また、検出部２１は、残量検出部２１１、車速検出部２１２を備えている。また、レーダー２２は、信号生成部２２１、送信部２２２、受信部２２３、他車両検出部２２４、人検出部２２５を備えている。端末３は、受信部３１、操作部３２、制御部３３、表示部３４、表示情報生成部３５、および送信部３６を備えている。
まず、車両２について説明する。
車両２は、例えば四輪車、鞍乗り型車両、自動二輪車等である。車両２は、検出部２１が検出した情報を送信部２３によって端末３へ送信する。また車両２は、レーダー２２が検出した情報を送信部２３によって端末３へ送信する。
検出部２１は、車両２の状態を検出し、検出した状態を示す情報を送信部２３に出力する。残量検出部２１１は、車両２の状態である燃料（ガソリン、電力等）の残量を検出し、検出した残量を示す情報を送信部２３に出力する。車速検出部２１２は、車両２の状態である車速を検出し、検出した車速を示す情報を送信部２３に出力する。
レーダー２２は、例えばミリ波を用いたＭＩＭＯ（Multiple-Input Multiple-Output）方式のレーダーであり、他車両および人（含む歩行者）を検出し、検出した結果を、レーダー検出結果を示す情報として送信部２３に出力する。なお、レーダー２２は、赤外線、超音波、撮像装置が撮像した画像等を用いて、他車両や人を検出するようにしてもよい。
信号生成部２２１は、送信信号を生成し、生成した送信信号を送信部２２２、他車両検出部２２４、および人検出部２２５に出力する。
送信部２２２は、送信アンテナを含み、信号生成部２２１が出力した送信信号を送信波に変換し、変換した送信アンテナから送信する。
受信部２２３は、受信アンテナを含み、対象物（他車両、歩行者等）に反射した反射波である受信波を受信し、受信した受信波を受信信号に変換する。また受信部２２３は、受信信号を他車両検出部２２４および人検出部２２５に出力する。
他車両検出部２２４は、信号生成部２２１が出力した送信信号と、受信部２２３が出力した受信信号に対して、周知の手法を用いて他車両の検出を行って、他車両が検出された場合に検出した結果を示す情報を送信部２３に出力する。
人検出部２２５は、信号生成部２２１が出力した送信信号と、受信部２２３が出力した受信信号に対して、周知の手法を用いて人の検出を行って、人が検出された場合に検出した結果を示す情報を送信部２３に出力する。
送信部２３は、検出部２１が出力した車両２の状態を示す情報と、レーダー２２が出力したレーダー検出結果を示す情報を端末３に送信する。
次に、端末３について説明する。
端末３は、例えばスマートフォン、タブレット端末等である。端末３は、利用者の操作指示を検出し、検出した操作指示にＨＭＤ１Ａへの指示が含まれている場合、指示を抽出し、抽出した指示をＨＭＤ１Ａへ送信する。また、端末３は、ＨＭＤ１が出力した表示部１４に表示する情報を選択する指示である情報選択指示に応じて、車両から受信した情報の中から受信する情報を切り替え、切り替えた情報に基づいて表示情報を生成し、生成した表示情報をＨＭＤ１Ａへ送信する。
受信部３１は、車両２が送信した車両２の状態を示す情報とレーダー検出結果を示す情報を受信し、受信した車両２の状態を示す情報とレーダー検出結果を示す情報を表示情報生成部３５に出力する。また受信部３１は、ＨＭＤ１Ａが出力した情報選択指示を制御部３３に出力する。また、受信部３１は、ネットワーク（不図示）を介して受信した目的地までのナビゲーション情報を取得し、取得したナビゲーション情報を制御部３３に出力する。なお、受信部３１は、ネットワークを介して天気予報、現在地を示す情報、現在地の周辺にあるお店等の情報、車両の進路上の渋滞情報等を取得し、取得した情報を制御部３３に出力する。
操作部３２は、例えば表示部３４上に取り付けられているタッチパネル式センサーであり、利用者の操作を検出し、検出した操作結果を制御部３３に出力する。なお、操作結果には、学習モードの開始指示、情報の表示を行うことを設定する情報表示指示、情報の表示を行わないことを設定する情報非表示指示、出発地を示す情報、目的地を示す情報、ナビゲーション情報を取得する指示等が含まれている。
制御部３３は、受信部３１が出力した情報選択指示に応じて、受信部３１が受信した情報の中からＨＭＤ１Ａの表示部１４に表示する情報を切り替える切替指示を生成する。制御部３３は、生成した切替指示を表示情報生成部３５に出力する。制御部３３は、操作部３２が出力した操作結果から学習モードの開始指示、情報表示指示、情報非表示指示を抽出する。制御部３３は、抽出した学習モードの開始指示、情報表示指示、情報非表示指示を送信部３６に出力する。なお、制御部３３は、操作部３２が出力した操作結果に情報非表示指示が含まれている場合、送信部３６に、表示情報をＨＭＤ１Ａへ送信しない指示を出力するようにしてもよい。制御部３３は、操作部３２が出力した出発地を示す情報、目的地を示す情報、ナビゲーション情報を取得する指示、渋滞情報を取得する指示等を、送信部３６に出力する。
表示部３４は、例えば液晶ディスプレイパネルであり、バックライトを含んで構成される。表示部３４は、制御部３３が出力した画像情報を表示する。画像情報は、ＨＭＤ１Ａの設定および操作を行う画像、車両２との通信を設定する画像等を含む。
表示情報生成部３５は、制御部３３が出力した切替指示に応じて、受信部３１が出力した情報に対して、ＨＭＤ１Ａに送信する情報に切り替える。表示情報生成部３５は、切り替えた結果に基づいて受信部３１が出力した情報の中から情報を選択し、選択した情報に基づいて、ＨＭＤ１Ａの表示部１４に表示する表示情報を生成する。表示情報生成部３５は、生成した表示情報を送信部３６に出力する。なお、表示情報は、車両２の車速情報、車両２の燃料の残量情報、レーダー検出結果を示す情報、ナビゲーション情報、渋滞情報、現在地情報のうち少なくとも１つである。
送信部３６は、制御部３３が出力した学習モードの開始指示、情報表示指示、情報非表示指示をＨＭＤ１Ａへ送信する。また、送信部３６は、表示情報をＨＭＤ１Ａへ送信する。
次に、ＨＭＤ１Ａについて説明する。
取得部１１Ａは、端末３が送信した学習モードの開始指示、情報表示指示、情報非表示指示、および表示情報を取得する。取得部１１Ａは、取得した表示情報を画像変更部１３３に出力する。また、取得部１１Ａは、取得した学習モードの開始指示、情報表示指示、情報非表示指示を制御部１３２Ａに出力する。
制御部１３２Ａは、取得部１１Ａが出力した学習モードの開始指示、情報表示指示、情報非表示指示を取得する。制御部１３２Ａは、検出部１２が出力した検出値を取得する。
制御部１３２Ａは、学習モードの開始指示の場合、制御部１３２と同様に閾値の学習を行い、学習した閾値と所定時間を記憶部１３１に記憶させる。制御部１３２Ａは、検出部１２が出力した検出値と記憶部１３１が記憶している閾値と所定時間を用いて、ＨＭＤ１Ａの状態（通常状態、下向き状態、縦振り動作、横振り動作）を制御部１３２と同様に判別し、判別した結果に基づいて情報選択指示を生成する。制御部１３２Ａは、生成した情報選択指示を送信部１５に出力する。また、制御部１３２Ａは、取得した情報に応じて表示指示または非表示指示を生成し、生成した表示指示または非表示指示を画像変更部１３３に出力する。
送信部１５は、制御部１３２Ａが出力した情報選択指示を端末３へ送信する。
＜ＨＭＤ１Ａの表示部１４に表示される情報の例＞
次に、ＨＭＤ１Ａの表示部１４に表示される情報の例を説明する。
図８は、本実施形態に係る表示部１４に表示される情報の一例を示す図である。
画像ｇ２０１は、利用者がＨＭＤ１を頭部に装着し通常状態のときに表示部１４に表示される画像の一例である。通常状態のときに表示される画像は、外界の画像に、鎖線ｇ２１１で囲んだ領域の情報である。鎖線ｇ２１１で囲んだ領域の情報は、ナビゲーション情報であり、例えば、進路を示す画像、道順を示す画像、現在の交差点名を示す画像、次の交差点名を示す画像、次の交差点までの距離を示す画像等が含まれている。なお、ナビゲーション情報の表示位置は、利用者が端末３またはＨＭＤ１Ａを操作して設定するようにしてもよく、予め定められた位置であってもよい。予め定められた位置とは、例えば、利用者の視界において、路面が視認されると想定される位置が好ましい。
利用者が通常状態から、頭部を下向き状態（Ｓｔ１；頭部方位下）に変えた場合には、画像ｇ２０２が表示される。下向き状態のときに表示される画像は、外界の画像に、鎖線ｇ２２１で囲んだ領域の情報が重なった画像である。鎖線ｇ２２１で囲んだ領域の情報には、例えば、現在の時刻を示す情報、目的地までの距離、目的地に到着する予定時刻を示す情報、目的地まで走行した場合の推定残り時間等が含まれている。このように、本実施形態では、ＨＭＤ１Ａは、ＨＭＤ１Ａが通常状態から下向き状態に変化したとき、表示情報をナビゲーション情報から目的地までの距離等の情報に切り替えて表示する。なお、情報を表示する位置は、利用者が端末３またはＨＭＤ１Ａを操作して設定する。
利用者がＨＭＤ１を頭部に装着し通常状態から、頭部を縦振り動作（Ｓｔ２；頭部運動、うなずき）に変えた場合には、画像ｇ２０３が表示される。縦振り動作のときに表示される画像は、外界の画像に、ナビゲーション情報を示す鎖線ｇ２１１に加えて、鎖線ｇ２３１〜ｇ２３３で囲んだ領域の情報が重なった画像である。鎖線ｇ２３１で囲んだ領域の情報には、歩行者位置を示す情報が含まれ、鎖線ｇ２３２で囲んだ領域の情報には、例えば車速を示す情報が含まれ、鎖線ｇ２３３で囲んだ領域の情報には、燃料の残量を示す情報が含まれている。このように、本実施形態では、ＨＭＤ１Ａは、ＨＭＤ１Ａが通常状態から縦振り動作に変化したとき、表示情報をナビゲーション情報に、車速と燃料の残量等の情報を加えた情報に切り替えて表示する。なお、図８に示した例では、通常状態から縦振り動作に変化したとき、通常状態で表示するナビゲーション情報に加えて、車速、燃料の残量等の情報を表示する例を示したが、これに限られない。通常状態から縦振状態に変化したとき、ナビゲーション情報から車速、燃料の残量等の情報に切り替えるようにしてもよい。また、鎖線ｇ２３１〜ｇ２３３で囲んだ領域の情報の表示位置は、予め設定されている位置であってもよく、または利用者が端末３またはＨＭＤ１Ａを操作して設定した位置であってもよい。
利用者がＨＭＤ１を頭部に装着し縦振り動作から、頭部を横振り動作（Ｓｔ３；頭部運動、左右）に変えた場合には、画像ｇ２０４が表示される。横振り動作のときに表示される画像は、外界の画像に、ナビゲーション情報を示す鎖線ｇ２１１に加え、縦振り動作の時に表示する情報（車速、燃料の残量）と、鎖線ｇ２４１〜ｇ２４５で囲んだ領域の情報が重なった画像である。鎖線ｇ２４１で囲んだ領域の情報には、車両２の進行方向に検出された人の予測される動きを示す情報が含まれる。鎖線ｇ２４２で囲んだ領域の情報には、車両２の進行方向の他車両の予測される動きを示す情報が含まれる。鎖線ｇ２４３で囲んだ領域の情報には、車両２が走行している道路の制限速度を示す情報が含まれる。鎖線ｇ２４４で囲んだ領域の情報には、目的地名を表す画像が含まれ、鎖線ｇ２４５には、燃料を補給するまでに走行可能と予測される走行距離を示す画像が含まれている。このように、本実施形態では、ＨＭＤ１Ａは、ＨＭＤ１Ａが横振り動作から縦振り動作に変化したとき、表示情報を通常状態に表示する情報および縦振動作のときに表示する情報に加え、横振り動作のときに表示する情報を加えた情報に切り替えて表示する。なお、図８に示した例では、縦振り動作から横振り動作に変化したときに表示する情報の例を示したが、これに限られない。通常状態から縦振り動作に変化したとき、通常状態のとき表示する情報に加え、横振り動作のときに表示する情報を加えた情報に切り替えるようにしてもよい。また、鎖線ｇ２４１〜ｇ２４５で囲んだ領域の情報の表示位置は、予め設定されている位置であってもよく、または利用者が端末３またはＨＭＤ１Ａを操作して設定した位置であってもよい。
すなわち、本実施形態のＨＭＤ１Ａは、ＨＭＤ１Ａが通常状態（基準姿勢）と通常状態（基準姿勢）外の間の往復動作を所定時間内に行った場合に、付加情報を表示させる。通常状態（基準姿勢）外とは、下向き姿勢、上向き姿勢、左向き姿勢、右向き姿勢、左上向き姿勢、右上向き姿勢、左下向き姿勢、右下向き姿勢である。また、付加情報とは、例えば、車速情報、燃料の残量情報、他車両情報、対人情報、目的地情報等である。このように、付加情報は、ＨＭＤ１Ａが車両２に乗車している利用者が搭載している場合、車両２に関する情報や車両２の走行に関する情報であり、ＨＭＤ１が利用されている状況に応じた情報である。
なお、利用者がＨＭＤ１Ａを頭部に装着して鞍乗り型である車両２に乗っている場合、制御部１３２Ａは、車両２の車速に基づいて、車両２が走行しているときの検出部１２の検出値を取得し、取得した検出値を用いて各状態および各動作の閾値を補正するようにしてもよい。例えば、車両２に利用者が乗っているときの通常状態は、学習モードのときの正面を向いている姿勢より前屈みである場合があり得る。このような状態で利用者が頭部を下向き状態にしたり縦振り動作をしても、通常状態で行った学習モードのときの閾値では各状態および各動作を検出できない場合があり得る。このため、制御部１３２Ａは、走行時の検出値を用いて、閾値を補正するようにしてもよい。また、横振り動作についても、ヘルメット装着時において、学習モードのときに設定した閾値では検出できない場合があり得るので、制御部１３２Ａは、走行時の検出値を用いて閾値を補正するようにしてもよい。
なお、第２実施形態では、表示部１４に表示する情報の例として、ナビゲーション情報、車速、燃料の残量、進行方向における人や他車両の動き、目的地名、燃料を補給するまでに走行可能な距離等の例を説明したが、これに限られない。他の情報の例として、現在地に関する情報（道路情報、周辺の店舗情報）、進路にあるランドマーク名、車両２の水温計の値、車両の走行距離（トリップ）、エンジンの制御モード、サスペンションの制御モード、緊急車両の有無、道路工事の有無、進路の前方方向の渋滞の有無等の情報であってもよい。なお、これらの情報は、例えば端末３が通信回線を介して取得してＨＭＤ１Ａへ送信し、車両２が、道路情報を取得してＨＭＤ１Ａへ送信するようにしてもよい。
なお、第１実施形態および第２実施形態では、下向き状態、縦振り動作、横振り動作を検出する例を説明したが、これに限られない。制御部１３２または１３２Ａは、例えば、図３に示したように、上向き状態、左向き状態、右向き状態、左上向き状態、右上向き状態、左下向き状態、右下向き状態を検出し、検出した状態に応じて表示する情報を切り替えるようにしてもよい。すなわち、制御部１３２または１３２Ａは、ＨＭＤ１１または１Ａの通常状態（基準姿勢）に対して上下、左右、斜め方向のうち少なくとも１つの状態の判定を検出部１２の検出結果を用いて行うようにしてもよい。
以上のように、本実施形態によれば、ＨＭＤ１Ａが利用されている状況に応じた付加情報の表示を、ＨＭＤ１Ａの動作（含む状態）に応じて切り替えることができる。また、本実施形態によれば、ＨＭＤ１Ａに車両２に関する情報を表示することができ、表示する情報をＨＭＤ１Ａの動作に応じて切り替えることができる。
なお、本発明におけるＨＭＤ１、１Ａの機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより表示情報の切り替え、表示情報に基づく画像の表示等を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境（あるいは表示環境）を備えたＷＷＷシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであってもよい。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。
１、１Ａ…ヘッドマウントディスプレイ（ＨＭＤ）、２…車両、３…端末、１０…操作部、１１、１１Ａ…取得部、１２…検出部、１３、１３Ａ…情報変更部、１３１…記憶部、１３２、１３２Ａ…制御部、１３３…画像変更部、１４…表示部、１５…送信部、１２１…磁気センサー、１２２…加速度センサー、１２３…角速度センサー、２１…検出部、２２…レーダー、２３…送信部、２１１…残量検出部、２１２…車速検出部、２２１…信号生成部、２２２…送信部、２２３…受信部、２２４…他車両検出部、２２５…人検出部、３１…受信部、３２…操作部、３３…制御部、３４…表示部、３５…表示情報生成部、３６…送信部

Claims (5)

  1. ２つ以上の情報を取得する取得部と、
    画像表示装置の加速度、方位および角速度のうち少なくとも１つを検出する検出部と、
    当該画像表示装置の状態を検出するための方位の閾値と所定時間とを状態毎に記憶し、当該画像表示装置の動作を検出するための方位の閾値と所定時間とを姿勢毎に記憶する記憶部と、
    前記検出部が検出した結果と前記記憶部が記憶する情報とに基づいて、前記画像表示装置の状態を判定し、前記判定した前記画像表示装置の状態に応じて、前記取得部が取得した前記２つ以上の情報から選択する情報を切り替え、前記切り替えた情報に基づく表示データを生成する画像変更部と、
    前記表示データを表示する表示部と、
    を備え、
    前記画像変更部は、
    前記検出部が検出した結果と前記記憶部が記憶する情報とに基づいて前記画像表示装置が基準姿勢と基準姿勢外の間の往復動作を所定時間内に行ったことを判別し、前記画像表示装置が基準姿勢と基準姿勢外の間の往復動作を所定時間内に行った場合に付加情報を生成する、
    画像表示装置。
  2. 前記画像変更部は、
    前記画像表示装置の前記基準姿勢に対する上下、左右、斜め方向のうち少なくとも１つに関する前記画像表示装置の状態を、前記検出部が検出した結果に基づいて判定する、
    請求項１に記載の画像表示装置。
  3. 前記付加情報は、
    前記画像表示装置が利用されている状況に応じた情報である、
    請求項１に記載の画像表示装置。
  4. 前記画像表示装置の利用者が車両に乗車している場合、
    前記取得部は、前記車両から前記車両に関する情報を取得し、
    前記付加情報は、前記車両に関する情報である、
    請求項１または請求項３に記載の画像表示装置。
  5. 画像表示装置の姿勢を検出するための方位の閾値と所定時間とを姿勢毎に記憶し、当該画像表示装置の動作を検出するための方位の閾値と所定時間とを姿勢毎に記憶する記憶部を備える当該画像表示装置の画像表示方法であって、
    ２つ以上の情報を取得する取得手順と、
    前記画像表示装置の加速度、方位および角速度のうち少なくとも１つを検出する検出手順と、
    前記検出手順によって検出された結果と前記記憶部が記憶する情報とに基づいて、前記画像表示装置の状態を判定し、前記判定した前記画像表示装置の状態に応じて、前記取得手順によって取得された前記２つ以上の情報から選択する情報を切り替え、前記切り替えた情報に基づく表示データを生成する画像変更手順と、
    前記表示データを表示する表示手順と、
    前記検出手順によって検出された結果と前記記憶部が記憶する情報とに基づいて前記画像表示装置が基準姿勢と基準姿勢外の間の往復動作を所定時間内に行ったことを判別する往復運動判別手順と、
    を含み、
    前記画像変更手順において、
    前記往復運動判別手順で判別した結果、前記画像表示装置が基準姿勢と基準姿勢外の間の往復動作を所定時間内に行った場合に付加情報を生成する、
    画像表示方法。
JP2017566547A 2016-02-12 2017-01-06 画像表示装置および画像表示方法 Active JP6598317B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016025244 2016-02-12
JP2016025244 2016-02-12
PCT/JP2017/000242 WO2017138278A1 (ja) 2016-02-12 2017-01-06 画像表示装置および画像表示方法

Publications (2)

Publication Number Publication Date
JPWO2017138278A1 JPWO2017138278A1 (ja) 2018-10-11
JP6598317B2 true JP6598317B2 (ja) 2019-10-30

Family

ID=59563614

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017566547A Active JP6598317B2 (ja) 2016-02-12 2017-01-06 画像表示装置および画像表示方法

Country Status (5)

Country Link
US (1) US10642033B2 (ja)
EP (1) EP3416159B1 (ja)
JP (1) JP6598317B2 (ja)
CN (1) CN108475495B (ja)
WO (1) WO2017138278A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113196377B (zh) * 2018-12-20 2024-04-12 Ns西日本株式会社 显示光射出装置、平视显示装置、图像显示系统及头盔
US11733951B2 (en) * 2018-12-27 2023-08-22 Honda Motor Co., Ltd. Image display apparatus, image display system and image display method
CN110032969B (zh) * 2019-04-11 2021-11-05 北京百度网讯科技有限公司 用于检测图像中的文本区域的方法、装置、设备以及介质
JP7287257B2 (ja) * 2019-12-06 2023-06-06 トヨタ自動車株式会社 画像処理装置、表示システム、プログラムおよび画像処理方法

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09309372A (ja) * 1996-05-24 1997-12-02 Nissan Motor Co Ltd 搭乗姿勢検出装置及び情報選択装置
JP3403361B2 (ja) * 1999-09-30 2003-05-06 川崎重工業株式会社 ヘッド・マウント・ディスプレイ装置
JP2003345492A (ja) 2002-05-27 2003-12-05 Sony Corp 携帯電子機器
EP1517277A3 (en) 2003-09-22 2006-10-25 Matsushita Electric Industrial Co., Ltd. Secure device and information processing unit
JP2005099908A (ja) 2003-09-22 2005-04-14 Matsushita Electric Ind Co Ltd カード機能を有する情報記憶装置と情報処理装置
JP2007134785A (ja) 2005-11-08 2007-05-31 Konica Minolta Photo Imaging Inc 頭部装着型の映像表示装置
JP5125979B2 (ja) * 2008-10-16 2013-01-23 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 画像表示装置及びプログラム
EP2619749A4 (en) 2010-09-21 2017-11-15 4IIII Innovations Inc. Head-mounted peripheral vision display systems and methods
US20120095643A1 (en) * 2010-10-19 2012-04-19 Nokia Corporation Method, Apparatus, and Computer Program Product for Modifying a User Interface Format
JP2013083731A (ja) * 2011-10-06 2013-05-09 Murata Mach Ltd 画像表示システム
JP5510431B2 (ja) * 2011-11-21 2014-06-04 株式会社デンソー 車両用表示装置
US20140098008A1 (en) * 2012-10-04 2014-04-10 Ford Global Technologies, Llc Method and apparatus for vehicle enabled visual augmentation
US9204288B2 (en) 2013-09-25 2015-12-01 At&T Mobility Ii Llc Intelligent adaptation of address books
US10386921B2 (en) * 2013-12-03 2019-08-20 Nokia Technologies Oy Display of information on a head mounted display
DE102014004178A1 (de) * 2014-03-22 2015-09-24 Audi Ag Verfahren zum Darstellen fahrtbezogener und/oder fahrzeugspezifischer Daten
US9767373B2 (en) * 2014-09-05 2017-09-19 Ford Global Technologies, Llc Head-mounted display head pose and activity estimation
US9588593B2 (en) * 2015-06-30 2017-03-07 Ariadne's Thread (Usa), Inc. Virtual reality system with control command gestures

Also Published As

Publication number Publication date
WO2017138278A1 (ja) 2017-08-17
CN108475495A (zh) 2018-08-31
CN108475495B (zh) 2021-01-19
US10642033B2 (en) 2020-05-05
EP3416159A4 (en) 2019-07-24
EP3416159A1 (en) 2018-12-19
JPWO2017138278A1 (ja) 2018-10-11
EP3416159B1 (en) 2020-08-26
US20190155024A1 (en) 2019-05-23

Similar Documents

Publication Publication Date Title
JP6598317B2 (ja) 画像表示装置および画像表示方法
KR101659027B1 (ko) 이동 단말기 및 차량 제어 장치
JP6524422B2 (ja) 表示制御装置、表示装置、表示制御プログラム、及び表示制御方法
JP2018190217A (ja) 運転者監視装置、及び運転者監視方法
US10839623B2 (en) Vehicle, image display device, vehicle control method, and image display method
KR20150130818A (ko) 이동 단말기 및 그 제어 방법
US11110933B2 (en) Driving support device, wearable device, driving support system, driving support method, and computer-readable recording medium
US20230098451A1 (en) Ar based performance modulation of a personal mobility system
US10935789B2 (en) Image display apparatus and image display method
KR20160075203A (ko) 이동 단말기 및 이의 제어 방법
KR101578741B1 (ko) 이동 단말기 및 그 제어 방법
JP6670965B2 (ja) 表示システム及び表示方法
KR101602265B1 (ko) 이동 단말기 및 이의 제어 방법
US11900550B2 (en) AR odometry using sensor data from a personal vehicle
US20230215106A1 (en) Ar-enhanced detection and localization of a personal mobility device
JP2020100912A (ja) 画像表示システム
US10563989B2 (en) Visual and lateralized navigation assistance system
JP5892309B2 (ja) 車両用視線誘導装置
CN110347163B (zh) 一种无人驾驶设备的控制方法、设备及无人驾驶控制系统
KR20160023755A (ko) 이동 단말기 및 그 제어 방법
WO2023129812A1 (en) Augmented reality (ar) - enhanced detection and localization of a personal mobility device
WO2023122459A1 (en) An odometry using sensor data from a personal vehicle
JP2014196086A (ja) 輸送機器用表示装置

Legal Events

Date Code Title Description
A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A527

Effective date: 20180418

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180418

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190604

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190802

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190903

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190927

R150 Certificate of patent or registration of utility model

Ref document number: 6598317

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150