JP2014119786A - 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、作業支援システム - Google Patents

Abstract

【課題】頭部装着型表示装置において、使用者が行う作業を支援すると共に、当該作業に付随する危険等の注意点を使用者に知らせる。
【解決手段】使用者が虚像と外景を同時に視認可能な頭部装着型表示装置は、現在の手順について、使用者が実施すべき内容を表す画像である手順情報を生成する手順管理部と、現在の手順において、使用者に注意を促すための画像である注意情報を生成する注意情報生成部と、手順情報と、注意情報とを、虚像として使用者に視認させる画像表示部とを備える。
【選択図】図１６

Description

本発明は、頭部装着型表示装置に関する。

現実環境にコンピューターを用いて情報を付加提示する拡張現実（ＡＲ、Augmented Reality）と呼ばれる技術が知られている。拡張現実は、例えばヘッドマウントディスプレイ（以降、「頭部装着型表示装置」と呼ぶ。）に搭載される。頭部装着型表示装置は、カメラで外景を撮像し、撮像により得られた画像を画像認識し、付加提示用の情報を生成する。頭部装着型表示装置を装着した状態において使用者の視界が遮断される非透過型の頭部装着型表示装置では、撮像された画像と、付加提示用の情報とを重畳させた画像を液晶画面に表示させる。頭部装着型表示装置を装着した状態でも使用者の視界が遮断されない透過型の頭部装着型表示装置では、付加提示用の情報を表す画像を液晶画面に表示させる。このようにして、使用者は拡張現実を体感することができる。

特許文献１および特許文献２には、作業内容や作業手順を付加提示用の情報として生成し、使用者に提示することが可能な頭部装着型表示装置が記載されている。特許文献３には、撮像された使用者の作業領域の画像を危険領域特定情報に基づいて画像認識し、使用者の身体の一部が危険領域内に存在する場合に工作機械を緊急停止させる危険回避システムが記載されている。特許文献４には、赤外線センサーによって使用者周辺の段差等の障害物を検出し、段差等を目立たせるための付加提示用の情報を生成し、使用者に提示することが可能な頭部装着型表示装置が記載されている。

特許第３７３５０８６号公報 特開２０１１−１１４７８１号公報 特開２０１０−１４４７７３号公報 特開２００６−１４６７７８号公報

特許文献１、２に記載された技術では、使用者が行う作業を支援することができる。しかし、従来から、作業に付随する危険等の注意点を使用者に知らせることによって、事故を低減させたいという要望があった。特許文献３、４に記載された技術では、使用者が行う作業を支援することはできないという課題があった。

このため、使用者が行う作業を支援すると共に、当該作業に付随する危険等の注意点を使用者に知らせることが可能な頭部装着型表示装置が望まれていた。

本発明は、上述の課題の少なくとも一部を解決するためになされたものであり、以下の形態として実現することが可能である。

（１）本発明の一形態によれば、使用者が虚像と外景を同時に視認可能な頭部装着型表示装置が提供される。この頭部装着型表示装置は；現在の手順について、前記使用者が実施すべき内容を表す画像である手順情報を生成する手順管理部と；前記現在の手順において、前記使用者に注意を促すための画像である注意情報を生成する注意情報生成部と；前記手順情報と、前記注意情報とを、前記虚像として前記使用者に視認させる画像表示部と、を備える。この形態の頭部装着型表示装置によれば、画像表示部は、現在の手順について使用者が実施すべき内容を表した手順情報と、使用者に注意を促すための注意情報と、の両方を虚像として使用者に視認させる。このため、使用者が行う作業を支援すると共に、当該作業に付随する注意点を使用者に知らせることが可能な頭部装着型表示装置を実現することができる。

（２）上記形態の頭部装着型表示装置において；前記注意情報生成部は、前記現在の手順において、予め記憶されている注意点データーが存在する場合に、前記注意情報を生成してもよい。この形態の頭部装着型表示装置によれば、注意情報生成部は、現在のステップに対して予め記憶されている注意点データーが存在する場合に、注意情報を生成することができる。

（３）上記形態の頭部装着型表示装置では、さらに；前記頭部装着型表示装置を装着した状態における前記使用者の視界方向の画像を取得する画像取得部を備え；前記手順管理部は、前記画像取得部により取得された前記画像に基づいて、作業に含まれる複数の手順から前記現在の手順を特定してもよい。この形態の頭部装着型表示装置によれば、手順管理部は、使用者の視界方向の画像に基づいて、作業に含まれる複数の手順から、自動的に現在の手順を特定することができる。

（４）上記形態の頭部装着型表示装置において；前記手順管理部は、前記作業に含まれる前記手順を表す情報と、当該手順内において前記使用者が実施すべき内容を表す情報と、の関連付けを用いて、前記現在の手順に対応する前記手順情報を生成してもよい。この形態の頭部装着型表示装置によれば、手順管理部は、手順と、当該手順内において使用者が実施すべき内容との関連付けを用いて、簡便に手順情報を生成することができる。

（５）上記形態の頭部装着型表示装置において；前記予め記憶されている注意点データーは、前記作業に含まれる前記手順を表す情報と、当該手順内における過去の事故と過去のヒヤリハットとの少なくともいずれか一方に関する情報と、を関連付けたデーターであり；前記注意情報生成部は、前記注意点データーを用いて、前記現在の手順に対応する前記注意情報を生成してもよい。この形態の頭部装着型表示装置によれば、注意情報生成部は、手順と、当該手順内における過去の事故やヒヤリハットに関する情報との関連付けを用いて、簡便に注意情報を生成することができる。

（６）上記形態の頭部装着型表示装置において；前記手順管理部は、前記現在の手順に対応する前記手順情報を生成後、所定の確認処理に成功するまでは、次の手順に対応する前記手順情報の生成を制限してもよい。この形態の頭部装着型表示装置によれば、手順管理部は、現在の手順を案内するための手順情報を生成後、次の手順を案内するための手順情報の生成に遷移するまでの間に、所定の確認処理を行うことができる。このため、手順内の作業の安全性を向上させることができる。

（７）上記形態の頭部装着型表示装置において；前記所定の確認処理は、前記使用者からの確認の意思表示の取得であってもよい。この形態の頭部装着型表示装置によれば、手順管理部は、現在の手順と次の手順との間において使用者に対して何らかの確認を行い、使用者からの確認の意思表示を取得することで、手順内の作業の安全性を向上させることができる。

（８）上記形態の頭部装着型表示装置において；前記所定の確認処理は、前記画像取得部により取得された前記画像を画像認識すると共に、前記画像認識の結果が予め定められた条件を満たすことを確認することであってもよい。この形態の頭部装着型表示装置によれば、手順管理部は、現在の手順と次の手順との間において使用者の視界方向の画像を画像認識し、画像認識の結果が予め定められた条件を満たすことを確認することで、手順内の作業の安全性を向上させることができる。

（９）上記形態の頭部装着型表示装置において；前記予め定められた条件は、前記使用者の年齢と、性別と、体格と、作業に対する熟練度と、の少なくともいずれか一つを含む前記使用者の特徴に応じて変動してもよい。この形態の頭部装着型表示装置によれば、手順管理部は、使用者の年齢と、性別と、体格と、作業に対する熟練度と、の少なくともいずれか一つを含む使用者の特徴に応じて、画像認識の結果を照合するための条件を変動させることができる。このため、使用者の特徴に応じたきめ細かな確認処理を行うことができる。

（１０）上記形態の頭部装着型表示装置において；前記注意情報生成部は、前記現在の手順において過去に事故が発生した場合と、前記現在の手順において過去にヒヤリハットが発生した場合とにおいて、異なる前記注意情報を生成してもよい。この形態の頭部装着型表示装置によれば、注意情報生成部は、現在の手順において過去に事故が発生した場合とヒヤリハットが発生した場合とにおいて、異なる注意情報を生成する。このため、使用者は、現在の手順において過去に発生した事例が事故であるのか、ヒヤリハットであるのかを知ることができる。

（１１）上記形態の頭部装着型表示装置において；前記注意情報生成部は、前記使用者の年齢と、性別と、体格と、作業に対する熟練度と、の少なくともいずれか一つを含む前記使用者の特徴に応じて、異なる前記注意情報を生成してもよい。この形態の頭部装着型表示装置によれば、注意情報生成部は、使用者の年齢と、性別と、体格と、作業に対する熟練度と、の少なくともいずれか一つを含む使用者の特徴に応じて、異なる注意情報を生成することができる。このため、使用者の特徴に応じたきめ細かな注意情報の生成を行うことができる。

（１２）上記形態の頭部装着型表示装置において；前記手順管理部は、前記画像取得部により取得された前記画像のうち、前記虚像の表示領域と前記画像取得部の取得領域とが重複する重複領域に対して前記手順情報を生成し；前記注意情報生成部は、前記重複領域に対して前記注意情報を生成してもよい。この形態の頭部装着型表示装置によれば、手順管理部と注意情報生成部とは、それぞれ、虚像の表示領域と画像取得部の取得領域とが重複する重複領域に対して、手順情報と注意情報とを生成する。このため、透過型の頭部装着型表示装置において生じる課題であった「使用者が自身の視界において直接目にする像と、画像表示部により視認させられる虚像との間のずれ」の発生を低減させることができる。この結果、手順情報と注意情報とを虚像として視認させた場合に、使用者に与える違和感を低減させることができる。

（１３）上記形態の頭部装着型表示装置では、さらに；発音体を備え；前記注意情報生成部は、前記現在の手順に対応する前記過去の事故と過去のヒヤリハットとの少なくともいずれか一方に関する情報に基づいて、前記使用者に注意を促すための音声を前記発音体から出力させてもよい。この形態の頭部装着型表示装置によれば、注意情報生成部はさらに、音声を通じて使用者に注意を促すことができる。

（１４）上記形態の頭部装着型表示装置では、さらに；前記使用者に対して触覚を通じた刺激を加える触覚刺激部を備え；前記注意情報生成部は、前記現在の手順に対応する前記過去の事故と過去のヒヤリハットとの少なくともいずれか一方に関する情報に基づいて、前記使用者に注意を促すために前記触覚刺激部を作動させてもよい。この形態の頭部装着型表示装置によれば、注意情報生成部はさらに、触覚を通じた刺激を通じて、使用者に注意を促すことができる。

（１５）本発明の一形態によれば、作業支援システムが提供される。この作業支援システムは、上記形態の頭部装着型表示装置と；サーバーと、を備え；前記サーバーは；前記作業に含まれる前記手順を表す情報と、当該手順内において前記使用者が実施すべき内容を表す情報と、の関連付けを記憶する第１のテーブルと；前記作業に含まれる前記手順を表す情報と、当該手順内における過去の事故と過去のヒヤリハットとの少なくともいずれか一方に関する情報と、の関連付けを記憶する第２のテーブルと；前記頭部装着型表示装置からの要求に応じて、前記第１のテーブルに記憶されている情報と、前記第２のテーブルに記憶されている情報と、のうちの少なくとも一方を送信する送信部と、を備える。この形態の作業支援システムによれば、第１のテーブルと第２のテーブルとを頭部装着型表示装置とは異なる装置であるサーバーに記憶させておくことができ、頭部装着型表示装置は、サーバーから、第１および第２のテーブルの情報を取得することができる。このようにすれば、１台のサーバーに記憶されている第１および第２のテーブルの情報を、複数台の頭部装着型表示装置で共有することが可能となる。この結果、各頭部装着型表示装置にそれぞれ第１および第２のテーブルを備える構成と比較して、テーブルの更新に要する労力が低減される。

上述した本発明の各形態の有する複数の構成要素は全てが必須のものではなく、上述の課題の一部または全部を解決するため、あるいは、本明細書に記載された効果の一部または全部を達成するために、適宜、前記複数の構成要素の一部の構成要素について、その変更、削除、新たな構成要素との差し替え、限定内容の一部削除を行うことが可能である。また、上述の課題の一部または全部を解決するため、あるいは、本明細書に記載された効果の一部または全部を達成するために、上述した本発明の一形態に含まれる技術的特徴の一部または全部を上述した本発明の他の形態に含まれる技術的特徴の一部または全部と組み合わせて、本発明の独立した一形態とすることも可能である。

例えば、本発明の一形態は、手順管理部と、注意情報生成部と、画像表示部と、の３つの要素のうちの一部または全部の要素を備えた装置として実現可能である。すなわち、この装置は、手順管理部を有していてもよく、有していなくてもよい。また、この装置は、注意情報生成部を有していてもよく、有していなくてもよい。また、この装置は、画像表示部を有していてもよく、有していなくてもよい。こうした装置は、例えば頭部装着型表示装置として実現できるが、頭部装着型表示装置以外の他の装置としても実現可能である。前述した頭部装着型表示装置の各形態の技術的特徴の一部または全部は、いずれもこの装置に適用することが可能である。

なお、本発明は、種々の態様で実現することが可能であり、例えば、頭部装着型表示装置および頭部装着型表示装置の制御方法、作業支援装置および作業支援装置の制御方法、作業支援システム、これらの方法、装置またはシステムの機能を実現するためのコンピュータープログラム、そのコンピュータープログラムを記録した記録媒体等の形態で実現することができる。

本発明の一実施形態における頭部装着型表示装置の概略構成を示す説明図である。 ヘッドマウントディスプレイの構成を機能的に示すブロック図である。 画像光生成部によって画像光が射出される様子を示す説明図である。 使用者に認識される虚像の一例を示す説明図である。 第１実施形態における注意喚起処理の手順を示すフローチャートである。 カメラによって撮像された外景画像の一例を示す説明図である。 形状についての注意情報の例を示す説明図である。 温度についての注意情報の例を示す説明図である。 温度についての注意情報の例を示す説明図である。 使用者が視認可能な像の一例を示す説明図である。 第２実施形態におけるヘッドマウントディスプレイの構成を機能的に示すブロック図である。 手順管理テーブルの一例を示す説明図である。 第２実施形態における手順管理処理の手順を示すフローチャートである。 事例についての注意情報の例を示す説明図である。 手順情報の例を示す説明図である。 使用者が視認可能な像の一例を示す説明図である。 処理（Ｉ）を説明するための説明図である。 処理（ＩＩ）を説明するための説明図である。 変形例におけるヘッドマウントディスプレイの外観の構成を示す説明図である。

Ａ．第１実施形態：
Ａ−１．頭部装着型表示装置の構成：
図１は、本発明の一実施形態における頭部装着型表示装置の概略構成を示す説明図である。頭部装着型表示装置１００は、頭部に装着する表示装置であり、ヘッドマウントディスプレイ（Head Mounted Display、ＨＭＤ）とも呼ばれる。本実施形態のヘッドマウントディスプレイ１００は、使用者が、虚像を視認すると同時に外景も直接視認可能な光学透過型の頭部装着型表示装置である。

ヘッドマウントディスプレイ１００は、使用者の頭部に装着された状態において使用者に虚像を視認させる画像表示部２０と、画像表示部２０を制御する制御部（コントローラー）１０とを備えている。

画像表示部２０は、使用者の頭部に装着される装着体であり、本実施形態では眼鏡形状を有している。画像表示部２０は、右保持部２１と、右表示駆動部２２と、左保持部２３と、左表示駆動部２４と、右光学像表示部２６と、左光学像表示部２８と、カメラ６１と、サーモグラフィー６２と、を含んでいる。右光学像表示部２６および左光学像表示部２８は、それぞれ、使用者が画像表示部２０を装着した際に使用者の右および左の眼前に位置するように配置されている。右光学像表示部２６の一端と左光学像表示部２８の一端とは、使用者が画像表示部２０を装着した際の使用者の眉間に対応する位置で、互いに接続されている。

右保持部２１は、右光学像表示部２６の他端である端部ＥＲから、使用者が画像表示部２０を装着した際の使用者の側頭部に対応する位置にかけて、延伸して設けられた部材である。同様に、左保持部２３は、左光学像表示部２８の他端である端部ＥＬから、使用者が画像表示部２０を装着した際の使用者の側頭部に対応する位置にかけて、延伸して設けられた部材である。右保持部２１および左保持部２３は、眼鏡のテンプル（つる）のようにして、使用者の頭部に画像表示部２０を保持する。

右表示駆動部２２は、右保持部２１の内側、換言すれば、使用者が画像表示部２０を装着した際の使用者の頭部に対向する側に配置されている。また、左表示駆動部２４は、左保持部２３の内側に配置されている。なお、以降では、右保持部２１および左保持部２３を総称して単に「保持部」とも呼び、右表示駆動部２２および左表示駆動部２４を総称して単に「表示駆動部」とも呼び、右光学像表示部２６および左光学像表示部２８を総称して単に「光学像表示部」とも呼ぶ。

表示駆動部は、液晶ディスプレイ（Liquid Crystal Display、以下「ＬＣＤ」と呼ぶ）２４１、２４２や投写光学系２５１、２５２等を含む（図２参照）。表示駆動部の構成の詳細は後述する。光学部材としての光学像表示部は、導光板２６１、２６２（図２参照）と調光板とを含んでいる。導光板２６１，２６２は、光透過性の樹脂材料等によって形成され、表示駆動部から出力された画像光を使用者の眼に導く。調光板は、薄板状の光学素子であり、画像表示部２０の表側（使用者の眼の側とは反対の側）を覆うように配置されている。調光板は、導光板２６１，２６２を保護し、導光板２６１，２６２の損傷や汚れの付着等を抑制する。また、調光板の光透過率を調整することによって、使用者の眼に入る外光量を調整して虚像の視認のしやすさを調整することができる。なお、調光板は省略可能である。

カメラ６１と、サーモグラフィー６２とは、使用者が画像表示部２０を装着した際の使用者の眉間に対応する位置に配置されている。カメラ６１は、画像表示部２０の表側方向、換言すれば、ヘッドマウントディスプレイ１００を装着した状態における使用者の視界方向の外景（外部の景色）を撮像し、外景画像を取得する。カメラ６１はいわゆる可視光カメラであり、カメラ６１により取得される外景画像は、物体から放射される可視光から物体の形状を表す画像である。本実施形態におけるカメラ６１は単眼カメラであるが、ステレオカメラとしてもよい。サーモグラフィー６２は、カメラ６１と同様に、画像表示部２０の表側方向の外景を撮像し、温度分布画像を取得する。サーモグラフィー６２は、いわゆる赤外線サーモグラフィーであり、物体から放射される赤外線を検出し、検出した赤外線エネルギー量を温度に換算し、温度の分布を表す温度分布画像（赤外線熱画像）を生成する。カメラ６１およびサーモグラフィー６２は、特許請求の範囲における「画像取得部」に相当する。

画像表示部２０は、さらに、画像表示部２０を制御部１０に接続するための接続部４０を有している。接続部４０は、制御部１０に接続される本体コード４８と、本体コード４８が２本に分岐した右コード４２および左コード４４と、分岐点に設けられた連結部材４６と、を含んでいる。右コード４２は、右保持部２１の延伸方向の先端部ＡＰから右保持部２１の筐体内に挿入され、右表示駆動部２２に接続されている。同様に、左コード４４は、左保持部２３の延伸方向の先端部ＡＰから左保持部２３の筐体内に挿入され、左表示駆動部２４に接続されている。連結部材４６には、イヤホンプラグ３０を接続するためのジャックが設けられている。イヤホンプラグ３０からは、右イヤホン３２および左イヤホン３４が延伸している。

画像表示部２０と制御部１０とは、接続部４０を介して各種信号の伝送を行う。本体コード４８における連結部材４６とは反対側の端部と、制御部１０とのそれぞれには、互いに嵌合するコネクター（図示省略）が設けられており、本体コード４８のコネクターと制御部１０のコネクターとの嵌合／嵌合解除により、制御部１０と画像表示部２０とが接続されたり切り離されたりする。右コード４２と、左コード４４と、本体コード４８には、例えば、金属ケーブルや光ファイバーを採用することができる。

制御部１０は、ヘッドマウントディスプレイ１００を制御するための装置である。制御部１０は、点灯部１２と、タッチパッド１４と、十字キー１６と、電源スイッチ１８とを含んでいる。点灯部１２は、ヘッドマウントディスプレイ１００の動作状態（例えば、電源のＯＮ／ＯＦＦ等）を、その発光態様によって通知する。点灯部１２としては、例えば、ＬＥＤ（Light Emitting Diode）を用いることができる。タッチパッド１４は、タッチパッド１４の操作面上での接触操作を検出して、検出内容に応じた信号を出力する。タッチパッド１４としては、静電式や圧力検出式、光学式といった種々のタッチパッドを採用することができる。十字キー１６は、上下左右方向に対応するキーへの押下操作を検出して、検出内容に応じた信号を出力する。電源スイッチ１８は、スイッチのスライド操作を検出することで、ヘッドマウントディスプレイ１００の電源の状態を切り替える。

図２は、ヘッドマウントディスプレイ１００の構成を機能的に示すブロック図である。制御部１０は、入力情報取得部１１０と、記憶部１２０と、電源１３０と、無線通信部１３２と、ＣＰＵ１４０と、インターフェイス１８０と、送信部（Ｔｘ）５１および５２とを備え、各部は図示しないバスにより相互に接続されている。

入力情報取得部１１０は、例えば、タッチパッド１４や十字キー１６、電源スイッチ１８に対する操作入力に応じた信号を取得する。記憶部１２０は、ＲＯＭ、ＲＡＭ、ＤＲＡＭ、ハードディスク等によって構成されている。電源１３０は、ヘッドマウントディスプレイ１００の各部に電力を供給する。電源１３０としては、例えば二次電池を用いることができる。無線通信部１３２は、無線ＬＡＮやブルートゥースといった所定の無線通信規格に則って他の機器との間で無線通信を行う。

ＣＰＵ１４０は、記憶部１２０に格納されているコンピュータープログラムを読み出して実行することにより、オペレーティングシステム（ОＳ）１５０、画像処理部１６０、音声処理部１７０、表示制御部１９０、注意情報生成部１４２として機能する。注意情報生成部１４２は、注意喚起処理を実行するアプリケーションプログラムである。注意喚起処理とは、カメラ６１により取得された外景画像や、サーモグラフィー６２により取得された温度分布画像に基づいて、使用者の視界方向における注意点を推定し、使用者に注意を喚起する処理である。

画像処理部１６０は、インターフェイス１８０や無線通信部１３２を介して入力されるコンテンツ（映像）に基づいて信号を生成する。そして、画像処理部１６０は、生成した信号を、接続部４０を介して画像表示部２０に供給する。画像表示部２０に供給するための信号は、アナログ形式とディジタル形式の場合で異なる。アナログ形式の場合、画像処理部１６０は、クロック信号ＰＣＬＫと、垂直同期信号ＶＳｙｎｃと、水平同期信号ＨＳｙｎｃと、画像データーＤａｔａとを生成・送信する。具体的には、画像処理部１６０は、コンテンツに含まれる画像信号を取得する。取得した画像信号は、例えば動画像の場合、一般的に１秒あたり３０枚のフレーム画像から構成されているアナログ信号である。画像処理部１６０は、取得した画像信号から、垂直同期信号ＶＳｙｎｃや水平同期信号ＨＳｙｎｃ等の同期信号を分離し、それらの周期に応じて、ＰＬＬ回路等によりクロック信号ＰＣＬＫを生成する。画像処理部１６０は、同期信号が分離されたアナログ画像信号を、Ａ／Ｄ変換回路等を用いてディジタル画像信号に変換する。画像処理部１６０は、変換後のディジタル画像信号を、ＲＧＢデーターの画像データーＤａｔａとして、１フレームごとに記憶部１２０内のＤＲＡＭに格納する。一方、ディジタル形式の場合、画像処理部１６０は、クロック信号ＰＣＬＫと、画像データーＤａｔａとを生成・送信する。具体的には、コンテンツがディジタル形式の場合、クロック信号ＰＣＬＫが画像信号に同期して出力されるため、垂直同期信号ＶＳｙｎｃおよび水平同期信号ＨＳｙｎｃの生成と、アナログ画像信号のＡ／Ｄ変換とが不要となる。なお、画像処理部１６０は、記憶部１２０に格納された画像データーＤａｔａに対して、解像度変換処理や、輝度・彩度の調整といった種々の色調補正処理や、キーストーン補正処理等の画像処理を実行してもよい。

画像処理部１６０は、生成されたクロック信号ＰＣＬＫ、垂直同期信号ＶＳｙｎｃ、水平同期信号ＨＳｙｎｃと、記憶部１２０内のＤＲＡＭに格納された画像データーＤａｔａとを、送信部５１、５２を介してそれぞれ送信する。なお、送信部５１を介して送信される画像データーＤａｔａを「右眼用画像データー」とも呼び、送信部５２を介して送信される画像データーＤａｔａを「左眼用画像データー」とも呼ぶ。送信部５１、５２は、制御部１０と画像表示部２０との間におけるシリアル伝送のためのトランシーバーとして機能する。

表示制御部１９０は、右表示駆動部２２および左表示駆動部２４を制御する制御信号を生成する。具体的には、表示制御部１９０は、制御信号により、右ＬＣＤ制御部２１１による右ＬＣＤ２４１の駆動ＯＮ／ＯＦＦや、右バックライト制御部２０１による右バックライト２２１の駆動ＯＮ／ＯＦＦ、左ＬＣＤ制御部２１２による左ＬＣＤ２４２の駆動ＯＮ／ＯＦＦや、左バックライト制御部２０２による左バックライト２２２の駆動ＯＮ／ＯＦＦなどを個別に制御することにより、右表示駆動部２２および左表示駆動部２４のそれぞれによる画像光の生成および射出を制御する。例えば、表示制御部１９０は、右表示駆動部２２および左表示駆動部２４の両方に画像光を生成させたり、一方のみに画像光を生成させたり、両方共に画像光を生成させなかったりする。また、表示制御部１９０は、右ＬＣＤ制御部２１１と左ＬＣＤ制御部２１２とに対する制御信号を、送信部５１および５２を介してそれぞれ送信する。また、表示制御部１９０は、右バックライト制御部２０１と左バックライト制御部２０２とに対する制御信号を、それぞれ送信する。

音声処理部１７０は、コンテンツに含まれる音声信号を取得し、取得した音声信号を増幅して、連結部材４６に接続された右イヤホン３２内の図示しないスピーカーおよび左イヤホン３４内の図示しないスピーカーに対して供給する。なお、例えば、Ｄｏｌｂｙ（登録商標）システムを採用した場合、音声信号に対する処理がなされ、右イヤホン３２および左イヤホン３４からは、それぞれ、例えば周波数等が変えられた異なる音が出力される。

インターフェイス１８０は、制御部１０に対して、コンテンツの供給元となる種々の外部機器ＯＡを接続するためのインターフェイスである。外部機器ОＡとしては、例えば、パーソナルコンピューターＰＣや携帯電話端末、ゲーム端末等がある。インターフェイス１８０としては、例えば、ＵＳＢインターフェイスや、マイクロＵＳＢインターフェイス、メモリーカード用インターフェイス等を用いることができる。

画像表示部２０は、右表示駆動部２２と、左表示駆動部２４と、右光学像表示部２６としての右導光板２６１と、左光学像表示部２８としての左導光板２６２と、カメラ６１とを備えている。

右表示駆動部２２は、受信部（Ｒｘ）５３と、光源として機能する右バックライト（ＢＬ）制御部２０１および右バックライト（ＢＬ）２２１と、表示素子として機能する右ＬＣＤ制御部２１１および右ＬＣＤ２４１と、右投写光学系２５１とを含んでいる。なお、右バックライト制御部２０１と、右ＬＣＤ制御部２１１と、右バックライト２２１と、右ＬＣＤ２４１とを総称して「画像光生成部」とも呼ぶ。

受信部５３は、制御部１０と画像表示部２０との間におけるシリアル伝送のためのレシーバーとして機能する。右バックライト制御部２０１は、入力された制御信号に基づいて、右バックライト２２１を駆動する。右バックライト２２１は、例えば、ＬＥＤやエレクトロルミネセンス（ＥＬ）等の発光体である。右ＬＣＤ制御部２１１は、受信部５３を介して入力されたクロック信号ＰＣＬＫと、垂直同期信号ＶＳｙｎｃと、水平同期信号ＨＳｙｎｃと、右眼用画像データーＤａｔａ１とに基づいて、右ＬＣＤ２４１を駆動する。右ＬＣＤ２４１は、複数の画素をマトリクス状に配置した透過型液晶パネルである。

右投写光学系２５１は、右ＬＣＤ２４１から射出された画像光を並行状態の光束にするコリメートレンズによって構成される。右光学像表示部２６としての右導光板２６１は、右投写光学系２５１から出力された画像光を、所定の光路に沿って反射させつつ使用者の右眼ＲＥに導く。なお、右投写光学系２５１と右導光板２６１とを総称して「導光部」とも呼ぶ。導光部は、画像光を用いて使用者の眼前に虚像を形成する限りにおいて任意の方式を用いることができ、例えば、回折格子を用いても良いし、半透過反射膜を用いても良い。

左表示駆動部２４は、右表示駆動部２２と同様の構成を有している。すなわち、左表示駆動部２４は、受信部（Ｒｘ）５４と、光源として機能する左バックライト（ＢＬ）制御部２０２および左バックライト（ＢＬ）２２２と、表示素子として機能する左ＬＣＤ制御部２１２および左ＬＣＤ２４２と、左投写光学系２５２とを含んでいる。詳細な説明は省略する。

図３は、画像光生成部によって画像光が射出される様子を示す説明図である。右ＬＣＤ２４１は、マトリクス状に配置された各画素位置の液晶を駆動することによって、右ＬＣＤ２４１を透過する光の透過率を変化させることにより、右バックライト２２１から照射される照明光ＩＬを、画像を表す有効な画像光ＰＬへと変調する。左側についても同様である。なお、図３のように、本実施形態ではバックライト方式を採用することとしたが、フロントライト方式や、反射方式を用いて画像光を射出する構成としてもよい。

図４は、使用者に認識される虚像の一例を示す説明図である。図４には、使用者の視野ＶＲを例示している。上述のようにして、ヘッドマウントディスプレイ１００の使用者の両眼に導かれた画像光が使用者の網膜に結像することにより、使用者は虚像ＶＩを視認する。また、使用者の視野ＶＲのうち、虚像ＶＩが表示された部分以外については、使用者は、右光学像表示部２６および左光学像表示部２８を透過して外景ＳＣを視認する。図４に示す例では、外景ＳＣは、テーブルソーが置かれた作業場の風景である。なお、ヘッドマウントディスプレイ１００では、使用者は、視野ＶＲのうち、虚像ＶＩと重複する部分についても、虚像ＶＩの背後に外景ＳＣを視認することができる。

Ａ−２．注意喚起処理：
図５は、第１実施形態における注意喚起処理の手順を示すフローチャートである。注意喚起処理は、使用者の視界方向における注意点を推定し、使用者に注意を喚起する処理である。注意喚起処理の開始トリガーは任意に定めることができる。例えば、ヘッドマウントディスプレイ１００が起動されたこと、換言すれば、電源のＯＮを検出したことを開始トリガーとしてもよい。また、例えば、ＯＳ１５０や、特定のアプリケーションからの処理開始要求を開始トリガーとしてもよい。なお、注意喚起処理が特定のアプリケーションから呼び出されて実行される場合、注意喚起処理は、特定のアプリケーションのサブルーチンとして動作する。

注意情報生成部１４２は、カメラ６１から外景画像を取得する（ステップＳ１０２）。具体的には、注意情報生成部１４２は、カメラ６１を起動し、カメラ６１に対して撮像を指示し、カメラ６１によって撮像された外景画像を取得する。

図６は、カメラ６１によって撮像された外景画像の一例を示す説明図である。図６の例では、外景画像は、テーブルソーが置かれた作業場の画像である。外景画像を取得後、注意情報生成部１４２は、外景画像を画像認識することによって、使用者の視界方向における注意点を推定する（図５、ステップＳ１０４）。本実施形態において、使用者の視界方向における注意点とは、ヘッドマウントディスプレイ１００を装着した状態の使用者の視線の方向に存在する場所のうち、危険な場所や危険が予知される場所を意味する。ステップＳ１０４では、具体的に以下のような場所を「危険な場所・危険が予知される場所」であるとする。

（ａ１）使用者が体や着衣を傷付けるおそれのある鋭角部。例えば、テーブルソーの鋸刃、切削機械の治具、回転ドリルの先端工具等。
（ａ２）使用者が体や着衣を挟み込まれるおそれのある挟み込み部。例えば、プレス機器のホルスターとスライド、マシニングセンターのテーブルとフレーム等。
（ａ３）使用者が体や着衣を巻き込まれるおそれのある巻き込み部。例えば、丸鋸盤のローラー、攪拌機の攪拌羽根等。
注意情報生成部１４２は、外景画像を画像認識して、記憶部120に予め記憶されているパターンとの一致箇所を特定することによって、外景画像から、上記の場所（ａ１）〜（ａ３）に該当する場所を特定する。図６の外景画像の例では、注意情報生成部１４２は、場所（ａ１）に該当する場所としてテーブルソーの鋸刃部分を特定する。このようにすれば、注意情報生成部１４２は、画像認識とパターン照合の手法を用いて、鋭角部と、挟み込み部と、巻き込み部と、を特定することによって、個別に予め用意された危険場所に関する情報を必要とせずに、使用者の視界方向における注意点を推定することができる。

注意点を推定後、注意情報生成部１４２は、形状についての注意情報を生成する（図５、ステップＳ１０６）。具体的には、注意情報生成部１４２は、ステップＳ１０４で特定された場所の近傍に所定の画像を配置することによって、形状についての注意情報を生成する。

図７は、形状についての注意情報ＣＰ１の例を示す説明図である。図７（Ａ）は、注意情報ＣＰ１の第１の例を示している。図７（Ａ）の注意情報ＣＰ１では、ステップＳ１０４で特定された場所（すなわち、テーブルソーの鋸刃部分）の近傍に、使用者に警告を連想させる文字である「！」と、アイコンである旨を強調するための三角形との組み合わせからなるアイコン画像ＩＣ１が配置されている。なお、ステップＳ１０４で特定された場所が複数ある場合は、当該複数の場所に対してそれぞれアイコン画像ＩＣ１が配置される。また、図７（Ａ）に示したアイコン画像ＩＣ１はあくまで一例であり、注意情報ＣＰ１に配置される画像としては、使用者に警告を連想させる文字、絵柄、図形、およびこれらの組み合わせからなる画像である限り、どのような画像を採用してもよい。例えば、「注意」や「危険」等の文字を用いてもよいし、矢印等の図形を用いてもよい。また、例えば、財団法人家電製品協会（ＡＥＨＡ、Association for Electric Home Appliances）や、化学品の分類および表示に関する世界調和システム（GHS、Globally Harmonized System of Classification and Labelling of Chemicals）等の、所定の団体や規格の推奨に沿った表示を行ってもよい。このようにすれば、注意情報生成部１４２は、使用者に対して注意すべき旨をわかりやすく伝えることが可能な注意情報を生成することができる。

図７（Ｂ）は、注意情報ＣＰ１の第２の例を示している。図７（Ｂ）の注意情報ＣＰ１では、ステップＳ１０４で特定された場所（すなわち、テーブルソーの鋸刃部分）に重畳させて、テーブルソーの鋸刃の形状に対応して湾曲した楕円形形状を有する図形ＳＢ１が配置されている。なお、ステップＳ１０４で特定された場所が複数ある場合は、当該複数の場所に対して、それぞれ対応した形状を有する図形ＳＢ１が配置される。また、図７（Ｂ）に示した図形ＳＢ１はあくまで一例であり、注意情報ＣＰ１に配置される画像としては、ステップＳ１０４で特定された場所の形状に対応した形状を有する図形からなる画像である限り、どのような画像を採用してもよい。例えば、注意をより喚起するために、図形ＳＢ１の枠の内側に色を付してもよい。また、図形ＳＢ１は重畳表示ではなく、ステップＳ１０４で特定された場所の近傍に配置されてもよい。このようにすれば、注意情報生成部１４２は、使用者に対して注意すべき場所をわかりやすく伝えることが可能な注意情報を生成することができる。

形状についての注意情報を生成後、図５のステップＳ１０８において注意情報生成部１４２は、サーモグラフィー６２から温度分布画像を取得する。具体的には、注意情報生成部１４２は、サーモグラフィー６２を起動し、サーモグラフィー６２に対して撮像を指示し、サーモグラフィー６２によって撮像された温度分布画像を取得する。

温度分布画像を取得後、注意情報生成部１４２は、温度分布画像を画像解析することによって、使用者の視界方向における注意点を推定する（ステップＳ１１０）。ステップＳ１１０では、具体的に以下のような場所を「危険な場所・危険が予知される場所」であるとする。

（ｂ１）温度分布画像において温度が第１の閾値以上である高温部。第１の閾値は任意に定めることができ、例えば、人間が触れると火傷のおそれがある温度とすることができる。
（ｂ２）温度分布画像において温度が第２の閾値以下である低温部。第２の閾値は任意に定めることができ、例えば、人間が触れると皮膚組織が壊死するおそれがある温度とすることができる。
図６のように、テーブルソーが置かれた作業場においては、注意情報生成部１４２は、場所（ｂ１）に該当する場所として、テーブルソーのモーター部分を特定する。
このようにすれば、注意情報生成部１４２は、温度分布画像と、温度に関する第１、第２の閾値とを用いることで、個別に予め用意された危険場所に関する情報を必要とせずに、使用者の視界方向における注意点を推定することができる。

注意点を推定後、注意情報生成部１４２は、温度についての注意情報を生成する（図５、ステップＳ１１２）。具体的には、注意情報生成部１４２は、ステップＳ１１０で特定された場所の近傍に所定の画像を配置することによって、温度についての注意情報を生成する。

図８および図９は、温度についての注意情報ＣＰ２の例を示す説明図である。図８（Ａ）は、注意情報ＣＰ２の第１の例を示している。図８（Ａ）の注意情報ＣＰ２では、ステップＳ１１０で特定された場所（すなわち、テーブルソーのモーター部分）に重畳させて、温度分布画像から温度が第１の閾値以上であった部分を抽出した抽出画像ＳＰ２が配置されている。なお、ステップＳ１１０において場所（ｂ２）に該当する場所が特定された場合、抽出画像ＳＰ２としては、温度分布画像から温度が第２の閾値以下であった部分を抽出した画像が用いられる。また、ステップＳ１１０において場所（ｂ１）、（ｂ２）の両方に該当する場所が特定された場合、抽出画像ＳＰ２としては、温度分布画像から温度が第１の閾値以上であった部分と、第２の閾値以下であった部分との両方を抽出した画像が用いられる。また、図形ＳＢ２は重畳表示ではなく、ステップＳ１１０で特定された場所の近傍に配置されてもよい。このようにすれば、注意情報生成部１４２は、使用者に対して、注意すべき場所の温度分布や温度変化を分かりやすく伝えることが可能な注意情報を生成することができる。また、抽出画像ＳＰ２は、温度分布画像から温度が第１または第２の閾値を超える場所（第２の閾値の場合は下限を超過する場所）を抽出した画像であるため、温度分布画像をそのまま注意情報として使用する場合と比較して、使用者の視界を過度に遮らない態様で使用者に注意を促すことのできる注意情報を生成することができる。

図８（Ｂ）は、注意情報ＣＰ２の第２の例を示している。図８（Ｂ）の注意情報ＣＰ２では、ステップＳ１１０で特定された場所（すなわち、テーブルソーのモーター部分）の近傍に、使用者に高温注意の警告を連想させるマークと、アイコンである旨を強調するための三角形との組み合わせからなるアイコン画像ＩＣ２が配置されている。なお、ステップＳ１１０で特定された場所が複数ある場合は、当該複数の場所に対してそれぞれアイコン画像ＩＣ２が配置される。また、図８（Ｂ）に示したアイコン画像ＩＣ２はあくまで一例であり、注意情報ＣＰ２に配置される画像としては、使用者に警告を連想させる文字、絵柄、図形、およびこれらの組み合わせからなる画像である限り、どのような画像を採用してもよい。また、所定の団体や規格の推奨に沿った表示を行ってもよい。詳細は図７（Ａ）と同様である。

図９は、注意情報ＣＰ２の第３の例を示している。図９の注意情報ＣＰ２では、ステップＳ１１０で特定された場所（すなわち、テーブルソーのモーター部分）に重畳させて、テーブルソーのモーターの形状に対応した略楕円形形状を有する図形ＳＢ２が配置されている。なお、ステップＳ１１０で特定された場所が複数ある場合は、当該複数の場所に対して、それぞれ対応した形状を有する図形ＳＢ２が配置される。また、図９に示した図形ＳＢ２はあくまで一例であり、注意情報ＣＰ２に配置される画像としては、ステップＳ１１０で特定された場所の形状に対応した形状を有する図形からなる画像である限り、どのような画像を採用してもよい。詳細は図７（Ｂ）と同様である。また、図形ＳＢ２は重畳表示ではなく、ステップＳ１１０で特定された場所の近傍に配置されてもよい。

温度についての注意情報を生成後、図５のステップＳ１１４において注意情報生成部１４２は、注意情報を表示させる。具体的には、注意情報生成部１４２は、画像処理部１６０に対して形状についての注意情報ＣＰ１と、温度についての注意情報ＣＰ２とを送信する。注意情報ＣＰ１、ＣＰ２を受信した画像処理部１６０は、注意情報ＣＰ１、ＣＰ２を各レイヤーとした合成画像を生成し、生成した合成画像に対して、図２で説明した表示処理を実行する。この結果、図１０に示すように、ヘッドマウントディスプレイ１００の使用者の視野ＶＲには、注意情報ＣＰ１とＣＰ２とが、虚像ＶＩとして表示される。本実施形態におけるヘッドマウントディスプレイ１００は、使用者が虚像を視認すると同時に外景も視認可能な光学透過型のヘッドマウントディスプレイである。このため、ヘッドマウントディスプレイ１００の使用者は、右光学像表示部２６および左光学像表示部２８を透過して見える外景ＳＣの中の作業場と、虚像ＶＩとして見える注意情報ＣＰ１、ＣＰ２とが、重畳された状態で視認可能となる。

図１０は、使用者が視認可能な像の一例を示す説明図である。図１０（Ａ）は、使用者が視認可能な像の第１の例を示している。第１の例では、注意喚起処理のステップＳ１０４で特定された場所（すなわち、テーブルソーの鋸刃部分）の近傍に、使用者に注意を喚起させるためのアイコン画像ＩＣ１が配置されている。第１の例ではさらに、注意喚起処理のステップＳ１１０で特定された場所（すなわち、テーブルソーのモーター部分）に重畳させて、使用者に注意を喚起させるための抽出画像ＳＰ２が配置されている。図１０（Ｂ）は、使用者が視認可能な像の第２の例を示している。第２の例では、ステップＳ１０４で特定された場所（すなわち、テーブルソーの鋸刃部分）に重畳させて、使用者に注意を喚起させるための図形ＳＢ１が配置されている。第２の例ではさらに、ステップＳ１１０で特定された場所（すなわち、テーブルソーのモーター部分）の近傍に、使用者に注意を喚起させるためのアイコン画像ＩＣ２が配置されている。

なお、注意喚起処理のステップＳ１０２〜Ｓ１０６に示した「形状についての注意情報ＣＰ１の生成処理」と、ステップＳ１０８〜Ｓ１１２に示した「温度についての注意情報ＣＰ１の生成処理」とは、いずれか一方だけが実行されてもいい。

以上のように、第１実施形態の注意喚起処理（図５）では、注意情報生成部１４２は、使用者の視界方向の画像（図６）に基づいて注意情報ＣＰ１、ＣＰ２を生成し、画像表示部２０は、生成された注意情報ＣＰ１、ＣＰ２を虚像として使用者に視認させる。注意情報生成部１４２は、外景画像の画像認識、または、温度分布画像の画像解析によって使用者の視界方向における注意点を推定する。このため、個別に予め用意された危険場所に関する情報を必要とせずに使用者の視界方向における危険等の注意点を推定し、使用者に注意を促すことが可能なヘッドマウントディスプレイ１００（頭部装着型表示装置）を実現することができる。

さらに、注意情報生成部１４２は、使用者が注意を要する場所の近傍に所定の画像（例えば、アイコン画像ＩＣ１と、図形ＳＢ１と、抽出画像ＳＰ２と、アイコン画像ＩＣ２と、図形ＳＢ２等）を配置した注意情報ＣＰ１、ＣＰ２を生成する。このため、ヘッドマウントディスプレイ１００（頭部装着型表示装置）は、使用者の視界を過度に遮らない態様で、使用者に注意を促すことができる。また、所定の画像（例えば、アイコン画像ＩＣ１と、図形ＳＢ１と、抽出画像ＳＰ２と、アイコン画像ＩＣ２と、図形ＳＢ２等）は、使用者が注意を要する場所の近傍に配置されるため、使用者に対して、注意すべき場所をわかりやすく伝えることができる。

Ａ−３．注意喚起処理における付加的処理：
なお、注意喚起処理（図５）では、さらに、以下のような付加的処理１〜３を行ってもよい。付加的処理１〜３は、単独で付加してもよいし、組み合わせて付加してもよい。

Ａ−３−１．付加的処理１：
付加的処理１では、虚像の表示領域と、画像取得部（カメラ６１、サーモグラフィー６２）の取得領域とのキャリブレーションを行う。注意情報生成部１４２は、注意喚起処理（図５）に先立って、下記Ａ〜Ｇに示す処理を行う。

（Ａ）記憶部１２０に、キャリブレーションのためのガイド画像の画像データー（以降「ガイド画像データー」とも呼ぶ。）を予め記憶させておく。ガイド画像は、ヘッドマウントディスプレイ１００の使用者に対して、虚像の表示領域の端部を示すための画像である。例えば、ガイド画像は、右ＬＣＤ２４１および左ＬＣＤ２４２と同じアスペクト比を有する矩形形状で、白色一色の背景を有する画像であり、その四隅と、対角線の交点に位置する部分とに、円状の案内マークを有する画像とすることができる。
（Ｂ）注意情報生成部１４２は、記憶部１２０に格納されているガイド画像データーを読み出して、ガイド画像データーを画像処理部１６０へ送信する。ガイド画像データーを受信した画像処理部１６０では、図２で説明した処理が実行される。この結果、ヘッドマウントディスプレイ１００の使用者の視野ＶＲにはガイド画像が虚像ＶＩとして表示される。

（Ｃ）注意情報生成部１４２は、虚像ＶＩとして表示されたガイド画像の案内マークを順に指差すように、使用者に対して案内する。使用者に対する案内の方法として、ダイアログボックス等を用いたメッセージを用いてもよいし、音声による案内を行っても良い。音声による案内は、表示中のガイド画像を遮ることなく案内することができる点で好ましい。
（Ｄ）注意情報生成部１４２は、カメラ６１に外景画像を撮像させる。
（Ｅ）注意情報生成部１４２は、カメラ６１により撮像された外景画像を画像認識して、人間の指先の位置を特定する。注意情報生成部１４２は、各案内マークについて、指先位置の座標を取得し、記憶部１２０へ保存する。例えば、指先位置の座標は、外景画像の最も左上部分の画素を（０，０）とした場合のＸ方向、Ｙ方向の移動量として定義することができる。

（Ｆ）注意情報生成部１４２は、全ての案内マークについて、外景画像の取得、指先位置の座標取得、座標の保存の一連の処理を繰り返す。その後、注意情報生成部１４２は、ガイド画像の表示を終了させる。このようにして、注意情報生成部１４２は、カメラ６１の撮像領域と、虚像ＶＩの表示領域とが重複する領域を予め取得する。なお、カメラ６１の撮像領域（取得領域）と虚像ＶＩの表示領域とが重複する領域のことを「重複領域」とも呼ぶ。
（Ｇ）注意情報生成部１４２は、注意喚起処理（図５）のステップＳ１０４において、カメラ６１により撮像された外景画像のうち、重複領域内の画像を画像認識する。そして、ステップＳ１０６において重複領域に対応した注意情報ＣＰ１を生成する。同様に、注意情報生成部１４２は、注意喚起処理のステップＳ１１０において、サーモグラフィー６２により撮像された温度分布画像のうち、重複領域内の画像を画像解析する。そして、ステップＳ１１２において重複領域に対応した注意情報ＣＰ２を生成する。

なお、上記では、カメラ６１の画像取得領域と、サーモグラフィー６２の画像取得領域とが同一であることを前提として、カメラ６１でのみキャリブレーションを行う手順を示した。しかし、カメラ６１の画像取得領域とサーモグラフィー６２の画像取得領域とが異なる場合は、サーモグラフィー６２についても上記と同様の処理を行うことができる。

このようにすれば、注意情報生成部１４２は、虚像ＶＩの表示領域とカメラ６１およびサーモグラフィー６２（画像取得部）の取得領域とが重複する重複領域に対して注意情報ＣＰ１、ＣＰ２を生成することができる。このため、透過型のヘッドマウントディスプレイ１００（頭部装着型表示装置）において生じる課題であった「使用者が自身の視界において直接目にする像と、画像表示部２０により視認させられる虚像ＶＩとの間のずれ」の発生を低減させることができる。この結果、注意情報ＣＰ１、ＣＰ２を虚像として視認させた場合に、使用者に与える違和感を低減させることができる。

Ａ−３−２．付加的処理２：
付加的処理２では、音声を用いてヘッドマウントディスプレイ１００の使用者に注意を促す。注意情報生成部１４２は、注意喚起処理（図５）において、下記Ｈ〜Ｊに示す処理を行う。

（Ｈ）注意情報生成部１４２は、注意喚起処理（図５）のステップＳ１０６において、注意情報ＣＰ１の生成に加えて、注意喚起用の音声データーを生成する。音声データーは、ステップＳ１０４において特定された場所の種類ａ１〜ａ３に応じて変更されることが好ましい。例えば、ステップＳ１０４において場所（ａ２）に該当する場所が特定された場合、注意情報生成部１４２は「体や着衣を挟み込まれるおそれのある場所があります。注意してください。」等の音声データーを生成する。
（Ｉ）注意情報生成部１４２は、注意喚起処理のステップＳ１１２において、注意情報ＣＰ２の生成に加えて、注意喚起用の音声データーを生成する。音声データーは、ステップＳ１１０において特定された場所の種類ｂ１、ｂ２に応じて変更されることが好ましい。たとえば、ステップＳ１１０において場所（ｂ１）に該当する場所が特定された場合、注意情報生成部１４２は「高温の場所があります。やけどに注意してください。」等の音声データーを生成する。

（Ｊ）注意情報生成部１４２は、注意喚起処理のステップＳ１１４において、注意情報に加えて、上記の処理Ｈ、Ｉで生成した音声データーを音声処理部１７０へ送信する。音声データーを受信した音声処理部１７０は、取得した音声データーに基づいて、右イヤホン３２のスピーカー（発音体）と、左イヤホン３４のスピーカー（発音体）とに対して音声信号を供給する。

このようにすれば、注意情報生成部１４２はさらに、音声を通じてヘッドマウントディスプレイ１００の使用者に注意を促すことができる。

Ａ−３−３．付加的処理３：
付加的処理３では、触覚を通じた刺激を用いてヘッドマウントディスプレイ１００の使用者に注意を促す。付加的処理３を実現するために、図１に示したヘッドマウントディスプレイ１００において、右保持部２１および左保持部２３の内側、換言すれば、ヘッドマウントディスプレイ１００の装着時における使用者の頭部に対向する側であって、ヘッドマウントディスプレイ１００の装着時における使用者の側頭部に対応する位置に、加圧部と、振動モーターとを備える構成とする。

加圧部は、伸縮可能な外側部材に空気を内包している。加圧部は、内包された空気量を増減させることによって、自身の体積を増減することができる。ヘッドマウントディスプレイ１００が使用者の頭部に装着された状態において、加圧部の体積を増加させることによって、使用者の頭部へ圧力を加えること、換言すれば、使用者に対して触覚を通じた刺激を加えることができる。加圧部の外側部材は、例えば、ゴムやポリウレタン等の肌当たりの良い材料により形成されることが好ましい。そうすれば、ヘッドマウントディスプレイ１００の装着感を向上させることができる。

振動モーターは、モーターの軸に偏芯回転のための錘が設けられ、作動時に振動を発生することができる。ヘッドマウントディスプレイ１００が使用者の頭部に装着された状態において、振動モーターがモーターを作動させることにより、使用者の頭部へ振動を加えること、換言すれば、使用者に対して触覚を通じた刺激を加えることができる。なお、加圧部と振動モーターとを総称して「触覚刺激部」とも呼ぶ。

注意情報生成部１４２は、注意喚起処理のステップＳ１１４において、注意情報の送信に加えて、加圧部と、振動モーターとを作動させる。なお、この際、ステップＳ１０４およびステップＳ１１０で特定された場所に応じて、加圧部の駆動レベル（加圧強さ）と、振動モーターの駆動レベル（振動強さ、振動周期）とを変化させてもよい。

このようにすれば、注意情報生成部１４２はさらに、触覚を通じた刺激を用いて、ヘッドマウントディスプレイ１００の使用者に注意を促すことができる。

Ｂ．第２実施形態：
本発明の第２実施形態では、頭部装着型表示装置において、使用者が行う作業を支援すると共に、当該作業に付随する危険等の注意点を使用者に知らせることが可能な構成について説明する。以下では、第１実施形態と異なる構成および動作を有する部分についてのみ説明する。なお、図中において第１実施形態と同様の構成部分については先に説明した第１実施形態と同様の符号を付し、その詳細な説明を省略する。

Ｂ−１．頭部装着型表示装置の構成：
図１１は、第２実施形態におけるヘッドマウントディスプレイ１００ａの構成を機能的に示すブロック図である。図２に示した第１実施例との違いは、制御部１０に代えて制御部１０ａを備える点である。制御部１０ａは、注意情報生成部１４２に代えて注意情報生成部１４２ａを備え、さらに、手順管理部１４４と、手順管理テーブル１２２とを備えている。注意情報生成部１４２ａと、手順管理部１４４とは、協働することによって手順管理処理を実行する。

図１２は、手順管理テーブル１２２の一例を示す説明図である。手順管理テーブル１２２は、後述の手順管理処理において使用されるテーブルである。手順管理テーブル１２２は、記憶部１２０内に予め格納されている。手順管理テーブル１２２は、作業番号と、手順番号と、手順名と、指示内容と、ヒヤリハット事例と、事故事例と、制限と、のフィールドを含んでいる。なお、手順管理テーブル１２２は、特許請求の範囲における「注意点データー」に相当する。

作業番号には、作業を一意に識別するための識別子が格納されている。識別子は、文字列からなり、例えば英数字の組み合わせとすることができる。手順番号以降の各フィールドには、作業番号により特定される作業に含まれる複数の手順に関する種々の情報が格納されている。

手順番号には、手順を一意に識別するための識別子が格納されている。識別子は、文字列からなり、例えば英数字の組わせとすることができる。図１２の例では、作業内の複数の手順は、手順番号の昇順に進行させることを想定している。手順名には、当該手順の名称が格納されている。指示内容には、当該手順において、使用者が実施すべき内容を表す情報が格納されている。なお、図１２の例では、指示内容を使用者に対する案内文形式の文章で表現しているが、指示内容の文章形式は任意に定めることができる。また、指示内容は文章に限らず、写真や図面（組立図、配置図、回路図等）で表現されてもよいし、それらを組み合わせて表現されてもよい。

ヒヤリハット事例には、当該手順において過去に発生したヒヤリハット事例の有無が格納されている。なお、ヒヤリハットとは、事故には至らないものの、事故一歩手前、換言すれば、事故に至っても不思議ではない事例の発見を意味する。事故事例には、当該手順において過去に発生した事故事例の有無が格納されている。なお、事故には災害も含む。制限には、当該手順から次の手順に遷移するまでの間に、注意情報生成部１４２ａが確認すべき事項を表す情報が格納されている。詳細は後述する。

図１２の例では、例えば、作業番号１で識別される作業には、手順番号１〜２７で識別される２７個の手順が含まれることがわかる。また、手順番号１で識別される手順において使用者が実施すべき内容は「木材の準備」であることがわかる。さらに、手順番号１で識別される手順においては、過去にヒヤリハット事例および事故事例がないことがわかる。さらに、手順番号１で識別される手順から、次の手順、すなわち手順番号２で識別される手順に遷移するまでの間に、注意情報生成部１４２ａが確認すべき事項はないことがわかる。このように、手順管理テーブル１２２は、手順と、当該手順内において使用者が実施すべき内容と、当該手順内における過去の事故やヒヤリハットに関する情報と、を関連付けている。

Ｂ−２．手順管理処理：
図１３は、第２実施形態における手順管理処理の手順を示すフローチャートである。第２実施形態では、図５で説明した注意喚起処理に代えて、図１３で示す手順管理処理が実行される。手順管理処理は、使用者が行う作業を支援すると共に、当該作業に付随する危険等の注意点を使用者に知らせる処理である。手順管理処理の開始トリガーは任意に定めることができる。例えば、ヘッドマウントディスプレイ１００ａが起動されたことを開始トリガーとしてもよいし、ＯＳ１５０や特定のアプリケーションからの処理開始要求を開始トリガーとしてもよい。なお、手順管理処理が特定のアプリケーションから呼び出されて実行される場合、手順管理処理は、特定のアプリケーションのサブルーチンとして動作する。

手順管理部１４４は、現在の手順を特定する（ステップＳ２０２）。具体的には、手順管理部１４４は、カメラ６１を起動し、カメラ６１に対して撮像を指示し、カメラ６１によって撮像された外景画像を取得する。手順管理部１４４は、取得した外景画像を画像認識することによって、手順管理テーブル１２２に格納されている複数の手順から、現在の手順を特定する。このようにすれば、手順管理部１４４は、カメラ６１（画像取得部）により取得された使用者の視界方向の画像（外景画像）に基づいて、自動的に現在の手順を特定することができる。

注意情報生成部１４２ａは、現在の手順について事例が存在するか否かを判定する（ステップＳ２０４）。具体的には、注意情報生成部１４２ａは、手順管理テーブル１２２の現在の手順を示すエントリーを参照する。そして、当該エントリーのヒヤリハット事例のフィールドの値と事故事例のフィールドの値との少なくともいずれか一方が「あり」である場合、事例ありと判定し、他の場合は事例なしと判定する。事例なしと判定した場合（ステップＳ２０４：ＮＯ）、注意情報生成部１４２ａは処理をステップＳ２０８へ遷移させる。

事例ありと判定した場合（ステップＳ２０４：ＹＥＳ）、注意情報生成部１４２ａは、事例についての注意情報を生成する（ステップＳ２０６）。具体的には、注意情報生成部１４２ａは、手順管理テーブル１２２を参照し、現在の手順に関連付けられているヒヤリハット事例と事故事例の有無を用いて、事例についての注意情報を生成する。

図１４は、事例についての注意情報ＣＰ３の例を示す説明図である。図１４は、注意情報ＣＰ３の例１の例を示している。図１４（Ａ）の注意情報ＣＰ３では、右上側の端部に、使用者に警告を連想させる文字である「！」と、アイコンである旨を強調するための三角形との組み合わせからなるアイコン画像ＩＣ３が配置されている。なお、図１４（Ａ）に示したアイコン画像ＩＣ３はあくまで一例であり、アイコン画像ＩＣ３としては、使用者に警告を連想させる文字、絵柄、図形、およびこれらの組み合わせからなる画像である限り、どのような画像を採用してもよい。例えば、所定の団体や規格の推奨に沿った表示を行ってもよい。

また、注意情報ＣＰ３の右側の端部であってアイコン画像ＩＣ３の下部には、使用者に注意を促す画像である「事故事例あり」というメッセージＭＧ３が配置されている。なお、メッセージＭＧ３としては、使用者に注意を促す旨を示す画像である限り、どのような画像を採用してもよい。ただし、ステップＳ２０４でヒヤリハット事例ありと判断された場合と、事故事例ありと判断された場合とでは、異なる画像とすることが好ましい。そうすれば、注意情報生成部１４２ａは、現在の手順において過去に事故が存在する場合とヒヤリハットが存在する場合とにおいて、異なる注意情報ＣＰ３を生成することができるため、使用者は、現在の手順において過去に発生した事例が事故であるのか、ヒヤリハットであるのかを知ることができる。

図１４（Ｂ）は、注意情報ＣＰ３の第２の例を示している。第２の例を採用する場合、手順管理テーブル１２２（図１２）にはさらに、図形ＳＢ３を配置させる場所（座標）と、図形ＳＢ３の形状と、を予め記憶させておく。図形ＳＢ３を配置させる場所は、過去に事故またはヒヤリハットが発生した場所の近傍とすることが好ましい。図１４（Ｂ）の注意情報ＣＰ３では、手順管理テーブル１２２に記憶されている座標に、手順管理テーブル１２２に記憶されている形状の図形ＳＢ３が配置されている。なお、手順管理テーブル１２２に複数の座標と形状の組が記憶されている場合は、当該複数の座標に対して、それぞれ対応する形状の画像ＳＢ３が配置される。また、右側の端部には、使用者に注意を促す画像である「事故事例あり」というメッセージＭＧ３が配置されている。メッセージＭＧ３については、図１４（Ａ）と同様である。

なお、図１４（Ａ）、（Ｂ）で説明した注意情報ＣＰ３では、以下のような変形が可能である。
（ｉ）アイコン画像ＩＣ３、画像ＳＢ３、メッセージＭＧ３の配置は、任意に変更することができる。ただし、使用者の視界を過度に遮らない態様で使用者に注意を促すためには、アイコン画像ＩＣ３と、メッセージＭＧ３とは、注意情報ＣＰ３の端部（換言すれば四辺の近傍）に配置されることが好ましい。
（ｉｉ）注意情報生成部１４２ａは、使用者の特徴に応じて異なる注意情報ＣＰ３を生成してもよい。なお、使用者の特徴は、年齢と、性別と、体格と、作業に対する熟練度と、の少なくともいずれか１つを含む。例えば、注意情報生成部１４２ａは、使用者の年齢に応じて、アイコン画像ＩＣ３、画像ＳＢ３、メッセージＭＧ３の大きさを変更してもよい。例えば、注意情報生成部１４２ａは、使用者の作業に対する熟練度が低い場合は注意情報ＣＰ３にアイコン画像ＩＣ３とメッセージＭＧ３とを配置し、使用者の作業に対する熟練度が高い場合は注意情報ＣＰ３にメッセージＭＧ３のみを配置してもよい。なお、使用者の特徴は、予め取得して記憶部１２０内に記憶させておいてもよいし、手順管理処理を開始する前に、その都度取得してもよい。このようにすれば、注意情報生成部１４２ａは、使用者の特徴に応じたきめ細かな注意情報ＣＰ３の生成を行うことができる。

事例についての注意情報を生成後、図１３のステップＳ２０８において手順管理部１４４は、手順情報を生成する。具体的には、手順管理部１４４は、手順管理テーブル１２２を参照し、現在の手順に関連付けられている指示内容を用いて、手順情報を生成する。

図１５は、手順情報ＣＰ４の例を示す説明図である。図１５（Ａ）は、手順情報ＣＰ４の第１の例を示している。図１５（Ａ）の手順情報ＣＰ４では、下側の端部に、使用者が実施すべき内容を表す画像である「丸鋸刃ＮｏＸＸＸをとりつけてください」というメッセージＭＧ４が配置されている。メッセージＭＧ４は、手順管理テーブル１２２において現在の手順に関連付けられている指示内容フィールドの値である。なお、メッセージＭＧ４の配置は、任意に変更することができる。ただし、使用者の視界を過度に遮らない態様で使用者に実施すべき内容を案内するためには、メッセージＭＧ４は、手順情報ＣＰ４の端部（換言すれば四辺の近傍）に配置されることが好ましい。

図１５（Ｂ）は、手順情報ＣＰ４の第２の例を示している。図１５（Ｂ）の手順情報ＣＰ４では、下側の端部に、使用者が実施すべき内容を表す画像である「丸鋸刃ＮｏＸＸＸをとりつけてください」というメッセージＭＧ４が配置されている。メッセージＭＧ４については、図１５（Ａ）と同様である。

また、手順情報ＣＰ４の左下側の端部であってメッセージＭＧ４の上部には、使用者の現在位置と、メッセージＭＧ４に含まれる工具である「丸鋸刃ＮｏＸＸＸ」の所在とをプロットした地図ＭＰ４が配置されている。使用者の現在位置は、予め記憶部１２０内に記憶されている作業場内のレイアウトと現在の手順との関係から推定してもよいし、ヘッドマウントディスプレイ１００ａにＧＰＳ（Global Positioning System）等の現在位置取得部を搭載してＧＰＳの測位値により求めてもよい。なお、図１５（Ｂ）に示した地図ＭＰ４はあくまで一例であり、使用者を補助するための情報（画像）である限り、どのような画像が配置されてもよい。また、地図ＭＰ４の配置は、任意に変更することができる。使用者の視界を過度に遮らない態様で使用者を補助するための情報を案内するためには、地図ＭＰ４を表示させるためのアイコンを手順情報ＣＰ４の端部（換言すれば四辺の近傍）に配置してもよい。

手順情報を生成後、図１３のステップＳ２１０において、注意情報生成部１４２ａは事例についての注意情報を表示させ、手順管理部１４４は手順情報を表示させる。具体的には、注意情報生成部１４２ａは画像処理部１６０に対して事例についての注意情報ＣＰ３を送信し、手順管理部１４４は画像処理部１６０に対して手順情報ＣＰ４を送信する。注意情報ＣＰ３と手順情報ＣＰ４とを受信した画像処理部１６０は、注意情報ＣＰ３と手順情報ＣＰ４とを各レイヤーとした合成画像を生成し、生成した合成画像に対して、図２で説明した表示処理を実行する。この結果、図１６に示すように、ヘッドマウントディスプレイ１００ａの使用者の視野ＶＲには、注意情報ＣＰ３と手順情報ＣＰ４とが、虚像ＶＩとして表示される。本実施形態におけるヘッドマウントディスプレイ１００ａは、使用者が虚像を視認すると同時に外景も視認可能な光学透過型のヘッドマウントディスプレイである。このため、ヘッドマウントディスプレイ１００ａの使用者は、右光学像表示部２６および左光学像表示部２８を透過して見える外景ＳＣの中の作業場と、虚像ＶＩとして見える注意情報ＣＰ３と手順情報ＣＰ４とが、重畳された状態で視認可能となる。

図１６は、使用者が視認可能な像の一例を示す説明図である。図１６（Ａ）は、使用者が視認可能な像の第１の例を示している。第１の例では、虚像ＶＩの右上側の端部に、使用者に注意を喚起させるためのアイコン画像ＩＣ３が配置されている。同様に、虚像ＶＩの右側の端部であってアイコン画像ＩＣ３の下部には、使用者に注意を喚起させるためのメッセージＭＧ３が配置されている。虚像ＶＩの下側の端部には使用者が実施すべき内容を表したメッセージＭＧ４が配置されている。図１６（Ｂ）は、使用者が視認可能な像の第２の例を示している。第２の例では、虚像ＶＩの右側の端部に使用者に注意を喚起させるためのメッセージＭＧ３が配置されている。同様に、虚像ＶＩの下側の端部には使用者が実施すべき内容を表したメッセージＭＧ４が配置されている。虚像ＶＩの左下側の端部であってメッセージＭＧ４の上部には、使用者を補助するための情報ＭＰ４が配置されている。なお、図１６では、図示の便宜上、メッセージMG３と、メッセージMG４と、地図MP４とを透過して見える外景部分については記載を省略している。実際は、使用者は、メッセージの文字を透過して、テーブルソーの脚を視認することができる。地図についても同様である。

以上のように、第２実施形態の手順管理処理（図１３）のステップＳ２０２〜Ｓ２１０では、画像表示部２０は、現在の手順について使用者が実施すべき内容を表した手順情報ＣＰ４と、当該手順に予め記憶されている注意情報が存在する場合に使用者に注意を促すための注意情報ＣＰ３と、の両方を虚像ＶＩとして使用者に視認させる。このため、使用者が行う作業を支援すると共に、当該作業に付随する注意点を使用者に知らせることが可能なヘッドマウントディスプレイ１００ａ（頭部装着型表示装置）を実現することができる。

さらに、注意情報生成部１４２ａは、手順と、当該手順内における過去の事故やヒヤリハットに関する情報との関連付けを記憶する手順管理テーブル１２２を用いて、簡便に注意情報ＣＰ３を生成することができる。同様に、手順管理部１４４は、手順と、当該手順内において使用者が実施すべき内容との関連付けを記憶する手順管理テーブル１２２を用いて、簡便に手順情報ＣＰ４を生成することができる。

注意情報と手順情報を表示後、図１３のステップＳ２１２において手順管理部１４４は、次の手順への制限があるか否かを判定する。具体的には、手順管理部１４４は、手順管理テーブル１２２の現在の手順を示すエントリーを参照する。そして、当該エントリーの制限フィールドの値が「なし」である場合、次の手順への制限はないと判定し、他の場合は次の手順への制限があると判定する。次の手順への制限がないと判定した場合（ステップＳ２１２：ＮＯ）、手順管理部１４４は処理をステップＳ２１８へ遷移させる。

次の手順への制限があると判定した場合（ステップＳ２１２：ＹＥＳ）、手順管理部１４４は、確認処理を実行する（ステップＳ２１４）。確認処理とは、作業の安全性を確認するために、現在の手順から次の手順に遷移するまでの間に実行される処理である。確認処理の内容は任意に定めることができ、現在の手順についての後確認に相当する処理や、次の手順についての前確認に相当する処理を採用可能である。本実施形態では、確認処理において、大別して以下の２種類の処理を行うこととする。
（Ｉ）使用者から「確認」の意思表示を取得する処理。
（ＩＩ）カメラ６１（画像取得部）により取得された外景画像を画像認識し、画像認識の結果が予め定められた条件を満たすことを確認する処理、または、サーモグラフィー６２（画像取得部）により取得された温度分布画像の画像解析し、画像解析の結果が予め定められた条件を満たすことを確認する処理。ステップＳ２１４において手順管理部１４４が、上記（Ｉ）、（ＩＩ）のどちらの処理を実行するかは、手順管理テーブル１２２の制限フィールドの値によって決定される。

図１７は、処理（Ｉ）を説明するための説明図である。処理（Ｉ）は、使用者から「確認」の意思表示を取得する処理である。処理（Ｉ）は、図１２に示した手順管理テーブル１２２の例では、制限フィールドの値が「ＯＫ操作」である場合に実行される。手順管理部１４４は、使用者から「確認」の意思表示を取得するための確認用画像ＣＷ１を生成し、画像処理部１６０へ送信する。確認用画像ＣＷ１には、次の手順に進んでもよいか、という旨を問いかけるメッセージと、はいボタンと、いいえボタンとが含まれている。画像処理部１６０は、受信済みの注意情報ＣＰ３と手順情報ＣＰ４と、受信した確認用画像ＣＷ１とを各レイヤーとした合成画像を生成し、生成した合成画像に対して、図２で説明した表示処理を実行する。この結果、図１７に示すように、ヘッドマウントディスプレイ１００ａの使用者の視野ＶＲには、注意情報ＣＰ３と手順情報ＣＰ４とに加えて、さらに、確認用画像ＣＷ１が虚像ＶＩとして表示される。なお、図１７では、図示の便宜上、メッセージMG３と、メッセージMG４と、確認用画像CW１とを透過して見える外景部分については記載を省略している。

ヘッドマウントディスプレイ１００ａの使用者は、制御部１０のタッチパッド１４や十字キー１６を操作し、はいボタンを押下する。制御部１０は、タッチパッド１４や十字キー１６による入力内容を手順管理部１４４へ送信する。手順管理部１４４は、はいボタンが押下された場合に確認処理が成功したと判定する。一方、手順管理部１４４は、いいえボタンが押下された場合に確認処理が失敗したと判定する。

図１８は、処理（ＩＩ）を説明するための説明図である。処理（ＩＩ）は、カメラ６１（画像取得部）により取得された外景画像を画像認識し、画像認識の結果が予め定められた条件を満たすことを確認する処理、または、サーモグラフィー６２（画像取得部）により取得された温度分布画像を画像解析し、画像解析の結果が予め定められた条件を満たすことを確認する処理である。「予め定められた条件」とは、確認処理の内容、換言すれば、手順管理テーブル１２２の制限フィールドの値によって変動する。図１２に示した手順管理テーブル１２２の例では、処理（ＩＩ）は、制限フィールドの値が「手袋を外していること」または「工作物が取り付けられていること」である場合に実行される。以降では、制御フィールドの値が「手袋を外していること」であった場合、かつ、確認処理としてカメラ６１による画像認識を採用した場合について例示して説明する。

図１８（Ａ）は、確認用画像ＣＷ２の一例を示している。手順管理部１４４は、カメラ６１による外景画像の取得に先立って、使用者に指示を与えるための確認用画像ＣＷ２を生成し、画像処理部１６０へ送信する。確認用画像ＣＷ２には、「手袋を外して手をカメラにかざしてください」という指示メッセージが含まれている。指示メッセージの内容は、確認処理の内容、換言すれば、手順管理テーブル１２２の制限フィールドの値によって変動する。なお、指示メッセージは文字列に限らず、写真やイラストであってもよい。確認用画像ＣＷ２を受信した画像処理部１６０は図１７と同様の処理を行う。この結果、使用者の視野ＶＲには、注意情報ＣＰ３と手順情報ＣＰ４と確認用画像ＣＷ２とが虚像ＶＩとして表示される。なお、図１８（A）では、図示の便宜上、確認用画像CW２を透過して見える外景部分については記載を省略している。

ヘッドマウントディスプレイ１００ａの使用者は、指示メッセージに従い、手袋を外した手をカメラにかざす。手順管理部１４４は、確認用画像ＣＷ２の送信から所定時間経過後、カメラ６１に対して撮像を指示し、カメラ６１によって撮像された外景画像を取得する。手順管理部１４４は、取得した外景画像を画像認識することによって、人間の素手を認識する。手順管理部１４４は、素手が認識できた場合に確認処理が成功したと判定する。一方、手順管理部１４４は、素手が認識できなかった場合に確認処理が失敗したと判定する。なお、確認処理に成功した場合、手順管理部１４４は、図１８（Ｂ）に示す確認用画面ＣＷ３を表示させてもよい。確認用画面ＣＷ３には、確認処理に成功した旨のメッセージが含まれている。なお、図１８（B）では、図示の便宜上、確認用画像CW３を透過して見える外景部分については記載を省略している。

図１３のステップＳ２１６において手順管理部１４４は、確認処理に成功したか否かを判定する。確認処理に失敗した場合（ステップＳ２１６：ＮＯ）、手順管理部１４４は、処理をステップＳ２１４へ遷移させ、確認処理を再試行する。確認処理に成功した場合（ステップＳ２１６：ＹＥＳ）、手順管理部１４４は、処理をステップＳ２１８へ遷移させる。

手順管理部１４４は、全手順について処理が終了したか否かを判定する（ステップＳ２１８）。具体的には、手順管理部１４４は、手順管理テーブル１２２の同一の作業番号を有する全てのエントリーについて、ステップＳ２０２〜Ｓ２１８の処理を終了したか否かを判定する。全手順についての処理は未だ終了していないと判定した場合（ステップＳ２１８：ＮＯ）、手順管理部１４４は、処理をステップＳ２０２へ遷移させ、次の手順を「現在の手順」として特定し、上述の処理を繰り返す。全手順について処理が終了したと判定した場合（ステップＳ２１８：ＹＥＳ）、手順管理部１４４は、処理を終了する。

なお、図１８で説明した処理（Ｉ）、（ＩＩ）は、以下のような変形が可能である。
・手順管理部１４４は、使用者の特徴に応じて、処理（Ｉ）、（ＩＩ）を使い分けてもよい。なお、使用者の特徴は、年齢と、性別と、体格と、作業に対する熟練度と、の少なくともいずれか１つを含む。
例えば、手順管理部１４４は、使用者の熟練度が高い場合は処理（Ｉ）を実行し、使用者の熟練度が低い場合は処理（ＩＩ）を実行することとしてもよい。このようにすれば、手順管理部１４４は、使用者の特徴に応じたきめ細かな確認処理を行うことができる。
・処理（ＩＩ）において、手順管理部１４４は、使用者の特徴に応じた異なる条件を用いて、外景画像の画像認識結果の判定、または、温度分布画像の画像解析結果の判定を行ってもよい。
例えば、手順管理部１４４は、使用者の熟練度に応じて、両手が素手であることが認識できた場合に確認処理が成功したと判定する、少なくとも片手が素手であることが認識できた場合に確認処理が成功したと判定する、両手に手袋を装着していても確認処理が成功したと判定する、等の条件の使い分けをしてもよい。このようにすれば、手順管理部１４４は、使用者の特徴に応じたきめ細かな確認処理を行うことができる。
・処理（ＩＩ）において、手順管理部１４４は、サーモグラフィー６２により取得された温度分布画像を画像解析し、作業の安全性を確認してもよい。例えば、手順管理部１４４は、確認用画像ＣＷ２を用いてサーモグラフィー６２に使用者の足元の温度分布画像を取得させる。手順管理部１４４は、取得した温度分布画像を画像解析し、つま先部分の温度が所定温度以上でないことを確認することで、使用者が安全靴を着用しているか否かを判定してもよい。このようにすれば、手順管理部１４４は、「温度」という観点からも確認処理を実行することができる。

以上のように、第２実施形態の手順管理処理（図１３）のステップＳ２１２〜Ｓ２１６では、手順管理部１４４は、現在の手順を案内するための手順情報ＣＰ４を生成後、次の手順を案内するための手順情報ＣＰ４の生成に遷移するまでの間に、ステップＳ２１４で説明した所定の確認処理を行う。このため、第２実施形態のヘッドマウントディスプレイ１００ａ（頭部装着型表示装置）では、手順内の作業の安全性を向上させることができる。具体的には、ステップＳ２１４の所定の確認処理のうちの処理（Ｉ）を採用すれば、手順管理部１４４は、現在の手順と次の手順との間において使用者に対して何らかの確認を行い、使用者からの確認の意思表示を取得することで、手順内の作業の安全性を向上させることができる。ステップＳ２１４の所定の処理のうちの処理（ＩＩ）を採用すれば、手順管理部１４４は、現在の手順と次の手順との間において使用者の視界方向の画像を画像認識し、画像認識の結果が予め定められた条件を満たすことを確認することで、手順内の作業の安全性を向上させることができる。

Ｂ−３．手順管理処理における付加的処理：
なお、手順管理処理（図１３）では、さらに、以下のような付加的処理１〜３を行ってもよい。付加的処理１〜３は、単独で付加してもよいし、組み合わせて付加してもよい。

Ｂ−３−１．付加的処理１：
付加的処理１では、虚像の表示領域と、画像取得部（カメラ６１、サーモグラフィー６２）の取得領域とのキャリブレーションを行う。注意情報生成部１４２ａと手順管理部１４４は、手順管理処理（図１３）に先立って、下記Ａ〜Ｆ、Ｇ１に示す処理を行う。

（Ａ）〜（Ｆ）は、第１実施形態と同様であるため説明を省略する。ただし、注意情報生成部１４２は、注意情報生成部１４２ａと読み替える。
（Ｇ１）注意情報生成部１４２ａは、手順管理処理（図１３）のステップＳ２０６において、重複領域に対応した注意情報ＣＰ３を生成する。手順管理部１４４は、手順管理処理のステップＳ２１８において、重複領域に対応した手順情報ＣＰ４を生成する。

このようにすれば、手順管理部１４４と注意情報生成部１４２ａとは、それぞれ、虚像ＶＩの表示領域とカメラ６１およびサーモグラフィー６２（画像取得部）の取得領域とが重複する重複領域に対して、手順情報ＣＰ４と注意情報ＣＰ３とを生成する。このため、透過型のヘッドマウントディスプレイ１００（頭部装着型表示装置）において生じる課題であった「使用者が自身の視界において直接目にする像と、画像表示部２０により視認させられる虚像ＶＩとの間のずれ」の発生を低減させることができる。この結果、手順情報ＣＰ４と注意情報ＣＰ３とを虚像として視認させた場合に、使用者に与える違和感を低減させることができる。

Ｂ−３−２．付加的処理２：
付加的処理２では、音声を用いてヘッドマウントディスプレイ１００ａの使用者に注意を促す。注意情報生成部１４２ａは、手順管理処理（図１３）において、下記Ｈ１、Ｊ１に示す処理を行う。

（Ｈ１）注意情報生成部１４２ａは、手順管理処理（図１３）のステップＳ２０６において、注意情報ＣＰ３の生成に加えて注意喚起用の音声データーを生成する。音声データーは、手順管理テーブル１２２のヒヤリハット事例フィールド、および、事故事例フィールドの値の有無によって変更されることが好ましい、例えば、ヒヤリハット事例フィールドの値が「あり」、事故事例フィールドの値が「なし」である場合、注意情報生成部１４２ａは「本手順は過去にヒヤリハット事例がありました。注意してください。」等の音声データーを生成する。
（Ｊ１）注意情報生成部１４２ａは、手順管理処理のステップＳ２１０において、注意情報に加えて、上記の処理Ｈ１で生成した音声データーを音声処理部１７０へ送信する。音声データーを受信した音声処理部１７０は、取得した音声データーに基づいて、右イヤホン３２のスピーカー（発音体）と、左イヤホン３４のスピーカー（発音体）とに対して音声信号を供給する。

このようにすれば、注意情報生成部１４２ａはさらに、音声を通じてヘッドマウントディスプレイ１００ａの使用者に注意を促すことができる。なお、手順管理部１４４による音声データーの生成も付加することができる。手順管理部１４４によって生成される音声データーは、手順情報ＣＰ４によって案内される内容を音声化したものである。

Ｂ−３−３．付加的処理３：
付加的処理３では、触覚を通じた刺激を用いてヘッドマウントディスプレイ１００ａの使用者に注意を促す。付加的処理３を実現するために、図１１に示したヘッドマウントディスプレイ１００ａにおいて、右保持部２１および左保持部２３の内側に、加圧部と、振動モーターとを備える構成とする。詳細は第１実施形態の「Ａ−３−３．付加的処理３」と同様である。注意情報生成部１４２ａは、手順管理処理（図１３）のステップＳ２１０において、注意情報の送信に加えて、加圧部と、振動モーターとを作動させる。なお、この際、手順管理テーブル１２２のヒヤリハット事例フィールド、および、事故事例フィールドの値の有無に応じて、加圧部の駆動レベル（加圧強さ）と、振動モーターの駆動レベル（振動強さ、振動周期）とを変化させてもよい。

このようにすれば、注意情報生成部１４２ａはさらに、触覚を通じた刺激を用いて、ヘッドマウントディスプレイ１００ａの使用者に注意を促すことができる。

Ｃ．変形例：
上記実施形態において、ハードウェアによって実現されるとした構成の一部をソフトウェアに置き換えるようにしてもよく、逆に、ソフトウェアによって実現されるとした構成の一部をハードウェアに置き換えるようにしてもよい。その他、以下のような変形も可能である。

・変形例１：
上記実施形態では、ヘッドマウントディスプレイの構成について例示した。しかし、ヘッドマウントディスプレイの構成は、本発明の要旨を逸脱しない範囲において任意に定めることが可能であり、例えば、各構成部の追加・削除・変換等を行うことができる。

上記実施形態における、制御部と、画像表示部とに対する構成要素の割り振りは、あくまで一例であり、種々の態様を採用可能である。例えば、以下のような態様としてもよい。（i）制御部にＣＰＵやメモリー等の処理機能を搭載、画像表示部には表示機能のみを搭載する態様、（ｉｉ）制御部と画像表示部との両方にＣＰＵやメモリー等の処理機能を搭載する態様、（ｉｉｉ）制御部と画像表示部とを一体化した態様（例えば、画像表示部に制御部が含まれ眼鏡型のウェアラブルコンピューターとして機能する態様）、（ｉｖ）制御部の代わりにスマートフォンや携帯型ゲーム機を使用する態様、（ｖ）制御部と画像表示部とを無線通信かつワイヤレス給電可能な構成とすることにより接続部（コード）を廃した態様。

上記実施形態では、説明の便宜上、制御部が送信部を備え、画像表示部が受信部を備えるものとした。しかし、上記実施形態の送信部および受信部は、いずれも、双方向通信が可能な機能を備えており、送受信部として機能することができる。

例えば、図２に示した制御部、画像表示部の構成は任意に変更することができる。具体的には、例えば、制御部からタッチパッドを省略し、十字キーのみで操作する構成としてもよい。また、制御部に操作用スティック等の他の操作用インターフェイスを備えても良い。また、制御部にはキーボードやマウス等のデバイスを接続可能な構成として、キーボードやマウスから入力を受け付けるものとしてもよい。

例えば、図２に示した制御部は、有線の信号伝送路を介して画像表示部と接続されているものとした。しかし、制御部と、画像表示部とは、無線ＬＡＮや赤外線通信やＢｌｕｅｔｏｏｔｈ（登録商標）等の無線の信号伝送路を介した接続により接続されていてもよい。

例えば、ヘッドマウントディスプレイは、両眼タイプの透過型ヘッドマウントディスプレイであるものとしたが、単眼タイプのヘッドマウントディスプレイとしてもよい。また、使用者がヘッドマウントディスプレイを装着した状態において外景の透過が遮断される非透過型ヘッドマウントディスプレイとして構成してもよい。

図１９は、変形例におけるヘッドマウントディスプレイの外観の構成を示す説明図である。図１９（Ａ）の例の場合、図１に示したヘッドマウントディスプレイ１００との違いは、画像表示部２０ｃが、右光学像表示部２６に代えて右光学像表示部２６ｃを備える点と、左光学像表示部２８に代えて左光学像表示部２８ｃを備える点である。右光学像表示部２６ｃは、第１実施形態の光学部材よりも小さく形成され、ヘッドマウントディスプレイの装着時における使用者の右眼の斜め上に配置されている。同様に、左光学像表示部２８ｃは、第１実施形態の光学部材よりも小さく形成され、ヘッドマウントディスプレイの装着時における使用者の左眼の斜め上に配置されている。図１９（Ｂ）の例の場合、図１に示したヘッドマウントディスプレイ１００との違いは、画像表示部２０ｄが、右光学像表示部２６に代えて右光学像表示部２６ｄを備える点と、左光学像表示部２８に代えて左光学像表示部２８ｄを備える点である。右光学像表示部２６ｄは、第１実施形態の光学部材よりも小さく形成され、ヘッドマウントディスプレイの装着時における使用者の右眼の斜め下に配置されている。左光学像表示部２８ｄは、第１実施形態の光学部材よりも小さく形成され、ヘッドマウントディスプレイの装着時における使用者の左眼の斜め下に配置されている。このように、光学像表示部は使用者の眼の近傍に配置されていれば足りる。また、光学像表示部を形成する光学部材の大きさも任意であり、光学像表示部が使用者の眼の一部分のみを覆う態様、換言すれば、光学像表示部が使用者の眼を完全に覆わない態様のヘッドマウントディスプレイとして実現することもできる。

例えば、画像処理部、表示制御部、注意情報生成部、手順管理部、音声処理部等の機能部は、ＣＰＵがＲＯＭやハードディスクに格納されているコンピュータープログラムをＲＡＭに展開して実行することにより実現されるものとして記載した。しかし、これら機能部は、当該機能を実現するために設計されたＡＳＩＣ（Application Specific Integrated Circuit：特定用途向け集積回路）を用いて構成されてもよい。

例えば、上記実施形態では、画像表示部を眼鏡のように装着するヘッドマウントディスプレイであるとしているが、画像表示部が通常の平面型ディスプレイ装置（液晶ディスプレイ装置、プラズマディスプレイ装置、有機ＥＬディスプレイ装置等）であるとしてもよい。この場合にも、制御部と画像表示部との間の接続は、有線の信号伝送路を介した接続であってもよいし、無線の信号伝送路を介した接続であってもよい。このようにすれば、制御部を、通常の平面型ディスプレイ装置のリモコンとして利用することもできる。

また、画像表示部として、眼鏡のように装着する画像表示部に代えて、例えば帽子のように装着する画像表示部といった他の形状の画像表示部を採用してもよい。また、イヤホンは耳掛け型やヘッドバンド型を採用してもよく、省略しても良い。また、例えば、自動車や飛行機等の車両に搭載されるヘッドアップディスプレイ（ＨＵＤ、Head-Up Display）として構成されてもよい。また、例えば、ヘルメット等の身体防護具に内蔵されたヘッドマウントディスプレイとして構成されてもよい。

例えば、上記実施形態では、電源として二次電池を用いることしたが、電源としては二次電池に限らず、種々の電池を使用することができる。例えば、一次電池や、燃料電池、太陽電池、熱電池等を使用してもよい。

例えば、上記実施形態では、画像光生成部は、バックライトと、バックライト制御部と、ＬＣＤと、ＬＣＤ制御部とを用いて構成されるものとした。しかし、上記の態様はあくまで例示である。画像光生成部は、これらの構成部と共に、またはこれらの構成部に代えて、他の方式を実現するための構成部を備えていても良い。

例えば、画像光生成部は、有機ＥＬ（有機エレクトロルミネッセンス、Organic Electro-Luminescence）のディスプレイと、有機ＥＬ制御部とを備える構成としても良い。また、例えば、画像生成部は、ＬＣＤに代えてデジタル・マイクロミラー・デバイス等を用いることもできる。また、例えば、レーザー網膜投影型の頭部装着型表示装置に対して本発明を適用することも可能である。

例えば、ヘッドマウントディスプレイは、サーモグラフィーに代えて、赤外線カメラを備えることとしてもよい。この場合、注意情報生成部は、赤外線カメラによって取得された温度分布画像を用いて、上記実施形態と同様の処理を行うことができる。

例えば、ヘッドマウントディスプレイは、注意情報において用いられるシンボル（アイコン画像、図形、抽出画像）の色調と同じ色調の光の透過を抑制する光学フィルターを備えていてもよい。また、注意情報において用いられるシンボルの色調の補色となる光学フィルターを備えていてもよい。このようにすれば、注意情報において用いられるシンボルの視認性が高くなるため、使用者に対して、注意すべき場所をよりわかりやすく伝えることができる。

・変形例２：
上記第１実施形態では、注意喚起処理の一例を示した。しかし、図５に示した処理の手順はあくまで一例であり、種々の変形が可能である。例えば、一部のステップを省略してもよいし、更なる他のステップを追加してもよい。また、実行されるステップの順序を変更してもよい。

例えば、第１実施形態において、使用者の視界方向における注意点とは、使用者の視線の方向に存在する場所のうち、危険な場所や危険が予知される場所を意味することとした。しかし、使用者の視界方向における注意点としては、危険な場所や危険が予知される場所に限らず、危険はないものの、使用者が注意をすることが好ましい場所を意味することとしてもよい。

例えば、第１実施形態では、危険な場所や危険が予知される場所の一例として、鋭角部と、挟み込み部と、巻き込み部とを例示した。しかし、危険な場所や危険が予知される場所としては種々の場所が想定可能である。例えば、高所、深部、高速回転する物の付近、強烈な光の発生する場所、事故多発場所、薬品等の危険物の付近、障害物の付近、火気や水気の付近等を危険な場所としてもよい。

・変形例３：
上記第２実施形態では、手順管理処理の一例を示した。しかし、図１３に示した処理の手順はあくまで一例であり、種々の変形が可能である。例えば、一部のステップを省略してもよいし、更なる他のステップを追加してもよい。また、実行されるステップの順序を変更してもよい。

例えば、手順管理処理の説明において、使用者が行う作業の例として製造業における製品の製造作業を例示した。しかし、使用者が行う作業としては種々の作業を想定することができる。具体的には、自動車等の運転作業、クレーン等の工作機械の操作作業、梱包作業、調理作業、医療現場における手術（処置）作業、電子機器（ＰＣ等）における操作作業等が想定される。自動車等の運転作業の場合は「道順」が上記実施形態における「手順」に相当する。クレーン等の工作機械の操作作業の場合は「運転（操作）手順」が上記実施形態における「手順」に相当する。梱包作業の場合は「工程」が上記実施形態における「手順」に相当する。調理作業、医療現場における手術（処置）作業、電子機器（ＰＣ等）における操作作業の場合は「手順」または「タスク」が、上記実施形態における「手順」に相当する。すなわち、手順とは、作業に含まれるステップである限りにおいて、どのような言葉で表現されていてもよい。

例えば、ステップＳ２０２では、カメラにより取得された外景画像を画像解析することで現在の手順を特定することとした。しかし、手順管理部は、画像解析に代えて、図１３に示した処理フローを１周させるごとに内部的な変数をインクリメントし、当該変数と、手順管理テーブルの手順番号フィールドの値とを照合させることによって、現在の手順を特定してもよい。

例えば、ステップＳ２０６では、手順管理テーブルにおいて、ヒヤリハット事例と事故事例の少なくともいずれか一方が「あり」である場合、事例ありと判定した。しかし、事故事例が「あり」である場合に限り、事例ありと判定してもよい。また、手順管理テーブルにヒヤリハット事例と事故事例の件数をそれぞれ記憶させる構成とし、テーブルに記憶されている件数が所定の件数を超過した場合に、事例ありと判定してもよい。また、ヒヤリハット事例と事故事例をポイント化し、テーブルに記憶されているポイントが所定の値を超過した場合に、事例ありとしてもよい。ポイント化の具体例を挙げる。例えば、ヒヤリハット１件１点、事故１件３点とした場合、過去にヒヤリハットが２件、事故が１件ある手順は、５点（１点×２件＋３点×１件）となる。

例えば、第２実施形態において生成される注意情報は、ヒヤリハット事例または事故事例の「有無」のみを表示することとした。しかし、ヒヤリハット事例と事故事例の具体的な内容を表示させてもよい。また、通常の状態では、ヒヤリハット事例と事故事例の具体的な内容にリンクするためのアイコンを表示させてもよい。このように、具体的な事例の内容（例えば、事例の発生状況、発生原因、再発防止策等）まで表示可能な構成とすれば、使用者が行う作業を支援するためだけではなく、使用者が行う作業とその作業に付随する危険を事前に学習するためにヘッドマウントディスプレイを活用することができる。

例えば、ステップＳ２１２〜Ｓ２１６の所定の確認処理は、省略してもよい。

・変形例４：
第２実施形態の手順管理処理（図１３）は、第１実施形態の注意喚起処理（図５）に代えて実行されるものとした。しかし、注意喚起処理（図５）と、手順管理処理（図１３）とは、並列に実行されてもよい。

・変形例５：
上記実施形態では、注意情報ＣＰ１〜ＣＰ３、手順情報ＣＰ４の一例を挙げて説明した。しかし、これらの画像は上記実施形態での例示に限らず、種々の変形が可能である。

・変形例６：
上記実施形態では、手順管理テーブルの一例を示した。しかし、手順管理テーブルの詳細はあくまで一例であり、種々の変更が可能である。例えば、フィールドの追加、削除、変更を行うことができる。また、手順管理テーブルは、複数のテーブルに分割して正規化してもよい。

例えば、ヒヤリハット事例の詳細を記憶するためのテーブル（ヒヤリハット事例テーブル）を別に設け、手順管理テーブルのヒヤリハット事例フィールドには、ヒヤリハット事例テーブルの鍵となる文字列を記憶させてもよい。事故事例についても同様である。

・変形例７：
上記第２実施形態では、ヘッドマウントディスプレイに手順管理テーブルと、手順管理部とを備え、他の装置を必要とせずに手順管理処理（図１３）を実行可能な例について説明した。しかし、ヘッドマウントディスプレイと、外部に設けられたサーバーとを備える作業支援システムにおいても、同様の処理を実現することができる。

例えば、ヘッドマウントディスプレイは手順管理部を備え、サーバーは手順管理テーブルを備える構成とする。この場合、ヘッドマウントディスプレイの手順管理部および注意情報生成部は、サーバー内に記憶されている手順管理テーブルにアクセスし、手順管理テーブル内のデーターを参照する。このようにすれば、１台のサーバーに記憶されている手順管理テーブル（第１および第２のテーブル）の情報を、複数台のヘッドマウントディスプレイ（頭部装着型表示装置）で共有することが可能になる。この結果、各ヘッドマウントディスプレイに手順管理テーブルを備える構成と比較して、手順管理テーブルの更新に要する労力が低減される。

・変形例８：
本発明は、上述の実施形態や実施例、変形例に限られるものではなく、その趣旨を逸脱しない範囲において種々の構成で実現することができる。例えば、発明の概要の欄に記載した各形態中の技術的特徴に対応する実施形態、実施例、変形例中の技術的特徴は、上述の課題の一部または全部を解決するために、あるいは、上述の効果の一部または全部を達成するために、適宜、差し替えや組み合わせを行うことが可能である。また、その技術的特徴が本明細書中に必須なものとして説明されていなければ、適宜、削除することが可能である。

１０…制御部（コントローラー）
１２…点灯部
１４…タッチパッド
１６…十字キー
１８…電源スイッチ
２０…画像表示部
２１…右保持部
２２…右表示駆動部
２３…左保持部
２４…左表示駆動部
２６…右光学像表示部
２８…左光学像表示部
３０…イヤホンプラグ
３２…右イヤホン
３４…左イヤホン
４０…接続部
４２…右コード
４４…左コード
４６…連結部材
４８…本体コード
５１…送信部
５２…送信部
５３…受信部
５４…受信部
６１…カメラ（画像取得部）
６２…サーモグラフィー（画像取得部）
１１０…入力情報取得部
１００…ヘッドマウントディスプレイ（頭部装着型表示装置）
１２０…記憶部
１２２…手順管理テーブル（注意点データー）
１３０…電源
１４０…ＣＰＵ
１４２…注意情報生成部
１４４…手順管理部
１６０…画像処理部
１７０…音声処理部
１８０…インターフェイス
１９０…表示制御部
２０１…右バックライト制御部
２０２…左バックライト制御部
２１１…右ＬＣＤ制御部
２１２…左ＬＣＤ制御部
２２１…右バックライト
２２２…左バックライト
２４１…右ＬＣＤ
２４２…左ＬＣＤ
２５１…右投写光学系
２５２…左投写光学系
２６１…右導光板
２６２…左導光板
ＰＣＬＫ…クロック信号
ＶＳｙｎｃ…垂直同期信号
ＨＳｙｎｃ…水平同期信号
Ｄａｔａ…画像データー
Ｄａｔａ１…右眼用画像データー
Ｄａｔａ２…左眼用画像データー
ＯＡ…外部機器
ＰＣ…パーソナルコンピューター
ＳＣ…外景
ＲＥ…右眼
ＶＩ…虚像
ＥＬ…端部
ＩＬ…照明光
ＰＬ…画像光
ＡＰ…先端部
ＥＲ…端部
ＶＲ…視野
ＳＢ１…図形
ＳＢ２…図形
ＳＢ３…図形、画像
ＳＰ２…抽出画像
ＭＰ４…地図
ＭＧ３…メッセージ
ＭＧ４…メッセージ
ＣＰ１…注意情報
ＣＰ２…注意情報
ＣＰ３…注意情報
ＣＰ４…手順情報
ＣＷ１…確認用画像
ＣＷ２…確認用画像
ＣＷ３…確認用画面

Claims (16)

1. 使用者が虚像と外景を同時に視認可能な頭部装着型表示装置であって、
   現在の手順について、前記使用者が実施すべき内容を表す画像である手順情報を生成する手順管理部と、
   前記現在の手順において、前記使用者に注意を促すための画像である注意情報を生成する注意情報生成部と、
   前記手順情報と、前記注意情報とを、前記虚像として前記使用者に視認させる画像表示部と、
   を備える、頭部装着型表示装置。
2. 請求項１記載の頭部装着型表示装置であって、
   前記注意情報生成部は、前記現在の手順において、予め記憶されている注意点データーが存在する場合に、前記注意情報を生成する、頭部装着型表示装置。
3. 請求項２に記載の頭部装着型表示装置であって、さらに、
   前記頭部装着型表示装置を装着した状態における前記使用者の視界方向の画像を取得する画像取得部を備え、
   前記手順管理部は、前記画像取得部により取得された前記画像に基づいて、作業に含まれる複数の手順から前記現在の手順を特定する、頭部装着型表示装置。
4. 請求項３に記載の頭部装着型表示装置であって、
   前記手順管理部は、前記作業に含まれる前記手順を表す情報と、当該手順内において前記使用者が実施すべき内容を表す情報と、の関連付けを用いて、前記現在の手順に対応する前記手順情報を生成する、頭部装着型表示装置。
5. 請求項３または請求項４に記載の頭部装着型表示装置であって、
   前記予め記憶されている注意点データーは、前記作業に含まれる前記手順を表す情報と、当該手順内における過去の事故と過去のヒヤリハットとの少なくともいずれか一方に関する情報と、を関連付けたデーターであり、
   前記注意情報生成部は、前記注意点データーを用いて、前記現在の手順に対応する前記注意情報を生成する、頭部装着型表示装置。
6. 請求項１から請求項５のいずれか一項に記載の頭部装着型表示装置であって、
   前記手順管理部は、前記現在の手順に対応する前記手順情報を生成後、所定の確認処理に成功するまでは、次の手順に対応する前記手順情報の生成を制限する、頭部装着型表示装置。
7. 請求項６に記載の頭部装着型表示装置であって、
   前記所定の確認処理は、前記使用者からの確認の意思表示の取得である、頭部装着型表示装置。
8. 請求項３に従属する請求項６に記載の頭部装着型表示装置であって、
   前記所定の確認処理は、前記画像取得部により取得された前記画像を画像認識すると共に、前記画像認識の結果が予め定められた条件を満たすことを確認することである、頭部装着型表示装置。
9. 請求項８に記載の頭部装着型表示装置であって、
   前記予め定められた条件は、前記使用者の年齢と、性別と、体格と、作業に対する熟練度と、の少なくともいずれか一つを含む前記使用者の特徴に応じて変動する、頭部装着型表示装置。
10. 請求項１から請求項９のいずれか一項に記載の頭部装着型表示装置であって、
    前記注意情報生成部は、前記現在の手順において過去に事故が発生した場合と、前記現在の手順において過去にヒヤリハットが発生した場合とにおいて、異なる前記注意情報を生成する、頭部装着型表示装置。
11. 請求項１から請求項９のいずれか一項に記載の頭部装着型表示装置であって、
    前記注意情報生成部は、前記使用者の年齢と、性別と、体格と、作業に対する熟練度と、の少なくともいずれか一つを含む前記使用者の特徴に応じて、異なる前記注意情報を生成する、頭部装着型表示装置。
12. 請求項３から請求項１１のいずれか一項に記載の頭部装着型表示装置であって、
    前記手順管理部は、前記画像取得部により取得された前記画像のうち、前記虚像の表示領域と前記画像取得部の取得領域とが重複する重複領域に対して前記手順情報を生成し、
    前記注意情報生成部は、前記重複領域に対して前記注意情報を生成する、頭部装着型表示装置。
13. 請求項５から請求項１２のいずれか一項に記載の頭部装着型表示装置であって、さらに、
    発音体を備え、
    前記注意情報生成部は、前記現在の手順に対応する前記過去の事故と過去のヒヤリハットとの少なくともいずれか一方に関する情報に基づいて、前記使用者に注意を促すための音声を前記発音体から出力させる、頭部装着型表示装置。
14. 請求項５から請求項１３のいずれか一項に記載の頭部装着型表示装置であって、さらに、
    前記使用者に対して触覚を通じた刺激を加える触覚刺激部を備え、
    前記注意情報生成部は、前記現在の手順に対応する前記過去の事故と過去のヒヤリハットとの少なくともいずれか一方に関する情報に基づいて、前記使用者に注意を促すために前記触覚刺激部を作動させる、頭部装着型表示装置。
15. 使用者が虚像と外景を同時に視認可能な頭部装着型表示装置の制御方法であって、
    （ａ）現在の手順について、前記使用者が実施すべき内容を表す画像である手順情報を生成する工程と、
    （ｂ）前記現在の手順において、前記使用者に注意を促すための画像である注意情報を生成する工程と、
    （ｃ）前記手順情報と、前記注意情報とを、前記虚像として前記使用者に視認させる工程と、
    を備える、頭部装着型表示装置の制御方法。
16. 作業支援システムであって、
    請求項５から請求項１４のいずれか一項に記載の頭部装着型表示装置と、
    サーバーと、
    を備え、
    前記サーバーは、
    前記作業に含まれる前記手順を表す情報と、当該手順内において前記使用者が実施すべき内容を表す情報と、の関連付けを記憶する第１のテーブルと、
    前記作業に含まれる前記手順を表す情報と、当該手順内における過去の事故と過去のヒヤリハットとの少なくともいずれか一方に関する情報と、の関連付けを記憶する第２のテーブルと、
    前記頭部装着型表示装置からの要求に応じて、前記第１のテーブルに記憶されている情報と、前記第２のテーブルに記憶されている情報と、のうちの少なくとも一方を送信する送信部と、
    を備える、作業支援システム。

Images