JP2017167991A - ヘッドマウント装置、プログラム及び作業支援システム - Google Patents

Abstract

【課題】作業者が頭部に装着しているヘッドマウント装置によって該作業者に対して、作業を行う対象の各装置に対応する画像を提示すること。
【解決手段】ヘッドマウント装置は、画像を表示する表示部と、作業の内容を示す作業内容情報と、当該作業のスケジュールを示すスケジュール情報とを含む作業情報を取得する作業情報取得部と、現在の時刻を取得する時刻取得部と、作業情報取得部が取得する作業情報に含まれるスケジュール情報と、時刻取得部が取得する時刻とに基づいて、当該作業情報に含まれる作業内容情報が示す作業の内容の画像を表示部に表示させる表示制御部とを備える。
【選択図】図１

Description

本発明の実施形態は、ヘッドマウント装置、プログラム及び作業支援システムに関する。

従来、設備の保守や点検の作業では、作業者は、作業の手順が記載された作業手順書を適宜に閲覧しながら作業を行っていた。また、特許文献１には、コンピュータシステムの障害発生時に、作業者が頭部に装着しているヘッドマウントディスプレイ（Head Mounted Display）に、障害修復作業の方法を案内するコンピュータグラフィックス画像データを現実空間の映像と合成して表示する情報処理システムの技術が開示されている。また、特許文献２には、ヘッドマウントディスプレイの技術が開示されている。また、特許文献３，４には、被験者の視線を検出する視線検出装置の技術が開示されている。

特開２０１１−２４８８６０号公報 特開２０１３−０７７０１３号公報 特開２０１４−１７１５８６号公報 特開２０１４−１９５６４７号公報

作業者が作業中に作業手順書を閲覧する操作は、手間がかかるので、作業の効率の低下の一要因になり得る。また、作業場所によっては作業手順書を閲覧できるだけの空間がない場合もあった。この対処方法として、作業者が頭部に装着しているヘッドマウントディスプレイに作業手順書の内容を表示することが考えられる。しかし、上述した特許文献１の技術では、作業を行う対象の装置毎に作業の方法が異なると適用できない可能性があった。

本発明は、このような事情を考慮してなされたものであり、作業者が頭部に装着しているヘッドマウント装置によって該作業者に対して、作業を行う対象の各装置に対応する画像を提示することができる、ヘッドマウント装置、プログラム及び作業支援システムを提供することを課題とする。

（１）本発明の一態様は、画像を表示する表示部と、作業の内容を示す作業内容情報と、当該作業のスケジュールを示すスケジュール情報とを含む作業情報を取得する作業情報取得部と、現在の時刻を取得する時刻取得部と、前記作業情報取得部が取得する前記作業情報に含まれる前記スケジュール情報と、前記時刻取得部が取得する時刻とに基づいて、当該作業情報に含まれる前記作業内容情報が示す作業の内容の画像を前記表示部に表示させる表示制御部とを備えるヘッドマウント装置である。
（２）本発明の一態様は、上記（１）のヘッドマウント装置において、前記スケジュール情報が示す前記作業のスケジュールと、前記時刻取得部が取得する時刻とに基づいて、前記作業の進捗状況を判定する進捗状況判定部を更に備え、前記表示制御部は、前記進捗状況判定部による判定の結果を示す画像を前記表示部に表示させる。
（３）本発明の一態様は、上記（２）のヘッドマウント装置において、前記進捗状況判定部による判定の結果に基づいて、前記作業情報取得部が取得した前記作業情報を更新する作業情報更新部を更に備える。
（４）本発明の一態様は、上記（１）から（３）のいずれかのヘッドマウント装置において、自装置を利用する作業者以外の他作業者に割り当てられている作業のスケジュールを示す情報を含む他作業情報を取得する他作業情報取得部と、前記他作業情報取得部が取得する前記他作業情報と、前記作業情報取得部が取得する前記作業情報とに基づいて、前記作業者の作業と前記他作業者の作業との相対的な進捗状況を判定する他作業進捗状況判定部とを更に備え、前記表示制御部は、前記他作業進捗状況判定部による判定の結果を示す画像を前記表示部に表示させる。
（５）本発明の一態様は、上記（４）のヘッドマウント装置において、前記他作業進捗状況判定部による判定の結果に基づいて、前記作業情報取得部が取得した前記作業情報又は前記他作業情報取得部が取得した前記他作業情報を更新する。
（６）本発明の一態様は、上記（１）から（５）のいずれかのヘッドマウント装置において、音を出力する音出力部と、自装置が作業者の頭部に装着されているか否かを判定する装着判定部と、を更に備え、前記表示制御部は、前記作業内容情報が示す作業の内容の画像を前記表示部に表示させる際に、前記装着判定部が装着されていないと判定する場合には、前記音出力部から音を出力させる。
（７）本発明の一態様は、上記（１）から（６）のいずれかのヘッドマウント装置において、前記作業情報には、前記作業の着手が承認される予定時刻を示す承認予定時刻情報が含まれ、前記表示制御部は、前記作業情報取得部が取得する前記作業情報に含まれる前記承認予定時刻情報が示す前記予定時刻の画像を前記表示部に表示させる。
（８）本発明の一態様は、画像を表示する表示部を備えるヘッドマウント装置のコンピュータに、作業の内容を示す作業内容情報と、当該作業のスケジュールを示すスケジュール情報とを含む作業情報を取得する作業情報取得ステップと、現在の時刻を取得する時刻取得ステップと、前記作業情報取得ステップにおいて取得される前記作業情報に含まれる前記スケジュール情報と、前記時刻取得ステップにおいて取得される時刻とに基づいて、当該作業情報に含まれる前記作業内容情報が示す作業の内容の画像を前記表示部に表示させる表示制御ステップとを実行させるためのプログラムである。
（９）本発明の一態様は、上記（１）から（７）のいずれかのヘッドマウント装置と、前記ヘッドマウント装置との間において情報を授受する情報処理装置とを備え、前記ヘッドマウント装置は、自装置の位置を示す自位置情報を、前記情報処理装置に送信する自位置情報送信部を備え、前記情報処理装置は、前記自位置情報送信部が送信する前記自位置情報を受信する自位置情報受信部と、前記スケジュール情報と作業場所情報とが関連付けられて前記作業情報として記憶されている作業情報記憶部から、前記自位置情報受信部が受信する前記自位置情報に対応する前記作業場所情報が関連付けられている前記スケジュール情報を抽出するスケジュール情報抽出部と、前記スケジュール情報抽出部が抽出する前記スケジュール情報を前記ヘッドマウント装置に送信する作業支援システムである。
（１０）本発明の一態様は、上記（９）の作業支援システムにおいて、前記ヘッドマウント装置は、当該ヘッドマウント装置の周辺の風景を撮像して画像を生成する撮像部と、前記撮像部が撮像する画像を、前記情報処理装置に送信する画像送信部と、を備え、前記情報処理装置は、前記画像送信部が送信する前記画像を受信する画像受信部と、前記画像受信部が受信する前記画像に含まれる作業対象の機器の情報を当該画像から抽出する機器情報抽出部と、作業対象の機器を示す機器情報と、当該機器についての作業手順を示す情報とが関連付けられて作業手順情報として記憶されている作業手順情報記憶部から、前記機器情報抽出部が抽出する前記機器の情報に対応する前記機器情報が関連付けられている前記作業手順情報を抽出する作業手順情報抽出部と、前記作業手順情報抽出部が抽出する前記作業手順情報を前記ヘッドマウント装置に送信する。

本発明によれば、作業者が頭部に装着しているヘッドマウント装置によって該作業者に対して、作業を行う対象の各装置に対応する画像を提示することができる。

一実施形態に係る作業支援システムの構成例を示す図である。 一実施形態に係るヘッドマウント装置の構成例を示す図である。 一実施形態に係る情報処理装置のハードウェア構成例を示す図である。 一実施形態に係る表示部に表示される画像の第１の例を示す図である。 一実施形態に係る表示部に表示される画像の第２の例を示す図である。 一実施形態に係る表示部に表示される画像の第３の例を示す図である。 一実施形態に係る表示部に表示される画像の第４の例を示す図である。 一実施形態に係る表示部に表示される画像の第５の例を示す図である。 一実施形態に係る表示部に表示される画像の第６の例を示す図である。 一実施形態に係るヘッドマウント装置の機能構成例を示す図である。 一実施形態に係る情報処理装置の機能構成例を示す図である。 一実施形態に係る作業スケジュール表示機能についての各装置の動作例を示す図である。 一実施形態に係る記憶装置に記憶されている作業情報の構成例を示す図である。 一実施形態に係る作業着手承認機能についての各装置の動作例を示す図である。 一実施形態に係る作業進捗判定機能についての各装置の動作例を示す図である。 一実施形態に係る作業重複判定機能についての各装置の動作例を示す図である。 一実施形態に係る作業内容の表示機能についての各装置の動作例を示す図である。 一実施形態に係る作業手順の表示機能についての各装置の動作例を示す図である。 一実施形態に係る対象装置の画像の一例を示す図である。 一実施形態に係る警告画像の一例を示す図である。

図１は、本実施形態に係る作業支援システム１の構成例を示す図である。図１において、作業支援システム１は、ヘッドマウント装置２と、情報処理装置４と、記憶装置６とを備える。ヘッドマウント装置２と情報処理装置４とは、通信回線８を介して、データを送受する。通信回線８として、例えば携帯電話ネットワークやインターネット等の通信ネットワークを適用できる。

ヘッドマウント装置２は、作業者Ｘの頭部に装着される。ヘッドマウント装置２は、該ヘッドマウント装置２を頭部に装着している作業者Ｘに対して、該作業者Ｘが視認できる画像を提示できる構成になっている。例えば、ヘッドマウント装置２は、透過型のヘッドマウントディスプレイである。図１に示される例では、ヘッドマウント装置２は眼鏡型の透過型のヘッドマウントディスプレイである。なお、ヘッドマウント装置２は、眼鏡型以外の形状の頭部装着型のヘッドマウントディスプレイであってもよい。

対象装置１０は、作業者Ｘが作業を行う対象の装置である。作業者Ｘは、ヘッドマウント装置２を頭部に装着して、対象装置１０に対する作業を行う。

情報処理装置４は、ヘッドマウント装置２に対して、該ヘッドマウント装置２によって表示する画像を提供する。記憶装置６は、対象装置１０に対応する画像を記憶している。承認者Ｙは、作業者Ｘが行う作業を監視する役目を持つ。

［ヘッドマウント装置の部品構成］
図２は、本実施形態に係るヘッドマウント装置２の構成例を示す図である。図２において、ヘッドマウント装置２は、制御部２１と、表示部２２と、撮像部２３と、通信部２４と、記録部２５と、センサー部２６と、測位部２７と、視線検出部２８と、音声再生部２９と収音部３０とを備える。これら各部はデータを交換できるように構成されている。

制御部２１は、ヘッドマウント装置２が備える各部を制御する。制御部２１は、専用のハードウェアにより実現されるものであってもよく、又は、ＣＰＵ（Central Processing Unit：中央演算処理装置）及びメモリにより構成され、制御部２１の機能を実現するためのプログラムをＣＰＵが実行することによりその機能を実現させるものであってもよい。

表示部２２は、ヘッドマウント装置２を頭部に装着している作業者Ｘが視認できる画像を表示する。例えば、ヘッドマウント装置２が透過型のヘッドマウントディスプレイである場合、表示部２２は、作業者Ｘの視線の先に透過型の仮想スクリーンを投影表示し、該透過型の仮想スクリーン上に画像を表示する。これにより、作業者Ｘは、自己の周辺の風景を見ながら、透過型の仮想スクリーン上に表示されている画像を視認することができる。制御部２１は、表示部２２によって表示する画像を表示部２２へ出力する。

撮像部２３は、ヘッドマウント装置２を頭部に装着している作業者Ｘの周辺の風景であって、該作業者Ｘの視線の方向の風景を撮像する。つまり、撮像部２３は、ヘッドマウント装置２を頭部に装着している作業者Ｘの視線の方向を撮像するように、ヘッドマウント装置２に取り付けられている。撮像部２３は、撮像した画像を通信部２４と記録部２５とへ出力する。撮像部２３が撮像した画像のことを撮像画像と称する場合がある。

通信部２４は、通信回線８を介して情報処理装置４と通信を行う。通信部２４は、撮像画像などの情報を、通信回線８を介して情報処理装置４へ送信する。通信部２４は、通信回線８を介して情報処理装置４から画像などの情報を受信する。通信部２４が情報処理装置４から受信する画像は、例えば、情報処理装置４が記憶装置６から取得した対象装置１０に対応する画像である。表示部２２は、通信部２４が情報処理装置４から受信した画像を表示する。

記録部２５は、撮像部２３が撮像した画像（撮像画像）のうち最新の一定時間分の撮像画像を記録する。記録部２５は、記録した撮像画像の量が一定時間分に達した場合には、記録した撮像画像のうち古い方の撮像画像から順次消去して新しい撮像画像を記録する。

センサー部２６は、一又は複数のセンサーを備える。センサー部２６は、センサーが検出した結果の検出信号を制御部２１へ出力する。
センサー部２６は、ヘッドマウント装置２が作業者Ｘの頭部に装着されたことを検出するものであってもよい。この場合、センサー部２６は、例えば、作業者Ｘの目線を検出するカメラであってもよい。また、センサー部２６は、ヘッドマウント装置２が頭部に装着された際の装着圧や接触を検知するものであってもよい。
測位部２７は、ヘッドマウント装置２の位置を測定し、測定結果の測位値を制御部２１へ出力する。測位部２７として、例えば、ＧＰＳ（Global Positioning System）を利用してもよく、又は、準天頂衛星（quasi-zenith satellites: QZS）などの全地球航法衛星システム（Global Navigation Satellite System(s): GNSS）を利用してもよい。また、測位部２７は、ビーコンや無線ＬＡＮのスポットとの間における無線通信によってヘッドマウント装置２の位置を測定してもよい。

視線検出部２８は、ヘッドマウント装置２を頭部に装着している作業者Ｘの視線を検出する。視線検出部２８は、検出した結果の視線を示す視線情報を制御部２１へ出力する。音声再生部２９は、スピーカ又はイヤホンによって音声信号を再生する。制御部２１は、音声再生部２９によって再生する音声信号を音声再生部２９へ出力する。収音部３０はマイクロフォンを備える。収音部３０は、マイクロフォンによって作業者Ｘの音声を収音する。また、収音部３０は、マイクロフォンによって作業者Ｘの周辺から発せられる音を収音してもよい。収音部３０は、マイクロフォンによって収音した音声や音の信号を制御部２１へ出力する。

［情報処理装置の部品構成］
図３は、本実施形態に係る情報処理装置４のハードウェア構成例を示す図である。図２において、情報処理装置４は、ＣＰＵ４１と、メモリ４２と、不揮発性メモリ４３と、操作部４４と、表示部４５と、通信部４６とを備える。これら各部はデータを交換できるように構成されている。ＣＰＵ４１は、不揮発性メモリ４３に格納されるプログラム４７を実行し、メモリ４２をワークメモリとして使用して、情報処理装置４の各部を制御する。

メモリ４２は、半導体素子を利用した揮発性のメモリ等のＲＡＭによって構成され、ＣＰＵ４１のワークメモリとして使用される。不揮発性メモリ４３は、例えばハードディスク（ＨＤ）やＲＯＭ等によって構成される。不揮発性メモリ４３には、ＣＰＵ４１によって実行されるプログラム４７が格納される。

操作部４４は、キーボード、テンキー、マウス等の入力デバイスから構成され、利用者の操作に応じたデータ入力を行う。表示部４５は、液晶表示装置等の表示デバイスから構成され、データ表示を行う。また、データ入力とデータ表示の両方が可能なタッチパネルを備えてもよい。通信部４６は、通信回線８を介してヘッドマウント装置２と通信を行う。情報処理装置４の通信部４６とヘッドマウント装置２の通信部２４とは、通信回線８を介してデータを送受する。

情報処理装置４として、例えばタブレット型のコンピュータ（タブレットＰＣ）や据置き型のパーソナルコンピュータ、サーバコンピュータ等のコンピュータ装置を適用できる。

［作業支援システムの機能概要］
次に、作業支援システム１が提供する機能の一例について、その概要を説明する。この一例では、作業支援システム１は、作業スケジュール表示機能Ｆ１１から作業手順の表示機能Ｆ１６までの６つの機能を提供する。

［作業スケジュール表示機能］
作業支援システム１は、作業スケジュール表示機能Ｆ１１を提供する。作業スケジュール表示機能Ｆ１１とは、作業者Ｘが実施すべき作業の着手時刻が近づいた場合に、作業の着手時刻が近づいたことを作業者Ｘに対して通知する機能である。
作業支援システム１は、ヘッドマウント装置２にこれらの情報を画像として表示することにより、作業者Ｘの作業を支援する。例えば、作業の着手時刻が近づいた場合において、作業支援システム１は、作業者Ｘに対して図４に示す画像を表示する。

図４は、本実施形態に係る表示部２２に表示される画像の第１の例を示す図である。作業スケジュール表示機能Ｆ１１において、作業支援システム１は、表示部２２に作業の着手時刻が近づいたことを示す画像Ｐ１１Ｌや、作業内容を示す画像Ｐ１１Ｒを表示する。具体的には、作業支援システム１は、左表示部２２Ｌに「作業着手時刻が近づきました。；作業の準備をしてください。」との情報を、画像Ｐ１１Ｌとして表示する。また、作業支援システム１は、右表示部２２Ｒに「作業内容：ケーブルＣＬ１の接続；承認予定時刻：９：５０；作業予定時間：１０：００−１０：１０」との情報を、画像Ｐ１１Ｒとして表示する。
作業支援システム１は、表示部２２に作業の着手時刻が近づいたことを示す情報を表示することにより、作業者Ｘは、作業の着手時刻が記載された作業指示書や時計などを確認することなく、作業の着手時刻が近づいていることを把握することができる。
また、作業支援システム１は、作業の着手時刻が近づいたことや、着手時刻になったことを、ヘッドマウント装置２を介して作業者Ｘに対して通知する際に、画像以外の方法によって通知してもよい。例えば、作業支援システム１は、ヘッドマウント装置２が使用されている場合には、作業の着手時刻が近づいたことや、着手時刻になったことを、画像によって通知する。また、作業支援システム１は、ヘッドマウント装置２が使用されていない場合には、作業の着手時刻が近づいたことや、着手時刻になったことを、音によって通知するようにしてもよい。この場合、ヘッドマウント装置２は、自装置が使用されているか否かを、自装置が作業者Ｘの頭部に装着されているか否かに基づいて判定してもよい。

［作業着手承認機能］
作業支援システム１は、作業着手承認機能Ｆ１２を提供する。作業着手承認機能Ｆ１２とは、作業者Ｘが行う作業の着手を承認者Ｙが承認する場合の、作業者Ｘや承認者Ｙの作業を支援する機能である。ここで、承認者Ｙとは、例えば、作業者Ｘが行う作業の責任者や監督者など、承認権限を有している者である。作業者Ｘは、対象装置１０に対する作業に着手する前に、着手の承認を承認者Ｙに要求する。承認者Ｙは、作業者Ｘから作業着手の承認要求があった場合には、承認条件が成立していることを確認して、作業着手の承認を行う。この作業着手の承認は、承認者Ｙが情報処理装置４を操作することにより行われる。作業着手が承認された場合にヘッドマウント装置２の表示部２２に表示される情報の一例を、図５に示す。

図５は、本実施形態に係る表示部２２に表示される画像の第２の例を示す図である。同図に示すように、作業着手承認機能Ｆ１２において、作業支援システム１は、表示部２２に作業着手が承認されたことを示す画像Ｐ１２Ｌを表示する。具体的には、作業支援システム１は、左表示部２２Ｌに「作業着手が承認されました」との情報を、画像Ｐ１２Ｌとして表示する。また、この場合、作業支援システム１は、承認された作業の内容を示す「作業内容：ケーブルＣＬ１の接続」との情報を、右表示部２２Ｒに画像Ｐ１２Ｒとして表示してもよい。
ヘッドマウント装置２と情報処理装置４とは通信回線８を介して接続されている。ヘッドマウント装置２と情報処理装置４とは、通信回線８を介した通信ができればよく、これら２つの装置が同じ場所にある必要はない。したがって、作業着手承認機能Ｆ１２によれば、承認者Ｙが作業現場に居なくても、作業現場に居る作業者Ｘに対して、承認者Ｙが作業着手の承認を行うことができる。つまり、作業支援システム１は、承認者Ｙによる遠隔承認を可能にする。
また、作業支援システム１は、作業者Ｘによる作業開始や作業終了の合図を検出してもよい。ヘッドマウント装置２は、音声を取得するマイクなどを備えていてもよい。この場合、ヘッドマウント装置２は、作業者Ｘの発声により、作業者Ｘによる作業開始や作業終了の合図を検出する。また、ヘッドマウント装置２は、作業者Ｘによる作業開始の合図を検出すると、作業者Ｘの目線の方向の録画や、周辺の音の録音を開始する。ヘッドマウント装置２は、作業者Ｘによる作業終了の合図を検出すると、作業者Ｘの目線の方向の録画や、周辺の音の録音を停止する。また、ヘッドマウント装置２は、作業者Ｘによる作業開始の合図を検出すると、承認者Ｙに対して、作業者Ｘが作業を開始したことを通知してもよい。

なお、ヘッドマウント装置２は、承認者Ｙに対する作業着手の承認要求を、作業現場への到着を条件にして、作業者Ｘの操作に依らず自動的に行ってもよい。この場合、ヘッドマウント装置２は、測位部２７による自位置の測位結果に基づいて現場到着と判定されたことを条件にして、承認者Ｙに対する作業着手の承認要求を行ってもよい。この場合、作業支援システム１は、承認要求手順を簡素化することにより、作業者Ｘの手間を低減することができる。
また、ヘッドマウント装置２は、自装置が作業者Ｘの頭部に装着されたことを条件にして、承認者Ｙに対する作業着手の承認要求を行ってもよい。この場合、ヘッドマウント装置２は、センサを備えており、このセンサによって自装置が作業者Ｘの頭部に装着されたことを検出してもよい。このセンサは、例えば、作業者Ｘの目線を検出するカメラであってもよい。

［作業進捗判定機能］
作業支援システム１は、作業進捗判定機能Ｆ１３を提供する。一例として、対象装置１０に対する作業は、他の作業が完了していることが、作業の着手条件にされている場合がある。この場合、作業支援システム１は、他の作業が完了しているか否かを判定して、ヘッドマウント装置２に判定結果を表示する。

図６は、本実施形態に係る表示部２２に表示される画像の第３の例を示す図である。同図に示すように、作業進捗判定機能Ｆ１３において、作業支援システム１は、表示部２２に作業が予定よりも遅れていることを示す画像Ｐ１３Ｌを表示する。この一例では、作業者Ｘが実施すべき作業が対象装置１０へのケーブルＣＬ１の接続であり、作業の作業予定時間として、「１０：００−１０：１０」が指定されている。現在時刻が「１０：１５」である場合に、このケーブルＣＬ１の接続作業が完了していない場合、作業の遅れ時間は「５分」である。この場合、作業支援システム１は、左表示部２２Ｌに「！作業が予定よりも遅れています。」との情報を、画像Ｐ１３Ｌとして表示する。また、作業支援システム１は、右表示部２２Ｒに「作業内容：ケーブルＣＬ１の接続；現在の時刻：１０：１５ 遅れ５分；作業予定時間：１０：００−１０：１０」との情報を、画像Ｐ１３Ｒとして表示する。

また、作業支援システム１は、作業予定時間と、実際の作業進捗とが乖離している場合、作業スケジュールを変更することもできる。作業支援システム１は、作業スケジュールを変更する場合、作業スケジュールを変更する旨を表示部２２に表示する。

図７は、本実施形態に係る表示部２２に表示される画像の第４の例を示す図である。同図に示すように、作業進捗判定機能Ｆ１３において、作業支援システム１は、作業が予定よりも遅れている、又は進んでいる場合、作業スケジュールを変更することを示す画像Ｐ１４Ｌを表示部２２に表示する。この一例の場合には、対象装置１０に接続されているケーブルＣＬ１の接続作業の作業予定時間として、「１０：００−１０：１０」が指定されている。現在時刻が「１０：１５」である場合に、このケーブルＣＬ１の接続作業が完了していない場合、作業の遅れ時間は「５分」である。この場合、作業支援システム１は、左表示部２２Ｌに「！作業スケジュールを変更します。」との情報を、画像Ｐ１４Ｌとして表示する。また、作業支援システム１は、右表示部２２Ｒに「作業内容：ケーブルＣＬ１の接続；当初予定時間：１０：００−１０：１０；→変更後時間：１０：００−１０：２０」との情報を、画像Ｐ１４Ｒとして表示する。

［作業重複判定機能］
作業支援システム１は、作業重複判定機能Ｆ１４を提供する。ある作業現場において同時刻に複数の作業が計画されている場合には、これら複数の作業を同時並行に実施することができない場合がある。作業重複判定機能Ｆ１４とは、複数の作業を同時並行に実施することができない場合に、作業が重複していることを作業者Ｘに対して通知する機能である。この一例では、作業者Ｘ１の作業と、作業者Ｘ２の作業とが重複している。この場合、作業支援システム１は、作業者Ｘ１の作業情報と、作業者Ｘ２の作業情報とをヘッドマウント装置２の表示部２２に表示する。

図８は、本実施形態に係る表示部２２に表示される画像の第５の例を示す図である。同図に示すように、作業重複判定機能Ｆ１４において、作業支援システム１は、作業者Ｘ１の作業スケジュールと、作業者Ｘ２の作業スケジュールとを取得する。作業支援システム１は、作業者Ｘ１の作業スケジュールと、作業者Ｘ２の作業スケジュールとが重複している場合には、作業スケジュールが重複していることを示す画像Ｐ１５Ｌを表示する。この一例の場合には、作業者Ｘ１の作業であるケーブルＣＬ２の取り外し作業と、作業者Ｘ２の作業であるケーブルＣＬ４の接続作業とが重複している。この場合、作業支援システム１は、左表示部２２Ｌに「！他の作業との重複が生じています。」との情報を、画像Ｐ１５Ｌとして表示する。また、作業支援システム１は、右表示部２２Ｒに「＜あなたの作業＞；作業内容：ケーブルＣＬ２の取り外し；作業予定時間：１０：１０−１０：２０；＜他の作業＞；作業内容：ケーブルＣＬ４の接続；作業予定時間：１０：１０−１０：２０」との情報を、画像Ｐ１５Ｒとして表示する。

また、作業支援システム１は、作業スケジュールが重複している場合などにおいて、作業スケジュールを変更することもできる。作業支援システム１は、作業スケジュールを変更する場合には、作業スケジュールを変更する旨を表示部２２に表示する。

図９は、本実施形態に係る表示部２２に表示される画像の第６の例を示す図である。同図に示すように、作業支援システム１は、作業スケジュールを変更する場合には、作業スケジュールを変更することを示す画像Ｐ１６Ｌを表示部２２に表示する。この一例の場合には、作業者Ｘ１及び作業者Ｘ２の作業スケジュールとして「作業予定時間：１０：１０−１０：２０」が指定されている。この場合、作業支援システム１は、左表示部２２Ｌに「！作業スケジュールを変更します。」との情報を、画像Ｐ１６Ｌとして表示する。また、作業支援システム１は、右表示部２２Ｒに変更後の作業スケジュールを示す「＜あなたの作業＞；作業内容：ケーブルＣＬ２の取り外し；作業予定時間：１０：２０−１０：３０；＜他の作業＞；作業内容：ケーブルＣＬ４の接続；作業予定時間：１０：１０−１０：２０」との情報を、画像Ｐ１６Ｒとして表示する。

［作業内容の表示機能］
作業支援システム１は、作業内容の表示機能Ｆ１５を提供する。作業内容の表示機能Ｆ１５とは、ヘッドマウント装置２の位置に応じた作業内容を作業者Ｘに提供する機能である。具体的には、作業支援システム１は、ヘッドマウント装置２の位置を取得して、この取得した位置に応じた作業内容を表示部２２に表示させる。この作業内容の表示機能Ｆ１５によれば、作業支援システム１は、ヘッドマウント装置２を装着した作業者Ｘが、ある作業現場に居る場合に、その作業現場で実施すべき作業の内容を表示部２２に表示させることができる。この作業内容の表示機能Ｆ１５により、作業者Ｘは、少なくとも片手がふさがってしまう紙やノート型コンピュータ、タブレットなどによらずに作業内容を確認することができるため、両手を空けた状態で作業内容を確認することができる。

［作業手順の表示機能］
作業支援システム１は、作業手順の表示機能Ｆ１６を提供する。作業手順の表示機能Ｆ１６とは、作業者Ｘが対象装置１０の前に居る場合に、この対象装置１０に対する作業手順を作業者Ｘに提供する機能である。作業支援システム１は、ヘッドマウント装置２の撮像部２３が撮像する対象装置１０の画像に基づいて、この対象装置１０の作業手順を検索する。作業支援システム１は、検索結果として得られた作業手順の情報をヘッドマウント装置２の表示部２２に表示させる。

［情報処理装置及びヘッドマウント装置の機能構成及び動作］
次に、上述した各機能を実現するための情報処理装置４の機能構成及び動作の具体例、及びヘッドマウント装置２の機能構成及び動作の具体例について説明する。以下、作業スケジュール表示機能Ｆ１１から作業手順の表示機能Ｆ１６までの機能ごとに、ヘッドマウント装置２の機能構成及び動作と、情報処理装置４の機能構成及び動作とを説明する。

図１０は、本実施形態に係るヘッドマウント装置２の機能構成例を示す図である。図１０に示される各部の機能は、図２に示す制御部２１が不図示の記憶部に記憶されているプログラムを実行することにより実現される。
図１１は、本実施形態に係る情報処理装置４の機能構成例を示す図である。図１１に示される各部の機能は、図３に示すＣＰＵ４１が不揮発性メモリ４３に格納されるプログラム４７を実行することにより実現される。

［機能構成及び動作；作業スケジュール表示機能］
ヘッドマウント装置２は、時刻取得部２１０１と、作業情報取得部２１０２と、作業情報表示判定部２１０３とを、作業スケジュール表示機能Ｆ１１を実現する機能部として備えている。
情報処理装置４は、作業情報提供部４１０１を、作業スケジュール表示機能Ｆ１１を実現する機能部として備えている。
以下、図１２を参照して作業スケジュール表示機能Ｆ１１についてのヘッドマウント装置２及び情報処理装置４の動作の一例について説明する。

図１２は、本実施形態に係る作業スケジュール表示機能Ｆ１１についての各装置の動作例を示す図である。
ヘッドマウント装置２が起動されると、ヘッドマウント装置２は、自装置が起動されたことを示す起動情報を、情報処理装置４に提供する（ステップＳ２１０５）。この起動情報には、自装置と他のヘッドマウント装置２とを識別するための装置識別情報などが含まれている。
情報処理装置４は、ヘッドマウント装置２から起動情報を取得することにより、このヘッドマウント装置２に対する送信処理を開始する（ステップＳ４１０５）。具体的には、情報処理装置４は、ヘッドマウント装置２から取得した起動情報に含まれる装置識別情報に基づいて、複数のヘッドマウント装置２のなかから、送信先のヘッドマウント装置２を選択する。
ヘッドマウント装置２の時刻取得部２１０１は、ヘッドマウント装置２が備える不図示の時計部から現在の時刻を取得する（ステップＳ２１１０）。
情報処理装置４の作業情報提供部４１０１は、記憶装置６から作業情報を取得する。記憶装置６に記憶されている作業情報の構成例について図１３を参照して説明する。

図１３は、本実施形態に係る記憶装置６に記憶されている作業情報の構成例を示す図である。記憶装置６には、作業ＩＤと、作業現場（作業場所）の位置と、作業項目と、作業着手時刻と、作業終了時刻と、作業状況と、作業者とが互いに関連付けられて作業情報として記憶されている。作業ＩＤは、個々の作業を識別する。作業現場の位置には、ビル名、部屋名、対象装置など、作業現場の位置を示す情報が含まれる。作業項目には、作業者Ｘが実施すべき作業の内容を示す情報が含まれる。

図１２に戻り、作業情報提供部４１０１は、記憶装置６から取得した作業情報のうち、少なくとも作業内容（作業項目）の情報と、作業着手時刻及び作業終了時刻（作業時間）の情報とをヘッドマウント装置２に対して提供する（ステップＳ４１１０）。
ヘッドマウント装置２の作業情報取得部２１０２は、情報処理装置４が提供する作業情報を取得する（ステップＳ２１２０）。

なお、以下の説明において、作業情報のうち作業着手時刻や作業終了時刻、作業時間を「作業スケジュール」とも記載することがある。また、作業時間と、作業情報のうち作業時間以外の他の情報とを合わせて「作業スケジュール」とも記載することがある。

作業情報表示判定部２１０３は、作業スケジュールを表示するか否かを判定する（ステップＳ２１３０）。具体的には、作業情報表示判定部２１０３は、作業情報取得部２１０２が取得した作業情報に含まれる作業開始時刻と、ステップＳ２１１０において取得した現在の時刻とを比較する。作業情報表示判定部２１０３は、作業開始時刻と現在の時刻とが接近している場合に、作業スケジュールを表示すると判定する（ステップＳ２１３０；ＹＥＳ）。作業情報表示判定部２１０３は、例えば、作業開始時刻と現在の時刻との差が１０分以内である場合に、作業スケジュールを表示すると判定する。

ステップＳ２１４０において、ヘッドマウント装置２の制御部２１は、図４に示した画像Ｐ１１Ｌ及び画像Ｐ１１Ｒを表示部２２に表示して、処理を終了する。

なお、この一例では、スケジュールの表示の要否を、上述したステップＳ２１３０においてヘッドマウント装置２が判定するとして記載したが、情報処理装置４が判定してもよい。この場合には、スケジュールを表示すると情報処理装置４が判定した場合に、情報処理装置４が作業情報をヘッドマウント装置２に提供してもよい。

［機能構成及び動作；作業着手承認機能］
ヘッドマウント装置２は、作業情報取得部２２０１と、承認予定時刻出力部２２０２と、承認要求動作取得部２２０３と、承認要求情報提供部２２０４と、承認情報取得部２２０５とを、作業着手承認機能Ｆ１２を実現する機能部として備えている。
情報処理装置４は、作業情報提供部４２０１と、承認要求情報取得部４２０２と、４２０３と、承認情報提供部４２０４とを、作業着手承認機能Ｆ１２を実現する機能部として備えている。
以下、図１４を参照して作業着手承認機能Ｆ１２についてのヘッドマウント装置２及び情報処理装置４の動作の一例について説明する。

図１４は、本実施形態に係る作業着手承認機能Ｆ１２についての各装置の動作例を示す図である。
情報処理装置４の作業情報提供部４２０１は、ヘッドマウント装置２に対して作業情報を提供する（ステップＳ４２１０）。この作業情報には、作業の承認予定時刻が含まれている。ここで、情報処理装置４は、複数のヘッドマウント装置２のうち、いずれのヘッドマウント装置２に対して作業情報を提供したのかを記憶する。また、情報処理装置４は、作業情報をヘッドマウント装置２に対して提供したのち、その作業情報が示す作業時間を、所定時間以上経過した場合には、当該作業情報を消去する指示情報をヘッドマウント装置２に対して送信する。ヘッドマウント装置２は、作業情報を消去する指示情報を受信すると、当該指示情報に基づいて、作業情報を消去する。
ヘッドマウント装置２の作業情報取得部２２０１は、ステップＳ４２１０において提供される作業情報を取得する（ステップＳ２２１０）。
承認予定時刻出力部２２０２は、ステップＳ２２１０において取得された作業情報に含まれている承認予定時刻を、表示部２２に表示する（ステップＳ２２２０）。ここで承認予定時刻とは、作業者Ｘが行う作業に対する承認者Ｙによる承認作業が行われる予定の時刻である。承認者Ｙは、作業者Ｘが居る作業現場から離れた位置において、遠隔承認を行う場合がある。この場合、承認者Ｙが承認作業を行う作業位置（例えば、承認作業用コンピュータのある場所）から離れている場合がある。この場合には、作業者Ｘが承認要求をしたとしても、承認者Ｙがその承認要求に対してすぐに承認作業を行うことができない。ヘッドマウント装置２に承認予定時刻が表示されることにより、作業者Ｘは、承認者Ｙがいつ承認作業を行うのかを認識することができる。

次に、承認要求動作取得部２２０３は、対象装置１０に対する承認要求操作を検出する。この承認要求操作には、作業者Ｘによるヘッドマウント装置２のセンサー部２６に対する操作が含まれる。また、承認要求のジェスチャ（例えば、手の動き）が決まっている場合には、承認要求操作には、撮像部２３が撮像した作業者Ｘによる承認要求のジェスチャが含まれる。また、ヘッドマウント装置２は、測位部２７が測位する自装置の位置に基づいて、作業現場への現場到着判定を行ってもよい。この場合には、ヘッドマウント装置２が現場到着したと判定した場合に、承認要求操作を行ってもよい。この場合、承認要求操作取得部２２１は、現場到着を条件にして、作業者Ｘの操作によらずに承認要求操作を検出する。
承認要求情報提供部２２０４は、承認要求操作が検出された場合、作業着手承認要求情報を情報処理装置４に提供する（ステップＳ２２３０）。

情報処理装置４の承認要求情報取得部４２０２は、ステップＳ２２３０においてヘッドマウント装置２から提供される作業着手承認要求情報を取得し（ステップＳ４２２０）、取得した旨を表示部２２に表示する（ステップＳ４２３０）。
承認者Ｙは、表示部２２に作業着手承認要求があった旨が表示されると、承認するか否かを判断して、承認する場合には、承認操作を情報処理装置４に対して行う。例えば、承認者Ｙは、承認する場合には、表示部４５に表示される「承認」の操作ボタン画像（不図示）をクリックやタップすることにより、承認操作を行う。
承認操作取得部４２０３は、承認者Ｙによる承認操作を検出する。承認情報提供部４２０４は、承認操作取得部４２０３が承認操作を検出した場合、作業着手承認情報をヘッドマウント装置２に対して提供して（ステップＳ４２４０）、処理を終了する。

ヘッドマウント装置２の承認情報取得部２２０５は、ステップＳ４２４０において提供された作業着手承認情報を取得する（ステップＳ２２４０）。
承認情報取得部２２０５は、作業着手承認情報を取得すると、作業着手が承認されたことを示す画像Ｐ１２Ｌと、承認された作業の内容を示す画像Ｐ１２Ｒとを、表示部２２に表示して（ステップＳ２２５０）、処理を終了する。
また、作業支援システム１は、作業着手が承認されたことを、ヘッドマウント装置２を介して作業者Ｘに対して通知する際に、画像以外の方法によって通知してもよい。例えば、作業支援システム１は、ヘッドマウント装置２が使用されている場合には、作業着手が承認されたことを、画像によって通知する。また、作業支援システム１は、ヘッドマウント装置２が使用されていない場合には、作業着手が承認されたことを、音によって通知するようにしてもよい。この場合、ヘッドマウント装置２は、自装置が使用されているか否かを、自装置が作業者Ｘの頭部に装着されているか否かに基づいて判定してもよい。
また、ヘッドマウント装置２は、表示した画像の消去条件が成立すると、この画像の表示を終了するとともに、表示を終了したことを情報処理装置４に通知する。情報処理装置４は、この表示を終了したことの通知を受信すると、当該画像について表示を終了したこと記憶（登録）する。

［機能構成及び動作；作業進捗判定機能］
ヘッドマウント装置２は、時刻取得部２３０１と、作業情報取得部２３０２と、作業進捗判定部２３０３と、アラーム制御部２３０４と、スケジュール変更要求部２３０５とを、作業進捗判定機能Ｆ１３を実現する機能部として備えている。
情報処理装置４は、作業情報提供部４３０１と、スケジュール変更部４３０２とを、作業進捗判定機能Ｆ１３を実現する機能部として備えている。
以下、図１５を参照して作業進捗判定機能Ｆ１３についてのヘッドマウント装置２及び情報処理装置４の動作の一例について説明する。

図１５は、本実施形態に係る作業進捗判定機能Ｆ１３についての各装置の動作例を示す図である。
ヘッドマウント装置２の時刻取得部２３０１は、現在の時刻を取得する（ステップＳ２３１０）。
情報処理装置４の作業情報提供部４１０１は、記憶装置６から作業情報を取得して、取得した作業情報をヘッドマウント装置２に提供する（ステップＳ４３１０）。この作業情報には、少なくとも作業内容（作業項目）の情報と、作業着手時刻及び作業終了時刻（作業スケジュール）の情報とが含まれている。
ヘッドマウント装置２の作業情報取得部２３０２は、ステップＳ４３１０において提供された作業情報を取得する（ステップＳ２３２０）。
作業情報取得部２３０２は、取得された作業情報と、現在の時刻とに基づいて、作業計画と実際の作業進捗とに乖離があるか否か、つまり、作業進捗の進みや遅れの有無を判定する（ステップＳ２３３０）。作業情報取得部２３０２は、作業進捗の進みや遅れが有ると判定した場合（ステップＳ２３３０；ＹＥＳ）には、処理をステップＳ２３４０に進める。

ステップＳ２３４０において、アラーム制御部２３０４は、作業計画と実際の作業進捗とに乖離があることを示すアラームを出力する。具体的には、アラーム制御部２３０４は、図６に示したように、作業が予定よりも遅れていることを示す画像Ｐ１３Ｌや、遅れの状況を示す画像Ｐ１３Ｒを表示部２２に表示する。作業が計画よりも遅れている場合には、次の作業の着手が遅れる。また、作業が計画よりも進んでいる場合には、例えば、他の作業との関係により本来作業に着手してはならない時刻に作業を行うことになる。作業支援システム１は、作業者Ｘに対してアラームを出力することにより、作業が計画通りに進捗するように促すことができる。

スケジュール変更要求部２３０５は、スケジュールの変更要求を情報処理装置４に対して出力する（ステップＳ２３５０）。スケジュールの変更要求とは、作業計画と実際の作業進捗とに乖離がある場合において、実際の作業進捗にあわせた作業計画の変更の要求である。スケジュールの変更要求には、変更後の作業スケジュールの情報が含まれている。
情報処理装置４のスケジュール変更部４３０２は、ヘッドマウント装置２からスケジュールの変更要求を取得すると、記憶装置６に記憶されている作業情報の作業スケジュールのうち、スケジュール変更要求に対応する作業スケジュールを変更する（ステップＳ４３４０）。

なお、この一例では、作業進捗の計画からの乖離の有無を、上述したステップＳ２３３０においてヘッドマウント装置２が判定するとして記載したが、情報処理装置４が判定してもよい。この場合には、ヘッドマウント装置２は、情報処理装置４に対して作業の進捗を示す情報を提供してもよい。また、作業進捗が計画から乖離していると情報処理装置４が判定した場合に、情報処理装置４がヘッドマウント装置２に対して、作業進捗が計画から乖離していることを示す情報を提供してもよい。

［機能構成及び動作；作業重複判定機能］
ヘッドマウント装置２は、作業情報取得部２４０１と、作業情報送信要求部２４０２と、重複判定部２４０３と、アラーム制御部２４０４と、スケジュール変更要求部２４０５とを、作業重複判定機能Ｆ１４を実現する機能部として備えている。
情報処理装置４は、作業情報提供部４４０１と、送信要求取得部４４０２と、スケジュール変更部４４０３とを、作業重複判定機能Ｆ１４を実現する機能部として備えている。
以下、図１６を参照して作業重複判定機能Ｆ１４についてのヘッドマウント装置２及び情報処理装置４の動作の一例について説明する。

図１６は、本実施形態に係る作業重複判定機能Ｆ１４についての各装置の動作例を示す図である。この一例では、ヘッドマウント装置２の利用者が作業者Ｘ１であり、自身つまり作業者Ｘ１の作業スケジュールと、この作業者Ｘ１以外の作業者Ｘ２の作業スケジュールとの重複を判定する場合について説明する。

情報処理装置４の作業情報提供部４４０１は、作業情報をヘッドマウント装置２に提供する（ステップＳ４４１０）。この作業情報は、作業者Ｘ１が実施すべき作業を示している。この作業情報提供部４４０１が提供する作業情報には、作業者Ｘ１が実施すべき作業の作業場所（作業現場）と、作業着手時刻及び作業終了時刻（作業スケジュール）の情報とが含まれている。具体的には、作業者Ｘ１についての作業情報には、図１３に示す作業ＩＤ＿ＷＫ０１、作業ＩＤ＿ＷＫ０２、作業ＩＤ＿ＷＫ０３、…、作業ＩＤ＿ＷＫ０９が含まれている。
ヘッドマウント装置２の作業情報取得部２４０１は、ステップＳ４４１０において提供された作業情報、すなわち作業者Ｘ１が実施すべき作業の作業情報を取得する（ステップＳ２４１０）。
作業情報送信要求部２４０２は、作業者Ｘ２についての作業情報の送信要求を情報処理装置４に対して出力する（ステップＳ２４２０）。
送信要求取得部４４０２は、ステップＳ２４２０において出力された送信要求を取得する（ステップＳ４４２０）。
作業情報提供部４４０１は、ステップＳ４４２０において取得された送信要求に基づいて、作業情報をヘッドマウント装置２に提供する（ステップＳ４４３０）。この送信要求とは、作業者Ｘ２についての作業情報の送信要求である。作業情報提供部４４０１は、記憶装置６に記憶されている作業情報のうち、作業者Ｘ２についての作業情報を取得して、取得した作業情報をヘッドマウント装置２に提供する。この作業情報には、作業者Ｘ２が実施すべき作業の作業場所（作業現場）と、作業着手時刻及び作業終了時刻（作業スケジュール）の情報とが含まれている。具体的には、作業者Ｘ２についての作業情報には、図１３に示す作業ＩＤ＿ＷＫ１１、及び作業ＩＤ＿ＷＫ１２が含まれている。

作業情報取得部２４０１は、ステップＳ４４３０において提供された作業情報、すなわち作業者Ｘ２が実施すべき作業の作業情報を取得する（ステップＳ２４３０）。
重複判定部２４０３は、作業者Ｘ１の作業情報と、作業者Ｘ２の作業情報とを比較することにより、作業どうしの重複の有無を判定する（ステップＳ２４４０）。具体的には、重複判定部２４０３は、作業情報のうち、作業現場の位置と、作業着手時刻及び作業終了時刻とが、作業者Ｘ１と作業者Ｘ２との間において一致するか否かを判定する。より具体的には、重複判定部２４０３は、作業情報から第１の作業と第２の作業との２つの作業を選択する。例えば、重複判定部２４０３は、第１の作業として作業ＩＤ＿ＷＫ０１を選択し、第２の作業として作業ＩＤ＿ＷＫ２を選択する。次に、重複判定部２４０３は、作業情報のうちの「作業現場の位置」が、選択した２つの作業間において一致するか否かを判定する。また、重複判定部２４０３は、選択した２つの作業間において「作業時間」が重複している時間帯が有るか否かを判定する。重複判定部２４０３は、選択した２つの作業間において「作業現場の位置」が一致し、かつ「作業時間」が重複している場合には、選択した２つの作業どうしが重複していると判定する。一方、重複判定部２４０３は、選択した２つの作業間において「作業現場の位置」が一致しておらず、又は「作業時間」が重複していない場合には、選択した２つの作業どうしが重複していないと判定する。重複判定部２４０３は、作業情報の各作業について、第１の作業及び第２の作業としての２つの作業を選択することを繰り返し、作業どうしの重複の有無を判定する。

重複判定部２４０３による重複判定について、図１３に例示する作業情報の場合を具体例にして説明する。重複判定部２４０３は、第１の作業として作業者Ｘ１の作業である作業ＩＤ＿ＷＫ０１を、第２の作業として作業者Ｘ２の作業である作業ＩＤ＿ＷＫ１１を、それぞれ選択する。重複判定部２４０３は、作業ＩＤ＿ＷＫ０１の「作業現場の位置」と、作業ＩＤ＿ＷＫ１１の「作業現場の位置」とを比較する。ここで、作業ＩＤ＿ＷＫ０１と、作業ＩＤ＿ＷＫ１１とは、「作業現場の位置」のうち「建物名」と「部屋名」とが一致する。また、作業ＩＤ＿ＷＫ０１と、作業ＩＤ＿ＷＫ１１とは、「作業現場の位置」のうち「対象装置」が一致しない。ここで、「対象装置」が一致していない場合であっても、「建物名」や「部屋名」が一致している場合には、２つの作業を同時に実施できない場合がある。この場合には、重複判定部２４０３は、２つの作業について、「作業現場の位置」のうち「建物名」と「部屋名」とが一致する場合には、これらの作業が重複していると判定する。また、「建物名」や「部屋名」が一致していても、「対象装置」が一致していない場合には、２つの作業を同時に実施できることがある。この場合には、重複判定部２４０３は、２つの作業について、「作業現場の位置」のうち「建物名」と「部屋名」とが一致していても、「対象装置」が一致していない場合には、これらの作業が重複していないと判定する。２つの作業の「対象装置」が一致していない場合に、これら２つの作業を同時に実施できるか否かは、２つの作業間の因果関係や、作業対象の装置間の配置などにより変化する。具体的には、２つの作業間に因果関係があると、例えば、第２の作業は、第１の作業が完了してからでないと着手できない場合がある。また、対象装置１０−１と、対象装置１０−２との設置間隔が狭い場合、複数の作業者Ｘが同時に作業できない場合がある。作業情報には、図１３に例示した情報に加えて「作業間の因果関係」や、「対象装置の配置」などの情報が含まれていてもよい。この場合には、重複判定部２４０３は、作業情報に含まれる「２つの作業間の因果関係」や、「対象装置の配置」などの情報に基づいて、作業の重複を判定してもよい。

また、重複判定部２４０３が選択する２つの作業は、作業を実施すべき作業者Ｘが互いに異なる。作業を実施すべき作業者Ｘが互いに異なる場合、これらの作業は、場所と時間とが重複することがある。一方、作業ＩＤ＿ＷＫ０１と作業ＩＤ＿ＷＫ０２とのように、作業を実施すべき作業者Ｘが同一である場合には、これらの作業は、場所と時間とが重複することが、作業者Ｘが互いに異なる場合に比べて少ない。したがって、２つの作業を選択する場合に、作業を実施すべき作業者Ｘが互いに異なる作業を選択した方が、作業者Ｘが同一の作業を選択するよりも、作業どうしの重複を効率よく判定することができる場合がある。重複判定部２４０３は、作業を実施すべき作業者Ｘが互いに異なる作業を、作業者Ｘが同一の作業よりも優先的に選択する。重複判定部２４０３は、選択する２つ作業の組み合わせに優先度をつけることにより、作業の重複を効率よく判定する。

重複判定部２４０３は、作業どうしの重複が有ると判定した場合（ステップＳ２４４０；ＹＥＳ）には、処理をステップＳ２４５０に進める。
アラーム制御部２４０４は、作業どうしの重複が有ることを示すアラームを出力する（ステップＳ２４５０）。具体的には、アラーム制御部２４０４は、図８に例示する画像Ｐ１５Ｌや画像Ｐ１５Ｒを表示部２２に表示する。

スケジュール変更要求部２４０５は、スケジュールの変更要求を情報処理装置４に出力する（ステップＳ２４６０）。このスケジュールの変更要求には、変更後の作業スケジュールの情報が含まれている。
情報処理装置４のスケジュール変更部４４０３は、ヘッドマウント装置２からスケジュールの変更要求を取得すると、記憶装置６に記憶されている作業情報の作業スケジュールのうち、スケジュール変更要求に対応する作業スケジュールを変更する（ステップＳ４４４０）。

なお、この一例では、作業の重複の有無を、上述したステップＳ２４３０においてヘッドマウント装置２が判定するとして記載したが、情報処理装置４が判定してもよい。この場合には、作業が重複していると情報処理装置４が判定した場合に、情報処理装置４がヘッドマウント装置２に対して、作業が重複していることを示す情報を提供してもよい。

［機能構成及び動作；作業内容の表示機能］
ヘッドマウント装置２は、自位置情報取得部２５０１と、自位置情報提供部２５０２と、作業情報取得部２５０３を、作業内容の表示機能Ｆ１５を実現する機能部として備えている。
情報処理装置４は、自位置情報取得部４５０１と、作業情報検索部４５０２と、作業情報提供部４５０３とを、作業内容の表示機能Ｆ１５を実現する機能部として備えている。
以下、図１７を参照して作業内容の表示機能Ｆ１５についてのヘッドマウント装置２及び情報処理装置４の動作の一例について説明する。

図１７は、本実施形態に係る作業内容の表示機能Ｆ１５についての各装置の動作例を示す図である。
ヘッドマウント装置２の自位置情報取得部２５０１は、測位部２７から測位値を取得する。この測位値には、ヘッドマウント装置２の位置を示す自位置情報が含まれている。つまり、自位置情報取得部２５０１は、自位置情報を取得する自位置情報を取得する（ステップＳ２５１０）。
自位置情報提供部２５０２は、ステップＳ２５１０において取得された自位置情報を情報処理装置４に提供する（ステップＳ２５２０）。

情報処理装置４の自位置情報取得部４５０１は、ステップＳ２５２０において提供された自位置情報を取得する（ステップＳ４５１０）。
作業情報検索部４５０２は、ステップＳ４５１０において取得された自位置情報を検索キーにして、記憶装置６に記憶されている作業情報を検索する。作業情報検索部４５０２は、作業情報のうち作業現場の位置と、自位置情報が示す位置とが一致する作業情報を検索結果として抽出する（ステップＳ４５２０）。
作業情報提供部４５０３は、抽出された検索結果である作業情報を、ヘッドマウント装置２に提供する（ステップＳ４５３０）。

ヘッドマウント装置２の作業情報取得部２５０３は、ステップＳ４５３０において提供された作業情報を取得し（ステップＳ２５３０）、取得した作業情報を表示部２２に表示して（ステップＳ２５４０）、処理を終了する。

［機能構成及び動作；作業手順の表示機能］
ヘッドマウント装置２は、撮像制御部２６０１と、画像提供部２６０２と、作業手順情報取得部２６０３とを、作業手順の表示機能Ｆ１６を実現する機能部として備えている。
情報処理装置４は、画像取得部４６０１と、装置識別情報取得部４６０２と、作業手順情報検索部４６０３と、作業手順情報提供部４６０４とを、作業手順の表示機能Ｆ１６を実現する機能部として備えている。
以下、図１８を参照して作業手順の表示機能Ｆ１６についてのヘッドマウント装置２及び情報処理装置４の動作の一例について説明する。

図１８は、本実施形態に係る作業手順の表示機能Ｆ１６についての各装置の動作例を示す図である。
ヘッドマウント装置２の撮像制御部２６０１は、対象装置１０の画像を撮像部２３に撮像させ（ステップＳ２６１０）、対象装置１０の画像を取得する。この対象装置１０の画像の一例について、図１９を参照して説明する。

図１９は、本実施形態に係る対象装置１０の画像の一例を示す図である。この一例において、作業者Ｘが実施すべき作業は、対象装置１０−１と対象装置１０−２との間にケーブルを敷設し、該ケーブルで対象装置１０−１と対象装置１０−２とを接続する作業である。装置９０−１、９０−２及び９０−３は、作業対象外の装置である。装置９０−１、９０−２、９０−３のことを対象外装置と称する。ヘッドマウント装置２の表示部２２は、画像ＩＭ１を表示している。画像ＩＭ１は、対象装置１０が撮像された画像である。

図１８に戻り、画像提供部２６０２は、ステップＳ２６１０において撮像された画像を、情報処理装置４に提供する（ステップＳ２６２０）。

情報処理装置４の画像取得部４６０１は、ステップＳ２６２０において提供された画像を取得する（ステップＳ４６１０）。
装置識別情報取得部４６０２は、ステップＳ４６１０において取得された画像に含まれる対象装置１０の画像に基づいて、対象装置１０を識別する。この一例では、装置識別情報取得部４６０２は、対象装置１０−１及び対象装置１０−２を識別する。この装置識別情報取得部４６０２による識別には、画像に含まれる対象装置１０の外形や、名称、型番等の情報が用いられる。装置識別情報取得部４６０２は、既知の画像処理手順によって、対象装置１０の画像から対象装置１０の外形や、名称、型番等の情報を抽出し、抽出した情報を識別情報として取得する。
記憶装置６には、対象装置１０の識別情報と、対象装置１０に対する作業手順とが関連付けられて、作業手順情報として記憶されている。
作業手順情報検索部４６０３は、ステップＳ４６２０において取得された識別情報を検索キーにして、記憶装置６に記憶されている作業手順情報を検索する（ステップＳ４６３０）。作業手順情報検索部４６０３は、作業手順情報のうち、ステップＳ４６２０において取得された識別情報と、識別情報が一致する作業手順情報を検索結果として抽出する。
作業手順情報提供部４６０４は、ステップＳ４６３０において抽出された作業手順情報を、ヘッドマウント装置２に提供して（ステップＳ４６４０）、処理を終了する。

ヘッドマウント装置２の作業手順情報取得部２６０３は、ステップＳ４６４０において提供された作業手順情報を取得し（ステップＳ２６３０）、取得した作業手順情報を表示部２２に表示して（ステップＳ２６４０）、処理を終了する。
ここで、作業手順情報とは、対象装置１０の操作が文章や図によって表現されている電子マニュアルであってもよいし、作業における注意を促す警告画像であってもよい。この作業手順情報として表示部２２に表示される、作業における注意を促す警告画像の一例について、図２０を参照して説明する。

図２０は、本実施形態に係る警告画像の一例を示す図である。この一例において、ヘッドマウント装置２の表示部２２は、警告画像ＩＭ１０１、ＩＭ１０２、ＩＭ１０３、ＩＭ１０４、ＩＭ１０５及びＩＭ１０６を表示する。警告画像ＩＭ１０１及びＩＭ１０２は、該警告画像ＩＭ１０１及びＩＭ１０２の表示に対応する部分が作業対象であることを示している。

一方、警告画像ＩＭ１０３、ＩＭ１０４、ＩＭ１０５及びＩＭ１０６は、該警告画像ＩＭ１０３、ＩＭ１０４、ＩＭ１０５及びＩＭ１０６の表示に対応する部分が作業対象ではないことを示している。警告画像ＩＭ１０３は、該警告画像ＩＭ１０３の表示に対応する部分が運用中であり注意するように、作業者Ｘに警告する画像である。警告画像ＩＭ１０４、ＩＭ１０５及びＩＭ１０６は、該警告画像ＩＭ１０４、ＩＭ１０５及びＩＭ１０６の表示に対応する部分が対象外装置であることを作業者Ｘに警告する画像である。警告画像ＩＭ１０５には、過去に誤作業が発生した箇所である旨と、該誤作業が発生した日時とが示されている。

警告画像ＩＭ１０１、ＩＭ１０２、ＩＭ１０３、ＩＭ１０４、ＩＭ１０５及びＩＭ１０６によって、作業者Ｘに対し、作業内容の再確認を促すことができる。これにより、作業者Ｘが作業すべき内容とは異なる内容の作業を誤って実施してしまうことを未然に防止する効果が得られる。

なお、実際に作業者Ｘが実施した作業内容を確認するために、ヘッドマウント装置２の記録部２５に記録されている一定時間分の撮像画像をヘッドマウント装置２から情報処理装置４へ送信し、該一定時間分の撮像画像を情報処理装置４の表示部４５で表示してもよい。例えば、作業者Ｘに警告する時に該作業者Ｘに作業を中断させ、ヘッドマウント装置２の記録部２５に記録されている一定時間分の撮像画像を情報処理装置４の表示部４５で表示するようにしてもよい。これにより、承認者Ｙは、作業者Ｘに警告する時に、該表示部４５が表示する一定時間分の撮像画像によって作業者Ｘが実施した作業内容を把握することができる。作業者Ｘが実施した作業内容を把握することによって、該把握内容を、作業者Ｘに対する警告内容や作業内容の指示などに反映することができる。
また、情報処理装置４が、ある特定の作業の電子マニュアルなどをヘッドマウント装置２に対して送信する場合には、ヘッドマウント装置２が録画した画像の記憶や、当該画像の情報処理装置４に対するリアルタイム送信を指示する情報を、ヘッドマウント装置２に対して併せて送信してもよい。

また、これまでヘッドマウント装置２と情報処理装置４とが直接、情報の送受を行う場合について説明したが、これに限られない。ヘッドマウント装置２と情報処理装置４とは、不図示の通信装置を介して情報の送受を行ってもよい。例えば、ヘッドマウント装置２の通信部２４は、通信装置と通信を行う。通信装置は、通信回線８を介して、情報処理装置４とデータを送受する。ヘッドマウント装置２は、通信装置を介して、情報処理装置４とデータを送受する。

ヘッドマウント装置２の通信部２４は、撮像画像等のデータを通信装置へ送信する。通信装置は、ヘッドマウント装置２から受信した撮像画像等のデータを、通信回線８を介して情報処理装置４へ送信する。
情報処理装置４の通信部４６は、通信回線８を介して画像等のデータを通信装置へ送信する。通信装置は、情報処理装置４から受信した画像等のデータをヘッドマウント装置２へ送信する。ヘッドマウント装置２の通信部２４は、通信装置から画像等のデータを受信する。ヘッドマウント装置２の表示部２２は、通信部２４が通信装置から受信した画像を表示する。

ヘッドマウント装置２の通信部２４と通信装置とは、例えばビーエルイー（Bluetooth（登録商標） Low Energy：ＢＬＥ）などの近距離無線通信技術によって無線データ通信を行う。これにより、ヘッドマウント装置２の通信部２４が通信装置を介さずに直接に通信回線８を介して情報処理装置４とデータを送受する場合に比して、ヘッドマウント装置２の消費電力を低減することができる。これは、ヘッドマウント装置２のバッテリーの持ちをよくし、ヘッドマウント装置２のより長い使用時間の実現に貢献できる。
通信装置として、例えばスマートフォンやタブレット、ノート型コンピュータ等の携帯通信端末装置を適用できる。

以上、本発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。

上述した情報処理装置の機能を実現するためのコンピュータプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行するようにしてもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものであってもよい。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、フラッシュメモリ等の書き込み可能な不揮発性メモリ、ＤＶＤ（Digital Versatile Disc）等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。

さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（例えばＤＲＡＭ（Dynamic Random Access Memory））のように、一定時間プログラムを保持しているものも含むものとする。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。
また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。

１…作業支援システム、２…ヘッドマウント装置、４…情報処理装置、６…記憶装置、８…通信回線、１０…対象装置、２１…制御部、２２…表示部、２３…撮像部、２４，４６…通信部、２５…記録部、２６…センサー部、２７…測位部、２８…視線検出部、２９…音声再生部、３０…収音部、４１…ＣＰＵ、４２…メモリ、４３…不揮発性メモリ、４４…操作部、４５…表示部、４７…プログラム

Claims (10)

1. 画像を表示する表示部と、
   作業の内容を示す作業内容情報と、当該作業のスケジュールを示すスケジュール情報とを含む作業情報を取得する作業情報取得部と、
   現在の時刻を取得する時刻取得部と、
   前記作業情報取得部が取得する前記作業情報に含まれる前記スケジュール情報と、前記時刻取得部が取得する時刻とに基づいて、当該作業情報に含まれる前記作業内容情報が示す作業の内容の画像を前記表示部に表示させる表示制御部と
   を備えるヘッドマウント装置。
2. 前記スケジュール情報が示す前記作業のスケジュールと、前記時刻取得部が取得する時刻とに基づいて、前記作業の進捗状況を判定する進捗状況判定部
   を更に備え、
   前記表示制御部は、
   前記進捗状況判定部による判定の結果を示す画像を前記表示部に表示させる
   請求項１に記載のヘッドマウント装置。
3. 前記進捗状況判定部による判定の結果に基づいて、前記作業情報取得部が取得した前記作業情報を更新する作業情報更新部
   を更に備える請求項２に記載のヘッドマウント装置。
4. 自装置を利用する作業者以外の他作業者に割り当てられている作業のスケジュールを示す情報を含む他作業情報を取得する他作業情報取得部と、
   前記他作業情報取得部が取得する前記他作業情報と、前記作業情報取得部が取得する前記作業情報とに基づいて、前記作業者の作業と前記他作業者の作業との相対的な進捗状況を判定する他作業進捗状況判定部と
   を更に備え、
   前記表示制御部は、
   前記他作業進捗状況判定部による判定の結果を示す画像を前記表示部に表示させる
   請求項１から請求項３のいずれか一項に記載のヘッドマウント装置。
5. 前記他作業進捗状況判定部による判定の結果に基づいて、前記作業情報取得部が取得した前記作業情報又は前記他作業情報取得部が取得した前記他作業情報を更新する
   請求項４に記載のヘッドマウント装置。
6. 音を出力する音出力部と、
   自装置が作業者の頭部に装着されているか否かを判定する装着判定部と、
   を更に備え、
   前記表示制御部は、
   前記作業内容情報が示す作業の内容の画像を前記表示部に表示させる際に、前記装着判定部が装着されていないと判定する場合には、前記音出力部から音を出力させる
   請求項１から請求項５のいずれか一項に記載のヘッドマウント装置。
7. 前記作業情報には、前記作業の着手が承認される予定時刻を示す承認予定時刻情報が含まれ、
   前記表示制御部は、
   前記作業情報取得部が取得する前記作業情報に含まれる前記承認予定時刻情報が示す前記予定時刻の画像を前記表示部に表示させる
   請求項１から請求項６のいずれか一項に記載のヘッドマウント装置。
8. 画像を表示する表示部を備えるヘッドマウント装置のコンピュータに、
   作業の内容を示す作業内容情報と、当該作業のスケジュールを示すスケジュール情報とを含む作業情報を取得する作業情報取得ステップと、
   現在の時刻を取得する時刻取得ステップと、
   前記作業情報取得ステップにおいて取得される前記作業情報に含まれる前記スケジュール情報と、前記時刻取得ステップにおいて取得される時刻とに基づいて、当該作業情報に含まれる前記作業内容情報が示す作業の内容の画像を前記表示部に表示させる表示制御ステップと
   を実行させるためのプログラム。
9. 請求項１から請求項７のいずれか一項に記載のヘッドマウント装置と、前記ヘッドマウント装置との間において情報を授受する情報処理装置とを備え、
   前記ヘッドマウント装置は、
   自装置の位置を示す自位置情報を、前記情報処理装置に送信する自位置情報送信部
   を備え、
   前記情報処理装置は、
   前記自位置情報送信部が送信する前記自位置情報を受信する自位置情報受信部と、
   前記スケジュール情報と作業場所情報とが関連付けられて前記作業情報として記憶されている作業情報記憶部から、前記自位置情報受信部が受信する前記自位置情報に対応する前記作業場所情報が関連付けられている前記スケジュール情報を抽出するスケジュール情報抽出部と、
   前記スケジュール情報抽出部が抽出する前記スケジュール情報を前記ヘッドマウント装置に送信する
   作業支援システム。
10. 前記ヘッドマウント装置は、
    当該ヘッドマウント装置の周辺の風景を撮像して画像を生成する撮像部と、
    前記撮像部が撮像する画像を、前記情報処理装置に送信する画像送信部と、
    を備え、
    前記情報処理装置は、
    前記画像送信部が送信する前記画像を受信する画像受信部と、
    前記画像受信部が受信する前記画像に含まれる作業対象の機器の情報を当該画像から抽出する機器情報抽出部と、
    作業対象の機器を示す機器情報と、当該機器についての作業手順を示す情報とが関連付けられて作業手順情報として記憶されている作業手順情報記憶部から、前記機器情報抽出部が抽出する前記機器の情報に対応する前記機器情報が関連付けられている前記作業手順情報を抽出する作業手順情報抽出部と、
    前記作業手順情報抽出部が抽出する前記作業手順情報を前記ヘッドマウント装置に送信する
    請求項９に記載の作業支援システム。

Images