JP7058621B2 - 映像記録装置およびヘッドマウントディスプレイ - Google Patents

Description

本発明は、映像記録装置およびヘッドマウントディスプレイに関する。

本技術分野の背景技術として、特許文献１がある。この文献には、ガスセンサをＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）に搭載し、複数の位置情報と連動することでガスの発生方向を特定してユーザに知らせ、事故を未然に防ぐ現場支援システムが記載されている。

特開２０１２－１６８６８３号公報

上記特許文献１に記載の技術では、作業を阻害せず、限られた記憶領域等のハードウェアリソースで作業状況等を効率よく記録することは考慮されていない。

本発明の目的は、作業を阻害せず、限られた記憶領域等のハードウェアリソースで作業状況等を効率よく記録することにある。

本願は、上記課題の少なくとも一部を解決する手段を複数含んでいるが、その例を挙げるならば、以下のとおりである。上記課題を解決すべく、本発明の一態様に係る映像記録装置は、装着者の視野方向の映像を撮像するカメラと、所定の環境情報を検出する外部センサと通信可能に接続する接続部と、上記環境情報の異常状態を示す閾値を格納する閾値情報格納部と、上記外部センサの検出情報と上記閾値との比較により異常判定信号を出力する判定部と、上記異常判定信号に応じ上記カメラに所定の制御信号を出力する制御部と、上記カメラ及び上記外部センサからの出力情報を表示する表示部と、を備え、上記制御部は、上記異常判定信号が出力されると、上記カメラからの出力情報を所定の記憶部に転送させる制御信号を出力する、ことを特徴とする。

本発明によれば、作業を阻害せず、限られた記憶領域等のハードウェアリソースで作業状況等を効率よく記録することができる。上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。

本発明の第一の実施形態に係る映像記録装置の構成例を示す図である。 映像記録装置の別の構成例を示す図である。 映像記録装置の装着時の外観の例を示す図である。 ヘッドマウント部の構造例を示す図である。 制御部の内部構造の例を示すブロック図である。 画像処理部の内部構造の例を示すブロック図である。 テキストデータ保持部のデータ構造例を示す図である。 判定部の内部構造の例を示すブロック図である。 閾値情報格納部のデータ構造例を示す図である。 映像記録装置の使用状態の例を示す図である。 ＨＭＤの表示画面の遷移例を示す図である。 モニタ処理のフローチャートの例を示す図である。 外部センサに可視光カメラを用いた場合の利用例を示す図である。 外部センサを用いた文字認識の際のＨＭＤ上の補助表示例を示す図である。 工程モニタ処理のフローチャートの例を示す図である。 外部センサの収納構造の例を示す図である。 接触検知センサの接続例を示すブロック図である。 装着者の視線方向を検出するカメラの構成例を示す図である。 装着者の視線方向を検出するカメラの構成例を示す図である。 盤作業のアラートの表示例を示す図である。 加速度センサを用いる判定部の内部構造の例を示すブロック図である。 加速度センサの場合の閾値情報格納部のデータ構造の例を示す図である。 ＴＯＦカメラを用いる判定部の内部構造の例を示すブロック図である。 解像度を下げる制御部の内部構造の例を示すブロックである。

以下、本発明に係る実施の形態を図面に基づいて説明する。なお、実施の形態を説明するための全図において、同一の部材には原則として同一の符号を付し、その繰り返しの説明は省略する。また、以下の実施の形態において、その構成要素（要素ステップ等も含む）は、特に明示した場合および原理的に明らかに必須であると考えられる場合等を除き、必ずしも必須のものではないことは言うまでもない。また、「Ａからなる」、「Ａよりなる」、「Ａを有する」、「Ａを含む」と言うときは、特にその要素のみである旨明示した場合等を除き、それ以外の要素を排除するものでないことは言うまでもない。同様に、以下の実施の形態において、構成要素等の形状、位置関係等に言及するときは、特に明示した場合および原理的に明らかにそうでないと考えられる場合等を除き、実質的にその形状等に近似または類似するもの等を含むものとする。

近年、透過型ＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）が製品化され、工場等現場での作業支援に利用されている。透過型ＨＭＤは、例えばガラスやプラスチック等の可視光に対し透明に近い物質で形成された透過型ディスプレイを装着者の視線と交差するように配置して、視野を妨げずに情報を提示することができるウェアラブルコンピュータの一種である。一般的に、透過型ＨＭＤを装着したユーザは、自身の作業対象を見ながら透過型の仮想画面に作業支援に関する情報を投影表示することで、作業手順の確認や操作を行うことが可能となる。

例えば、先行技術文献に示したように、作業支援からさらに拡張し、作業対象の設備の状態が正常動作しているか確認を行うために、ＨＭＤに搭載したセンサにより周囲状態を検出し、そのデータをユーザにフィードバックする技術も可能となっている。

一方で、昨今では作業者のヒューマンエラー撲滅のため、また、作業対象物の状態や適切な作業の監視のため、作業対象物、対象文字、作業員の作業等を記録するニーズが高まっている。現場の状況を取得する手段として、ＨＭＤに搭載したカメラによる映像記録があるが、全ての作業を記録するためには記憶容量が莫大なものとなり、ＨＭＤが大型化する傾向がある。加えて、演算負荷が重くなるためＨＭＤの電池の消費が増加してＨＭＤの使用時間が短くなる傾向があり、どちらもＨＭＤの大型化を招き好ましくない。また、作業現場が地下室等の場合、遠隔装置との通信が困難な状況もありうるため、恒常的にネットワークを介して利用するクラウドストレージ等のリモートストレージを用いる技術も採用しづらい。

このような状況を鑑みると、ＨＭＤにおいて記録が必要な情報を取捨選択し、ＨＭＤの記憶容量を増加させない手段が有効である。この取捨選択の判断を人が行うと、主観やヒューマンエラー等により記録の抜け漏れが発生しやすい。したがって、人の判断によらず、客観的に必要な状況においてＨＭＤに搭載したカメラによる映像記録を行えることが大切である。

図１は、本発明の第一の実施形態に係る映像記録装置の構成例を示す図である。映像記録装置１０００は、ヘッドマウントディスプレイとして実装されるが、これに限られず、いわゆるスマートフォンやタブレット装置として実装されてもよい。映像記録装置１０００には、ヘッドマウント部１と、コントローラ２と、が含まれる。ヘッドマウント部１には、カメラ１１、表示部１６が含まれる。カメラ１１は、所定の画角で可視光映像を取得することで、動画および静止画を取得することができる。表示部１６は、例えばガラスやプラスチック等の可視光に対して透明に近い物質で形成された透過型ディスプレイである。装着者の目４０の視界内に表示部１６が写り込むように配置されても、表示部１６は、装着者の視野を妨げずに情報を透過的に提示する。

コントローラ２には、判定部１２と、閾値情報格納部１３と、記憶部１４と、制御部１５と、無線通信部１７と、Ｉ／Ｆ１８と、が含まれる。無線通信部１７は、外部無線通信部１００を介してネットワーク接続されるクラウドサーバ２００と遠隔通信が可能である。Ｉ／Ｆ１８は、外部センサ３と、マイク３０と、リモコン３１と、スピーカ３２と接続可能な接続部である入力インターフェースである。

外部センサ３が取得した周囲の各種の環境情報は、Ｉ／Ｆ１８を介し、判定部１２に入力される。判定部１２は、外部センサ３が取得した環境情報と、閾値情報格納部１３のデータと、に応じた判定を行い、判定の結果に応じた制御信号である異常判定信号または正常判定信号を制御部１５に出力する。閾値情報格納部１３には、外部センサ３が取得する周囲の各種の環境情報について、正常値の範囲と異常値の範囲の境界を示す閾値が格納されている。

制御部１５は、判定部１２の出力信号に応じ、カメラ１１へ所定の命令を行う。例えば、その命令には、カメラ１１の起動、映像転送要求等が含まれる。また、制御部１５はカメラ１１から取得した静止画もしくは動画を、判定部１２の出力信号に応じ記憶部１４に格納する。記憶部１４は、静止画あるいは動画のデータを格納する。

制御部１５は、カメラ１１の映像、作業情報、もしくは外部センサ３の取得データ等から画像を生成し、表示部１６へ出力させる。

また、制御部１５は、無線通信部１７から取得したデータから、閾値情報格納部１３のデータを書き換える。また、制御部１５は、カメラ１１の映像、記憶部１４のデータを取得し無線通信部１７に出力する。

また、制御部１５は、表示部１６にカメラ１１が取得した静止画あるいは動画だけでなく、例えば作業情報データ、装着者への周知情報を表示させてもよい。作業情報データには、例えば作業工程、図面、過去の作業記録等が含まれる。装着者への周知情報には、閾値情報格納部１３の閾値の変更情報等、ＨＭＤのパラメータの変更時にユーザに知らせる目的で情報を表示してもよい。その際は、表示部１６は、装着者に対し変更をしてもよいか確認する画面を表示し、ユーザが変更を承認もしくは拒否するような対話型の表示を行う。

無線通信部１７は、外部無線通信部１００との間で、通信を無線で行う。通信規格としては、例えばＷｉＦｉ（登録商標）やＢｌｕｅｔｏｏｔｈ（登録商標）を用いる。外部無線通信部１００は、無線通信部１７から受信したデータをクラウドサーバ２００に送信する。クラウドサーバ２００は、遠隔管理者側の情報処理装置であり、遠隔管理者側から装着している作業者のＨＭＤに対して接続し、映像や音声の共有、設定値の変更、データ等の取得を行う。外部無線通信部１００が無線通信部１７から受信するデータは、カメラ１１の静止画あるいは動画でもよいし、外部センサ３が取得した環境情報でもよい。

また、外部無線通信部１００は、クラウドサーバ２００から受信したデータを無線通信部１７に送信する。無線通信部１７が受信したデータが閾値情報の変更の場合、制御部１５は、閾値情報格納部１３に閾値情報を出力して更新させる。

リモコン３１は、ＨＭＤを操作する指示を受け付ける遠隔操作装置である。例えば、表示部１６において表示された選択肢のカーソル移動や選択する指示を受け付ける。なお、リモコン３１は、例えば外部センサ３と一体化された構造であってもよい。例えば、外部センサ３が接写型カメラの場合、その持ち手にいくつかのハードウェアボタンが入力操作用に設けられているものであってもよい。

図２は、映像記録装置の別の構成例を示す図である。この構成例では、外部センサ３が外部無線通信部１０１を備える。外部無線通信部１０１は、図１に示した外部無線通信部１００と同様に、通信規格としては、例えばＷｉＦｉやＢｌｕｅｔｏｏｔｈを用いる。この場合、制御部１５は、外部センサ３から外部無線通信部１０１、無線通信部１７を介して送信されたデータを判定部１２に出力する。このような形を取ることで外部センサ３は有線、無線を介して接続しても、ともに同様の機能を実現できる。

図３は、映像記録装置の装着時の外観の例を示す図である。作業支援では、作業者４００はヘルメットを被ることが多いため、ヘルメットに映像記録装置１０００を接続した例を示している。

作業者４００は、頭部にヘルメット３００を被っているものとする。ヘルメット３００には、固定治具３１０および固定治具３１０から伸びる撓曲自在のフレキシブルアーム３２０が設けられている。フレキシブルアーム３２０は、ヘッドマウント部１と接続され、ヘッドマウント部１を所定の位置で支持している。

ヘッドマウント部１のカメラ１１は、作業者４００の目４０の視線方向と略並行に、すなわち同一方向に向けられて設置される。コントローラ２はヘルメット３００に組付けられている。ヘッドマウント部１の表示部１６は、作業者４００の目４０に対し視線が交差するよう調整されてフレキシブルアーム３２０により支持される。

図３に示すように、ヘッドマウント部１の支持は、ヘッドマウント部１の所定の二箇所、もしくはそれ以上の多点で行う。一箇所の支持では、その支持部を支点として多方向に回転しやすくなるため、作業者４００の目４０と表示部１６の位置関係がずれやすくなる。位置がずれると、作業者４００から見て映像の欠けやぼやけが発生するため、視認性の低下につながってしまう。二箇所以上の多点で支持すると、ヘッドマウント部１は回転しにくくなるため視認性低下の抑制が可能である。

支持位置は、ヘッドマウント部１の表示部１６と対向する端部、及びヘッドマウント部１がＬ字に折れ曲がる箇所の二箇所が有効である。そのような位置で支持することで、カメラ１１の視界を遮らず、かつ作業者４００の目４０の視界にも影響を避けることができる。

外部センサ３は、作業者４００が手に持って測定対象に近づけることを想定している。そのため、外部センサ３は、ヘッドマウント部１およびコントローラ２とは別体であり、有線または無線の通信路を介してコントローラ２の接続部であるＩ／Ｆ１８と接続される。なお、Ｉ／Ｆ１８は、有線接続であれば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）、ＡＵＸ（Ａｕｘｉｌｉａｒｙ）等の各種の有線通信規格を用いることができる。

外部センサ３には、例えば温度センサ、湿度センサ、赤外線カメラ、可視光カメラ、ＴＯＦ（Ｔｉｍｅ ｏｆ Ｆｌｉｇｈｔ）カメラ、加速度センサ、放射線量センサ、ガスセンサ等を用いることができる。図３ではコントローラ２から有線で外部センサ３に接続する例を示したが、図２のように外部センサ３に外部無線通信部１０１を備えさせ、コントローラ２と無線通信により接続するようにしてもよい。

図４は、ヘッドマウント部１の構造例を示す図である。ヘッドマウント部１には、樹脂等により形成された棒状の支持部材の先に略Ｌ字型（厳密に直角でなくともよい）に接続されるカメラ１１と、表示部１６と、が含まれる。表示部１６は、作業者４００の目４０の視線方向４０´が透過する位置に設けられる。また、カメラ１１は、視線方向４０´と略並行に撮影中心線が設けられる。しかし、これに限られず、カメラ１１は、視線方向４０´と略並行な視野方向を撮像するものであれば良く、例えば人の目よりも広い画角を備えるものであってもよい。

図５は、制御部の内部構造の例を示すブロック図である。制御部１５には、作業情報格納部１５１と、画像取得部１５２と、画像処理部１５３と、画像データ転送部１５４と、が含まれる。

作業情報格納部１５１には、作業情報が格納される。作業情報とは、作業を所定の工程に分けて、それぞれの作業に関するポイントとなる操作や重要な映像記録を記録すべきタイミングを特定する情報に関連づけた情報であり、様々なデータ形式をとり得る。作業情報格納部１５１は、画像処理部１５３からの要求に応じて、作業情報を受け渡す。また、無線通信部１７から更新指示とともに作業情報を受け付けると、作業情報格納部１５１は作業情報を更新する。

画像取得部１５２は、判定部１２の判定結果の信号に応じ、カメラ１１に画像転送要求を行って画像（静止画、動画を含む）を取得する。そして、画像取得部１５２は、取得した画像を画像処理部１５３へ受け渡す。

画像処理部１５３は、画像取得部１５２で取得した画像データがあればそのデータと、判定部１２から出力された外部センサ３（外部センサ３がカメラである場合）の画像データがあればそのデータと、作業情報格納部１５１の作業情報と、を用いて、表示部１６に出力する画像を生成する。外部センサ３により検出された値が異常状態である場合には、画像処理部１５３は、表示部１６に異常状態が発生した旨のテキストデータを合成（例えば、重畳）表示してもよい。このテキストデータの重畳表示処理の詳細については、後述する。

画像データ転送部１５４は、画像取得部１５２から、判定部１２の判定データに応じたカメラ１１への画像転送要求が行われると、画像処理部１５３で生成した画像データを、記憶部１４に転送する。例えば、判定部１２から出力された判定データが、０(ＧＮＤレベル)の場合、画像データ転送部１５４はデータ転送を行わないが、判定データが１(電源レベル)の場合には、画像データ転送部１５４は記憶部１４にデータ転送を行う。この場合、記憶部１４に転送するデータは、動画でも静止画でもよいし、カメラ１１の映像に作業表示、異常状態表示を重畳させてもよい。このように判定データが０、１のいずれかである場合の例を示したが、判定部１２と画像取得部１５２、画像データ転送部１５４との間で互いに所定のコマンドによる制御を行ってもよい。作業情報格納部１５１は、無線通信部１７から受信したデータにより作業情報を更新してもよい。

図６は、画像処理部の内部構造の例を示すブロック図である。画像処理部１５３には、画像生成部１５３１と、テキストデータ保持部１５３２と、が含まれる。テキストデータ保持部には、「正常」、「異常」、「カメラ記録開始」、「外部センサの位置を表示中央に合わせてください」、「記録中」等の各種メッセージ情報が、作業情報の工程に応じて格納される。

図７は、テキストデータ保持部のデータ構造例を示す図である。テキストデータ保持部１５３２には、工程Ｎｏ１５３２Ａごとに、データ１５３２Ｂ（表示条件）と、テキスト１５３２Ｃと、数値情報１５３２Ｄと、が対応付けて記憶されている。

データ１５３２Ｂは、テキスト１５３２Ｃを表示させるのに外部センサ３の出力に条件がある場合に、その条件を示す。例えば、「最適範囲２０度－３５度」、「異常範囲Ｔ＜２０度，３５度＜Ｔ」等の温度センサの検出値の条件等である。テキスト１５３２Ｃには、作業者へのメッセージを主とするテキスト情報が格納される。数値情報１５３２Ｄには、表示させる位置の座標を数値で指定する場合にその座標を特定する情報である。

図６の説明に戻る。画像生成部１５３１は、作業情報格納部１５１の作業情報と、判定部１２を介して受け付ける外部センサ３のデータと、テキストデータ保持部１５３２から読み出した工程のテキストデータと、画像取得部１５２から取得したカメラ１１の取得画像と、を用いて重畳させた画像を生成し、画像データ転送部１５４へ受け渡す。

例えば、画像生成部１５３１は、外部センサ３の検出値が正常時には、外部センサ３のデータと、該データの最適範囲に応じたテキスト（「正常」等）を画像として生成し、画像データ転送部１５４へ受け渡す。外部センサ３の検出値が異常時には、画像生成部１５３１は、画像取得部１５２から取得したカメラ１１の取得画像に、外部センサ３のデータと、該データの異常範囲に応じたテキスト（「異常」等）を重畳させて画像として生成し、画像データ転送部１５４へ受け渡す。

そして、画像生成部１５３１は、続くメッセージテキスト「カメラ記録開始」を重畳させて表示し、その後「外部センサの位置を表示中央に合わせてください」と重畳させて、数値情報１５３２Ｄの座標に表示中央に相当するガイドを表示させる。そして、外部センサ３の位置が表示中央に合うと、画像生成部１５３１は、「記録中」というメッセージテキストを重畳させて表示させる。なお、表示中央の範囲に外部センサの位置が合ったか否かは、外部センサ３が有する特定の情報（光量や記号、文字等の刻印、色のパターン、熱のパターン、音のパターン等）が規定の条件を満たすか否かを、画像生成部１５３１が判定することにより実現できる。

図８は、判定部の内部構造の例を示すブロック図である。判定部１２は、比較器１２１と、バッファ１２２と、を含む。比較器１２１は、Ｉ／Ｆ１８を介し受信した外部センサ３のデータと、閾値情報格納部１３の閾値と、を比較し、判定データを出力する。例えば、比較器１２１は、外部センサ３のデータが閾値情報より小さい場合には、「０(ＧＮＤレベル)」を判定データとして出力する。外部センサ３のデータが閾値情報より大きい場合には、比較器１２１は、「１(電源レベル)」を判定データとして出力する。

先述したとおり、判定データは「０」、「１」レベルだけでなく、比較器１２１がＭＣＵ（Ｍｉｃｒｏ Ｃｏｎｔｒｏｌ Ｕｎｉｔ）等の内部機能ブロックとして構成されている場合、制御部１５とコマンドでデータのやり取りを行ってもよい。バッファ１２２は、外部センサ３が取得したデータをバッファリングし制御部１５に出力する。

図９は、閾値情報格納部のデータ構造例を示す図である。閾値情報格納部１３には、工程Ｎｏ１３Ａごとに、閾値１３Ｂが対応付けられている。すなわち、工程ごとの外部センサ３の正常／異常を分かつ閾値が格納されている。

図１０は、映像記録装置の使用状態の例を示す図である。図１０には、映像記録装置１０００を備えるヘルメット３００を装着した作業者４００が盤作業を行っており、外部センサ３を対象の盤に接触させている状態が描かれている。ここでは外部センサ３を対象の盤に接触させる形で例示したが、非接触で測定してもよいし、盤に備わっている外部センサ３と通信してデータを取得する形としてもよい。温度センサを外部センサ３として用いる例を挙げながら、以下に映像記録装置１０００のモニタ処理の説明を行う。

図１１は、ＨＭＤの表示画面の遷移例を示す図である。外部センサ３で検出したデータの異常判定結果に応じて、正常時の表示画面の遷移と、異常時の表示画面の遷移と、が示されている。

正常時の表示画面１１０では、外部センサ３で取得したデータと、判定結果の「正常」のメッセージテキストと、判定基準の閾値と、が重畳表示される。作業者４００の目４０からは、これらの重畳表示されるテキスト以外は、透過して通常の視界を得られる。判定基準の閾値を表示する目的は、正常な範囲内でも異常に近い可能性を作業者４００に気づかせるためである。故障や事故を未然に防ぐため、同時に過去の温度データの遷移等を表示すようにしてもよい。

異常時の表示画面１１１では、外部センサ３で取得したデータと、判定結果の「異常」のメッセージテキストと、判定基準の閾値と、「カメラ記録開始」のメッセージテキストが重畳表示される。作業者４００の目４０からは、これらの重畳表示されるテキスト以外は、透過して通常の視界を得られる。

そして、遷移後の記録準備画面１１２では、外部センサ３で取得したデータと、判定結果の「異常」のメッセージテキストと、判定基準の閾値と、「外部センサの位置を表示中央に合わせて下さい」のメッセージテキストおよび表示中央のガイド１１２Ａが重畳表示される。作業者４００の目４０からは、これらの重畳表示されるテキスト以外は、透過して通常の視界を得られる。

そして、記録開始後の記録中画面１１３では、外部センサ３で取得したデータと、判定結果の「異常」のメッセージテキストと、判定基準の閾値と、「記録中」のメッセージテキストが重畳表示される。作業者４００の目４０からは、これらの重畳表示されるテキスト以外は、透過して通常の視界を得られる。

カメラ１１は、所定時間を越えれば記録を停止してもよいし、異常状態が発生した際に、遠隔側から記録時間を決めて指示するようにしてもよい。記録を継続する時間は、例えば作業情報格納部１５１の各工程において対応付けておくようにし、遠隔側からの書換えは作業情報格納部１５１の工程の情報を書き換えるようにしてもよい。また、異常状態が発生した際は遠隔の管理者に自動的に連絡する仕組みとしてもよい。連絡には、例えば固定テキストを管理者に自動送信する、自動的に電話(音声チャット等でもよい)をかけ、状況をすぐに伝えられる環境としてもよい。

図１２は、モニタ処理のフローチャートの例を示す図である。モニタ処理は、映像記録装置１０００に電源が投入されると、開始される。

まず、異常温度であるか否かを判定する（ステップＳ００１）。具体的には、判定部１２は、外部センサ３が検出した温度が異常であるか否か、閾値情報格納部１３から情報を取得して閾値との比較により判定する。正常温度の場合（ステップＳ００１にて「Ｎｏ」の場合）には、判定部１２は、ステップＳ００１を継続して実施する。

異常温度の場合（ステップＳ００１にて「Ｙｅｓ」の場合）には、画像処理部１５３は、「カメラ記録開始」とのメッセージテキストを表示させる（ステップＳ００２）。具体的には、画像生成部１５３１は、異常時の表示画面１１１を作成して、表示部１６に表示させる。

そして、画像処理部１５３は、外部センサの位置を見るよう促す表示を行う（ステップＳ００３）。具体的には、画像生成部１５３１は、記録準備画面１１２を作成して、表示部１６に表示させる。

そして、画像処理部１５３は、カメラ中央に外部センサが有るか否か判定する（ステップＳ００４）。具体的には、画像生成部１５３１は、表示中央の範囲に外部センサの検知対象の位置が表示中央に合ったか否かについて、外部センサ３の検知する対象が有する特定の情報（温度センサに設けられた刻印パターン）が規定の条件を満たすか否かを、画像生成部１５３１が判定することにより判定する。カメラ中央に外部センサが無い場合（ステップＳ００４にて「Ｎｏ」の場合）には、画像処理部１５３は、制御をステップＳ００３に戻す。

カメラ中央に外部センサが有る場合（ステップＳ００４にて「Ｙｅｓ」の場合）には、画像処理部１５３は、「記録中」とのメッセージテキストを表示させる（ステップＳ００５）。具体的には、画像生成部１５３１は、記録中画面１１３を作成して、表示部１６に表示させる。

そして、カメラ１１は、記録時間が所定時間を越えたか否か判定する（ステップＳ００６）。記録時間が所定時間を越えていない場合（ステップＳ００６にて「Ｎｏ」の場合）には、カメラ１１は、ステップＳ００６の判定を行う。

記録時間が所定時間を越えた場合（ステップＳ００６にて「Ｙｅｓ」の場合）には、カメラ１１は、記録を終了する（ステップＳ００７）。

以上が、映像記録装置１０００のモニタ処理のフローである。モニタ処理によれば、温度センサの検出値が異常であるか否か判定し、異常時にはカメラ１１による映像を適切に記録することができる。

図１１および１２に示した例では、外部センサ３に温度センサを用いた。しかし上述のようにこれに限られるものではなく、温度センサ以外にも様々なセンサを用いることができる。図１３～図１５では、外部センサ３に可視光カメラを用いた例を示す。

図１３は、外部センサに可視光カメラを用いた場合の利用例を示す図である。作業者４００は、外部センサ３を対象の盤に向け、撮像する。対象の盤には作業工程の番号(例えば、図１３内の「２１１ＡＢＣ－ＤＥ」)、ＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）マーカ、盤の名称のテキスト等が表記されていることを想定している。例えば作業工程の番号を読み取ると、記録を残しておくべき作業工程である場合(例えば不具合が多い、過去に事故を起こした等)、カメラ１１による映像の記録を開始する。

各作業工程で問題となりやすい場所は事前に判明しうるため、映像記録装置１０００は、そのような指定位置を重点的に見るように作業者４００の視線を誘導する表示を行う。例えば、盤内の１番目のブレーカを見るように促す表示を表示部１６に出力させ、１番目のブレーカが映像内の指定位置（例えば、表示中心）に位置したことを検出すると、指定位置にカメラ１１の中央が調整されたと認識する。通常は、各ブレーカには固有の番号の記載があるため、文字を認識することで対象のブレーカを特定することが可能である。

記録開始後は、映像記録装置１０００は、図１１の記録中画面１１３と同様に、「記録中」と表示部１６に出力する。記録時間が所定時間を越えた場合には、撮像を停止してもよいし、遠隔側のクラウドサーバ２００から撮影時間の更新が為されるのであればそれに従った記録時間としてもよい。

図１４は、外部センサを用いた文字認識の際のＨＭＤ上の補助表示例を示す図である。表示部１６の画面５００に、外部センサ３で文字を撮像する位置を明示する枠５００Ａを表示することは、作業者４００にとって指示が明確になり、作業を迷わせないためにも有効である。また、精度の高い文字認識の方法として、データのリストと、外部センサ３で撮像した映像から認識した文字と、を比較する方法が有効である。作業現場では盤上の番号や作業番号等は全てデータとして作業情報内に格納されており、認識した文字と、作業情報内のデータリストを照合し、類似する文字列を選択することで、精度のよい文字認識を行うことができる。

図１５は、工程モニタ処理のフローチャートの例を示す図である。工程モニタ処理は、外部センサに可視光カメラを用いた場合に、映像記録装置１０００に電源が投入されると、開始される。

まず、対象作業であるか否かを判定する（ステップＳ１０１）。具体的には、判定部１２は、外部センサ３が検出したブレーカが作業対象物であるか否か、作業情報格納部１５１から情報を取得して作業情報との比較により判定する。対象作業でない場合（ステップＳ１０１にて「Ｎｏ」の場合）には、判定部１２は、ステップＳ１０１を継続して実施する。

対象作業の場合（ステップＳ１０１にて「Ｙｅｓ」の場合）には、画像処理部１５３は、「カメラ記録開始」とのメッセージテキストを表示させる（ステップＳ１０２）。具体的には、画像生成部１５３１は、「カメラ記録開始」とのメッセージテキストを重畳させた表示画面を作成して、表示部１６に表示させる。

そして、画像処理部１５３は、指定位置を見るよう促す表示を行う（ステップＳ１０３）。具体的には、画像生成部１５３１は、枠５００Ａを含む画面５００を作成して、表示部１６に表示させる。

そして、画像処理部１５３は、指定位置にカメラ中央が有るか否か判定する（ステップＳ１０４）。具体的には、画像生成部１５３１は、表示中央の範囲にカメラ１１の視野の中央が有るか否かを判定する。指定位置にカメラ中央が無い場合（ステップＳ１０４にて「Ｎｏ」の場合）には、画像処理部１５３は、制御をステップＳ１０３に戻す。

カメラ中央に外部センサが有る場合（ステップＳ１０４にて「Ｙｅｓ」の場合）には、画像処理部１５３は、「記録中」とのメッセージテキストを表示させる（ステップＳ１０５）。具体的には、画像生成部１５３１は、「記録中」のメッセージテキストを表示部１６に表示させる。

そして、カメラ１１は、記録時間が所定時間を越えたか否か判定する（ステップＳ１０６）。記録時間が所定時間を越えていない場合（ステップＳ１０６にて「Ｎｏ」の場合）には、カメラ１１は、ステップＳ１０６の判定を行う。

記録時間が所定時間を越えた場合（ステップＳ１０６にて「Ｙｅｓ」の場合）には、カメラ１１は、記録を終了する（ステップＳ１０７）。

以上が、映像記録装置１０００の工程モニタ処理のフローである。工程モニタ処理によれば、外部センサ３を用いて工程作業であるか否か判定し、工程作業であればカメラ１１による映像を適切に記録することができる。

ここで、非常に小さい文字を認識する処理においては、映像記録装置１０００は、外部センサ３により撮影した映像に限られず、カメラ１１が取得した映像を用いて文字認識を行ってもよい。

また、盤内のブレーカの文字が非常に小さい場合、あるいは狭い場所に文字が記載されている場合、ＨＭＤのカメラ１１では解像しきれず文字認識に十分な映像を得られない場合がある。

そのため、外部センサ３により撮影した映像を用いて文字認識を行い、対象作業か否かを認識した後には、カメラ１１、外部センサ３の両方ともを用いて同時に記録を行うようにしてもよい。この場合、カメラ１１は作業者の視線方向の視野を取得して全体像の把握が容易になるとともに、適切な作業をしているか遠隔のクラウドサーバ２００を介して管理者側から確認できる。外部センサ３の映像は、接写の映像として、対象文字の認識と詳細な映像記録の取得を行う。

このように同時に記録を行うか否かの判断のための情報は、盤内の対象の文字が小さいことがあらかじめ分かっている場合には、作業情報格納部１５１に格納しておけばよい。この際に使用する外部センサ３は、特に、カメラ１１に対し画角が狭く、焦点距離が短い可視光カメラとしてもよい。カメラ１１は人の視線映像を撮影することが目的のため、ある程度の画角が必要となるが、外部センサ３は狭い画角、短い焦点距離のカメラの構成を取ることができ高解像な撮像ができる。そのような構成にすることで、カメラ１１と同じ解像度のイメージセンサを使用したとしても、カメラ１１より高解像な画像を撮像でき、文字や図面の認識が容易となる。

また、暗い場所での撮像を想定し、外部センサ３にはセンサ検出部分を照らすようにＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）等の明かりを併設してもよい。また、リモコン３１を、ＨＭＤの作業工程の切替え操作用に設けるようにしてもよい。もしくは、外部センサ３とリモコン３１および明かりを一体化した構造にしてもよい。狭い場所の観測のためには、外部センサ３を細長いペン型の構造として、その先端に検知部分を設け、ＬＥＤによりその先端部分を照らし、持ち手にハードボタンを設けてリモコン３１とする構造が好ましい。

遠隔の管理者が用いるクラウドサーバ２００との間でカメラ１１及び外部センサ３の映像を共有する場合、遠隔の管理者が見るモニタには、カメラ１１及び外部センサ３の両方の映像を映してもよい。また２つの映像のうち、主として見たい映像ではない方の映像は、映像記録装置１０００において解像度を落としてクラウドサーバ２００へ送信するようにしてもよい。映像の解像度を落とすことで、無線通信部１７と外部無線通信部１００間の通信量を減らせるため、画像遅延や消費電力を抑制する効果を得られる。

以上は、外部センサ３に可視光カメラを用いた例を示した。しかし、可視光カメラに限られず、ＩＲ（Ｉｎｆｒａｒｅｄ）カメラや、その他のカメラであってもよい。またＴＯＦ（Ｔｉｍｅ－Ｏｆ－Ｆｌｉｇｈｔ）カメラを用い、距離画像を取得することで、３次元データを取得し、対象物の変形や、動的な機構をもつ装置(例えばロボット)の異常な動作等を検知し、カメラ１１の記録を行うようにしてもよい。あるいは、照度センサを用いて、明るさが足りない場合に記録を行ってもよい。例えば装置のランプ照度の減少を検出し、対象のランプを記録しておき、適切な交換を行う作業に繋げることができる。

図１６は、外部センサの収納構造の例を示す図である。ここでは、有線接続された外部センサ３をコントローラ２に格納する場合の収納構造の例が示されているが、有線接続された外部センサ３に限られず、無線接続された外部センサ３であっても、同様に収納可能である。

外部センサ３は、コントローラ２上の外部センサ固定部材３４０で固定されており、コントローラ２上の接触検知センサ３３０で外部センサ３が接触しているか否か検知可能である。

図１７は、接触検知センサの接続例を示すブロック図である。この例は、基本的に図５に示した映像記録装置の構成例と同様であるが、一部に相違がある。相違点を中心に、以下に説明する。

図１７の接続例では、制御部１５に起動信号生成部１５５が含まれる点と、作業情報格納部１５１と起動信号生成部１５５とが接続されている点、および接触検知センサ３３０がコントローラ２に含まれる点が異なる。

接触検知センサ３３０で検知した結果を示す信号は、制御部１５内の起動信号生成部１５５に入力される。該信号が接触状態を示す信号であれば起動信号生成部１５５は信号レベルを０(ＧＮＤレベル)に保持する。すなわち、この場合には外部センサ３は外部センサ固定部材３４０に固定されていることを示し、映像記録装置１０００はスリープ状態(スタンバイ状態)である。

非接触状態を示す信号であれば起動信号生成部１５５は信号レベル１(電源レベル)を出力し、Ｉ／Ｆ１８を介し、起動信号を外部センサ３に出力し起動させる。信号レベルは外部センサ３の仕様に合わせ、信号レベルで変更してもよいし、コマンドのやり取りで変更してもよい。また信号レベルは１(電源レベル)で起動としたが、逆極性とし０（ＧＮＤ）レベルで起動としてもよい。すなわち、起動信号生成部１５５が状態の切替えを検知し、外部センサ３に適切な信号を出力する構成であればよい。

また、接触検知センサ３３０には、照度センサや近接センサ等を用いることができる。しかし、これに限られず、外部センサ固定部材３４０に接続されていることが検知できるものであればよい。もちろん、外部センサ３側に接触検知センサ３３０を設ける構成でもよい。

また、作業手順に応じ外部センサ３を有効化してもよい。起動信号生成部１５５では、作業情報格納部１５１の情報を受信し、外部センサ３が不要な作業工程では無効化しておき、誤って作業者が外部センサ３を外部センサ固定部材３４０から外した際に起動させないようにしておくこともできる。このような構成を取ることで、誤検出の防止や消費電力の抑制を実現できる。

また、撮像、記録した映像情報を用いて、作業員が適切な作業をしているか検出、記録するようにしてもよい。

図１８は、装着者の視線方向を検出するカメラの構成例を示す図である。図１８は、ヘッドマウント部１を装着した作業者４００の目４０の近傍（左目付近）６００を正面から見た状態を示す。

図１９は、装着者の視線方向を検出するカメラの構成例を示す図である。図１９は、ヘッドマウント部１を装着した作業者４００の目４０の近傍（左目付近）６００を側面（左面）から見た状態を示す。

カメラ１１は、広角（画角θ：例えば、２４０度）で撮像視野を持つレンズを有しており、ヘッドマウント部１の表示部１６から下方へ突出する形で設置されている。そして、カメラ１１の撮像視野には、装着者の視線の方向に加え、装着者の目４０自体が含まれる。このような構成にすることで、視線方向を正確に検出し、作業者４００が作業を適切に行っているか正確に検出することができる。

なお、これに限られず、他のセンサと併用して作業動作の検出を行ってもよい。例えば、加速度センサにより頭の動きを検出可能なため、作業者４００の視線方向を仮定し適切なアラートを提示することができる。

図２０は、盤作業のアラートの表示例を示す図である。表示部１６の表示例７００では、作業工程１（６０１Ａ）、作業工程２（６０１Ｂ）、作業工程３（６０１Ｃ）が順に示されており、その順序で作業を行うことが示されている。

この状態で、作業者４００が注視している作業工程がその作業順序と異なる場合に、表示部１６は警告表示７１０を重畳して表示する。例えば、作業工程１が終わったが作業工程２は終わっておらず、作業者４００が作業工程３（６０１Ｃ）の表示を注視している時間が長い場合には、作業工程３を実施している可能性が高い。その場合「作業工程２を実施してください」、のような警告表示７１０を行うと、作業ミス低減に有効である。

作業者４００が表示部１６上の所定位置の注視を検出するには、例えばカメラ１１で撮影している際に、撮像視野の視線方向にある作業対象物が作業すべき順序の対象物と相違し、その観測時間（滞留時間）が所定値を越える（滞留する）と誤った作業対象を注視していると検出する。さらに視線方向を正確に特定するために、作業者４００の目４０を上述の視線方向を検出するカメラ１１で撮影し、座標変換により黒目の向きを特定して視線方向とみなすことが有効である。

図２１は、加速度センサを用いる判定部の内部構造の例を示すブロック図である。外部センサ３に３軸加速度センサを用いた場合には、Ｘ軸、Ｙ軸、Ｚ軸の３軸の加速度の値をＩ／Ｆ１８は取得する。この場合、閾値情報格納部１３´には、これら３軸の加速度の値を保持しなければならず、また異常の判定においてもこれら３軸の加速度の値を自由に用いることができる。

図２１の例では、３軸いずれかの軸方向の加速度の変化量について、所定の範囲を超える変動があることを異常として検出する構成例が示されている。判定部１２には、Ｘ軸用の比較器１２１Ｘと、Ｘ軸用のバッファ１２２Ｘと、Ｙ軸用の比較器１２１Ｙと、Ｙ軸用のバッファ１２２Ｙと、Ｚ軸用の比較器１２１Ｚと、Ｚ軸用のバッファ１２２Ｚと、これらの比較器からの判定データを加算する加算器１２３と、が含まれる。

Ｘ軸用の比較器１２１Ｘと、Ｙ軸用の比較器１２１Ｙと、Ｚ軸用の比較器１２１Ｚとは、Ｉ／Ｆ１８からそれぞれの軸の加速度を取得し、閾値情報格納部１３´を参照してそれぞれの軸の閾値を読み出して比較を行い、判定データ（０：正常、１：異常）を加算器１２３へ出力する。

Ｘ軸用のバッファ１２２Ｘと、Ｙ軸用のバッファ１２２Ｙと、Ｚ軸用のバッファ１２２Ｚとは、Ｉ／Ｆ１８からそれぞれの軸の加速度を取得し、バッファリングする。また、Ｘ軸用のバッファ１２２Ｘと、Ｙ軸用のバッファ１２２Ｙと、Ｚ軸用のバッファ１２２Ｚとは、そのセンサデータを制御部１５へ出力する。

加算器１２３は、Ｘ軸用の比較器１２１Ｘと、Ｙ軸用の比較器１２１Ｙと、Ｚ軸用の比較器１２１Ｚとからそれぞれの軸の異常／正常の判定データ（０：正常、１：異常）を取得し、加算する。その結果が１以上であれば、制御部１５へ「１（異常検出信号）」を出力し、そうでない場合には「０（ＧＮＤ）」を出力する。

図２２は、加速度センサの場合の閾値情報格納部のデータ構造の例を示す図である。閾値情報格納部１３´は、工程１３Ａ´ごとに、Ｘ軸の閾値であるＸ閾値と、Ｙ軸の閾値であるＹ閾値と、Ｚ軸の閾値であるＺ閾値と、の組み合わせ閾値１３Ｂ´が対応付けられて格納される。Ｘ閾値、Ｙ閾値、Ｚ閾値のそれぞれには、加速度の時系列変化を示すグラフの振幅と周期の正常値の範囲が格納されている。

このようにすることで、加速度センサを用いる判定部を実現でき、例えば作業者の動作に異常行動がないか、あるいは無駄な動作がないか判定し、異常時には自動でカメラ１１の映像を記録することができる。

図２３は、ＴＯＦカメラを用いる判定部の内部構造の例を示すブロック図である。外部センサ３にＴＯＦカメラを用いた場合には、ＴＯＦカメラが取得した距離データを伴う画像をＩ／Ｆ１８は取得する。

判定部１２には、Ｐ部位座標用の比較器１２１Ｐと、Ｐ部位座標用の用のバッファ１２２Ｐと、Ｑ部位座標用の比較器１２１Ｑと、Ｑ部位座標用の用のバッファ１２２Ｑと、Ｒ部位座標用の比較器１２１Ｒと、Ｒ部位座標用の用のバッファ１２２Ｒと、これらの比較器からの判定データを加算する加算器１２３と、部位抽出部１２４と、Ｐ部位座標用の微分器１２５Ｐと、Ｑ部位座標用の微分器１２５Ｑと、Ｒ部位座標用の微分器１２５Ｒと、が含まれる。

部位抽出部１２４は、ＴＯＦカメラが取得した距離データを伴う画像をＩ／Ｆ１８から取得して、公知のアルゴリズムを用いて予め定められた人体の部位の座標を抽出する。例えば、部位抽出部１２４は、骨格検出により、頭、肩、腕、手、足等の部位を特定し、距離データと突き合わせて部位毎の３次元座標（ｘ，ｙ，ｚ）を特定する。例えば、部位抽出部１２４は、Ｐ部位を腕、Ｑ部位を手、Ｒ部位を足のそれぞれと特定して、それぞれの代表的な１点あるいは複数点の３次元座標を取得する。

Ｐ部位座標用の微分器１２５Ｐと、Ｑ部位座標用の微分器１２５Ｑと、Ｒ部位座標用の微分器１２５Ｒとは、それぞれの部位ごとに３次元座標を用いて微分処理を行い、部位毎の速度を算出する。

この場合、閾値情報格納部１３には、これら部位ごとの速度の値を保持しなければならず、また異常の判定においてもこれら部位ごとの速度の値を自由に用いることができる。

図２４は、解像度を下げる制御部の内部構造の例を示すブロックである。外部センサ３が可視光カメラである場合や、ＴＯＦカメラ、サーマルカメラ等、映像情報を取得するものである場合には、カメラ１１により撮影された映像と外部センサ３により撮影された画像の両方を得られ、上述したようにこれをクラウドサーバ２００を介して遠隔から参照することができる。また、遠隔のクラウドサーバを介していずれかまたは両方の画像の解像度を下げる指示を行い、通信量を削減することもできる。さらには、遠隔から作業情報、閾値情報を送信し、更新することもできる。

このような仕組みは、図２４に示す内部構造により実現可能である。制御部１５の画像処理部１５３には、解像度変換部１５３１１と、画像重畳部１５３１２と、テキストデータ保持部１５３２と、が含まれる。

解像度変換部１５３１１は、無線通信部１７を経由して対象の画像（外部センサ３の画像と、カメラ１１の映像のいずれか）とその解像度データとを受信する。また、解像度変換部１５３１１は、判定部１２から外部センサ３の画像と、画像取得部１５２からカメラ１１の映像とを受信しフレームごとに所定の解像度へ変換して画像重畳部１５３１２へ受け渡す。解像度変換部１５３１１は、無線通信部１７を経由して対象の画像とその解像度データとを受信すると、以降は対象の画像を受信した解像度に変換して画像重畳部１５３１２へ受け渡す。

無線通信部１７を経由して対象の画像とその解像度データとを受信しない場合には、解像度変換部１５３１１は、直前のフレームと同様の解像度を維持する。

画像重畳部１５３１２は、解像度変換部１５３１１から受け付けた画像および映像に、作業情報格納部１５１の情報とテキストデータ保持部１５３２の情報とから抽出した必要な情報を重畳させて画像データ転送部１５４へ受け渡す。

例えば、クラウドサーバ２００から、カメラ１１の映像を６４０ドット×４８０ドットにする指示（カメラ，６４０，４８０のパラメータを含む）を受け付けると、解像度変換部１５３１１は、次のフレームからカメラ１１の映像を６４０ドット×４８０ドットに変換して画像重畳部１５３１２へ受け渡す。このようにすることで、解像度を下げて通信量を減らすことができる。

上述した映像記録装置１０００は、コントローラ２内の判定部１２および制御部１５をＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）により実現できる。また、閾値情報格納部１３は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等の主記憶装置により実現できる。記憶部１４は、フラッシュメモリやＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）により実現できる。

なお、これに限られず、映像記録装置１０００は、例えばＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）やマイコンで実現されるものであってもよい。

このようにすることで、映像記録装置１０００は、作業を阻害せず、限られた記憶領域等のハードウェアリソースで作業状況等を効率よく記録することができる。

また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。

また、上記した各構成、機能、処理部等は、それらの一部又は全部を、例えば別の装置で実行してネットワークを介して統合処理する等により分散システムで実現してもよい。

また、上記した実施形態の技術的要素は、単独で適用されてもよいし、プログラム部品とハードウェア部品のような複数の部分に分けられて適用されるようにしてもよい。

以上、本発明について、実施形態を中心に説明した。

１・・・ヘッドマウント部、２・・・コントローラ、３・・・外部センサ、１１・・・カメラ、１２・・・判定部、１３・・・閾値情報格納部、１４・・・記憶部、１５・・・制御部、１６・・・表示部、１７・・・無線通信部、１８・・・Ｉ／Ｆ、３０・・・マイク、３１・・・リモコン、３２・・・スピーカ、４０・・・目、１００・・・外部無線通信部、２００・・・クラウドサーバ、１０００・・・映像記録装置。

Claims (14)

1. 装着者の視野方向の映像を撮像するカメラと、
   所定の環境情報を検出する外部センサと通信可能に接続する接続部と、
   前記環境情報の異常状態を示す閾値を格納する閾値情報格納部と、
   前記外部センサの検出情報と前記閾値との比較により異常判定信号を出力する判定部と、
   前記異常判定信号に応じ前記カメラに所定の制御信号を出力する制御部と、
   前記カメラ及び前記外部センサからの出力情報を表示する表示部と、を備え、
   前記制御部は、前記異常判定信号が出力されると、前記カメラからの出力情報を所定の記憶部に転送させる制御信号を出力し、
   前記表示部に前記カメラが記録中であることを表示し、前記装着者が見るべき位置の誘導を表示する、
   ことを特徴とする映像記録装置。
2. 請求項１に記載の映像記録装置であって、
   前記制御部は、
   該映像記録装置を身につける装着者が行う作業情報を格納する作業情報格納部と、
   前記カメラの出力を画像として取得する画像取得部と、
   前記作業情報と前記画像とを合成した画像を生成する画像処理部と、
   前記記憶部に合成した前記画像を転送する画像転送部と、を備え、
   前記画像転送部は、前記判定部から前記異常判定信号が出力されると、前記記憶部に前記出力情報を転送する、
   ことを特徴とする映像記録装置。
3. 請求項１に記載の映像記録装置であって、
   前記外部センサは、可視光カメラ、赤外線カメラ、距離計測カメラ、温度センサ、湿度センサ、照度センサ、加速度センサのうち少なくとも１つ以上である、
   ことを特徴とする映像記録装置。
4. 請求項１に記載の映像記録装置であって、
   該映像記録装置を身につける装着者が行う作業情報を格納する作業情報格納部を備え、
   前記外部センサは、作業の対象に対応した文字またはマーカを認識し、
   前記制御部は、実施中の作業が映像を記録する対象の作業である場合には、前記カメラの前記出力情報を前記記憶部に転送する、
   ことを特徴とする映像記録装置。
5. 請求項１に記載の映像記録装置であって、
   前記外部センサは、前記カメラより画角が狭く、焦点距離が短い第二のカメラである、
   ことを特徴とする映像記録装置。
6. 請求項１に記載の映像記録装置であって、
   前記外部センサは、該映像記録装置と有線または無線の通信路を介して接続される、
   ことを特徴とする映像記録装置。
7. 請求項１に記載の映像記録装置であって、
   前記外部センサは、前記表示部の表示する作業工程を切替え可能な遠隔操作装置と一体構造である、
   ことを特徴とする映像記録装置。
8. 請求項１に記載の映像記録装置であって、
   前記外部センサとの接触を検出する接触検出センサを備え、
   前記制御部は、前記接触検出センサにより非接触な状態が検出されると、前記外部センサを動作させる信号を出力する、
   ことを特徴とする映像記録装置。
9. 請求項１に記載の映像記録装置であって、
   前記カメラは、該映像記録装置を身につける前記装着者の前方の視線方向の映像と、該装着者の目と、をともに検出する画角を有する、
   ことを特徴とする映像記録装置。
10. 請求項１に記載の映像記録装置であって、
    前記カメラは、該映像記録装置を身につける前記装着者の前方の視線方向の映像と、該装着者の目と、をともに検出する画角を有し、
    前記制御部は、該映像記録装置を身につける前記装着者の視線の方向と、視線の滞留時間と、を特定し、
    前記視線の方向と前記視線の滞留時間とが実施中の作業と異なる場合に、前記表示部に実施中の作業工程の実施を促進する表示を重畳表示させる、
    ことを特徴とする映像記録装置。
11. 請求項１に記載の映像記録装置であって、
    ネットワークを介して他の装置との通信を行う通信部を備え、
    前記閾値情報格納部は、前記他の装置からの指示に応じて前記閾値を書換え可能である、
    ことを特徴とする映像記録装置。
12. 請求項１に記載の映像記録装置であって、
    作業用のヘルメットに多点で支持される支持部を備える、
    ことを特徴とする映像記録装置。
13. 請求項１に記載の映像記録装置であって、
    ネットワークを介して他の装置との通信を行う通信部を備え、
    前記制御部は、
    該映像記録装置を身につける前記装着者が行う作業情報を格納する作業情報格納部と、
    前記カメラの出力を画像として取得する画像取得部と、
    前記作業情報と前記画像とを合成した画像を生成する画像処理部と、
    前記記憶部に合成した前記画像を転送する画像転送部と、を備え、
    前記画像転送部は、前記判定部から前記異常判定信号が出力されると、前記記憶部に前記出力情報を転送し、
    前記作業情報格納部は、前記他の装置からの指示に応じて前記作業情報を書換え可能である、
    ことを特徴とする映像記録装置。
14. 装着者の視野方向の映像を撮像するカメラと、
    所定の環境情報を検出する外部センサと通信可能に接続する接続部と、
    前記環境情報の異常状態を示す閾値を格納する閾値情報格納部と、
    前記外部センサの検出情報と前記閾値との比較により異常判定信号を出力する判定部と、
    前記異常判定信号に応じ前記カメラに所定の制御信号を出力する制御部と、
    前記カメラ及び前記外部センサからの出力情報を表示する表示部と、を備え、
    前記制御部は、前記異常判定信号が出力されると、前記カメラからの出力情報を所定の記憶部に転送させる制御信号を出力し、
    前記表示部に前記カメラが記録中であることを表示し、前記装着者が見るべき位置の誘導を表示する、
    ことを特徴とするヘッドマウントディスプレイ。

Images