JP6439935B2

JP6439935B2 - 表示制御方法、ヘッドマウントディスプレイ、およびプログラム

Info

Publication number: JP6439935B2
Application number: JP2015095197A
Authority: JP
Inventors: 昭宣尾関
Original assignee: Panasonic Intellectual Property Management Co Ltd
Current assignee: Panasonic Intellectual Property Management Co Ltd
Priority date: 2015-05-07
Filing date: 2015-05-07
Publication date: 2018-12-19
Anticipated expiration: 2035-05-07
Also published as: CN106125902A; CN106125902B; US9946079B2; JP2016212599A; US20160328881A1

Description

本開示は、表示制御方法、ヘッドマウントディスプレイ、およびプログラムに関する。

従来、ヘッドマウントディスプレイの姿勢に基づいてユーザに所望の情報を提示するヘッドマウントディスプレイが開示されている（特許文献１参照）。

国際公開第２０１４／１２８７５１号

しかしながら、上記特許文献では、更なる改善が必要とされていた。

なお、これらの包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なＣＤ−ＲＯＭなどの記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラムおよび記録媒体の任意な組み合わせで実現されてもよい。

本開示の一態様に係る表示制御方法は、ユーザの視界に重畳する画像を表示する表示部を備えたヘッドマウントディスプレイにおいて、前記表示部への画像の表示を制御する表示制御方法であって、前記ヘッドマウントディスプレイのコンピュータに対して、前記ヘッドマウントディスプレイの傾きを示す情報を受信させ、前記受信した傾きを示す情報に基づいて、前記ヘッドマウントディスプレイの姿勢を判断させ、前記ヘッドマウントディスプレイの姿勢が第１の姿勢である場合、前記表示部に、前記ユーザが行う作業工程を表す第１画像を表示させ、前記ヘッドマウントディスプレイの姿勢が前記第１の姿勢から第２の姿勢へ変化したと判断された場合、前記表示部へ表示する画像を、前記第１画像より前記表示部に表示される表示領域の小さい第２画像へ切り替えさせ、前記第２画像への切り替えでは、前記第１画像に示された前記作業工程を簡易的に示した簡易画像であって、前記第２画像としての簡易画像に切り替えさせる。

上記態様によれば、更なる改善を実現することができる。

実施の形態１におけるヘッドマウントディスプレイの外観図である。実施の形態１におけるヘッドマウントディスプレイのハードウェア構成を示すブロック図である。実施の形態１におけるヘッドマウントディスプレイの機能構成を示すブロック図である。実施の形態１における姿勢判断部による姿勢の判断の第１の説明図である。実施の形態１における作業工程の一例としての調理工程を説明するための図である。実施の形態１におけるユーザの視界と、表示部に表示される画像（第１画像）との一例について説明するための図である。実施の形態１におけるユーザの視界と、表示部に表示される画像（第２画像）との一例について説明するための図である。実施の形態１に係るヘッドマウントディスプレイの動作の一例を説明するためのフローチャートである。実施の形態１における制御部による表示制御方法において表示される画像と、ヘッドマウントディスプレイの姿勢との関係を示す図である。実施の形態２に係るヘッドマウントディスプレイの動作の一例を説明するためのフローチャートである。実施の形態２におけるユーザの視界と、表示部に表示される、次の作業工程における画像（第３画像）との一例について説明するための図である。実施の形態２におけるユーザの視界と、表示部に表示される、次の作業工程における画像（第２画像）との一例について説明するための図である。実施の形態２における制御部による表示制御方法において表示される画像と、ヘッドマウントディスプレイの姿勢との関係を示す図である。実施の形態３に係るヘッドマウントディスプレイの動作の一例を説明するためのフローチャートである。実施の形態３における傾き検出部による姿勢の検出の第２の説明図である。実施の形態３におけるユーザの視界と、表示部に表示される、作業工程の完了状態を表す第４画像とについて説明するための図である。他の実施の形態におけるユーザの視界と、表示部に表示される画像（第２画像）との一例について説明するための図である。、他の実施の形態におけるユーザの視界と、表示部に表示される画像（第１画像）との一例について説明するための図である。他の実施の形態におけるユーザの視界と、表示部に表示される画像（第２画像）との他の一例について説明するための図である。他の実施の形態におけるユーザの視界と、表示部に表示される画像（第２画像）との他の一例について説明するための図である。他の実施の形態におけるユーザの視界と、表示部に表示される画像（第２画像）との他の一例について説明するための図である。

（本発明の基礎となった知見）
本発明者は、「背景技術」の欄において記載した、ヘッドマウントディスプレイに関し、以下の問題が生じることを見出した。

現在、スマートフォンやタブレットなどの携帯情報端末が広く普及しており、ユーザはこれらの携帯情報端末を用いて情報を検索し、検索した情報を日常生活に役立てている。例えば、ユーザは、日常で疑問に思ったこと、知りたいと思ったことなどを、携帯情報端末を用いて検索することで、日常の疑問を解消するための情報、知りたい情報などが得られる。このように、ユーザは、日常の疑問を解消するため、知りたい情報を得るためなどに、携帯情報端末を利用している。また、ユーザは、現在地から目的地までのルートを携帯情報端末の地図アプリケーション上で検索し、携帯情報端末に表示される情報を頼りに目的地に向かうためのナビとしても、携帯情報端末を利用している。このように、近年では、携帯情報端末を用いていつでもどこでも気軽に情報へアクセスできる環境が整っており、多くのユーザはその恩恵を受けている。

現在普及している携帯情報端末は、スマートフォンやタブレットといった、ユーザが手に持って操作する端末が多数を占めており、ユーザは、携帯情報端末を把持した状態で、携帯情報端末に表示された情報を閲覧するといった利用形態をとることが多い。

一方で、特定のユースケースにおいて、ユーザは、携帯情報端末を把持することなく、両手を自由にした状態で携帯情報端末から情報を得たいと考えることがある。例えば、携帯情報端末で調理レシピを参照しながら調理を行なう場合、部品の組み立て現場において携帯情報端末で手順を確認しながら作業を行ないたい場合などである。これらのユースケースにおいて、ユーザが情報を確認する際には、手元から目線を離し、一旦作業を中断して、携帯情報端末の情報を確認する必要がある。そのため、作業効率の悪化を招く上に、携帯情報端末から得られる作業手順の情報と現在の作業状況とを見比べることが想定され、手元と携帯情報端末とに視線を交互に向けるなどの、煩雑な動作が必要となる。

特許文献１には、携帯情報端末を把持することなく、両手を自由にした状態で情報を得ることができる携帯情報端末（ヘッドマウントディスプレイ装置：ＨＭＤ）について開示されている。

特許文献１には、ＨＭＤの向き（ＨＭＤを装着したユーザの頭の向き）によって、表示情報を切り替えることができるＨＭＤが開示されている。しかし、特許文献１に開示されている技術は、ＨＭＤの向きによって表示される情報が変わるものの、ユーザがどこを向いても何らかの情報（切り替えられた後の情報）が表示される。このため、ユーザが情報の閲覧と作業とを交互に繰り返して実施する場合には、その都度、情報の表示をオン／オフする必要があり、作業効率の悪化を招く。また、ユーザが情報を閲覧しながら手元で作業を行なう場合には、表示された情報がユーザの視界を妨げる。

そこで、ヘッドマウントディスプレイの機能向上のため、以下の改善策を検討した。

本開示の一態様に係る表示制御方法は、ユーザの視界に重畳する画像を表示する表示部を備えたヘッドマウントディスプレイにおいて、前記表示部への画像の表示を制御する表示制御方法であって、前記ヘッドマウントディスプレイのコンピュータに対して、前記ヘッドマウントディスプレイの傾きを示す情報を受信させ、前記受信した傾きを示す情報に基づいて、前記ヘッドマウントディスプレイの姿勢を判断させ、前記ヘッドマウントディスプレイの姿勢が第１の姿勢である場合、前記表示部に、前記ユーザが行う作業工程を表す第１画像を表示させ、前記ヘッドマウントディスプレイの姿勢が前記第１の姿勢から第２の姿勢へ変化したと判断された場合、前記表示部へ表示する画像を、前記第１画像より前記表示部に表示される表示領域の小さい前記第２画像へ切り替えさせる。

上記態様によると、ヘッドマウントディスプレイの姿勢が第１の姿勢である場合に、表示部へユーザが行う作業工程を表す第１画像を表示させ、ヘッドマウントディスプレイの姿勢が第１の姿勢から第２の姿勢へ変化したと判断された場合、表示部へ表示する画像を、第１画像より表示領域の小さい第２画像へ切り替えさせる。即ち、ユーザの顔の向きの変化によって同時に変化するヘッドマウントディスプレイの姿勢に基づいて、作業工程を、例えば、ヘッドマウントディスプレイの表示部全体に表示するか、ヘッドマウントディスプレイの表示部の一部へ表示するかといった表示の制御を行なう。そのため、ユーザが自身の手元で作業を行なう場合に、手元の状態を保持したまま顔の向きを変化させるだけで、表示部に表示される画像を変化させることができる。例えば、ユーザが正確な作業工程を確認できるように作業工程を示す画像を大きく表示する状態と、ユーザの作業を妨げないように作業工程を示す画像を小さくまたは簡易的に表示する状態とを、例えば、ユーザが自身の手によってデバイスに備えられたボタンなどの入力装置を用いて切り替える必要がないため、ユーザが手を離して作業を中断する必要もない。

また、例えば、前記第２画像への切り替えでは、前記第１画像に示された前記作業工程を簡易的に示した簡易画像であって、前記第２画像としての簡易画像に切り替えさせてもよい。

また、例えば、前記第１画像および前記第２画像は、それぞれ、テキストを含み、前記第２画像への切り替えでは、前記テキストの量を前記第１画像よりも減少させて、前記第１画像に示された前記作業工程を簡易的に示す前記簡易画像に切り替えさせてもよい。

また、例えば、前記第１画像は、複数の作業工程を表し、前記第２画像への切り替えでは、前記第２画像としての画像であって、前記複数の作業工程の中の少なくとも一の作業工程を削除した画像に切り替えさせてもよい。

また、例えば、前記第１画像は、複数の作業工程を表し、前記第２画像への切り替えでは、前記第２画像としての画像であって、前記複数の作業工程の中の少なくとも一の作業工程を簡易的に示した内容を含む画像に切り替えさせてもよい。

また、例えば、前記第１画像は、複数の作業工程を表し、前記第２画像への切り替えでは、前記第２画像としての画像であって、前記複数の作業工程の各々を簡易的に示した内容を含む画像に切り替えさせてもよい。

また、例えば、前記ヘッドマウントディスプレイのコンピュータに対して、さらに、前記表示部へ表示する画像を前記第１画像から前記第２画像へ切り替えた後に、前記ヘッドマウントディスプレイの姿勢が、前記第２の姿勢から前記第１の姿勢へ変化したと判断された場合、前記表示部へ表示する画像を、前記第２画像から前記第１画像へ切り替えさせてもよい。

また、例えば、前記ヘッドマウントディスプレイのコンピュータに対して、さらに、前記ヘッドマウントディスプレイの姿勢が、前記第１の姿勢から前記第２の姿勢へ変化してからの時間を計測させ、前記計測した時間が所定時間経過した後に、前記ヘッドマウントディスプレイの姿勢が、前記第２の姿勢から前記第１の姿勢へ変化したと判断された場合は、前記表示部へ表示する情報を、前記第２画像から第３画像へ切り替えさせ、前記第３画像は、前記第１画像で表される作業工程の次の作業工程を表してもよい。

また、例えば、前記第３画像への切り替えでは、前記所定時間は前記第１画像の示す内容毎に異なってもよい。

また、例えば、前記ヘッドマウントディスプレイのコンピュータに対して、さらに、前記ヘッドマウントディスプレイの姿勢が、前記第１の姿勢または前記第２の姿勢から、第３の姿勢へ変化したと判断された場合、前記表示部へ表示する画像を、前記第１画像が表す作業工程の完了状態を表す第４画像へ切り替えさせしてもよい。

また、例えば、前記第１画像および前記第２画像が示す作業工程は、献立の調理工程、電子部品の取り付けに係る工程、機器もしくは器具を用いて行なう作業に係る工程、機器の保守もしくはメンテナンスに係る工程、器具の保守もしくはメンテナンスに係る工程、または建造物の保守もしくはメンテナンスに係る工程のいずれかであってもよい。

また、例えば、前記ヘッドマウントディスプレイのコンピュータに対して、さらに、前記第１画像および前記第２画像を、ネットワークを介して、前記ヘッドマウントディスプレイに接続した情報装置から受信させてもよい。

また、例えば、前記ヘッドマウントディスプレイのコンピュータに対して、さらに、前記第１画像を、ネットワークを介して、前記ヘッドマウントディスプレイに接続した情報装置から受信させ、前記第２画像を、前記受信した第１画像に基づいて、生成させてもよい。

また、本開示の一態様に係るヘッドマウントディスプレイは、ユーザの視界に重畳する画像を表示する表示部を備えたヘッドマウントディスプレイであって、前記ヘッドマウントディスプレイの傾きを示す情報を検出する傾き検出部と、前記検出した傾きを示す情報に基づいて、前記ヘッドマウントディスプレイの姿勢を判断する姿勢判断部と、前記ヘッドマウントディスプレイの姿勢が第１の姿勢である場合、前記ユーザが行う作業工程を表す第１画像を前記表示部に表示させ、前記ヘッドマウントディスプレイの姿勢が前記第１の姿勢から第２の姿勢へ変化したと前記姿勢判断部により判断された場合、前記表示部へ表示する画像を、前記第１画像から、前記第１画像より前記表示部に表示される表示領域の小さい前記第２画像へ切り替える表示制御部と、を備える。

また、本開示の一態様に係るプログラムは、ユーザの視界に重畳する画像を表示する表示部を備えたヘッドマウントディスプレイに実行させるプログラムであって、前記ヘッドマウントディスプレイのコンピュータに対して、前記ヘッドマウントディスプレイの傾きを示す情報を受信させ、前記受信した傾きを示す情報に基づいて、前記ヘッドマウントディスプレイの姿勢を判断させ、前記ヘッドマウントディスプレイの姿勢が第１の姿勢である場合、前記表示部に、前記ユーザが行う作業工程を表す第１画像を表示させ、前記ヘッドマウントディスプレイの姿勢が前記第１の姿勢から第２の姿勢へ変化したと判断された場合、前記表示部へ表示する画像を、前記第１画像より表示領域の小さい前記第２画像へ切り替えさせる。

以下、添付の図面を参照して、本開示の一態様に係る表示制御方法などについて、具体的に説明する。

なお、以下で説明する実施の形態は、いずれも本発明の一具体例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素。構成要素の配置位置及び接続形態、ステップ、ステップの順序などは、一例であり、本発明を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。

（実施の形態１）
以下、図１〜図９を用いて、実施の形態１を説明する。

［１−１．構成］
本実施の形態において、ユーザが所望する情報を適切にユーザに提示するヘッドマウントディスプレイ等について説明する。より具体的には、ユーザによる操作に基づいて、ユーザが把握するのに比較的長時間を要する情報の表示を継続するヘッドマウントディスプレイ等について説明する。

図１は、実施の形態１におけるヘッドマウントディスプレイの外観図である。

図１に示されるように、ヘッドマウントディスプレイ１０は、眼鏡のようにユーザの頭部に装着される眼鏡型端末である。ヘッドマウントディスプレイ１０は、本体部１１と、鼻あて部１２と、つる１３と、耳かけ部１４とを備える。

本体部１１は、ヘッドマウントディスプレイ１０による情報処理、及び、画像の表示等を行う処理部である。本体部１１は、つる１３の一部に取り付けられており、ユーザの頭部の位置又は姿勢が変化すると、ユーザの頭部と一体となって位置又は姿勢が変化する。本体部１１の機能及び処理については、後で詳しく説明する。

鼻あて部１２は、ヘッドマウントディスプレイ１０をユーザの頭部の所定の位置に固定するための鼻あてである。具体的には、鼻あて部１２は、ユーザの鼻を左右両側から挟むように配置されることで、ユーザの頭部の所定の位置に対してヘッドマウントディスプレイ１０を固定する。

つる１３は、鼻あて部１２と耳かけ部１４とをつなぐ棒状の部材である。

耳かけ部１４は、ヘッドマウントディスプレイ１０をユーザの頭部の所定の位置に固定するための耳かけである。具体的には、耳かけ部１４は、ユーザの耳に引っかかるように配置されることで、ユーザの頭部の所定の位置に対してヘッドマウントディスプレイ１０を固定する。

上記のように、鼻あて部１２および耳かけ部１４は、ヘッドマウントディスプレイ１０をユーザの頭部の所定の位置に固定するための固定部として機能する。なお、ユーザの頭部の所定の位置とは、ヘッドマウントディスプレイ１０の本体部１１が有するディスプレイ１０６の表示面がユーザの目に対向する位置にある状態でのヘッドマウントディスプレイ１０のユーザの頭部に対する位置である。

なお、ヘッドマウントディスプレイ１０を装着したユーザにとっての奥行き方向をＸ方向といい、左右方向をＹ方向といい、頭上と足元とを結ぶ方向をＺ方向ともいう。また、特に断らない限りＺ方向のプラス向きを上向きといい、Ｚ方向のマイナス向きを下向きという。

なお、図１に示されるヘッドマウントディスプレイ１０の形状は、あくまで一例であり、ユーザの頭部の少なくとも一部に装着され、ユーザに提示するための画像を表示するものであればどのような形状であってもよく、例えば、帽子型又はヘルメット型等があり得る。

図２は、実施の形態１におけるヘッドマウントディスプレイのハードウェア構成を示すブロック図である。

図２に示されるように、ヘッドマウントディスプレイ１０は、ハードウェア構成として、ＣＰＵ１０１（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）と、メインメモリ１０２と、ストレージ１０３と、通信ＩＦ１０４（Ｉｎｔｅｒｆａｃｅ）と、加速度センサ１０５と、ディスプレイ１０６とを備える。

ＣＰＵ１０１は、ストレージ１０３等に記憶された制御プログラムを実行するプロセッサである。

メインメモリ１０２は、ＣＰＵ１０１が制御プログラムを実行するときに使用するワークエリアとして用いられる揮発性の記憶領域である。

ストレージ１０３は、制御プログラム、及び、コンテンツなどを保持する不揮発性の記憶領域である。

通信ＩＦ１０４は、ネットワークを介して他の装置との間でデータを送受信するネットワークインタフェースである。通信ＩＦ１０４は、例えば、ＩＥＥＥ８０２．１１ａ、ｂ、ｇ規格に適合した無線ＬＡＮ（ＬｏｃａｌＡｒｅａＮｅｔｗｏｒｋ）インタフェースである。

加速度センサ１０５は、加速度を検出するセンサである。

ディスプレイ１０６は、画像を表示する透過型の表示装置である。例えば、ディスプレイ１０６は、ハーフミラーを利用してユーザに画像を提示するプリズムディスプレイである。つまり、ディスプレイ１０６は、ユーザの視界に重畳する画像を表示する表示部である。なお、ディスプレイ１０６は、ユーザに対して画像を提示するものであればその方式は問わず、例えば、レーザ光によりユーザの網膜に画像を提示するいわゆる網膜走査型ディスプレイなどでもよい。

図３は、実施の形態１におけるヘッドマウントディスプレイの機能構成を示すブロック図である。

図３に示されるように、ヘッドマウントディスプレイ１０は、機能構成として、傾き検出部１１１と、制御部１１２と、表示部１１３と、を備える。

傾き検出部１１１は、ヘッドマウントディスプレイ１０の傾きを示す情報を検出する。傾き検出部１１１は、具体的には、加速度センサ１０５によりヘッドマウントディスプレイ１０の姿勢を検出する。傾き検出部１１１は、加速度センサ１０５等により実現される。

制御部１１２は、傾き検出部１１１から傾きを示す情報（以下、「傾き情報」という。）を取得し、取得した傾き情報に応じて、表示部１１３への画像の表示の制御を行う処理部である。具体的には、制御部１１２は、各種画像を表示部１１３に表示させる。なお、上記画像は、当該表示画像を出力するための所定のアプリケーションを制御部１１２が実行することによって出力されたものであってもよいし、予め定められた画像であってもよいし、通信ＩＦ１０４を介して外部から取得した画像ものであってもよい。制御部１１２は、姿勢判断部１１４と、表示制御部１１５と、を備える。制御部１１２は、ＣＰＵ１０１、メインメモリ１０２、ストレージ１０３等により実現される。

制御部１１２の姿勢判断部１１４は、傾き検出部１１１において検出された傾き情報を受信し、受信した傾き情報に基づいて、ヘッドマウントディスプレイ１０の姿勢を判断する。具体的には、姿勢判断部１１４は、受信した傾き情報に基づいて、ヘッドマウントディスプレイの姿勢、および、その姿勢の変化を判断し、判断した結果を姿勢情報として生成する。

ヘッドマウントディスプレイ１０の姿勢は、ユーザの頭部の向きと１対１対応する。例えば、姿勢判断部１１４は、ユーザの頭部が前方の斜め下方を向く姿勢である場合、「下向きに傾斜」（以下、単に「下向き」という。）との姿勢情報を生成する。

なお、ヘッドマウントディスプレイ１０の姿勢の変化は、ユーザの身体全体の向きの変化により生ずる場合と、ユーザの首の動きにより生ずる場合とがあるが、これらは、加速度センサ１０５が検出する加速度の大きさにより判別される。具体的には、加速度センサ１０５が検出する加速度の大きさが所定値以上である場合に、首の動きにより生ずる姿勢の変化であると判別される。このため、姿勢判断部１１４は、ユーザの首の動きにより生ずる姿勢の変化が傾き検出部１１１により検出されたと判断した場合にのみ、上記姿勢情報を生成するようにしてもよい。ユーザの首の動きにより生ずる姿勢の変化の方が、ユーザが意図的に頭部の姿勢を変化したことを反映していると考えられるからである。

なお、姿勢判断部１１４は、正面方向及び所定方向のそれぞれについて、当該方向を向いている姿勢を、ヘッドマウントディスプレイ１０の姿勢として判断するようにしてもよい。ここで、所定方向は、正面方向とは異なる方向であって、例えば下向きの方向である。本実施の形態では、姿勢判断部１１４は、ユーザが正面方向を向いているときのヘッドマウントディスプレイ１０の姿勢を第１の姿勢として判断し、ユーザが所定方向を向いているときのヘッドマウントディスプレイ１０の姿勢を第２の姿勢として判断する。

姿勢判断部１１４は、受信した傾きを示す情報により示されたヘッドマウントディスプレイ１０の傾きが、角度の範囲である第１範囲内にある場合に、ヘッドマウントディスプレイ１０の姿勢が第１の姿勢であると判断する。また、姿勢判断部１１４は、受信した傾きを示す情報により示されたヘッドマウントディスプレイ１０の傾きが、角度の範囲であり、第１の範囲とは異なる第２範囲内にある場合に、ヘッドマウントディスプレイ１０の姿勢が第２の姿勢であると判断する。本実施の形態では、姿勢は、Ｙ軸周りの角度の範囲によって規定される。姿勢とは、１軸周りの角度の範囲によって規定されてもよいし、２軸周りの角度の範囲によって規定されてもよいし、３軸周りの角度の範囲によって規定されてもよい。

制御部１１２の表示制御部１１５は、ヘッドマウントディスプレイ１０の姿勢が第１の姿勢である場合、表示部１１３に、ユーザが行う作業工程を表す第１画像を表示させる。また、表示制御部１１５は、ヘッドマウントディスプレイ１０の姿勢が第１の姿勢から第２の姿勢へ変化したと姿勢判断部１１４により判断された場合、表示部１１３へ表示する画像を、第１画像から、第１画像より表示部１１３に表示される表示領域の小さい第２画像へ切り替える。つまり、第２画像は、第１画像よりも表示部１１３に表示される表示面積が小さい画像である。また、第２画像は、第２画像よりも表示部１１３に表示される情報量が少ない画像であるとしてもよい。ここで、「情報量」とは、表示部１１３が表示する情報の表示面積、文字数などから定められる量である。

表示部１１３は、情報を画像として表示する表示装置である。表示部１１３は、制御部１１２が出力した表示情報を画像として表示する。表示部１１３は、ディスプレイ１０６等により実現される。

以降において、ヘッドマウントディスプレイ１０の各機能ブロックの機能及び処理について詳細に説明する。まず、姿勢判断部１１４によるヘッドマウントディスプレイ１０の姿勢の検出について説明する。

図４は、実施の形態１における姿勢判断部による姿勢の判断の第１の説明図である。図４は、ユーザが鉛直方向（Ｘ−Ｚ平面上）において首を振る場合、つまり、ユーザが頭部を縦に（上又は下に）振る場合のヘッドマウントディスプレイ１０の姿勢の変化を示す図である。

具体的には、図４は、ユーザが正面を見る場合を基準として下へθ１〔度〕の方向を向くように、頭部を回転させた場合を示している。このとき、姿勢判断部１１４は、傾き検出部１１１により検出されたヘッドマウントディスプレイ１０の傾きに基づいて、ヘッドマウントディスプレイ１０が基準姿勢から、基準姿勢から下方へθ１〔度〕回転した姿勢に変化したことを判断する。具体的には、姿勢判断部１１４は、傾き検出部１１１により検出されたヘッドマウントディスプレイ１０の傾きが、ユーザが正面を向いている方向を基準（例えば中心）とした角度α１の範囲（第１範囲）内である場合には、ヘッドマウントディスプレイ１０の姿勢が第１の姿勢であると判断する。また、姿勢判断部１１４は、傾き検出部１１１により検出されたヘッドマウントディスプレイ１０の傾きが、ユーザが正面からθ１〔度〕回転した角度の方向を基準（例えば中心）とした角度α２の範囲（第２範囲）内である場合には、ヘッドマウントディスプレイ１０の姿勢が第２の姿勢であると判断する。なお角度α１の範囲と、角度α２の範囲とは、互いに重複しない角度の範囲である。

以降において、表示部１１３が表示する画像について具体例を示して説明する。画像は、上述したように作業工程を表す画像であり、本実施の形態では、例えば、調理工程を示す画像である。

図５は、実施の形態１における作業工程の一例としての調理工程を説明するための図である。図５では、「レバニラ炒め」の調理工程を示している。つまり、図５の（ａ）〜（ｈ）で示す各画像が、表示部１１３に表示される。なお、「レバニラ炒め」とは、レバーとニラとを炒めることでできる料理である。

具体的には、図５の（ａ）は、豚レバーを薄切りにする調理工程を示す画像５０１である。図５の（ｂ）は、薄切りにしたレバーを調味料に漬け込む調理工程を示す画像５０２である。図５の（ｃ）は、ニラを３〜４ｃｍの長さに切る調理工程を示す画像５０３である。図５の（ｄ）は、調味料に漬け込んだレバーを炒める調理工程を示す画像５０４である。図５の（ｅ）は、炒めたレバーを器に移す調理工程を示す画像５０５である。図５の（ｆ）は、切ったニラを炒める調理工程を示す画像５０６である。図５の（ｇ）は、炒めているニラにさらにレバーを加えて炒める調理工程を示す画像５０７である。図５の（ｈ）は、完成したレバニラ炒めを皿に盛りつける調理工程を示す画像５０８である。

以上のように、本実施の形態のヘッドマウントディスプレイ１０では、ディスプレイ１０６に、所定のアプリケーションが起動されることにより、作業工程として調理工程を示した画像が図５の（ａ）〜（ｈ）の順番に表示される。なお、画像５０１〜５０８は、例えば、ストレージ１０３に保持されている画像であってもよいし、通信ＩＦ１０４を介して外部から取得した画像であってもよいし、ストレージ１０３に保持されている画像や外部から取得した画像を用いて制御部１１２が生成した画像であってもよい。

図６は、実施の形態１におけるユーザの視界と、表示部に表示される画像（第１画像）との一例について説明するための図である。

ユーザの視界６０１は、ヘッドマウントディスプレイ１０を装着しているユーザが見る視界を示している。ユーザの視界６０１には、ユーザの目に見えている現実環境が含まれており、また、その現実環境に重畳するように表示部１１３が含まれている。言い換えれば、ユーザは、表示部１１３を透過して現実環境を見ている。

図６では、表示部１１３の表示領域の全体に亘って画像６０２が表示されている。画像６０２は、ヘッドマウントディスプレイ１０の姿勢が第１の姿勢である場合、表示部１１３に表示させる第１画像であって、ユーザが行う作業工程を表す第１画像の一例である。ここで表示されている画像６０２は、図５の（ａ）で示した画像５０１が用いられる。また、画像６０２には、図６で示すように、作業工程の作業の内容について説明している説明文６０３が表示されていてもよい。なお、画像６０２は、表示部１１３の表示領域の全体に亘って表示されていなくてもよく、ユーザの視界にある現実環境における作業対象の対象物へのユーザからの視線を妨げる大きさの画像であればよく、例えば、当該表示領域の５０％以上の表示面積で表示されていればよい。

図７は、実施の形態１におけるユーザの視界と、表示部に表示される画像（第２画像）とについて説明するための図である。

画像７０１は、制御部１１２がヘッドマウントディスプレイ１０の姿勢の変化に応じて表示部１１３に表示させる第２画像の一例である。つまり、画像７０１は、ヘッドマウントディスプレイ１０が第１の姿勢から第２の姿勢へ変化したと姿勢判断部１１４により判断された場合、第１画像より表示部１１３に表示される表示領域の小さい第２画像の一例である。本実施の形態では、第２画像は、第１画像を縮小した画像である。また、画像７０１は、表示部１１３の表示領域のうち、ユーザの視界を極力妨げないような位置（実施の形態１では右上の位置）に表示される。

［１−２．動作］
以上のように構成されたヘッドマウントディスプレイ１０の動作について、図８および図９を用いて以下に説明する。

図８は、実施の形態１に係るヘッドマウントディスプレイの動作の一例を説明するためのフローチャートである。図９は、実施の形態１における制御部による表示制御方法において表示される画像と、ヘッドマウントディスプレイの姿勢との関係を示す図である。

まず、制御部１１２は、傾き検出部１１１により検出された傾きを示す情報を受信する（Ｓ１０１）。

次に、制御部１１２の姿勢判断部１１４は、受信した傾きを示す情報に基づいて、ヘッドマウントディスプレイ１０の姿勢を判断する（Ｓ１０２）。具体的には、姿勢判断部１１４は、受信した傾きを示す情報に基づいて、ヘッドマウントディスプレイ１０の姿勢が第１の姿勢であるか、または、第１の姿勢から第２の姿勢に変化したか、または、第１の姿勢および第２の姿勢でないその他の姿勢であるかを判断する。そして、姿勢判断部１１４は、判断の結果を、表示制御部１１５に送る。

次に、制御部１１２の表示制御部１１５は、ヘッドマウントディスプレイ１０の姿勢が第１の姿勢であると姿勢判断部１１４により判断された場合（Ｓ１０２で「第１の姿勢」）、表示部１１３に、ユーザが行う作業工程を表す第１画像を表示させる（Ｓ１０３）。ステップＳ１０３は、図９の（ａ）の状態に相当する。

また、表示制御部１１５は、ヘッドマウントディスプレイ１０の姿勢が第１の姿勢から第２の姿勢に変化したと姿勢判断部１１４により判断された場合（Ｓ１０２で「第１の姿勢から第２の姿勢へ変化」）、表示部１１３へ表示する画像を、第１画像より表示部１１３に表示される表示領域の小さい第２画像へ切り替える（Ｓ１０４）。なお、ステップＳ１０３における第２画像への切り替えでは、第１画像に示された作業工程を簡易的に示した簡易画像であって、第２画像としての簡易画像に切り替える。ステップＳ１０４は、図９の（ｂ）に相当する。なお、第１画像に示された作業工程を簡易的に示すとは、第１画像に含まれる情報（画像、テキストなど）の一部を削除する、第１画像に含まれる情報の一部を省略して表記するなどである。

これにより、ユーザが調理をするためにユーザの頭部を下向きの姿勢（第２の姿勢）としているときは、ユーザの調理を妨げない程度に小さいサイズの画像を表示部１１３に表示させることができる。

ステップＳ１０２において、その他の姿勢であると判断された場合、ステップＳ１０３が終了した場合、または、ステップＳ１０４が終了した場合、ステップＳ１０１に戻る。つまり、ヘッドマウントディスプレイ１０の制御部１１２では、ステップＳ１０１〜Ｓ１０４の処理が周期的に繰り返し行われる。つまり、ステップＳ１０４の後で、ステップＳ１０２においてヘッドマウントディスプレイ１０の姿勢が第１の姿勢であると姿勢判断部１１４により判断された（第２の姿勢から第１の姿勢へ変化したと判断された）場合、表示部１１３へ表示する画像を、第２画像から第１画像へ切り替える。

［１−３．効果等］
以上のように、本実施の形態に係る表示制御方法によれば、ヘッドマウントディスプレイ１０の姿勢が第１の姿勢である場合に、表示部１１３へユーザが行う作業工程を表す第１画像を表示させ、ヘッドマウントディスプレイ１０の姿勢が第１の姿勢から第２の姿勢へ変化したと判断された場合、表示部１１３へ表示する画像を、第１画像より表示領域の小さい第２画像へ切り替えさせる。即ち、ユーザの顔の向きの変化によって同時に変化するヘッドマウントディスプレイ１０の姿勢に基づいて、作業工程を、例えば、ヘッドマウントディスプレイの表示部１１３の表示領域の全体に表示するか、ヘッドマウントディスプレイ１０の表示部１１３の一部へ表示するかといった表示の制御を行なう。そのため、ユーザが自身の手元で作業を行なう場合に、手元の状態を保持したまま顔の向きを変化させるだけで、表示部１１３に表示される画像を変化させることができる。例えば、ユーザが正確な作業工程を確認できるように作業工程を示す画像を大きく表示する状態と、ユーザの作業を妨げないように作業工程を示す画像を小さくまたは簡易的に表示する状態とを、例えば、ユーザが自身の手によってデバイスに備えられたボタンなどの入力装置を用いて切り替える必要がないため、ユーザが手を離して作業を中断する必要もない。

また、本実施の形態に係る表示制御方法によれば、第２画像への切り替えでは、第１画像に示された作業工程を簡易的に示した簡易画像であって、第２画像としての簡易画像に切り替える。つまり、第１画像よりも表示部１１３に表示される表示領域の小さい第２画像に切り替えた場合であっても、第２画像には第１画像に示された作業工程がかに的に示されているため、ユーザは、第２画像を見るだけで、第１画像に示された作業工程を把握することができる。

また、本実施の形態に係る表示制御方法によれば、ヘッドマウントディスプレイ１０のコンピュータに対して、さらに、表示部１１３へ表示する画像を第１画像から第２画像へ切り替えた後に、ヘッドマウントディスプレイ１０の姿勢が、第２の姿勢から第１の姿勢へ変化したと判断された場合、表示部へ表示する画像を、第２画像から第１画像へ切り替えさせる。このため、ユーザは、ヘッドマウントディスプレイ１０の姿勢を第１の姿勢に戻すだけで、現在作業中の作業工程の詳細を、再確認できる。

（実施の形態２）
次に、実施の形態２について説明する。

［２−１．動作］
実施の形態２に係る表示制御方法では、実施の形態１の表示制御方法とは、ステップＳ１０４以降の処理が異なる。なお、実施の形態２に係る表示制御方法においても、実施の形態１で説明したヘッドマウントディスプレイ１０を用いる。

以下、実施の形態２に係る表示制御方法における、ヘッドマウントディスプレイ１０の動作について、図１０〜図１３を用いて説明する。

図１０は、実施の形態２に係るヘッドマウントディスプレイの動作の一例を説明するためのフローチャートである。図１１は、実施の形態２におけるユーザの視界と、表示部に表示される、次の作業工程における画像（第３画像）とについて説明するための図である。図１２は、実施の形態２におけるユーザの視界と、表示部に表示される、次の作業工程における第２画像とについて説明するための図である。図１３は、実施の形態２における制御部による表示制御方法において表示される画像と、ヘッドマウントディスプレイの姿勢との関係を示す図である。

まず、ステップＳ１０１〜Ｓ１０４の処理が行われる。ステップＳ１０１〜Ｓ１０４の処理は、実施の形態１と同様であるため説明を省略する。ステップＳ１０１〜Ｓ１０４の処理では、ステップＳ１０３が図１３の（ａ）の状態に相当し、ステップＳ１０４が図１３の（ｂ）の状態に相当する。

ステップＳ１０４が終了すると、制御部１１２は、ヘッドマウントディスプレイ１０の姿勢が、第１の姿勢から第２の姿勢へ変化してからの時間を計測する（Ｓ２０１）。

次に、制御部１１２は、傾き検出部１１１により検出された傾きを示す情報を受信する（Ｓ２０２）。

そして、制御部１１２は、計測した時間が所定時間経過したか否かを判断する（Ｓ２０３）。

計測した時間が所定時間経過したと制御部１１２により判断された場合（Ｓ２０３でＹｅｓ）、姿勢判断部１１４は、ヘッドマウントディスプレイ１０の姿勢が第１の姿勢であるか否かを判断する（Ｓ２０４）。

ヘッドマウントディスプレイ１０の姿勢が第１の姿勢であると姿勢判断部１１４により判断された場合（ヘッドマウントディスプレイ１０の姿勢が第２の姿勢から第１の姿勢へ変化したと判断された場合）（Ｓ２０４でＹｅｓ）、表示制御部１１５は、表示部１１３へ表示する情報を、第２画像から第３画像へ切り替える（Ｓ２０５）。ステップＳ２０５は、図１３の（ｃ）の状態に相当する。

第３画像は、第１画像で表される作業工程の次の作業工程を表す画像である。図１１では、図６と同様に表示部１１３の表示領域の全体に亘って画像１１０１が表示されている。画像１１０１は、表示部１１３に表示させる第３画像であって、ユーザが行う作業工程を表す第３画像の一例である。具体的には、ここで表示されている画像１１０１は、図５の（ａ）で示した画像５０１の次の作業工程における画像５０２が用いられる。また、画像１１０１には、図１１に示すように、作業工程の作業の内容について説明している説明文１１０２が表示されていてもよい。

なお、計測した時間が所定時間経過していないと制御部１１２により判断された場合（Ｓ２０３でＮｏ）、または、ヘッドマウントディスプレイ１０の姿勢が第１の姿勢でないと姿勢判断部１１４により判断された場合（Ｓ２０４でＮｏ）、ステップＳ２０２に戻る。

ステップＳ１０２において、その他の姿勢であると判断された場合、ステップＳ１０３が終了した場合、又は、ステップＳ２０５が終了した場合、ステップＳ１０１に戻る。つまり、実施の形態１と同様に、ヘッドマウントディスプレイ１０の制御部１１２では、ステップＳ１０１〜Ｓ１０４、Ｓ２０１〜Ｓ２０５の処理が周期的に繰り返し行われる。つまり、ステップＳ２０５の後で、ステップＳ１０２においてヘッドマウントディスプレイ１０の姿勢が第１の姿勢から第２の姿勢に変化したと判断された場合、表示部１１３へ表示する画像を、現在表示されている作業工程に対応する第１画像（画像１１０１）から第２画像へ切り替える。この第１画像から第２画像への切り替えは、図１３の（ｄ）の状態に相当する。

なお、この場合に切り替えられる第２画像は、例えば、図１２に示すように、ユーザがヘッドマウントディスプレイの姿勢を第２の姿勢にしており、また、ユーザは次の作業を行っていると判断されるため、ユーザには、次の「レバーを調味料に漬け込む」作業を行っているときに、画像１１０１が縮小された画像１２０１が表示部１１３の右上の位置に表示される。

［２−２．効果等］
以上のように、本実施の形態に係る表示制御方法によれば、ヘッドマウントディスプレイ１０の姿勢が、第１の姿勢から第２の姿勢へ変化してからの時間を計測し、計測した時間が所定時間経過した後に、ヘッドマウントディスプレイ１０の姿勢が第２の姿勢から第１の姿勢へ変化したと判断された場合は、表示部１１３へ表示する情報を、第２画像から、第１画像で表される作業工程の次の作業工程を表す第３画像へ切り替える。

要するに、ヘッドマウントディスプレイ１０の姿勢を第２の姿勢にしたときに、ユーザが現在の作業工程に係る作業を開始したと判断でき、所定時間経過していればユーザが現在の作業工程に係る作業を終了したと判断できる。このため、第２の姿勢へ変化してから所定時間経過した後に、第１の姿勢に変化した場合、次の作業工程を表す第３画像を表示部１１３へ表示することで、ユーザは、ヘッドマウントディスプレイ１０に対して手での操作を行わなくても次の作業工程を表す第３画像を見ることができる。また、所定時間が経過していなければ、ヘッドマウントディスプレイ１０の姿勢が第１の姿勢になったとしても、次の作業工程を表す第３画像を表示せずに第１画像を表示させるため、ユーザは、作業工程の詳細を容易に再確認することができる。

［２−３．変形例］
上記実施の形態２に係る表示制御方法によれば、ステップＳ２０１で計測した時間が、ステップＳ２０３において所定時間経過したか否かを判断しているが、所定時間経過したか否かの判断において、第１画像の示す内容毎に所定時間が異なっていてもよい。作業工程における作業時間は、複数の作業工程毎に異なると考えられる。よって、例えば、複数の作業工程ごとに作業時間が異なる場合には、当該作業工程ごとの作業時間に応じた時間を所定時間として設定できるため、適切なタイミングで次の作業工程の画像に切り替えることができる。

（実施の形態３）
次に、実施の形態３について説明する。

［３−１．動作］
実施の形態３に係る表示制御方法では、実施の形態１または実施の形態２の表示制御方法に、次に説明する表示制御方法をさらに並列して行う点が異なる。なお、実施の形態３に係る表示制御方法においても、実施の形態１で説明したヘッドマウントディスプレイ１０を用いる。

以下、実施の形態３に係る表示制御方法における、ヘッドマウントディスプレイ１０の動作について、図１４〜図１６を用いて説明する。

図１４は、実施の形態３に係るヘッドマウントディスプレイの動作の一例を説明するためのフローチャートである。図１５は、実施の形態３における傾き検出部による姿勢の検出の第２の説明図である。図１６は、実施の形態３におけるユーザの視界と、表示部に表示される、作業工程の完了状態を表す第４画像とについて説明するための図である。

まず、制御部１１２は、傾き検出部１１１により検出された傾きを示す情報を受信する（Ｓ３０１）。

次に、制御部１１２の姿勢判断部１１４は、ヘッドマウントディスプレイ１０の姿勢が第３の姿勢であるか否かを判断する（Ｓ３０２）。ここで、第３の姿勢とは、図１５に示すように、ユーザが水平面上（Ｘ−Ｙ平面上）において首を振る場合、つまり、ユーザが頭部を横に（左又は右に）回転させる場合のヘッドマウントディスプレイ１０の姿勢の変化を示す図である。

具体的には、図１５は、ユーザが正面を見る場合を基準として左へθ２〔度〕の方向を向くように頭部を回転させた場合を示している。このとき、姿勢判断部１１４は、傾き検出部１１１により検出されたヘッドマウントディスプレイ１０の傾きに基づいて、ヘッドマウントディスプレイ１０が基準姿勢から、基準姿勢から左方向へθ１度回転した姿勢に変化したことを検出する。なお、基準姿勢とは、この姿勢の変化が開始されたとき姿勢のことであり、ユーザの頭部が概ね停止していると考えられる場合の姿勢のことである。この場合も、図４と同様に、姿勢が角度の範囲内にあるか否かによって、第３の姿勢になったか否かが判断されるが、図４と同様の仕組みであるので、詳細の説明は省略する。

ヘッドマウントディスプレイ１０の姿勢が第３の姿勢であると姿勢判断部１１４により判断された場合（Ｓ３０２でＹｅｓ）、表示制御部１１５は、表示部１１３へ表示する画像を、第４画像（つまり、画像５０８）へ切り替える（Ｓ３０３）。

第４画像は、第１画像で示される作業工程の完了状態を表す画像（完成画像）である。図１６では、図６および図１１と同様に、表示部１１３の表示領域の全体にわたって画像１６０１が表示されている。画像１６０１は、表示部１１３に表示させる第４画像であって、ユーザが行う作業工程の完了状態を表す第４画像の一例である。具体的には、ここで表示されている画像１６０１は、図５の（ａ）で示した画像５０１の完了状態を表す画像５０８が用いられる。また、画像１６０１には、図１６に示すように、作業工程の作業の内容について説明している説明文１６０２が表示されていてもよい。

［３−２．効果等］
以上のように、本実施の形態に係る表示制御方法によれば、ヘッドマウントディスプレイ１０の姿勢が、第１の姿勢または第２の姿勢から、第３の姿勢へ変化したと判断された場合、表示部１１３へ表示する画像を、第１画像が表す作業工程の完了状態を表す第４画像へ切り替える。このため、ユーザは、手を使った操作をヘッドマウントディスプレイ１０に対して行わなくても、作業工程の完了状態を表す第４画像を容易に確認することができる。

［３−３．変形例］
上記実施の形態３に係る表示制御方法によれば、ヘッドマウントディスプレイ１０の姿勢が、第１の姿勢または第２の姿勢から、第３の姿勢へ変化したと判断された場合、第４画像として作業工程の完了状態を表す画像１６０１を表示させているが、これに限らずに、例えば、全ての作業工程（ａ）〜（ｈ）を示した、図５のような画像を表示させてもよい。これにより、ユーザは、手を使った操作をヘッドマウントディスプレイ１０に対して行わなくても、作業工程の全体の流れを確認することができる。

また、上記実施の形態３に係る表示制御方法によれば、ヘッドマウントディスプレイ１０の姿勢が、第１の姿勢または第２の姿勢から、第３の姿勢へ変化したと判断された場合、第４画像を表示しているが、これに限らずに、現在の作業工程の画像の前の作業工程を表す画像を表示してもよい。これにより、ユーザは、手を使った操作をヘッドマウントディスプレイ１０に対して行わなくても、前の作業工程について再確認することができる。

（他の実施の形態）
以上のように、本出願において開示する技術の例示として、実施の形態を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態にも適用可能である。また、上記実施の形態で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。

そこで、以下では、他の実施の形態を例示する。

例えば、上記の各実施の形態では、第１画像および第２画像は、それぞれ、テキスト（説明文）を含んでおり、第１画像で表示されるテキストの量と第２画像で表示されるテキストの量とは同じであるが、これに限らない。例えば、第２画像では、テキストの量を第１画像よりも減少させて、第１画像に示された作業工程を簡易的に示す簡易画像に切り替えてもよい。さらに、第２画像には、作業工程を示す画像とテキストとの両方が含まれているが、テキストのみが表示されてもよい。例えば、図１７に示すように、画像６０２に表示されている説明文６０３のテキスト量を減少させた説明文のみを含む画像１７０１を第２画像として表示部１１３に表示してもよい。つまり、縮小画像である第２画像中のテキスト量を少なくするため、第２画像中でのテキストの大きさを極力大きく表示することができる。なお、図１７は、他の実施の形態におけるユーザの視界と、表示部に表示される画像（第２画像）とについて説明するための図である。

また、上記の各実施の形態では、第１画像は、複数の作業工程の中の一工程のみを表す画像であるが、これに限らずに、例えば、図１８に示すように、複数の作業工程を含む画像１８０１を第１画像として表示部１１３に表示させてもよい。この場合、第２画像への切り替えでは、図１９に示すように、第２画像としての画像であって、複数の作業工程の中の少なくとも一の作業工程を削除した画像１９０１に切り替えてもよい。画像１９０１では、作業工程の（ｃ）〜（ｈ）が削除されて表示される。このため、第２画像中での作業工程を表す表示を表示部１１３に極力大きく表示させることができる。なお、図１８は、他の実施の形態におけるユーザの視界と、表示部に表示される画像（第１画像）との一例について説明するための図である。図１９は、他の実施の形態におけるユーザの視界と、表示部に表示される画像（第２画像）との他の一例について説明するための図である。

また、第１画像が図１８に示した画像１８０１のように複数の作業工程である場合、例えば、図２０に示すように、第２画像への切り替えでは、第２画像としての画像２００１であって、複数の作業工程の中の少なくとも一つの作業工程を簡易的に示した内容を含む画像２００１に切り替えてもよい。画像２００１では、作業工程（ｃ）〜（ｈ）のそれぞれのテキスト量が減少されて表示されている。このため、現在の作業工程（ａ）と次の作業工程（ｂ）との説明文の全文を極力大きく表示することができ、かつ、他の作業工程（ｃ）〜（ｈ）の概要を表示することができる。これにより、ユーザは、現在の作業工程の詳細を確認でき、さらに、作業工程全体の流れを確認することができる。なお、図２０は、他の実施の形態におけるユーザの視界と、表示部に表示される画像（第２画像）との他の一例について説明するための図である。図２０の（ｂ）は、図２０の（ａ）における画像２００１を拡大した図である。

また、第１画像が図１８に示した画像１８０１のように複数の作業工程である場合、例えば、図２１に示すように、第２画像への切り替えでは、第２画像としての画像２１０１であって、複数の作業工程の各々を簡易的に示した内容を含む画像２１０１に切り替えてもよい。画像２１０１では、作業工程（ａ）〜（ｈ）のそれぞれのテキスト量が減少されて表示されている。このため、ユーザは、複数の作業工程の各々を確認しながら作業を進めることができる。なお、図２１は、他の実施の形態におけるユーザの視界と、表示部に表示される画像（第２画像）との他の一例について説明するための図である。図２１の（ｂ）は、図２１の（ａ）における画像２１０１を拡大した図である。

また、上記の各実施の形態では、傾き検出部１１１は、加速度センサ１０５により実現されているが、ジャイロセンサで実現してもよいし、地磁気センサで実現してもよいし、加速度センサ、ジャイロセンサおよび地磁気センサのうちの少なくとも２つを組み合わせることにより実現してもよい。

また、上記の各実施の形態では、第１画像および第２画像（実施の形態２の場合には第３画像も含む。また、実施の形態３の場合には第４画像も含む）が示す作業工程は、献立の調理工程であるが、これに限らずに、電子部品の取り付けに係る工程、機器もしくは器具を用いて行なう作業に係る工程、機器の保守もしくはメンテナンスに係る工程、器具の保守もしくはメンテナンスに係る工程、または建造物の保守もしくはメンテナンスに係る工程のいずれかであってもよい。

また、上記の各実施の形態では、特に言及していないが、第１画像および第２画像は、ネットワークを介して、ヘッドマウントディスプレイ１０に接続した情報装置（例えば、スマートフォン、タブレット、ラップトップＰＣなど）から受信してもよい。具体的には、ヘッドマウントディスプレイ１０は、傾き検出部１１１および表示部１１３のみを備えていればよく、制御部１１２の各機能は、ネットワークを介してヘッドマウントディスプレイ１０に接続される情報装置が有していてもよい。

また、上記の各実施の形態では、特に言及していないが、第１画像は、ネットワークを介して、ヘッドマウントディスプレイ１０に接続した情報装置から受信し、第２画像は、受信した第１画像に基づいて、ヘッドマウントディスプレイ１０において生成されてもよい。つまり、ヘッドマウントディスプレイ１０は、取得した第１画像に基づいて、第２画像を所定のアルゴリズムで生成する機能を有していてもよい。

なお、上記各実施の形態において、各構成要素は、専用のハードウェアで構成されるか、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、ＣＰＵまたはプロセッサなどのプログラム実行部が、ハードディスクまたは半導体メモリなどの記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。

以上、本発明の一つまたは複数の態様に係る表示制御方法およびヘッドマウントディスプレイについて、実施の形態に基づいて説明したが、本発明は、この実施の形態に限定されるものではない。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したもの、異なる実施の形態における構成要素を組み合わせて構築される形態なども、本発明の一つまたは複数の態様の範囲内に含まれてもよい。

本開示は、ユーザが手を離して作業を中断しなくてもユーザの作業を妨げないように作業工程を示す画像を小さくまたは簡易的に切り替えることができる表示制御方法などとして有用である。

１０ヘッドマウントディスプレイ
１１本体部
１２鼻あて部
１３つる
１４耳かけ部
１０１ＣＰＵ
１０２メインメモリ
１０３ストレージ
１０４通信ＩＦ
１０５加速度センサ
１０６ディスプレイ
１１１傾き検出部
１１２制御部
１１３表示部
１１４姿勢判断部
１１５表示制御部

Claims

ユーザの視界に重畳する画像を表示する表示部を備えたヘッドマウントディスプレイにおいて、前記表示部への画像の表示を制御する表示制御方法であって、
前記ヘッドマウントディスプレイのコンピュータに対して、
前記ヘッドマウントディスプレイの傾きを示す情報を受信させ、
前記受信した傾きを示す情報に基づいて、前記ヘッドマウントディスプレイの姿勢を判断させ、
前記ヘッドマウントディスプレイの姿勢が第１の姿勢である場合、前記表示部に、前記ユーザが行う作業工程を表す第１画像を表示させ、
前記ヘッドマウントディスプレイの姿勢が前記第１の姿勢から第２の姿勢へ変化したと判断された場合、前記表示部へ表示する画像を、前記第１画像より前記表示部に表示される表示領域の小さい第２画像へ切り替えさせ、
前記第２画像への切り替えでは、前記第１画像に示された前記作業工程を簡易的に示した簡易画像であって、前記第２画像としての簡易画像に切り替えさせる、
表示制御方法。
前記第１画像および前記第２画像は、それぞれ、テキストを含み、
前記第２画像への切り替えでは、前記テキストの量を前記第１画像よりも減少させて、前記第１画像に示された前記作業工程を簡易的に示す前記簡易画像に切り替えさせる、
請求項１に記載の表示制御方法。
前記第１画像は、複数の作業工程を表し、
前記第２画像への切り替えでは、前記第２画像としての画像であって、前記複数の作業工程の中の少なくとも一の作業工程を削除した画像に切り替えさせる、
請求項１に記載の表示制御方法。
前記第１画像は、複数の作業工程を表し、
前記第２画像への切り替えでは、前記第２画像としての画像であって、前記複数の作業工程の中の少なくとも一の作業工程を簡易的に示した内容を含む画像に切り替えさせる、
請求項１に記載の表示制御方法。
前記第１画像は、複数の作業工程を表し、
前記第２画像への切り替えでは、前記第２画像としての画像であって、前記複数の作業工程の各々を簡易的に示した内容を含む画像に切り替える、
請求項１に記載の表示制御方法。
前記ヘッドマウントディスプレイのコンピュータに対して、さらに、
前記表示部へ表示する画像を前記第１画像から前記第２画像へ切り替えた後に、前記ヘッドマウントディスプレイの姿勢が、前記第２の姿勢から前記第１の姿勢へ変化したと判断された場合、前記表示部へ表示する画像を、前記第２画像から前記第１画像へ切り替えさせる、
請求項１から請求項５のいずれか一に記載の表示制御方法。
前記ヘッドマウントディスプレイのコンピュータに対して、さらに、
前記ヘッドマウントディスプレイの姿勢が、前記第１の姿勢から前記第２の姿勢へ変化してからの時間を計測させ、
前記計測した時間が所定時間経過した後に、前記ヘッドマウントディスプレイの姿勢が、前記第２の姿勢から前記第１の姿勢へ変化したと判断された場合は、前記表示部へ表示する情報を、前記第２画像から第３画像へ切り替えさせ、
前記第３画像は、前記第１画像で表される作業工程の次の作業工程を表す、
請求項６に記載の表示制御方法。
前記第３画像への切り替えでは、前記所定時間は前記第１画像の示す内容毎に異なる、
請求項７に記載の表示制御方法。
前記ヘッドマウントディスプレイのコンピュータに対して、さらに、
前記ヘッドマウントディスプレイの姿勢が、前記第１の姿勢または前記第２の姿勢から、第３の姿勢へ変化したと判断された場合、前記表示部へ表示する画像を、前記第１画像が表す作業工程の完了状態を表す第４画像へ切り替えさせる、
請求項１に記載の表示制御方法。
前記第１画像および前記第２画像が示す作業工程は、献立の調理工程、電子部品の取り付けに係る工程、機器もしくは器具を用いて行なう作業に係る工程、機器の保守もしくはメンテナンスに係る工程、器具の保守もしくはメンテナンスに係る工程、または建造物の保守もしくはメンテナンスに係る工程のいずれかである、
請求項１から請求項９のいずれか一に記載の表示制御方法。
前記ヘッドマウントディスプレイのコンピュータに対して、さらに、
前記第１画像および前記第２画像を、ネットワークを介して、前記ヘッドマウントディスプレイに接続した情報装置から受信させる、
請求項１から請求項１０のいずれか一に記載の表示制御方法。
前記ヘッドマウントディスプレイのコンピュータに対して、さらに、
前記第１画像を、ネットワークを介して、前記ヘッドマウントディスプレイに接続した情報装置から受信させ、
前記第２画像を、前記受信した第１画像に基づいて、生成させる、
請求項１から請求項１０のいずれか一に記載の表示制御方法。
ユーザの視界に重畳する画像を表示する表示部を備えたヘッドマウントディスプレイであって、
前記ヘッドマウントディスプレイの傾きを示す情報を検出する傾き検出部と、
前記検出した傾きを示す情報に基づいて、前記ヘッドマウントディスプレイの姿勢を判断する姿勢判断部と、
前記ヘッドマウントディスプレイの姿勢が第１の姿勢である場合、前記ユーザが行う作業工程を表す第１画像を前記表示部に表示させ、前記ヘッドマウントディスプレイの姿勢が前記第１の姿勢から第２の姿勢へ変化したと前記姿勢判断部により判断された場合、前記表示部へ表示する画像を、前記第１画像から、前記第１画像より前記表示部に表示される表示領域の小さい第２画像へ切り替える表示制御部と、を備え、
前記表示制御部は、前記第２画像への切り替えにおいて、前記第１画像に示された前記作業工程を簡易的に示した簡易画像であって、前記第２画像としての簡易画像に切り替える、
ヘッドマウントディスプレイ。
ユーザの視界に重畳する画像を表示する表示部を備えたヘッドマウントディスプレイに実行させるプログラムであって、
前記ヘッドマウントディスプレイのコンピュータに対して、
前記ヘッドマウントディスプレイの傾きを示す情報を受信させ、
前記受信した傾きを示す情報に基づいて、前記ヘッドマウントディスプレイの姿勢を判断させ、
前記ヘッドマウントディスプレイの姿勢が第１の姿勢である場合、前記表示部に、前記ユーザが行う作業工程を表す第１画像を表示させ、
前記ヘッドマウントディスプレイの姿勢が前記第１の姿勢から第２の姿勢へ変化したと判断された場合、前記表示部へ表示する画像を、前記第１画像より表示領域の小さい第２画像へ切り替えさせ、
前記第２画像への切り替えでは、前記第１画像に示された前記作業工程を簡易的に示した簡易画像であって、前記第２画像としての簡易画像に切り替えさせる、
プログラム。