JP6762470B2 - ウェアラブル端末表示システム、ウェアラブル端末表示方法およびプログラム - Google Patents

Description

本発明は、ウェアラブル端末の表示板に、表示板を透過して見える検査対象に対して、収集された検査項目を拡張現実として表示するウェアラブル端末表示システム、ウェアラブル端末表示方法およびプログラムに関する。

近年、スマートグラスやヘッドマウントディスプレイなどのウェアラブル端末が普及し、これらのウェアラブル端末を検査で活用する動きがある。例えば、薬剤監査のために監査と照合とを同時に実行可能な照合検査装置、または、照合先の物品と照合元の注文票や処方箋との直接の照合を実現できる照合検査装置が提供されている（特許文献１）。

特開２０１１−１３４０７９号公報

しかしながら、特許文献１の装置は、ウェアラブル端末の表示板に、検査対象に応じた検査項目を収集して表示できない問題がある。

本発明は、上記課題に鑑み、ウェアラブル端末の視界の画像から検査対象を特定して、検査対象に応じて収集した検査項目をウェアラブル端末の表示板に拡張現実として表示するウェアラブル端末表示システム、ウェアラブル端末表示方法およびプログラムを提供することを目的とする。

本発明では、以下のような解決手段を提供する。

第１の特徴に係る発明は、ウェアラブル端末の視界に入った検査対象の画像を取得する画像取得手段と、前記ウェアラブル端末の、端末位置と撮像方向とを取得する位置方向取得手段と、前記端末位置と前記撮像方向とに基づいて、前記検査対象の対象位置を推測する推測手段と、前記画像を画像解析して、前記検査対象の機種を特定し、特定した当該検査対象の機種と推測した前記検査対象の位置とに基づいて、前記検査対象を特定する特定手段と、
前記検査対象に応じた検査項目を収集する収集手段と、前記ウェアラブル端末の表示板を透過して見える前記検査対象に対して、当該検査対象を一定時間見ることで選択対象の選択を受け付ける選択受付手段と、前記ウェアラブル端末の表示板に、前記表示板を透過して見える前記選択対象にだけ合わせて、前記検査項目を拡張現実として表示する検査項目表示手段と、を備えるウェアラブル端末表示システムを提供する。

第１０の特徴に係る発明は、コンピュータが実行するウェアラブル端末表示方法であって、ウェアラブル端末の視界に入った検査対象の画像を取得する画像取得ステップと、前記ウェアラブル端末の、端末位置と撮像方向とを取得するステップと、前記端末位置と前記撮像方向とに基づいて、前記検査対象の対象位置を推測するステップと、前記画像を画像解析して、前記検査対象の機種を特定し、特定した当該検査対象の機種と推測した前記検査対象の位置とに基づいて、前記検査対象を特定するステップと、前記検査対象に応じた検査項目を収集する収集ステップと、前記ウェアラブル端末の表示板を透過して見える前記検査対象に対して、当該検査対象を一定時間見ることで選択対象の選択を受け付ける選択受付ステップと、前記ウェアラブル端末の表示板に、前記表示板を透過して見える前記選択対象にだけ合わせて、前記検査項目を拡張現実として表示する検査項目表示ステップと、を備えるウェアラブル端末表示方法を提供する。

第１１の特徴に係る発明は、コンピュータに、ウェアラブル端末の視界に入った検査対象の画像を取得する画像取得ステップ、前記ウェアラブル端末の、端末位置と撮像方向とを取得するステップ、前記端末位置と前記撮像方向とに基づいて、前記検査対象の対象位置を推測するステップ、前記画像を画像解析して、前記検査対象の機種を特定し、特定した当該検査対象の機種と推測した前記検査対象の位置とに基づいて、前記検査対象を特定するステップ、前記検査対象に応じた検査項目を収集する収集ステップ、前記検査対象に応じた検査項目を収集する収集ステップ、前記ウェアラブル端末の表示板を透過して見える前記検査対象に対して、当該検査対象を一定時間見ることで選択対象の選択を受け付ける選択受付ステップ、前記ウェアラブル端末の表示板に、前記表示板を透過して見える前記選択対象にだけ合わせて、前記検査項目を拡張現実として表示する検査項目表示ステップ、を実行させるためのコンピュータ読み取り可能なプログラムを提供する。

ウェアラブル端末の表示板に、検査対象に応じた検査項目を収集して表示できる。

図１は、ウェアラブル端末表示システムの概要図である。 図２は、ウェアラブル端末の表示板に検査対象に応じた検査項目を収集して表示した一例である。

以下、本発明を実施するための最良の形態について説明する。なお、これはあくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。

本発明のウェアラブル端末表示システムは、ウェアラブル端末の表示板に、表示板を透過して見える検査対象に対して、収集された検査項目を拡張現実として表示するシステムである。ウェアラブル端末とはスマートグラスやヘッドマウントディスプレイなどの視界がある端末のことである。検査対象の種類は問わない。

本発明の好適な実施形態の概要について、図１に基づいて説明する。図１は、本発明の好適な実施形態であるウェアラブル端末表示システムの概要図である。

図１にあるように、ウェアラブル端末表示システムは、制御部が所定のプログラムを読み込むことで実現される、画像取得手段、特定手段、収集手段、検査項目表示手段、を備える。また同様に、判定手段、変更手段、検出手段、アクション結果表示手段、位置方向取得手段、推測手段、ガイドライン表示手段、選択受付手段、を備えてもよい。これらは、アプリケーション型、クラウド型またはその他であってもよい。上述の各手段が、単独のコンピュータで実現されてもよいし、２台以上のコンピュータ（例えば、サーバと端末のような場合）で実現されてもよい。

画像取得手段は、ウェアラブル端末の視界に入った検査対象の画像を取得する。ウェアラブル端末のカメラで撮像された画像を取得してもよい。または、ウェアラブル端末以外であっても、このような画像を取得できるのであれば、それでも構わない。画像とは動画でも静止画でもよい。リアルタイムに検査するためには、リアルタイムな画像の方が好ましい。

特定手段は、画像を画像解析して検査対象を特定する。検査対象の種類は問わないので、検査対象が何であるかを画像解析で特定することになる。例えば、機器の修理検査や、ビルの保守検査や、農作物の仕分け検査など、が挙げられる。また、映った対象全てを特定してしまうと時間が掛かる場合には、ウェアラブル端末の視界の中央にある対象を検査対象として特定してもよい。視界の中央にある対象だけを検査対象として特定することで特定に要する時間を大幅に短縮できる。機械学習によって画像解析の精度を向上させてもよい。例えば、検査対象の過去画像を教師データとして機械学習を行う。

収集手段は、検査対象に応じた検査項目を収集する。予め検査項目が登録されたデータベースを参照して検査対象に応じた検査項目を収集してもよい。例えば、予定されていた検査ならばデータベースに検査項目を用意しておくことが可能なのでデータベースを参照して取集できる。また、検査対象に予め紐付けられたＷｅｂコンテンツにアクセスして検査項目を収集してもよい。例えば、検査対象と検査項目とを紐づけるＵＲＬなど割当てることでＷｅｂコンテンツから収取できる。また、検査対象をインターネット検索して検索されたＷｅｂコンテンツから検査項目を収集してもよい。例えば、機器の修理検査の場合、機器を販売している企業のホームページに検査項目が掲載されているケースがあるので、インターネット検索から収集できる。

検査項目表示手段は、ウェアラブル端末の表示板に、表示板を透過して見える検査対象に対して検査項目を拡張現実として表示する。例えば図２にあるように、ウェアラブル端末の表示板に、表示板を透過して見える実線で描かれた検査対象に対して、破線で描かれた検査項目を拡張現実として表示している。ここでは理解のために、実線は実物、破線は拡張現実、としている。表示板を透過して見える実線で描かれた検査対象に対して検査項目を拡張現実で表示することで、検査対象にどのような検査項目があるのかを視覚的に把握することが出来る。拡張現実として表示する検査項目は、表示板を透過して見える検査対象に重なるように表示しても良いが、検査対象が見づらくなるので、検査項目の表示ＯＮ／ＯＦＦを切り替えられるようにしてもよい。

判定手段は、表示された検査項目が検査されたかどうかを判定する。検査中の画像を取得して画像解析をすることで、検査項目が検査されたかどうかを判定してもよい。また、ウェアラブル端末のセンサ情報や、検査者に装着されたセンサ情報などから、検査項目が検査されたかどうかを判定してもよい。

変更手段は、検査されたと判定された検査項目を検査済に変更し、検査されていないと判定された検査項目を検査されるように注目度を変更する。このようにすることで、どの検査項目が、検査済なのか、未検査なのか、を視覚的に把握できる。例えば、検査項目のチェックボックスにチェックを入れることで検査済とてもよい。例えば、検査項目にスタンプを押すことで検査済としてもよい。また、注目度の変更は、検査項目の色・サイズを変更したり、検査項目が目立つようにスタンプを押して変更したりしてもよい。

検出手段は、表示された検査項目に対するアクションを検出する。検査中の画像を取得して画像解析をすることで、検査項目に対するアクションを検出できる。また、ウェアラブル端末のセンサ情報や、検査者に装着されたセンサ情報などから、検査項目に対するアクションを検出できる。

アクション結果表示手段は、ウェアラブル端末の表示板に、表示板を透過して見える検査対象に対して、アクションに応じた結果を拡張現実として表示する。例えば、検査項目を消すアクションを検出したら検査項目の表示を消してよい。例えば、検査目に付けられたリンクを開くアクションを検出したらリンクを開いてもよい。もちろん他のアクションでもよい。

位置方向手段は、ウェアラブル端末の端末位置と撮像方向とを取得する。例えば、端末位置は、ウェアラブル端末のＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）から取得できる。例えば、撮像方向は、ウェアラブル端末で撮像する場合は、ウェアラブル端末の地磁気センサや加速度センサから取得できる。これら以外から取得してもよい。

推測手段は、端末位置と撮像方向とに基づいて、検査対象の対象位置を推測する。端末位置と撮像方向が分かっていれば、撮像された検査対象の位置を推測することができる。

また、特定手段は、対象位置と画像解析とから、前記対象を特定してもよい。例えば、同じデザインの検査対象や、同じ機種の機器などは対象の位置を推測しないと一意的に特定できないことがある。例えば、画像解析から機器の機種を特定して、対象位置からどこに置かれている機器なのかを特定することができる。

ガイドライン表示手段は、ウェアラブル端末の表示板に、検査対象を撮像するためのガイドラインを拡張現実として表示する。例えば、枠や十字などのガイドラインを表示してもよい。ガイドラインに沿って撮像してもらうことで画像解析がしやすくなる。

また、取得手段は、ガイドラインに沿って撮像された画像を取得してもよい。ガイドラインに沿って撮像された画像だけを取得して画像解析することで、効率良く検査対象を特定できる。

選択受付手段は、ウェアラブル端末の表示板を透過して見える検査対象に対して、選択対象の選択を受け付ける。例えば、ウェアラブル端末の表示板を透過して見える検査対象を一定時間見ることで選択対象の選択を受け付けてもよい。例えば、ウェアラブル端末の表示板を透過して見える検査対象にタッチして選択対象の選択を受け付けてもよい。例えば、ウェアラブル端末の表示板を透過して見える検査対象にカーソルを合わせることで選択対象の選択を受け付けてもよい。

また、検査項目表示手段は、ウェアラブル端末の表示板に、表示板を透過して見える選択対象にだけ合わせて、検査項目を拡張現実として表示してもよい。選択された選択対象にだけ合わせて検査項目を拡張現実として表示するので、ピンポイントに検査項目を把握することができる。特定された全ての検査対象に検査項目を表示すると表示板の画面が煩わしくなることがある。

[動作の説明]
次に、ウェアラブル端末表示方法について説明する。本発明のウェアラブル端末表示方法は、ウェアラブル端末の表示板に、表示板を透過して見える検査対象に対して、収集された検査項目を拡張現実として表示する方法である。

ウェアラブル端末表示方法は、画像取得ステップ、特定ステップ、収集ステップ、検査項目表示ステップ、を備える。また同様に、判定ステップ、変更ステップ、検出ステップ、アクション結果表示ステップ、位置方向取得ステップ、推測ステップ、ガイドライン表示ステップ、選択受付ステップ、を備えてもよい。

画像取得ステップでは、画像取得手段が、ウェアラブル端末の視界に入った検査対象の画像を取得する。ウェアラブル端末のカメラで撮像された画像を取得してもよい。または、ウェアラブル端末以外であっても、このような画像を取得できるのであれば、それでも構わない。画像とは動画でも静止画でもよい。リアルタイムに検査するためには、リアルタイムな画像の方が好ましい。

特定ステップでは、特定手段が、画像を画像解析して検査対象を特定する。検査対象の種類は問わないので、検査対象が何であるかを画像解析で特定することになる。例えば、機器の修理検査や、ビルの保守検査や、農作物の仕分け検査など、が挙げられる。また、映った対象全てを特定してしまうと時間が掛かる場合には、ウェアラブル端末の視界の中央にある対象を検査対象として特定してもよい。視界の中央にある対象だけを検査対象として特定することで特定に要する時間を大幅に短縮できる。機械学習によって画像解析の精度を向上させてもよい。例えば、検査対象の過去画像を教師データとして機械学習を行う。

収集ステップでは、収集手段が、検査対象に応じた検査項目を収集する。予め検査項目が登録されたデータベースを参照して検査対象に応じた検査項目を収集してもよい。例えば、予定されていた検査ならばデータベースに検査項目を用意しておくことが可能なのでデータベースを参照して取集できる。また、検査対象に予め紐付けられたＷｅｂコンテンツにアクセスして検査項目を収集してもよい。例えば、検査対象と検査項目とを紐づけるＵＲＬなど割当てることでＷｅｂコンテンツから収取できる。また、検査対象をインターネット検索して検索されたＷｅｂコンテンツから検査項目を収集してもよい。例えば、機器の修理検査の場合、機器を販売している企業のホームページに検査項目が掲載されているケースがあるので、インターネット検索から収集できる。

検査項目表示ステップでは、検査項目表示手段は、ウェアラブル端末の表示板に、表示板を透過して見える検査対象に対して検査項目を拡張現実として表示する。例えば図２にあるように、ウェアラブル端末の表示板に、表示板を透過して見える実線で描かれた検査対象に対して、破線で描かれた検査項目を拡張現実として表示している。ここでは理解のために、実線は実物、破線は拡張現実、としている。表示板を透過して見える実線で描かれた検査対象に対して検査項目を拡張現実で表示することで、検査対象にどのような検査項目があるのかを視覚的に把握することが出来る。拡張現実として表示する検査項目は、表示板を透過して見える検査対象に重なるように表示しても良いが、検査対象が見づらくなるので、検査項目の表示ＯＮ／ＯＦＦを切り替えられるようにしてもよい。

判定ステップでは、判定手段は、表示された検査項目が検査されたかどうかを判定する。検査中の画像を取得して画像解析をすることで、検査項目が検査されたかどうかを判定してもよい。また、ウェアラブル端末のセンサ情報や、検査者に装着されたセンサ情報などから、検査項目が検査されたかどうかを判定してもよい。

変更ステップでは、変更手段は、検査されたと判定された検査項目を検査済に変更し、検査されていないと判定された検査項目を検査されるように注目度を変更する。このようにすることで、どの検査項目が、検査済なのか、未検査なのか、を視覚的に把握できる。例えば、検査項目のチェックボックスにチェックを入れることで検査済とてもよい。例えば、検査項目にスタンプを押すことで検査済としてもよい。また、注目度の変更は、検査項目の色・サイズを変更したり、検査項目が目立つようにスタンプを押して変更したりしてもよい。

検出ステップでは、検出手段は、表示された検査項目に対するアクションを検出する。検査中の画像を取得して画像解析をすることで、検査項目に対するアクションを検出できる。また、ウェアラブル端末のセンサ情報や、検査者に装着されたセンサ情報などから、検査項目に対するアクションを検出できる。

アクション結果表示ステップでは、アクション結果表示手段は、ウェアラブル端末の表示板に、表示板を透過して見える検査対象に対して、アクションに応じた結果を拡張現実として表示する。例えば、検査項目を消すアクションを検出したら検査項目の表示を消してよい。例えば、検査目に付けられたリンクを開くアクションを検出したらリンクを開いてもよい。もちろん他のアクションでもよい。

位置方向ステップでは、位置方向手段が、ウェアラブル端末の端末位置と撮像方向とを取得する。例えば、端末位置は、ウェアラブル端末のＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）から取得できる。例えば、撮像方向は、ウェアラブル端末で撮像する場合は、ウェアラブル端末の地磁気センサや加速度センサから取得できる。これら以外から取得してもよい。

推測ステップでは、推測手段は、端末位置と撮像方向とに基づいて、検査対象の対象位置を推測する。端末位置と撮像方向が分かっていれば、撮像された検査対象の位置を推測することができる。

また、特定ステップでは、特定手段が、対象位置と画像解析とから、前記対象を特定してもよい。例えば、同じデザインの検査対象や、同じ機種の機器などは対象の位置を推測しないと一意的に特定できないことがある。例えば、画像解析から機器の機種を特定して、対象位置からどこに置かれている機器なのかを特定することができる。

ガイドライン表示ステップでは、ガイドライン表示手段が、ウェアラブル端末の表示板に、検査対象を撮像するためのガイドラインを拡張現実として表示する。例えば、枠や十字などのガイドラインを表示してもよい。ガイドラインに沿って撮像してもらうことで画像解析がしやすくなる。

また、取得ステップでは、取得手段が、ガイドラインに沿って撮像された画像を取得してもよい。ガイドラインに沿って撮像された画像だけを取得して画像解析することで、効率良く検査対象を特定できる。

選択受付ステップでは、選択受付手段が、ウェアラブル端末の表示板を透過して見える検査対象に対して、選択対象の選択を受け付ける。例えば、ウェアラブル端末の表示板を透過して見える検査対象を一定時間見ることで選択対象の選択を受け付けてもよい。例えば、ウェアラブル端末の表示板を透過して見える検査対象にタッチして選択対象の選択を受け付けてもよい。例えば、ウェアラブル端末の表示板を透過して見える検査対象にカーソルを合わせることで選択対象の選択を受け付けてもよい。

また、検査項目表示ステップでは、検査項目表示手段が、ウェアラブル端末の表示板に、表示板を透過して見える選択対象にだけ合わせて、検査項目を拡張現実として表示してもよい。選択された選択対象にだけ合わせて検査項目を拡張現実として表示するので、ピンポイントに検査項目を把握することができる。特定された全ての検査対象に検査項目を表示すると表示板の画面が煩わしくなることがある。

上述した手段、機能は、コンピュータ（ＣＰＵ、情報処理装置、各種端末を含む）が、所定のプログラムを読み込んで、実行することによって実現される。プログラムは、例えば、コンピュータにインストールされるアプリケーションであってもよいし、コンピュータからネットワーク経由で提供されるＳａａＳ（ソフトウェア・アズ・ア・サービス）形態であってもよいし、例えば、フレキシブルディスク、ＣＤ（ＣＤ−ＲＯＭなど）、ＤＶＤ（ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭなど）等のコンピュータ読取可能な記録媒体に記録された形態で提供されてもよい。この場合、コンピュータはその記録媒体からプログラムを読み取って内部記憶装置または外部記憶装置に転送し記憶して実行する。また、そのプログラムを、例えば、磁気ディスク、光ディスク、光磁気ディスク等の記憶装置（記録媒体）に予め記録しておき、その記憶装置から通信回線を介してコンピュータに提供するようにしてもよい。

上述した機械学習の具体的なアルゴリズムとしては、最近傍法、ナイーブベイズ法、決定木、サポートベクターマシン、強化学習などを利用してよい。また、ニューラルネットワークを利用して、学習するための特徴量を自ら生成する深層学習（ディープラーニング）であってもよい。

以上、本発明の実施形態について説明したが、本発明は上述したこれらの実施形態に限るものではない。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施形態に記載されたものに限定されるものではない。

Claims (11)

1. ウェアラブル端末の視界に入った検査対象の画像を取得する画像取得手段と、
   前記ウェアラブル端末の、端末位置と撮像方向とを取得する位置方向取得手段と、
   前記端末位置と前記撮像方向とに基づいて、前記検査対象の対象位置を推測する推測手段と、
   前記画像を画像解析して、前記検査対象の機種を特定し、特定した当該検査対象の機種と推測した前記検査対象の位置とに基づいて、前記検査対象を特定する特定手段と、
   前記検査対象に応じた検査項目を収集する収集手段と、
   前記ウェアラブル端末の表示板を透過して見える前記検査対象に対して、当該検査対象を一定時間見ることで選択対象の選択を受け付ける選択受付手段と、
   前記ウェアラブル端末の表示板に、前記表示板を透過して見える前記選択対象にだけ合わせて、前記検査項目を拡張現実として表示する検査項目表示手段と、
   を備えるウェアラブル端末表示システム。
2. 前記特定手段は、前記ウェアラブル端末の視界の中央にある対象を、前記検査対象として特定する請求項１に記載のウェアラブル端末表示システム。
3. 前記収集手段は、予め検査項目が登録されたデータベースを参照して、前記検査対象に応じた検査項目を収集する請求項１に記載のウェアラブル端末表示システム。
4. 前記収集手段は、前記検査対象に予め紐付けられたＷｅｂコンテンツにアクセスして、前記検査項目を収集する請求項１に記載のウェアラブル端末表示システム。
5. 前記収集手段は、前記検査対象をインターネット検索して、検索されたＷｅｂコンテンツから前記検査項目を収集する請求項１に記載のウェアラブル端末表示システム。
6. 前記表示された検査項目が検査されたかどうかを判定する判定手段と、
   検査されたと判定された場合に、前記表示された検査項目を検査済みに変更する変更手段と、を備える請求項１に記載のウェアラブル端末表示システム。
7. 前記表示された検査項目が検査されたかどうかを判定する判定手段と、
   検査されていないと判定された場合に、前記表示された検査項目が検査されるように注目度を変更する変更手段と、を備える請求項１に記載のウェアラブル端末表示システム。
8. 前記表示された検査項目に対するアクションを検出する検出手段と、
   前記ウェアラブル端末の表示板に、前記表示板を透過して見える前記検査対象に対して、前記アクションに応じた結果を拡張現実として表示するアクション結果表示手段と、を備える請求項１に記載のウェアラブル端末表示システム。
9. 前記ウェアラブル端末の表示板に、前記検査対象を撮像するためのガイドラインを拡張現実として表示するガイドライン表示手段を備え、
   前記取得手段は、前記ガイドラインに沿って撮像された前記画像を取得する請求項１に記載のウェアラブル端末表示システム。
10. コンピュータが実行するウェアラブル端末表示方法であって、
    ウェアラブル端末の視界に入った検査対象の画像を取得する画像取得ステップと、
    前記ウェアラブル端末の、端末位置と撮像方向とを取得するステップと、
    前記端末位置と前記撮像方向とに基づいて、前記検査対象の対象位置を推測するステップと、
    前記画像を画像解析して、前記検査対象の機種を特定し、特定した当該検査対象の機種と推測した前記検査対象の位置とに基づいて、前記検査対象を特定するステップと、
    前記検査対象に応じた検査項目を収集する収集ステップと、
    前記ウェアラブル端末の表示板を透過して見える前記検査対象に対して、当該検査対象を一定時間見ることで選択対象の選択を受け付ける選択受付ステップと、
    前記ウェアラブル端末の表示板に、前記表示板を透過して見える前記選択対象にだけ合わせて、前記検査項目を拡張現実として表示する検査項目表示ステップと、
    を備えるウェアラブル端末表示方法。
11. コンピュータに、
    ウェアラブル端末の視界に入った検査対象の画像を取得する画像取得ステップ、
    前記ウェアラブル端末の、端末位置と撮像方向とを取得するステップ、
    前記端末位置と前記撮像方向とに基づいて、前記検査対象の対象位置を推測するステップ、
    前記画像を画像解析して、前記検査対象の機種を特定し、特定した当該検査対象の機種と推測した前記検査対象の位置とに基づいて、前記検査対象を特定するステップ、
    前記検査対象に応じた検査項目を収集する収集ステップ、
    前記ウェアラブル端末の表示板を透過して見える前記検査対象に対して、当該検査対象を一定時間見ることで選択対象の選択を受け付ける選択受付ステップ、
    前記ウェアラブル端末の表示板に、前記表示板を透過して見える前記選択対象にだけ合わせて、前記検査項目を拡張現実として表示する検査項目表示ステップ、
    を実行させるためのコンピュータ読み取り可能なプログラム。

Images