JP6607506B2 - 情報提供システム、情報提供装置、情報提供方法及び情報提供プログラム - Google Patents

Description

本発明は、医療従事者であるユーザに、業務遂行に必要な情報を提供するものである。

医療現場では、状況に応じて異なる業務が遂行されるとともに、多種多様な機具等が使用されている。また、緊迫した状況であったり、急を要する状況であることが多い。さらに、医療現場は、人の命にも係る業務を行うこともあるため、作業のミス等が起こらないように十分注意する必要もある。

しかしながら、全ての状況、機具等を把握し、緊迫した状況でミスなく業務を遂行することは医療従事者にも相当な心理負担を要する。一方、各機具の操作等を、その都度作業を中断し、確認しながら業務を遂行することは業務に要する時間が多くなり好ましくない。

従来、医療業務を支援するシステムが多く開発されている（例えば、特許文献１及び２）。しかしながら、特許文献１で記載される技術は、手術前カンファレンスで利用されるものであり、業務中に必要な情報を確認するものではない。また、特許文献２で記載される技術は、

特開２０１６−１５１７９２号公報 特開２０１６−１８１１３１号公報

上述したように、従来、医療業務の遂行中に、必要な操作等を作業の中断をすることなく確認することはできなかった。

上記課題に鑑み、本発明は、医療業務の遂行中に、必要な操作等を作業の中断をすることなく確認することのできる情報提供システム、情報提供装置、情報提供方法及び情報提供プログラムに関する。

上記課題を解決するために、本発明の一態様に係る情報提供システムは、ユーザに装着され、ユーザが発した音声を取得する音声取得手段と、当該音声取得手段が取得した音声で特定されるリクエストデータを送信する第１送信手段と、ユーザへの提示データを受信する第１受信手段と、第１受信手段が受信した提示データを少なくともユーザの片目で視認可能に表示する表示手段と、を有するグラス、及び、グラスから送信されたリクエストデータを受信する第２受信手段と、各リクエストに対応する提示データを記憶する提示データ記憶手段から、第２受信手段が受信したリクエストデータに応じてグラスに提供する提示データを抽出する抽出手段と、抽出手段で抽出された提示データを送信する第２送信手段と、を有する情報提供装置を備える。

本発明の一態様に係る情報提供システム、情報提供装置、情報提供方法及び情報提供プログラムは、医療業務の遂行中に、必要な操作等を作業の中断をすることなく確認することができる。

本発明の一実施形態に係る情報提供システムである。 情報提供システムのグラスで表示されるリストデータの一例である。 情報提供システムのグラスで表示されるリストデータの他の例である。 情報提供システムのグラスで表示されるリストデータの他の例である。 情報提供システムのグラスで表示される提示データの一例である。 情報提供システムのグラスで表示される提示データの他の例である。 情報提供システムのグラスで表示される提示データの他の例である。 情報提供システムにおける処理の流れを説明するシーケンス図である。 情報提供システムのグラスで表示される結果データの一例である。 情報提供システムのグラスで表示される結果データの他の例である。

以下に、図面を用いて本発明の実施形態に係る情報提供システムについて説明する。実施形態に係る情報提供システムは、医療現場において、医師、看護師、医療機器管理者等の医療従事者であるユーザに、必要な情報を提供するものである。具体的には、情報提供システムでは、ユーザが装着するグラスに、医療現場で必要な情報を表示する。ユーザは、このグラスを装着し、必要な情報を確認しながら業務を遂行することで、業務を滞りなく進めることができる。

例えば、ユーザは、医療機器等の操作手順等の説明をグラスに表示される画像や文字等で見ることができる。また、ユーザは、医療機器の操作手順等の説明を音声で聞くことができる。したがって、ユーザは、例えば、医療機器の使用が初めてである場合であっても、操作手順等を容易に確認することができる。

図１に示すように、情報提供システム１は、ユーザに装着されるグラス２と、グラスにユーザが必要な情報を提供する情報提供装置３とを備える。グラス２と、情報提供装置３とは、ネットワーク４を介して接続される。なお、図１では、グラス２は、１台のみしか示していないが、情報提供システム１が有するグラス２の数は限定されない。すなわち、医療現場では、医療従事者であるユーザが複数存在する。したがって、複数のグラス２を有し、複数のユーザがそれぞれ同時にグラス２を使用可能とすることが好ましい。

《グラス》
グラス２は、スマートグラス、ヘッドマウントディスプレイ等の眼鏡型のウェアラブルコンピュータである。グラス２は、例えば、ユーザの頭部において眼を覆うように装着され、視覚を遮らないレンズを有する。このとき、グラス２のレンズは、少なくとも片目の前に配置されていればよい。言い換えれば、装着時に安定性があれば、片目用眼鏡のようなグラスであってもよい。また、グラス２は、ユーザが業務遂行時に装着するものである。具体的には、ユーザは、上下を向いたり、横を向く等の作業をしながら利用する。したがって、作業中に装着するグラス２が落下することない等、装着の安定性があることが好ましい。加えて、作業の妨げにならないよう、軽量であり、かつ、装着による違和感のないことが好ましい。なお、ここでは、グラス２の構造について図示を用いた説明を省略する。

図１に示すように、グラス２は、音声取得手段２１、画像取得手段２２、第１送信手段２３、第１受信手段２４、表示手段２５及び音声出力手段２６を備える。また、グラス２は、温度センサ２７、湿度センサ２８及び気圧センサ２９を備えてもよい。

音声取得手段２１は、グラスを装着するユーザが発した音声を取得する。例えば、音声取得手段２１は、マイクである。また例えば、音声取得手段２１は、マイクで取得した音声から特定の信号を抽出する抽出機能である。

音声取得手段２１が取得する音声は、例えば、グラス２における起動開始終了の操作、情報の表示位置や表示サイズ変更の操作、出力音声の音量変更の操作等の各操作を実行するための操作信号である。また、音声は、情報提供装置３にリクエストする情報を特定するデータである。具体的には、機具の操作手順をリクエストする場合、音声は、どの機具の操作に関する情報をリクエストするのか、どのような操作に関する情報をリクエストするのかを特定する。ここで、機具は、医療機器等、ユーザが使用する種々の機械や器具等である。

また例えば、音声取得手段２１が、「ＡＩ（エーアイ）」という音声を取得することで、情報提供システム１では『ＡＩモード』が起動されてもよい。『ＡＩモード』は、ユーザによる機具の操作等が正確にされているか否かを、人工知能を利用して判定させるモードである。『ＡＩモード』を利用することで、機具の操作や取り付けなど手技に自信の無いユーザは、判断に困った場合、人工知能にアドバイスを求めることができる。さらに、音声取得手段２１が「ヘルプ」という音声を取得することで、情報提供システム１では『ヘルプモード』が起動されてもよい。『ヘルプモード』は、ユーザが機具の操作等について不明な場合、正確な操作を確認するためのモードである。

画像取得手段２２は、ユーザがグラス２のレンズを通して視認可能な範囲に存在する医療機器等の特定の機具の画像データを取得する。例えば、画像取得手段２２は、カメラである。情報提供システム１では、『ＡＩモード』が起動されると、この画像取得手段２２で取得された画像を利用して、画像に含まれる機具の状態が、適切な操作方法で操作されているか等の判定結果がフィードバックされる。

ここで、画像取得手段２２は、特定の機具を含む画像を送信対象として取得する必要がある。ここで、画像取得手段２２は、送信対象の画像を判定することができない。したがって、例えば、画像取得手段２２は、特定の識別情報が付された機具の画像データを第１送信手段２３による送信対象として取得する。具体的には、特定のマークやＱＲコード（登録商標）等の識別情報が付された機具の画像データを送信対象として取得する。

第１送信手段２３は、情報提供装置３にネットワーク４を介して情報を送信する。具体的には、音声取得手段２１が取得した音声で特定されるリクエストデータを、情報提供装置３に送信する。このリクエストデータは、ユーザが確認したい情報をリクエストするデータである。例えば、情報提供装置３が提供可能な情報のリストをリクエストするデータである。また例えば、特定の機具の操作手順の説明に関する情報をリクエストするデータである。加えて、第１送信手段２３は、『ＡＩモード』が起動されるとＡＩモード起動のリクエストデータを送信し、『ヘルプモード』が起動されるとヘルプモード起動のリクエストデータを送信する。

また、第１送信手段２３は、画像取得手段２２が取得した画像データを、情報提供装置３に送信する。

第１受信手段２４は、ネットワーク４を介して情報提供装置３から送信される情報を受信する。具体的には、第１受信手段２４は、ユーザへの提示データを受信する。この提示データは、例えば、ユーザに作業の手順を提示するものである。また、第１受信手段２４は、第１送信手段２３が送信した画像データを利用して情報提供装置３で判定された結果データを受信する。第１受信手段２４が情報提供装置３から受信するデータは、画像データや音声データを含むことができる。

表示手段２５は、ユーザに視認可能に画像や文字等のデータを表示する。例えば、表示手段２５は、プリズム等を利用してデータをグラスの内側、言い換えると、ユーザの顔側に表示する。具体的には、表示手段２５は、第１受信手段２４が受信した提示データに含まれる画像や文字等のデータを表示する。また、表示手段２５は、第１受信手段２４が受信した結果データに含まれる画像や文字等のデータを表示する。さらに、表示手段２５は、『ＡＩモード』の起動中には人工知能によってされた判定結果を表示することができる。また、表示手段２５は、『ヘルプモード』の起動中にはユーザが求める情報のデータを表示することができる。

ここで、表示手段２５は少なくともユーザの片目で視認可能にデータを表示すればよい。すなわち、グラス２は、業務遂行中のユーザに装着される。したがって、両目で視認されるようにデータを表示すると、ユーザの業務の妨げになる恐れがある。また、両目で視認されるように表示すると、脳が混乱する恐れがある。したがって、特にユーザが歩行中や、作業中には片目のみに表示することで、別の目では環境情報を視認可能とすることができる。逆に、ユーザが静止状態や希望する際には両目に表示することで、ユーザ提示データに集中することができる。

また、表示手段２５は、ユーザの視界の中心部以外にデータを表示可能であることが好ましい。これにより、表示手段２５によるデータの表示がユーザの業務の妨げとなるのを防止することができる。

さらに、表示手段２５によって表示されるデータの位置を切り替え可能であることが好ましい。ユーザにより、または、作業内容により、好ましいデータの表示位置が異なることがある。例えば、右利きのユーザであり、右側に操作対象の機具がある場合、左側にデータが表示された方が、表示されるデータが業務の妨げとなる恐れが少ないことがある。一方、左利きのユーザであり、左側に操作対象の機具がある場合、右側にデータが表示された方が、表示されるデータが業務の妨げとなる恐れが少ないことがある。例えば、表示手段２５は、音声取得手段２１によって取得した音声に応じて提示データの表示位置を切り替え可能とすることができる。

音声出力手段２６は、種々の音声データを出力する。例えば、音声出力手段２６は、スピーカである。具体的には、音声出力手段２６は、提示データに含まれる音声を出力する。また例えば、音声出力手段２６は、結果データに含まれる音声を出力する。

温度センサ２７は、グラス２の周囲環境の温度を計測する。湿度センサ２８は、グラス２の周囲環境の湿度を計測する。気圧センサ２９は、グラス２の周囲環境の気圧を計測する。機具の操作や取り付けには、温度、湿度、気圧等の値が必要なことがある。具体的には、人工呼吸器等は、細い管に高速でガスを流すため、ガスの膨張率やガスの流れに温度、湿度、気圧が影響を与える。

また、機具の修理、点検整備、精度管理等の保守管理に利用する場合、温度、湿度、気圧等の把握が重要になる。具体的には、温度や湿度の影響により金属が歪むことがある。したがって、表示手段２５に温度センサ２７、湿度センサ２８、気圧センサ２９等で計測した値を表示し、ユーザが確認可能とすることで、安全な機具の操作等を行うことができる。

なお、図示を用いた説明は省略するが、グラス２が記憶装置を有するとき、各センサ２７〜２９で記憶される値を記憶してもよい。例えば、ユーザが、「レコード（record）」等と音声を発すると、各センサ２７〜２９で計測される値を記憶装置に記憶する。このとき、各センサ２７〜２９で計測される値と共にその時刻を記憶装置に記憶してもよい。または、各センサ２７〜２９で計測される値と共に、画像取得手段２２で取得した画像データを記憶装置に記憶してもよい。時刻や画像と共に記憶することで、記憶される各センサ２７〜２９で計測された値がどの作業の際に計測された値であるかを確認することができる。また、画像と共に、各センサ２７〜２９で計測された値を記憶することで、その機具の操作方法や保守点検時の修理方法等の適正について、後に計測値と画像を利用して判断することもできる。

なお、図１では示していないが、時刻を管理する時計や計時機能を有するタイマーを備えてもよい。時計から取得する時刻を表示することで、ユーザは、時刻を確認することができる。また、タイマーを利用して計時する時間を表示可能とすることで、ユーザは、操作時間や保守作業時間等の管理をすることができる。このとき、時刻等は常に表示する必要はなく、ユーザによって音声等でリクエストされたタイミングで表示すればよい。

《情報提供装置》
情報提供装置３は、リクエストに応じてグラス２にデータを送信し、ユーザに必要な情報を提供する装置である。具体的には、情報提供装置３は、機具の操作手順等に関する情報を提供する。図１に示すように、情報提供装置３は、第２受信手段３０１、抽出手段３０２、判定手段３０３及び第２送信手段３０４を有する。

この情報提供装置３は、中央処理装置（ＣＰＵ）３０、記憶装置３１、通信インタフェース（通信Ｉ／Ｆ）３２等を備える情報処理装置やサーバ装置等で実現することができる。なお、情報提供装置３は、医療現場内外のいずれに設置されていてもよい。

例えば、記憶装置３１に記憶される情報提供プログラムＰが実行されることで、ＣＰＵ３０が、情報提供装置３としての処理を実行する。

なお、記憶装置３１は、情報提供プログラムＰに加え、リストデータ３１１、提示データ３１２及び判定データ３１３を記憶してもよい。

リストデータ３１１は、情報提供装置３がグラス２に提供するデータである。記憶装置３１は、識別情報に関連付けられるリストデータ３１１を複数記憶する。また、各リストデータ３１１は、他のリストをリクエストする情報や、提示データをリクエストする情報を含む。

記憶装置３１は、例えば、識別情報と関連付けて、図２に示すようなリストを含むリストデータ３１１を記憶する。図２に示す例は、「１．アネロイド式血圧計」、「２．シリンジポンプ」「３．輸液ポンプ」、「４．電子式体温計」等の機具に関する識別情報を含むリストである。なお、図２は、リストデータ３１１をグラス２で表示した場合にユーザに視認される一例を示すものである。したがって、グラス２のレンズを介してユーザが視認可能なユーザが存在する空間である。

また、記憶装置３１は、識別情報と関連付けて、図３に示すようなリストを含むリストデータ３１１を記憶してもよい。図３に示す例は、「１．成人用人工呼吸器」、「２．小児・成人用人工呼吸器」、「３．新生児・小児・成人用人工呼吸器」、「４．小児・新生児用人工呼吸器」の機具に関する識別情報を含むリストである。なお、図３に示すリストデータ３１１は、図２に示すリストデータ３１１において「１２．人工呼吸器」の識別情報が選択された場合に提供されるデータの一例である。

さらに、記憶装置３１は、識別情報と関連付けて、図４に示すようなリストを含むリストデータ３１１を記憶してもよい。図４に示す例は、それぞれ異なる会社により製造される人工呼吸器の識別情報を含むリストである。なお、図４に示すリストデータ３１１は、図３に示すリストデータ３１１において「２．小児・成人用人工呼吸器」の識別情報が選択された場合に提供されるデータの一例である。

提示データ３１２は、情報提供装置３がグラス２に提供するデータである。記憶装置３１は、識別情報に関連付けられる提示データ３１２を複数記憶する。各提示データ３１２は、例えば、機具の操作説明等の画像や音声のデータを含む。

記憶装置３１は、例えば、識別情報と関連付けて、図５乃至図７に示す画像が順に表示される動画像データを含む提示データ３１２を記憶する。また、提示データ３１２は、この動画像に合わせた音声データを含んでもよい。図５乃至図７を用いて説明する提示データは、例えば、図４に示す提示データ３１２においていずれかの識別情報が選択された場合に提供される。

図５に示す例では、この提示データ３１２で説明する人工呼吸回路の操作手順の概要を表わす。図６に示す例では、人工呼吸回路の操作手順の一工程を表す。図７に示す例では、図６に示す手順で操作したユーザに、操作が正しく行われたか否かを問いかける情報を含む。このように問いかけを行うことで、操作の誤り等を防止することができる。

図５〜７において、マークｍ０１は、『ＡＩモード』が起動中であるか否か確認可能な表示である。マークｍ０２は、後述する『ヘルプモード』が起動中であるか否かを確認可能な表示である。マークｍ０１，ｍ０２は、各モードが起動前と、起動中とで異なる色で表示される。これにより、ユーザは各モードが起動されたか否かを容易に確認することができる。

マークｍ０３は、温度の表示部である。マークｍ０４は、湿度の表示部である。マークｍ０５は、気圧の表示部である。各マークｍ０３〜ｍ０５は、各センサ２７〜２９で計測された値が表示される。

なお、マークｍ０１〜ｍ０５として表示される情報は、グラス２において取得する情報である。したがって、記憶装置３１が記憶する提示データ３１２ではこれらの情報を含まない。そのため、表示手段２５に表示する際にグラス２で各マークｍ０１〜ｍ０５付加すればよい。

さらに、提示データ３１２は、『ヘルプモード』において提供されるデータとすることもできる。記憶装置３１は、ヘルプモードにおいて、機具の操作や取り付け等の確認がリクエストされた場合に提供するデータを提示データ３１２として記憶することができる。

例えば、通常の処理で表示される操作方法や取り付け説明方法等のデータは、静止画等を利用する簡単な説明である場合であっても、ヘルプモードで表示されるデータは、動画等を利用するより詳しい説明とすることができる。これにより、通常の説明のみでは理解できなかったユーザは、ヘルプモードにおいて、より詳しい説明の提供を受けることができる。例えば、ヘルプモードでは、正確な組み立てや操作方法の開始から終了までを連続した動画により、視覚的に確認することができる。

判定データ３１３は、『ＡＩモード』において、機具の状態の正否の判定等に利用するデータである。具体的には、判定データ３１３は、機具の状態の理想的な状態のパターンの画像データ等である。また、判定データ３１３は、致命的な問題が生じないように、危険な状態の画像データを含んでいてもよい。

第２受信手段３０１は、ネットワーク４を介してグラス２から送信されたデータを受信する。具体的には、第２受信手段３０１は、リクエストデータや画像データを受信する。

抽出手段３０２は、記憶装置３１から、第２受信手段３０１が受信したリクエストデータに応じてグラス２に提供するリストデータや提示データを抽出する。例えば、リクエストデータが含む識別情報がリストデータを特定するものであるとき、この識別情報で識別されるリストデータ３１１を抽出する。また例えば、リクエストデータが含む識別情報が提示データを特定するものであるとき、この識別情報で識別される提示データ３１２を抽出する。

判定手段３０３は、第２受信手段３０１がグラス２から送信された画像データを受信すると、記憶装置３１から、第２受信手段３０１が受信した画像データに含まれる機具の状態の正否の判定に利用する判定データを抽出する。また、判定手段３０３は、受信した画像データに含まれる機具の状態の正否を判定する。

この判定手段３０３は、グラス２において『ＡＩモード』が起動された場合に処理を実行する。ＡＩモードの起動により、グラス２では、画像取得手段２２による画像データの取得及び第１送信手段２３による画像データの送信を実行する。これにより、判定手段３０３は、機具の取り付け等が正確にされているか否かを人工知能により判定する。この判定では、予め記憶装置３１に記憶される判定データ３１３とグラス２において取得された画像データとを対比し、機具の取り付け等の精度を判定する。

記憶装置３１は、予め判定データ３１３として、機具の正確な取り付け方法等の画像や器具の形状等の画像を多数する。また、『ＡＩモード』に設定されたグラス２から画像を受信すると、画像とグラス２から受信した画像データに含まれる機具の寸法や形状等を判定データ３１３と対比し、その結果を出力させる。これにより、危険な取り付け等がされていないか否かを人工知能により判定することが可能となり、医療安全につなげることができる。

第２送信手段３０４は、グラス２に、ネットワーク４を介して情報を送信する。具体的には、第２送信手段３０４は、抽出手段３０２で抽出されたリストデータや提示データを送信する。また、第２送信手段３０４は、判定手段３０３が判定した結果データを送信する。

《情報提供処理》
続いて、図８に示すシーケンス図を用いて、情報提供システム１における処理の流れを説明する。

まず、グラス２は、リストデータを要求するユーザの音声を取得する（Ｓ１）。また、グラス２は、ステップＳ１で取得した音声で特定されるリクエストデータを情報提供装置３に送信する（Ｓ２）。ステップＳ２のリクエストデータは、ユーザが提供をリクエストするリストデータを識別する識別情報を含む。

情報提供装置３は、受信したリクエストデータで特定される識別情報のリストデータを抽出する（Ｓ３）。また、情報提供装置３は、ステップ３で抽出したリストデータをグラス２に送信する（Ｓ４）。

グラス２は、受信したリストデータを表示する（Ｓ５）。また、グラス２は、リストデータから選択された提示データを要求するユーザの音声を取得する（Ｓ６）。さらに、グラスは、ステップＳ６で取得した音声で特定される提示データを情報提供装置３に送信する（Ｓ７）。ステップＳ７のリクエストデータは、ユーザが提供をリクエストする提示データを識別する識別情報を含む。

情報提供装置３は、受信したリクエストデータで特定される識別情報の提示データを抽出する（Ｓ８）。また、情報提供装置３は、ステップＳ８で抽出した提示データをグラス２に送信する（Ｓ９）。

グラス２は、受信した提示データを表示する（Ｓ１０）。ユーザは、提示データで提示される情報を参照して業務を遂行する。

その後、グラス２は、例えば、特定の機具を含む画像を取得する（Ｓ１１）。また、グラス２は、ステップＳ１１で取得した画像データを情報提供装置３に送信する（Ｓ１２）。

情報提供装置３は、グラス２から受信した画像を用いて機具の操作等が妥当であるか否かを判定する（Ｓ１３）。また、情報提供装置３は、ステップＳ１３の結果データをグラス２に送信する（Ｓ１４）。

グラス２は、情報提供装置３から受信した結果を出力する（Ｓ１５）。例えば、図９又は図１０に示すように、結果データを出力する。

なお、ステップＳ１〜Ｓ５のリストデータを送信する一連の処理（Ｓ１００）とステップＳ６〜Ｓ１０の提示データを送信する一連の処理（Ｓ２００）とは複数回繰り返されてもよい。例えば、図２〜図４を用いて上述したように、リストデータが連続して表示されることもある。このような場合、ステップＳ１００の処理は複数回繰り返される。

上述したように、情報提供システム１を利用するユーザは、ハンズフリーにより、ユーザの業務の妨げを最小限として必要な操作手順等の確認をすることが可能となる。

また、手技や操作に不慣れなユーザのみならず、手技や操作等に自信のあるユーザであっても、勘違いや単純な間違いを促すため、ＡＩモードにおいて判定結果に応じて「その操作は正確ではありません。もう一度確認してください。」等の注意喚起をすることができる。これにより、医療ミス等の低減を実現することができる。

《変形例》
上述した実施形態では、グラス２は、音声の取得により、情報提供装置３へのリクエスト信号の送信等を行っていた。しかしながら、情報提供装置３へのリクエスト信号の送信等は、これに限定されない。例えば、操作ボタンの操作等でリストデータを要求してもよいが、音声を利用することで、ハンズフリーでリクエストが可能となる。これにより、ユーザが現在手で行っている操作を中断することなく、リクエストが可能となる。音声の取得に代えて、ユーザの頭部の動きを利用する加速度スイッチ、ユーザの体の動きを利用する仮想スイッチ、ユーザの眼の動きを利用する画像スイッチや視線スイッチ等を利用してもよい。例えば、視線スイッチを利用する場合、ユーザが所定のアイコン等を一定時間以上目視した場合、そのアイコンに対応する処理が実行される。

ここで、ユーザは、グラス２を装着しながら業務を遂行する。また、そのような環境にはユーザだけでなく複数の人が存在することも考えられる。この場合、ノイズ等は拾わず、ユーザの音声のみを正しく検出できるように工夫する必要がある。例えば、ユーザは、その使用環境で使用される言語とは別の言語で声を発するようにしてもよい。具体的には、日本語が使用される環境において、ユーザがグラス２を装着した場合に次の情報を確認したいとき、英語で「ネクスト」と発した場合に、次の情報の提供を要求するリクエストデータを送信するようにすることができる。または、日本語が使用される環境において、ユーザがグラスを装着した場合に前の情報を確認したいとき、英語で「バック」と発した場合に、前の情報の提供を要求するリクエストデータを送信するようにすることができる。

また、上述した実施形態では、表示手段２５が提示データを表示する位置を切り替え可能としてもよいことを説明した。しかしながら、提示データ自体を複数有し、提示データをユーザの希望に応じて選択可能としてもよい。例えば、画像が多い方がよいユーザもあれば、文字が多い方がユーザもある。したがって、同一の機具の説明であっても、画像と文字との量が異なる複数のタイプの提示データを用意し、ユーザに希望するタイプの提示データを選択させてもよい。これにより、情報提供システム１では、ユーザがより見やすいタイプの提示データをユーザに提供することができる。

上記実施の形態において、情報提供装置３の各部は、上述したように、ＣＰＵおよびメモリを用いてソフトウェアによって実現してもよいし、集積回路（ＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）チップ、ＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ））等に形成された論理回路（ハードウェア）や専用回路によって実現してもよい。また、各機能部は、１又は複数の集積回路により実現されてよく、複数の機能部の機能を１つの集積回路により実現されることとしてもよい。ＬＳＩは、集積度の違いにより、ＶＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩなどと呼称されることもある。また、当該回路は、再構築可能な回路（例えば、ＦＰＧＡ：Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｗａｙ）により実現されてもよい。

情報提供装置３の各機能部をソフトウェアにより実現する場合、情報提供装置３は、各機能を実現するソフトウェアである情報提供プログラムＰの命令を実行するＣＰＵ、情報提供プログラムＰおよび各種データがコンピューター（又はＣＰＵ）で読み取り可能に記録されたＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）又は記憶装置（これらを「記録媒体」と称する）、情報提供プログラムＰを展開するＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などを備えている。そして、コンピューター（又はＣＰＵ）が情報提供プログラムＰを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記記録媒体としては、「一時的でない有形の媒体」、例えば、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、情報提供プログラムＰは、情報提供プログラムＰを伝送可能な任意の伝送媒体（通信ネットワークや放送波等）を介して上記コンピューターに供給されてもよい。本発明は、情報提供プログラムＰが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。

なお、情報提供プログラムＰは、例えば、ＡｃｔｉｏｎＳｃｒｉｐｔ、ＪａｖａＳｃｒｉｐｔ（登録商標）などのスクリプト言語、Ｏｂｊｅｃｔｉｖｅ−Ｃ、Ｊａｖａ（登録商標）などのオブジェクト指向プログラミング言語、ＨＴＭＬ５などのマークアップ言語などを用いて実装できる。

本発明を諸図面や実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形や修正を行うことが容易であることに注意されたい。従って、これらの変形や修正は本発明の範囲に含まれることに留意されたい。例えば、各手段、各ステップ等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の手段やステップ等を１つに組み合わせたり、或いは分割したりすることが可能である。

上記実施の形態に示した構成並びに参考例に示した構成は適宜組み合わせることとしてもよい。

１ 情報提供システム
２ グラス
２１ 音声取得手段
２２ 画像取得手段
２３ 第１送信手段
２４ 第１受信手段
２５ 表示手段
２６ 音声出力手段
３ 情報提供装置
３０１ 第２受信手段
３０２ 抽出手段
３０３ 判定手段
３０４ 第２送信手段
３１ 記憶装置
３１１ リストデータ
３１２ 提示データ
３１３ 判定データ
Ｐ 情報提供プログラム

Claims (8)

1. 医療従事者であるユーザが業務遂行時に装着するグラスにおいて、前記ユーザの少なくとも片目で視認可能な表示データを出力する出力手段と、
   前記ユーザが前記グラスを通して視認可能な範囲の画像データを取得する画像取得手段と、
   前記ユーザの音声データを取得する音声取得手段と、
   前記音声取得手段によって取得された前記ユーザの前記音声データで特定されるリクエストに応じた提示データを、各リクエストに対応する提示データを記憶する提示データ記憶手段から抽出する抽出手段と、
   前記画像取得手段が取得した画像データに含まれる医療機器の状態の正否を、所定の画
   像データに基づいて判定する判定手段と、
   前記画像取得手段が取得した画像データに含まれる医療機器の操作または取り付け状態の正否を、所定の画像データに基づいて判定する判定手段と、
   前記グラスにより視認される医療機器の正常な使用に影響を与える周囲環境に関する情報を取得する環境情報取得手段と、
   を含み、
   前記グラスの前記出力手段は、前記提示データとして、前記判定手段による判定結果を前記グラスに表示させる表示データを出力し、さらに、前記環境情報取得手段が取得した前記周囲環境に関する情報を前記グラスに表示させる表示データを出力する、情報提供システム。
2. 前記判定手段は、前記医療機器の正しい状態を示す画像データ、及び、前記医療機器の危険な状態を示す画像データの少なくともいずれかを基に人工知能を用いて、前記医療機器の操作または取り付け状態の正否を判定する、請求項１に記載の情報提供システム。
3. 前記判定結果を音声出力する音声出力手段を更に備える、請求項２に記載の情報提供システム。
4. 前記判定手段は、前記画像取得手段によって取得された画像データに含まれる特定の識別情報に基づき、当該画像データに含まれる医療機器を識別する、請求項３に記載の情報提供システム。
5. 前記出力手段は、ユーザの視界の中心部以外に前記表示データを出力可能であり、かつ、前記音声取得手段によって取得した音声に応じて前記表示データの表示位置を切り替え可能である、請求項１乃至４のいずれか一項に記載の情報提供システム。
6. 医療従事者であるユーザが業務遂行中に装着するグラスにおいて、前記ユーザの少なくとも片目で視認可能な表示データを出力する出力手段と、前記ユーザが前記グラスを通して視認可能な範囲の画像データを取得する画像取得手段と、前記ユーザの音声データを取得する音声取得手段と、を備える前記グラスとネットワークを介して接続された情報提供装置であって、
   前記音声取得手段によって取得された前記ユーザの前記音声データで特定されるリクエストに応じた提示データを、各リクエストに対応する提示データを記憶する提示データ記憶手段から抽出する抽出手段と、
   前記画像取得手段が取得した画像データに含まれる医療機器の操作または取り付け状態の正否を、所定の画像データに基づいて判定する判定手段と、
   前記判定手段による判定結果を前記グラスへ送信する送信手段と、
   を備える情報提供装置。
7. コンピュータが、
   医療従事者であるユーザが業務遂行中に装着するグラスにおいて、前記ユーザの少なくとも片目で視認可能な表示データを出力する出力ステップと、
   前記ユーザが前記グラスを通して視認可能な範囲の画像データを取得する画像取得ステップと、
   前記ユーザの音声データを取得する音声取得ステップと、
   前記音声取得ステップによって取得された前記ユーザの前記音声データで特定されるリクエストに応じた提示データを、各リクエストに対応する提示データを記憶する提示データ記憶手段から抽出する抽出ステップと、
   前記画像取得ステップにて取得した画像データに含まれる医療機器の操作または取り付け状態の正否を、所定の画像データに基づいて判定する判定ステップと、
   前記グラスにより視認される医療機器の正常な使用に影響を与える周囲環境に関する情報を取得する環境情報取得ステップと、
   前記提示データとして、前記判定ステップによる判定結果を前記グラスに表示させる表示データを出力し、さらに、前記環境情報取得ステップが取得した前記周囲環境に関する情報を前記グラスに表示させる表示データを出力するステップと、を実行する情報提供方法。
8. コンピュータに、
   医療従事者であるユーザが業務遂行中に装着するグラスにおいて、前記ユーザの少なくとも片目で視認可能な表示データを出力する出力機能と、
   前記ユーザが前記グラスを通して視認可能な範囲の画像データを取得する画像取得機能と、
   前記ユーザの音声データを取得する音声取得機能と、
   前記音声取得機能によって取得された前記ユーザの前記音声データで特定されるリクエストに応じた提示データを、各リクエストに対応する提示データを記憶する提示データ記憶手段から抽出する抽出機能と、
   前記画像取得機能にて取得した画像データに含まれる医療機器の操作または取り付け状態の正否を、所定の画像データに基づいて判定する判定機能と、
   前記グラスにより視認される医療機器の正常な使用に影響を与える周囲環境に関する情報を取得する環境情報取得機能と、
   前記提示データとして、前記判定機能による判定結果を前記グラスに表示させる表示データを出力し、さらに、前記環境情報取得機能が取得した前記周囲環境に関する情報を前記グラスに表示させる表示データを出力する機能と、を実現させるプログラム。