JP7045797B2 - 指導支援システム、指導支援方法及びプログラム - Google Patents

Description

本発明は、指導支援システム、指導支援方法及びプログラムに関する。

従来より、薬局においては、患者から提出された処方箋の内容を、例えば、特許文献１に開示されるようなレセコン機能と薬歴管理機能とを備えた薬局用コンピュータに入力することで、患者の薬歴を管理して服薬指導を行っている。これにより、患者に服薬指導を行う薬剤師等は、患者の薬歴（薬剤服用歴）を参照し、重複投薬や禁忌の薬剤の処方等を確認することができると共に、服薬指導の内容等も薬局用コンピュータに入力し、後に参照可能なように記録することができる。

特開２０１１－１１８５３５号公報

しかしながら、上述した特許文献１に開示される技術では、薬剤師等の判断で薬局用コンピュータに入力された事項が記録されることから、服薬指導時に患者から提示された内容や薬剤師から患者に指導した内容が必ずしも全て適切に記録されているとは限らない。この場合、薬剤師が服薬指導を行う際に、患者の正確な薬歴を参照することができない。また、患者においては、服薬指導時に配布された薬剤説明書や服薬指導箋等の資料のみでは事後的に十分に服薬指導の内容を思い出すことができないことがあり、このような場合、薬剤師等に直接確認する必要があった。また、服薬指導時に患者との会話によって提示された内容については、薬剤師が直ちに適切な服薬指導を行うことが必ずしも容易ではない。
なお、このような状況は、薬剤師と患者とにおける医療情報の伝達（服薬指導等）の他、医師と患者とにおける医療情報の伝達（診察や診断等）に共通して生じる課題である。
このように、従来の技術は、医療情報の伝達を適切に支援できるものではなかった。

本発明は、このような状況に鑑みてなされたものであり、医療情報の伝達をより適切に支援することを目的とする。

上記目的を達成するため、本発明の一態様の指導支援システムは、
被写体を撮影する撮影手段を有するウェアラブル端末を含む指導支援システムであって、
前記被写体に対応する医療情報を取得する取得手段と、
前記取得手段によって取得された医療情報を表示する表示手段と、
前記撮影手段によって撮影された画像と、前記表示手段によって表示された前記被写体の医療情報とを対応付ける処理手段と、
を備えることを特徴とする。

また、上記目的を達成するため、本発明の他の態様の指導支援システムは、
被写体を撮影する撮影手段を有するウェアラブル端末を含む指導支援システムであって、
前記被写体に対応する医療情報を取得する取得手段と、
前記被写体との会話を音声認識する音声認識手段と、
前記取得手段によって取得された前記医療情報の適否を判定する判定手段と、
前記取得手段によって取得された医療情報を表示する表示手段と、を備え、
前記判定手段は、前記取得手段によって取得された前記被写体に関する過去の医療情報及び前記音声認識手段の音声認識結果に基づいて、前記被写体に関する今回の医療情報の適否を判定し、
前記表示手段は、前記判定手段による判定結果を表示する、
ことを特徴とする。

本発明によれば、医療情報の伝達をより適切に支援することができる。

本発明の一実施形態に係る服薬指導支援システムの概要を示す模式図である。 服薬指導における支援形態の具体例を示す模式図である。 本発明の一実施形態に係る携帯端末の外観構成を説明するための模式図である。 本発明の一実施形態に係る薬局端末及び携帯端末のハードウェアの構成を示すブロック図である。 図４の薬局端末の機能的構成のうち、薬局端末側の服薬指導支援処理を実行するための機能的構成を示す機能ブロック図である。 図４の携帯端末の機能的構成のうち、携帯端末側の服薬指導支援処理を実行するための機能的構成を示す機能ブロック図である。 図５及び図６の機能的構成を有する図４の薬局端末及び携帯端末が実行する服薬指導支援処理の流れを説明するフローチャートである。 第２実施形態において薬局端末１及び携帯端末２が実行する服薬指導支援処理の流れを説明するフローチャートである。

以下、本発明の実施形態について、図面を用いて説明する。

［第１実施形態］
［服薬指導支援システムの概要］
図１は、本発明の一実施形態に係る服薬指導支援システムの概要を示す模式図である。
図１において、服薬指導支援システムＳは、本発明の指導支援システムを薬局における服薬指導に適用した場合の一例を示すものである。ただし、本発明の指導支援システムは、服薬指導に限られず、医師と患者とにおける診察や診断等、医療情報の伝達支援全般に適用することが可能である。

服薬指導支援システムＳは、患者に対して処方箋に基づく薬剤を処方する際の情報提供（以下、「服薬指導」という。）を支援するシステムであり、図１に示すように、情報の提供等を行う薬局端末１と、薬剤師が装着して薬局端末１からの情報の提供等を受ける携帯端末２と、を備える。

服薬指導支援システムＳでは、携帯端末２において、服薬指導時に、少なくとも患者の薬歴を表示する機能と、薬剤が適切に処方されていない場合（例えば、重複投薬や禁忌の薬剤の処方等）にアラートを表示する機能を有する。
また、服薬指導支援システムＳでは、携帯端末２によって服薬指導の状況が動画として記録される機能を有する。
さらに、服薬指導支援システムＳでは、服薬指導時に携帯端末２に表示された内容や薬剤師と患者とのやり取り等が表示される動画を生成して、患者等の閲覧に供する機能を有する。

本実施形態の薬局端末１は、例えば、据え置き型のＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）で構成されている。

薬局端末１では、患者から受け取った処方箋をスキャンして電子データ化し、電子データ化した処方箋の内容から患者の情報（氏名、性別、年齢及び連絡先等）と、処方される薬剤の情報（添付文書等）とを取得する。
また、薬局端末１では、取得した患者の情報に基づいて、患者の既往歴や薬歴等の情報（以下、「医療情報」という。）を医療情報管理サーバＳＶ１から取得する。
また、薬局端末１では、取得した医療情報のうち、薬歴を携帯端末２に表示させる。
また、薬局端末１では、取得した患者の医療情報から、今回処方する薬剤が適切であるか否かを判定する。判定の結果、薬剤が適切でないと判定された場合には、薬局端末１では、携帯端末２にアラートを表示させる。
また、薬局端末１では、携帯端末２で撮影された動画内に、携帯端末２に表示させた情報を、その情報が表示されたタイミングで表示されるように合成（対応付け）する。薬局端末１は、合成した動画データを公開用サーバＳＶ２にアップロードする。公開用サーバＳＶ２にアップロードされた動画は、患者や薬剤師が閲覧可能な状態となり、患者に事後的に服薬指導を確認させて誤認防止に役立てたり、薬剤師の服薬指導の適否の確認等に利用されたりする。

これに対して、本実施形態の携帯端末２は、例えば、メガネ型のウェアラブル端末で構成される。
携帯端末２は、服薬指導時の状況を動画で撮影したり、服薬指導に参考にする情報（患者の薬歴や処方される薬剤へのアラート）を表示したりする。
これにより、携帯端末２によって服薬指導の状況が記録され、薬剤師に対して服薬指導を支援する情報が提供されることになる。

図２は、服薬指導における支援形態の具体例を示す模式図である。
服薬指導では、主に、薬剤師が患者と正対して、処方箋等を参照しながら説明等を行う。このため、薬剤師の目線からは、図２（ａ）の例に示すように、患者全体が視野に入る状態となっている。服薬指導中に、薬局端末１から情報の提示があった場合には、視界の一部（本実施形態においては、右上部）の表示領域Ｒ１に情報が表示されることになる。薬剤師は、表示領域Ｒ１に表示された情報を参照しながら、服薬指導を行うことになる。また、表示領域Ｒ１は、視界の一部を占めるのみであり、さらに透過的に情報が表示されるために、患者との対話を妨げることなく、薬剤師は表示された情報を参照することがでる。また、表示される情報は、処方箋を電子データ化した後に服薬指導に合わせて自動的に薬局端末１から提示されるために、薬剤師側では、情報を取得する等の操作を必要とすることなく、また、別途表示装置等を参照することがないため、薬剤師は患者と正対した状態で、作業を中断することなく、服薬指導を行うことができる。

また、服薬指導を撮影した動画は、図２（ｂ）に示すように、動画のフレームが撮影されたタイミングと対応付けて、そのタイミングで携帯端末２に表示された情報や、薬剤師の説明や患者とのやり取り等の音声が文字認識された結果が、文字情報として合成される。当該文字情報が合成された動画を閲覧することで、服薬指導時の内容が容易に把握でき、また、薬剤師がどのような情報に基づいて、説明等を行っていたかが明瞭となる。
このため、適切な服薬指導が行われていたかのセルフチェックや第３者チェックが容易になり、また、患者においては服薬指導時の認識漏れ等を確認でき、誤認が防止されて、トラブル等を未然に防ぐことができる。
即ち、服薬指導支援システムＳによれば、医療情報の伝達をより適切に支援することが可能となる。
なお、図２（ｂ）に示す文字情報の表示領域は、図２（ａ）と同様に画面の右上に配置したり、あるいは、ユーザが任意に位置を指定したりすることが可能である。

［携帯端末の外観構成］
図３は、本発明の一実施形態に係る携帯端末２の外観構成を説明するための模式図で、図３（ａ）は、携帯端末２の構成を示す模式図であり、図３（ｂ）は装着状態を示す模式図である。

携帯端末２は、図３（ａ）に示すように、眼鏡部２Ａと、撮像部１６と、入力部１７と、出力部１８と、を備える。

眼鏡部２Ａは、フロントフレーム２ａと、テンプル２ｂと、レンズＬとから構成される。

撮像部１６は、装着者の視線と略同一の方向を撮影可能な位置（ここではフロントフレーム２ａの右眼側の端部）に設けられており、装着者の視界の画像を撮影する。
入力部１７は、装着者と対話者との会話が入力されるマイクを備えている。

出力部１８は、装着者に対して情報を表示するディスプレイを備えている。出力部１８のディスプレイは、レンズＬの一方側（ここでは右眼側）に配置され、レンズＬと重畳するように、フロントフレーム２ａから張り出した位置に配置される。また、出力部１８のディスプレイは、透過的な表示体によって構成され、透明な表示領域に情報を画像として表示可能になっている。出力部１８のディスプレイに情報を表示すると、携帯端末２の装着者には、ディスプレイを透過して見える景色に、ディスプレイに表示された情報が重なって視認される。即ち、装着者は、視界を妨げることなく、出力部１８のディスプレイに表示される情報を確認することができる。
なお、出力部１８には、必要な場合に警報音等を発するためのスピーカが備えられている。

図３（ｂ）に示すように、携帯端末２では、装着状態においては、装着者（本実施形態においては、薬剤師）の視界を妨げることなく出力部１８に情報が表示されると共に、また、装着者の視線方向を撮影することができる。
したがって、装着者である薬剤師は、服薬指導を妨げることなく、患者に関する情報を確認することができる。また、服薬指導の状況を薬剤師からの視点で撮影することができる。出力部１８に表示した情報を、情報を表示したタイミングで動画内に表示させるようにすることで、服薬指導時の説明や対応の適否の判断を行ったり、調剤の過誤を確認したりすることができる。また、患者においても、薬剤師からの説明に対する認識違いや薬剤の取り違い等の確認を行うことができる。

［ハードウェア構成］
図４は、本発明の一実施形態に係る薬局端末１及び携帯端末２のハードウェアの構成を示すブロック図である。
薬局端末１は、例えば、据え置き型のＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）として構成される。

薬局端末１は、図４に示すように、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１３と、バス１４と、入出力インターフェース１５と、撮像部１６と、入力部１７と、出力部１８と、記憶部１９と、通信部２０と、ドライブ２１と、を備えている。

ＣＰＵ１１は、ＲＯＭ１２に記録されているプログラム、または、記憶部１９からＲＡＭ１３にロードされたプログラムに従って各種の処理を実行する。

ＲＡＭ１３には、ＣＰＵ１１が各種の処理を実行する上において必要なデータ等も適宜記憶される。

ＣＰＵ１１、ＲＯＭ１２及びＲＡＭ１３は、バス１４を介して相互に接続されている。このバス１４にはまた、入出力インターフェース１５も接続されている。入出力インターフェース１５には、撮像部１６、入力部１７、出力部１８、記憶部１９、通信部２０及びドライブ２１が接続されている。

撮像部１６は、図示はしないが、光学レンズ部と、イメージセンサと、を備えている。

光学レンズ部は、被写体を撮影するために、光を集光するレンズ、例えばフォーカスレンズやズームレンズ等で構成される。
フォーカスレンズは、イメージセンサの受光面に被写体像を結像させるレンズである。ズームレンズは、焦点距離を一定の範囲で自在に変化させるレンズである。
光学レンズ部にはまた、必要に応じて、焦点、露出、ホワイトバランス等の設定パラメータを調整する周辺回路が設けられる。

イメージセンサは、光電変換素子や、ＡＦＥ（Ａｎａｌｏｇ Ｆｒｏｎｔ Ｅｎｄ）等から構成される。
光電変換素子は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型の光電変換素子等から構成される。光電変換素子には、光学レンズ部から被写体像が入射される。そこで、光電変換素子は、被写体像を光電変換（撮像）して画像信号を一定時間蓄積し、蓄積した画像信号をアナログ信号としてＡＦＥに順次供給する。
ＡＦＥは、このアナログの画像信号に対して、Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換処理等の各種信号処理を実行する。各種信号処理によって、ディジタル信号が生成され、撮像部１６の出力信号として出力され、撮像画像のデータとして、ＣＰＵ１１や図示しない画像処理部等に適宜供給される。

入力部１７は、各種釦等で構成され、ユーザの指示操作に応じて各種情報を入力する。入力部１７は、マイク、スキャナで構成され、音声、文字や図形等を電子データとして入力する。

出力部１８は、ディスプレイやスピーカ等で構成され、画像や音声を出力する。

記憶部１９は、ハードディスクあるいはＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等で構成され、各種画像のデータを記憶する。

通信部２０は、インターネットを含むネットワークを介して他の装置（図示せず）との間で行う通信を制御する。

ドライブ２１には、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリ等よりなる、リムーバブルメディア３１が適宜装着される。ドライブ２１によってリムーバブルメディア３１から読み出されたプログラムは、必要に応じて記憶部１９にインストールされる。また、リムーバブルメディア３１は、記憶部１９に記憶されている画像のデータ等の各種データも、記憶部１９と同様に記憶することができる。

携帯端末２は、上述した薬局端末１とハードウェア構成が同一であるため、説明を省略する。なお、以下において、薬局端末１と携帯端末２との個別の説明を行う場合には、薬局端末１のときには、符号の後に「－１」を付し、携帯端末２のときには、符号の後に「－２」を付す。即ち、薬局端末１のときには、ＣＰＵ１１－１乃至リムーバブルメディア３１－１とし、携帯端末２のときには、ＣＰＵ１１－２乃至リムーバブルメディア３１－２とする。

ここで、外部サーバである医療情報管理サーバＳＶ１及び公開用サーバＳＶ２について説明する。
医療情報管理サーバＳＶ１は、レセプト用コンピュータと、電子薬歴管理用コンピュータとが一体型となったサーバとして構成される。医療情報管理サーバＳＶ１には、薬局端末１から薬剤師の個別ＩＤとパスワードを使ってログインすることで管理データにアクセス可能であり、対象となる患者の薬歴や既往歴等の情報を含む医療情報を取得することができる。

また、公開用サーバＳＶ２は、薬剤師や患者がインターネット等を介して外部からアクセスしてデータを閲覧可能なサーバとして構成される。本実施形態の公開用サーバＳＶ２は、薬局端末１から動画がアップロードされて、薬剤師や患者に視聴可能に一部公開されるように構成される。

［機能構成］
（薬局端末の機能構成）
図５は、図４の薬局端末１の機能的構成のうち、薬局端末１側の服薬指導支援処理を実行するための機能的構成を示す機能ブロック図である。

薬局端末１側の服薬指導支援処理とは、薬局において薬剤師が行う服薬指導を支援する処理のうち、薬局端末１側で行われる一連の処理をいう。

薬局端末１側の服薬指導支援処理を実行する場合には、図５に示すように、ＣＰＵ１１－１において、読み込み部５１と、出力制御部５２と、通信制御部５３と、情報判定部５４と、音声認識部５５と、画像合成部５６と、が機能する。
また、記憶部１９－１の一領域には、医療情報記憶部７１と、音声認識情報記憶部７２と、画像記憶部７３と、が設定される。
医療情報記憶部７１には、医療情報管理サーバＳＶ１から取得した薬歴や既往歴等の患者の医療情報が記憶される。
音声認識情報記憶部７２には、音声認識辞書等、音声認識の処理を行うための情報（以下、「音声認識処理情報」という。）が記憶される。
画像記憶部７３には、撮影した動画や合成した動画等の画像のデータが記憶される。

読み込み部５１は、患者から受け取った紙媒体の処方箋をスキャナ等の入力部１７－１を介して読み込み、電子データを取得する。

出力制御部５２は、画像を表示出力するように出力部１８－１を制御する。
具体的には、出力制御部５２は、読み込まれた処方箋の電子データをレセプトの管理画面として表示（以下、「レセコン表示」という。）するように出力部１８－１を制御する。

通信制御部５３は、携帯端末２、医療情報管理サーバＳＶ１、公開用サーバＳＶ２との間で通信を行うように通信部２０－１を制御する。

具体的には、通信制御部５３は、携帯端末２に対して、医療情報管理サーバＳＶ１から処方箋に対応する患者の既往歴や薬歴の情報を含む医療情報を取得するように通信部２０－１を制御する。また、通信制御部５３は、携帯端末２に対して、医療情報管理サーバＳＶ１から取得した薬歴情報を表示する指示（以下、「薬歴表示指示」という。）を行うように通信部２０－１を制御する。また、通信制御部５３は、アラート情報を表示する指示（以下、「アラート情報表示指示」という。）を行うように通信部２０－１を制御する。また、通信制御部５３は、合成動画データを公開用サーバＳＶ２にアップロードするように通信部２０－１を制御する。

情報判定部５４は、患者の医療情報（薬歴や既往歴の情報）と、処方箋の薬剤情報とを比較して、今回処方される薬剤が適切なものであるかを判定する。
処方が適切であるか適否は、処方する薬剤［Ａ］やアレルギー等の患者［Ｂ］に起因する情報から判定される。
具体的には、
１）薬歴に示される薬剤と今回処方される薬剤とで処方上注意すべき事項（誘発される副作用等）があるか［Ａ］
２）アレルギーの対象薬剤でないか［Ｂ］
３）今回処方される薬剤と相反する作用の成分の薬剤が現在処方されていないか［Ａ］
４）同種の薬剤が現在処方されており重複投薬とならないか［Ａ］
等から処方の適否が判定される。即ち、上記１）から４）のいずれかに該当する場合に、処方が適切でないと判定される。
処方が適切でないと判定された場合には、携帯端末２で薬剤師に警告を報知するアラートを表示することとなる。

具体的には、情報判定部５４は、処方箋に記載されている処方を予定する薬剤と、医療情報（患者の薬歴及び既往歴）とからアラート判定を行う。また、情報判定部５４は、アラート判定の結果、アラートすべき情報（以下、単に「アラート」という。）を特定する。

音声認識部５５は、取得した音声データや動画データから抽出した音声データを、音声認識情報記憶部７２に記憶される音声認識処理情報を用いて、音声認識処理を行う。音声認識処理の結果、音声データのテキスト化が図られて、テキストデータを取得する。

画像合成部５６は、薬局端末１側から携帯端末２で情報を表示させた時刻に対応する動画のフレームに、表示させた情報が表示されるようにデータを合成（対応付け）する。本実施形態においては、薬局端末１側から携帯端末２で情報を表示させた時刻としては、薬歴表示指示／アラート表示指示を送信した時刻とする。
その結果、携帯端末２において実際に薬局端末１側から送信された情報が表示された時刻の動画のフレームに、薬剤師が視認した情報と同一の情報が表示される動画が生成される。即ち、薬剤師が携帯端末２を介して見ていた情報が動画内に表示されることになる（図３（ｂ）参照）。
また、画像合成部５６は、音声データにおいて音声が発せられた時刻に対応する動画のフレームに音声認識処理の結果、取得したテキストが表示されるようにデータを合成することもできる。その結果、合成された動画（以下、「合成動画」という。）においては、音声でのやり取りが文字として表示されることとなる。

具体的には、画像合成部５６は、受信した動画データに、テキスト化した音声と、携帯端末２で表示した薬歴情報とアラート情報を該当するフレームに合成して、合成動画データを生成する。また、画像合成部５６は、合成動画データを画像記憶部７３に記憶させる。

（携帯端末の機能構成）
図６は、図４の携帯端末２の機能的構成のうち、携帯端末２側の服薬指導支援処理を実行するための機能的構成を示す機能ブロック図である。
携帯端末２側の服薬指導支援処理とは、薬局において薬剤師が行う服薬指導を支援する処理のうち、携帯端末２側で行われる一連の処理をいう。

携帯端末２側の服薬指導支援処理を実行する場合には、図６に示すように、ＣＰＵ１１－２において、入力検出部９１と、撮影制御部９２と、出力制御部９３と、通信制御部９４と、が機能する。

入力検出部９１は、ユーザ（薬剤師）による入力部１７－２への入力操作を検出する。
具体的には、入力検出部９１は、入力部１７－２に対して、ユーザが服薬指導の開始の操作を行うことにより、服薬指導が開始されたか否かを判定する。

撮影制御部９２は、動画の撮影を行うように撮像部１６－２を制御する。
具体的には、撮影制御部９２は、動画の撮影を開始するように撮像部１６－２を制御する。また、撮影制御部９２は、動画の撮影を終了するように撮像部１６－２を制御する。

出力制御部９３は、画像を表示出力するように出力部１８－２を制御する。
具体的には、出力制御部９３は、薬局端末１からの薬歴表示指示に基づいて、薬歴情報を表示するように出力部１８－２を制御する。また、出力制御部９３は、薬局端末１からのアラート表示指示に基づいて、アラートを表示するように出力部１８－２を制御する。

通信制御部９４は、薬局端末１との間で通信を行うように通信部２０－２を制御する。
具体的には、通信制御部９４は、動画データを薬局端末１に送信するように通信部２０－２を制御する。

［服薬指導支援処理の流れ］
図７は、図５及び図６の機能的構成を有する図４の薬局端末１及び携帯端末２が実行する服薬指導支援処理の流れを説明するフローチャートである。

（薬局端末側の服薬指導支援処理の流れ）
薬局端末１側の服薬指導支援処理は、ユーザによる入力部１７－１への服薬指導支援処理開始の操作により開始される。

ステップＳ１１－１において、読み込み部５１は、スキャナ等の入力部１７－１を介して、処方箋を読み込む。読み込みの結果、処方箋を電子化したデータが取得される。

ステップＳ１２－１において、出力制御部５２は、処方箋を電子化したデータに基づいて、レセコン表示するように出力部１８－１を制御する。

ステップＳ１３－１において、通信制御部５３は、医療情報管理サーバＳＶ１から処方箋に対応する患者の既往歴や薬歴の情報を含む医療情報を取得するように通信部２０－１を制御する。その結果、医療情報管理サーバＳＶ１から医療情報が取得される。

ステップＳ１４－１において、情報判定部５４は、ステップＳ１１－１で取得した処方箋の内容及びステップＳ１３－１で取得した医療情報の内容を参照し、処方箋に記載されている処方を予定する薬剤（処方箋の薬剤情報）と、患者の医療情報（薬歴や既往歴の情報）とからアラート判定を行う。

ステップＳ１５－１において、通信制御部５３は、携帯端末２に対して、薬歴表示指示を行うように通信部２０－１を制御する。その結果、携帯端末２に通信部２０－１から薬歴表示指示が送信される。

ステップＳ１６－１において、情報判定部５４は、アラート判定の結果、アラートがあるか否かを判定する。
アラートありの場合には、ステップＳ１６－１においてＹＥＳと判定されて、処理はステップＳ１７－１に進む。
これに対して、アラートなしの場合には、ステップＳ１６－１においてＮＯと判定されて、処理はステップＳ１８－１に進む。

ステップＳ１７－１において、通信制御部５３は、携帯端末２に対して、アラート表示指示を行うように通信部２０－１を制御する。その結果、携帯端末２に通信部２０－１からアラート表示指示が送信される。

ステップＳ１８－１において、通信部２０－１は、携帯端末２から動画データを受信する。

ステップＳ１９－１において、音声認識部５５は、受信した動画データから音声を抽出して、音声認識情報記憶部７２に記憶される音声認識情報を用いて音声認識処理を行って、音声をテキスト化する。なお、音声認識部５５は、薬剤師と患者の他、患者に同伴している者等の複数の話者をそれぞれ識別するように音声認識処理を行って、テキスト化する。話者をそれぞれ区別することで、服薬指導中に得た新たな情報を話者に対応させて記録することができる。例えば、患者本人の発言か、患者に同伴した者の発言かを別途記録することができ、事後的に情報の信頼性や発言者等を確認する上で役立てることができる。

ステップＳ２０－１において、画像合成部５６は、受信した動画データに、テキスト化した音声と、携帯端末２で表示した薬歴情報及びアラート情報とを該当するフレームに合成して、合成動画データを生成する。

ステップＳ２１－１において、画像合成部５６は、合成動画データを画像記憶部７３に記憶させる。

ステップＳ２２－１において、通信制御部５３は、合成動画データを公開用サーバＳＶ２にアップロードするように通信部２０－１を制御する。その結果、公開用サーバＳＶ２に合成動画データがアップロードされる。
その後、薬局端末１側の服薬指導支援処理は終了する。

（携帯端末側の服薬指導支援処理の流れ）
携帯端末２側の服薬指導支援処理は、ユーザによる入力部１７－２への服薬指導支援処理開始の操作により開始される。

ステップＳ１１－２において、入力検出部９１は、入力部１７－２に対して、ユーザが服薬指導の開始の操作を行うことにより、服薬指導が開始されたか否かを判定する。
服薬指導が開始された場合には、ステップＳ１１－２においてＹＥＳと判定されて、処理はステップＳ１２－２に進む。
これに対して、服薬指導が開始されていない場合には、ステップＳ１１－２においてＮＯと判定されて、処理はステップＳ１１－２において待機状態となる。

ステップＳ１２－２において、撮影制御部９２は、動画の撮影を開始するように撮像部１６－２を制御する。

ステップＳ１３－２において、出力制御部９３は、薬局端末１からの薬歴表示指示に基づいて、薬歴情報を表示するように出力部１８－２を制御する。

ステップＳ１４－２において、出力制御部９３は、薬局端末１からのアラート表示指示に基づいて、アラート情報を表示するように出力部１８－２を制御する。

ステップＳ１５－２において、入力検出部９１は、入力部１７－２に対して、ユーザが服薬指導の終了の操作を行うことにより、服薬指導が終了されたか否かを判定する。
服薬指導が終了された場合には、ステップＳ１５－２においてＹＥＳと判定されて、処理はステップＳ１６－２に進む。
これに対して、服薬指導が終了されていない場合には、ステップＳ１５－２においてＮＯと判定されて、処理はステップＳ１３－２に戻る。

ステップＳ１６－２において、撮影制御部９２は、動画の撮影を終了するように撮像部１６－２を制御する。

ステップＳ１７－２において、通信制御部９４は、動画データを薬局端末１に送信するように通信部２０－２を制御する。その結果、薬局端末１に通信部２０－２から動画データが送信される。
その後、携帯端末２側の服薬指導支援処理は終了する。

［第２実施形態］
次に、本発明の第２実施形態について説明する。
本実施形態における服薬指導支援システムＳは、服薬指導中の薬剤師と患者とのやり取りをリアルタイムで音声認識して、その際の話題に適した情報を携帯端末２で表示させるように構成される。

具体的には、携帯端末２において服薬指導中の音声データを逐次薬局端末１に送信する。薬局端末１では、音声認識部５５によって、携帯端末２から送信されてきた音声データの音声認識を行う。この際、薬局端末１では、話者を区別してテキスト化する。

例えば、患者が「○○○［薬剤名］」という対象の発話し、その周辺で「飲んでいる」という状態の発話をした場合には、情報判定部５４が、［薬剤：○○○］を服用していると判定して、薬歴として扱い、処方される薬剤との比較を行う。比較の結果、今回の処方が適切でないと判定された場合には、携帯端末２においてアラート表示またはアラートの対象である可能性の表示を行わせる。このように一連の文章全体の発話を判断せずに部分的な発話で判断することで、発話毎のアラート判定を行うことができると共に、必要な音声認識処理の性能や処理負担を抑えることができる。
また、単に［薬剤名］が発話された場合に、［薬剤名］と［薬剤名］に対応する情報とを携帯端末２に表示させるように構成してもよい。

また、例えば、薬剤師が「○○○［薬剤名］を飲んでいますか？／今薬を飲んでいますか？」という質問の発話をし、患者が「はい／○○○［薬剤名］です。」という質問に対する回答を発話した場合にも、服薬対象が特定できるために、情報判定部５４が薬歴として扱い、処方が適切であるか否かの判定を行って、結果を出力する。

上述したような服薬指導中の薬剤師と患者とのやり取りに関しても、音声認識部５５によってテキスト化して、動画内にやり取りの情報を表示するように、画像合成部５６がデータを合成するように構成する。
また、服薬指導中の薬剤師と患者とのやり取りにおいて、上述したような薬歴と推定される情報が表れた場合には、医療情報管理サーバＳＶ１の薬歴情報に追加する。

また、薬剤師と患者の音声は、音声認識部５５がそれぞれ識別してテキスト化するように構成する。また、例えば、音声認識部５５が、薬剤師、患者、家族等の患者に同伴している者等の複数の人の音声を取得した場合には、発話者を区別して、音声認識結果をテキスト化する。
音声の中に薬歴となる情報が含まれていた場合には、例えば、患者に同伴していた者が発話した患者の薬歴として、発話者を付加情報として付して患者の薬歴情報に追加される。

［服薬指導支援処理の流れ］
図８は、第２実施形態において薬局端末１及び携帯端末２が実行する服薬指導支援処理の流れを説明するフローチャートである。

（薬局端末側の服薬指導支援処理の流れ）
薬局端末１側の服薬指導支援処理は、ユーザによる入力部１７－１への服薬指導支援処理開始の操作により開始される。

ステップＳ３１－１において、読み込み部５１は、スキャナ等の入力部１７－１を介して、処方箋を読み込む。読み込みの結果、処方箋を電子化したデータが取得される。

ステップＳ３２－１において、出力制御部５２は、処方箋を電子化したデータに基づいて、レセコン表示するように出力部１８－１を制御する。

ステップＳ３３－１において、通信制御部５３は、医療情報管理サーバＳＶ１から処方箋に対応する患者の既往歴や薬歴の情報を含む医療情報を取得するように通信部２０－１を制御する。その結果、医療情報管理サーバＳＶ１から医療情報が取得される。

ステップＳ３４－１において、情報判定部５４は、ステップＳ１１－１で取得した処方箋の内容及びステップＳ３３－１で取得した医療情報の内容を参照し、処方箋に記載されている処方を予定する薬剤（処方箋の薬剤情報）と、患者の医療情報（薬歴や既往歴の情報）とからアラート判定を行う。

ステップＳ３５－１において、通信制御部５３は、携帯端末２に対して、薬歴表示指示を行うように通信部２０－１を制御する。その結果、携帯端末２に通信部２０－１から薬歴表示指示が送信される。

ステップＳ３６－１において、通信部２０－１は、携帯端末２から動画データを受信する。このとき、携帯端末２から送信される動画データは、例えば、発話区間毎の動画データ等、服薬指導の一部を表す動画データである。

ステップＳ３７－１において、音声認識部５５は、受信した動画データから音声を抽出して、音声認識情報記憶部７２に記憶される音声認識情報を用いて音声認識処理を行って、音声をテキスト化する。なお、音声認識部５５は、薬剤師と患者の他、患者に同伴している者等の複数の話者をそれぞれ識別するように音声認識処理を行って、テキスト化する。話者をそれぞれ区別することで、服薬指導中に得た新たな情報を話者に対応させて記録することができる。例えば、患者本人の発言か、患者に同伴した者の発言かを別途記録することができ、事後的に情報の信頼性や発言者等を確認する上で役立てることができる。

ステップＳ３８－１において、情報判定部５４は、ステップＳ１１－１で取得した処方箋の内容、ステップＳ３３－１で取得した医療情報の内容及びステップＳ３７－１で認識された音声のテキストを参照し、処方箋に記載されている処方を予定する薬剤（処方箋の薬剤情報）と、患者の医療情報（薬歴や既往歴の情報）と、患者及び同伴者の会話の内容からアラート判定を行う。

ステップＳ３９－１において、情報判定部５４は、ステップＳ３４－１及びステップＳ３８－１におけるアラート判定の結果、アラートがあるか否かを判定する。
アラートありの場合には、ステップＳ３９－１においてＹＥＳと判定されて、処理はステップＳ４０－１に進む。
これに対して、アラートなしの場合には、ステップＳ３９－１においてＮＯと判定されて、処理はステップＳ４１－１に進む。

ステップＳ４０－１において、通信制御部５３は、携帯端末２に対して、アラート表示指示を行うように通信部２０－１を制御する。その結果、携帯端末２に通信部２０－１からアラート表示指示が送信される。

ステップＳ４１－１において、画像合成部５６は、ステップＳ３６－１において受信した動画データに、テキスト化した音声と、携帯端末２で表示した薬歴情報及びアラート情報とを該当するフレームに合成して、合成動画データを生成する。このとき生成される合成動画データは、服薬指導の一部を表す合成動画データである。

ステップＳ４２－１において、画像合成部５６は、携帯端末２が動画の撮影を終了したか否かを判定する。
携帯端末２が動画の撮影を終了した場合には、ステップＳ４２－１においてＹＥＳと判定されて、処理はステップＳ４３－１に進む。
これに対して、携帯端末２が動画の撮影を終了していない場合には、ステップＳ４２－１においてＮＯと判定されて、処理はステップＳ３６－１に戻る。

ステップＳ４３－１において、画像合成部５６は、ステップＳ４１－１において生成した合成動画データを結合して、服薬指導の全体を表す合成動画データを生成する。

ステップＳ４４－１において、画像合成部５６は、合成動画データを画像記憶部７３に記憶させる。
ステップＳ４５－１において、通信制御部５３は、ステップＳ４３－１において生成した合成動画データを公開用サーバＳＶ２にアップロードするように通信部２０－１を制御する。その結果、公開用サーバＳＶ２に合成動画データがアップロードされる。
その後、薬局端末１側の服薬指導支援処理は終了する。

（携帯端末側の服薬指導支援処理の流れ）
携帯端末２側の服薬指導支援処理は、ユーザによる入力部１７－２への服薬指導支援処理開始の操作により開始される。

ステップＳ３１－２において、入力検出部９１は、入力部１７－２に対して、ユーザが服薬指導の開始の操作を行うことにより、服薬指導が開始されたか否かを判定する。
服薬指導が開始された場合には、ステップＳ３１－２においてＹＥＳと判定されて、処理はステップＳ３２－２に進む。
これに対して、服薬指導が開始されていない場合には、ステップＳ３１－２においてＮＯと判定されて、処理はステップＳ３１－２において待機状態となる。

ステップＳ３２－２において、撮影制御部９２は、動画の撮影を開始するように撮像部１６－２を制御する。

ステップＳ３３－２において、出力制御部９３は、薬局端末１からの薬歴表示指示に基づいて、薬歴情報を表示するように出力部１８－２を制御する。

ステップＳ３４－２において、通信制御部９４は、動画データを薬局端末１に送信するように通信部２０－２を制御する。このと送信される動画データは、例えば、発話区間毎の動画データ等、服薬指導の一部を表す動画データである。これにより、薬局端末１に通信部２０－２からリアルタイムに動画データが送信される。

ステップＳ３５－２において、出力制御部９３は、薬局端末１からのアラート表示指示に基づいて、アラート情報を表示するように出力部１８－２を制御する。

ステップＳ３６－２において、入力検出部９１は、入力部１７－２に対して、ユーザが服薬指導の終了の操作を行うことにより、服薬指導が終了されたか否かを判定する。
服薬指導が終了された場合には、ステップＳ３６－２においてＹＥＳと判定されて、処理はステップＳ３７－２に進む。
これに対して、服薬指導が終了されていない場合には、ステップＳ３６－２においてＮＯと判定されて、処理はステップＳ３３－２に戻る。

ステップＳ３７－２において、撮影制御部９２は、動画の撮影を終了するように撮像部１６－２を制御する。なお、このとき、動画の撮影が終了されたことが薬局端末１に通知される。
その後、携帯端末２側の服薬指導支援処理は終了する。

このように、第２実施形態に係る服薬指導支援システムＳによれば、服薬指導中の薬剤師と患者等との会話をリアルタイムで音声認識し、会話に含まれるアラートの対象となる内容についても、携帯端末２に表示することができる。
したがって、医療情報の伝達をより適切に支援することができる。

なお、本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。

上述の実施形態では、携帯端末２の処理負担等を考慮して、音声認識や情報判定を薬局端末１で行うように構成したがこれに限られない。少なくとも、携帯端末２には、装着者である薬剤師にアラートを表示する表示機能と、服薬指導を撮影する撮影機能を有していればよい。また、携帯端末２は、薬剤指導支援にかかる全ての機能を携帯端末２に搭載して一元的に処理可能に構成してもよい。なお、音声認識処理等の外部装置に委譲できる処理を外部で行うようにして、薬局端末１及び携帯端末２の処理負担の軽減を図るように構成してもよい。

また、上述の実施形態では、携帯端末２は、服薬指導の状況を動画で撮影して、服薬指導の内容を記録するものとしたが、例えば、携帯端末２にＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）センサ等の各種センサを搭載して、取得した位置情報を動画に紐付けることで服薬指導が行われた位置を記録するように構成してもよい。

また、上述の実施形態では、服薬指導時の動画の撮影において、顔を含む患者全体を撮影するようにしたが、服薬指導の内容が記録できればよく、プライバシー保護等の観点から手元だけを撮影するように構成してもよい。

また、上述の実施形態では、アラート判定によりアラートがある場合に、携帯端末２において表示を行うように構成したが、アラートがない場合でも、適切な処方であった確認結果を携帯端末２に表示させるように構成してもよい。

また、上述の実施形態では、動画内に文字情報が表示されるように構成したが、画像の付加情報として添付したり、画像に文字情報を対応付けるように構成したりしてもよい。

また、上述の実施形態では、動画を撮影するように構成したが、静止画であってもよい。この場合、携帯端末２での情報の表示や服薬指導の音声内容を契機に撮影を行ってもよい。また、撮影した画像には、服薬指導を保証する説明ややり取りの内容や携帯端末２で表示した情報をテキスト化して添付する。

また、上述の実施形態では、薬局における服薬指導の支援を例として説明したが、例えば、各種医療機関において患者と医師との間で行われる診察や診断の場面等の医療全般における指導（医療情報の伝達支援全般）に適用することができる。この場合、取扱いの対象となる医療情報として、診療録であるカルテ等が該当することになる。具体的には、カルテに記録される主訴、問診内容、診察結果、処方内容、患者のバイタルデータあるいは関連文書（紹介状）の内容等を、本発明を適用したシステムによって管理することにより、医師から患者への医療情報の伝達支援を行うことが可能となる。

また、上述の実施形態では、動画の撮影の開始／終了をユーザによる入力部１７－２への入力部操作によって行うように構成したが、服薬指導が開始／終了されたことをもって動画の撮影の開始／終了がされればよく、例えば、音声をもって、服薬指導の開始を判断して、動画の撮影を行うように構成してもよい。音声は、単に服薬指導の開始／終了の旨をもって判断してもよいし、音声の内容をもって判断するように構成してもよい。

また、上述の実施形態では、処方箋から患者を特定したが、撮影した画像において顔認識の結果、特定した患者の情報から、患者に対応する医療情報を取得するように構成してもよい。

また、上述の実施形態では、本発明が適用される薬局端末１及び携帯端末２は、据え置き型のＰＣ及びメガネ型のウェアラブル端末を例として説明したが、特にこれに限定されない。
例えば、本発明は、服薬指導支援処理機能を有する電子機器一般に適用することができる。具体的には、例えば、本発明は、ノート型のパーソナルコンピュータ、プリンタ、テレビジョン受像機、ビデオカメラ、携帯型ナビゲーション装置、携帯電話機、スマートフォン、ポータブルゲーム機等に適用可能である。

上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
換言すると、図５及び図６の機能的構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が薬局端末１及び携帯端末２に備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に図５及び図６の例に限定されない。
また、１つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。

一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。

このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される図４のリムーバブルメディア３１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディア３１は、例えば、磁気ディスク（フロッピディスクを含む）、光ディスク、または光磁気ディスク等により構成される。光ディスクは、例えば、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｋ－Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ），ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ），Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ（ブルーレイディスク）等により構成される。光磁気ディスクは、ＭＤ（Ｍｉｎｉ－Ｄｉｓｋ）等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されている図４のＲＯＭ１２や、図４の記憶部１９に含まれるハードディスク等で構成される。

なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
また、本明細書において、システムの用語は、複数の装置や複数の手段等より構成される全体的な装置を意味するものとする。

以上、本発明のいくつかの実施形態について説明したが、これらの実施形態は、例示に過ぎず、本発明の技術的範囲を限定するものではない。本発明はその他の様々な実施形態を取ることが可能であり、さらに、本発明の要旨を逸脱しない範囲で、省略や置換等種々の変更を行うことができる。これら実施形態やその変形は、本明細書等に記載された発明の範囲や要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１・・・薬局端末，２・・・携帯端末，１１・・・ＣＰＵ，１２・・・ＲＯＭ，１３・・・ＲＡＭ，１４・・・バス，１５・・・入出力インターフェース，１６・・・撮像部，１７・・・入力部，１８・・・出力部，１９・・・記憶部，２０・・・通信部，２１・・・ドライブ，３１・・・リムーバブルメディア，５１・・・読み込み部，５２・・・出力制御部，５３・・・通信制御部，５４・・・情報判定部，５５・・・音声認識部，５６・・・画像合成部，７１・・・医療情報記憶部，７２・・・音声認識情報記憶部，７３・・・画像記憶部，９１・・・入力検出部，９２・・・撮像制御部，９３・・・出力制御部，９４・・・通信制御部，Ｓ・・・服薬指導支援システム，ＳＶ１・・・医療情報管理サーバ，ＳＶ２・・・公開用サーバ

Claims (7)

1. 被写体を撮影する撮影手段を有するウェアラブル端末を含む指導支援システムであって、
   前記被写体に対応する医療情報を取得する取得手段と、
   前記被写体との会話の音声認識結果を取得する音声認識手段と、
   前記取得手段によって取得された医療情報の適否を判定する判定手段と、
   前記取得手段によって取得された医療情報及び前記判定手段による判定結果を表示する表示手段と、
   前記ウェアラブル端末の装着者と前記被写体となる対話者との会話中に前記撮影手段によって撮影された前記被写体の画像に対して、撮影中に前記表示手段に前記被写体に対応する前記医療情報及び前記判定手段による判定結果が表示されたタイミングで、再生時に当該医療情報及び前記判定手段による判定結果が画像内に表示されるように、前記画像と前記医療情報及び前記判定手段による判定結果とを対応付ける処理手段と、を備え、
   前記判定手段は、前記取得手段によって取得された前記被写体に関する過去の医療情報に含まれる薬剤及び既往歴と、前記音声認識結果に含まれる前記被写体の薬歴と推定される内容とに対し、今回の医療情報に含まれる薬剤の処方が適切であるか否かに基づいて、前記被写体に関する今回の医療情報の適否を判定し、前記表示手段は、リアルタイムで音声認識された前記被写体との会話の判定結果を表示することを特徴とする指導支援システム。
2. 前記処理手段は、前記撮影手段によって撮影された画像と、前記表示手段によって表示された前記被写体の医療情報及び前記判定手段による判定結果とを対応付けた処理結果を特定のユーザが閲覧可能な記憶手段に記憶することを特徴とする請求項１に記載の指導支援システム。
3. 前記処理手段は、前記取得手段によって取得された前記被写体の医療情報及び前記判定手段による判定結果が前記画像内に表示されるように、前記画像と前記医療情報とを合成する、
   ことを特徴とする請求項１または２に記載の指導支援システム。
4. 前記音声認識手段は、前記被写体との会話を逐次音声認識し、
   前記判定手段は、前記音声認識手段によって前記ウェアラブル端末の装着者と前記被写体となる対話者との会話中にリアルタイムで音声認識された音声認識結果毎に、前記音声認識結果に含まれる前記被写体の薬歴と推定される内容に対し、今回の医療情報に含まれる薬剤の処方が適切であるか否かを判定することにより、前記被写体に関する今回の医療情報の適否を判定し、
   前記表示手段は、前記音声認識手段の音声認識結果毎に、前記判定手段による判定結果を表示する、
   ことを特徴とする請求項１から３のいずれか１項に記載の指導支援システム。
5. 前記撮影手段は、前記被写体としての患者に対する医療情報の伝達の状況を撮影する、
   ことを特徴とする請求項１から４のいずれか１項に記載の指導支援システム。
6. 被写体を撮影する撮影手段を有するウェアラブル端末を含む指導支援システムで実行される指導支援方法であって、
   前記被写体に対応する医療情報を取得する取得ステップと、
   前記被写体との会話の音声認識結果を取得する音声認識ステップと、
   前記取得ステップにおいて取得された医療情報の適否を判定する判定ステップと、
   前記取得ステップにおいて取得された医療情報及び前記判定ステップにおける判定結果を表示する表示ステップと、
   前記ウェアラブル端末の装着者と前記被写体となる対話者との会話中に前記撮影手段によって撮影された前記被写体の画像に対して、撮影中に前記表示ステップにおいて前記被写体に対応する前記医療情報及び前記判定ステップにおける判定結果が表示されたタイミングで、再生時に当該医療情報及び前記判定ステップにおける判定結果が画像内に表示されるように、前記画像と前記医療情報及び前記判定ステップにおける判定結果とを対応付ける処理ステップと、
   を含み、
   前記判定ステップでは、前記取得ステップにおいて取得された前記被写体に関する過去の医療情報に含まれる薬剤及び既往歴と、前記音声認識結果に含まれる前記被写体の薬歴と推定される内容とに対し、今回の医療情報に含まれる薬剤の処方が適切であるか否かに基づいて、前記被写体に関する今回の医療情報の適否を判定し、前記表示ステップでは、リアルタイムで音声認識された前記被写体との会話の判定結果を表示する、ことを特徴とする指導支援方法。
7. 被写体を撮影する撮影手段を有するウェアラブル端末を含む指導支援システムを制御するコンピュータを、
   前記被写体に対応する医療情報を取得する取得手段、
   前記被写体との会話の音声認識結果を取得する音声認識手段、
   前記取得手段によって取得された医療情報の適否を判定する判定手段、
   前記取得手段によって取得された医療情報及び前記判定手段による判定結果を表示させる表示制御手段、
   前記ウェアラブル端末の装着者と前記被写体となる対話者との会話中に前記撮影手段によって撮影された前記被写体の画像に対して、撮影中に前記表示制御手段に前記被写体に対応する前記医療情報及び前記判定手段による判定結果が表示されたタイミングで、再生時に当該医療情報及び前記判定手段による判定結果が画像内に表示されるように、前記画像と前記医療情報及び前記判定手段による判定結果とを対応付ける処理手段、
   として機能させ、
   前記判定手段は、前記取得手段によって取得された前記被写体に関する過去の医療情報に含まれる薬剤及び既往歴と、前記音声認識結果に含まれる前記被写体の薬歴と推定される内容とに対し、今回の医療情報に含まれる薬剤の処方が適切であるか否かに基づいて、前記被写体に関する今回の医療情報の適否を判定し、前記表示制御手段は、リアルタイムで音声認識された前記被写体との会話の判定結果を表示する、ことを特徴とするプログラム。

Images