JPWO2018221066A1 - 調剤監査支援装置及び調剤監査支援方法 - Google Patents

Abstract

本発明は、照合精度のロバスト性が高い調剤監査支援装置及び調剤監査支援方法を提供することを目的とする。本発明の一の態様に係る調剤監査支援装置によれば、撮影画像における照合対象薬剤の位置に応じて関心領域の位置、形状、及び大きさが設定され、設定した関心領域に対応させてマスタ画像の位置、形状、及び大きさが設定されるので、照合対象薬剤の位置及び向きに起因する薬剤形状の歪み、ボケ、端部の映り込み等を回避または低減できる。したがって照合精度への影響が小さく、照合精度のロバスト性を高くすることができる。

Description

本発明は調剤監査支援装置及び調剤監査支援方法に係り、特に薬剤を撮影した画像をマスタ画像と照合することにより、撮影された薬剤が処方箋通りの薬剤であるか否かの監査を支援する調剤監査支援装置及び調剤監査支援方法に関する。

医療現場では、医師が作成した処方箋を患者が調剤薬局に持参し、調剤薬局において処方箋にしたがって薬剤を調剤することが一般的であり、調剤の際には、処方される薬剤を一回に服用する分ごとに分包する、いわゆる「一包化」が行われることも多い。一方、薬剤師は調剤あるいは薬剤の提供を行う場合、処方箋の記載事項、患者情報等に基づいて処方内容を確認することが求められており、薬剤師の監査負担が大きくなっている。

そこで、薬剤師の監査負担を軽減するため、薬剤の種類、数量等について処方箋に記載された内容と分包された薬剤の内容とを照合するための監査支援方法及び監査支援装置が開発されている。例えば特許文献１では、薬剤マスタ画像と撮影画像とを照合して撮影画像中の薬剤がどの薬剤であるか判別し、薬剤マスタ画像と、撮影画像における各薬剤と判別された薬剤領域画像とを表示する一覧表を作成することが記載されている。特許文献１によれば、この一覧表により撮影画像とマスタ画像との照合を容易にして薬剤師の目視監査作業を効率化できる。また、特許文献２では被験物を選別する装置に関し、直交座標を円柱座標に変換して輪郭を抽出することで回転成分の影響を小さくして精度良く選別を行うことが記載されている。

特開２０１４−６７３４２号公報 特開平９−８１７４８号公報

撮影画像とマスタ画像との照合は、例えば撮影画像に対して関心領域を設定し、マスタ画像に対してテンプレートを設定して、関心領域とテンプレートとを照合することにより行うことができる。このような照合の際には、画像における照合対象薬剤の位置等の照合条件に依存して薬剤形状の歪み、ボケ、端部の映り込み等が生じるため、高精度に照合を行うには、照合条件に応じて適切な関心領域及びテンプレートを設定する必要がある。この点に関し、上述した特許文献１では薬剤マスタ画像と撮影画像とを照合しているが、照合条件に応じて関心領域、テンプレートを設定することは考慮されていない。また特許文献２に関しては、薬剤（錠剤）の調剤監査において照合すべきは輪郭ではなく刻印部であり、また仮に刻印部を円柱座標系に変換しても、刻印は光源との位置関係によって変化するため照合精度は改善しない。このように、従来の技術では照合精度が照合条件に大きく依存し、照合精度のロバスト性が低かった。

本発明はこのような事情に鑑みてなされたもので、照合精度のロバスト性が高い調剤監査支援装置及び調剤監査支援方法を提供することを目的とする。

上述した目的を達成するため、本発明の第１の態様に係る調剤監査支援装置は、薬剤を示すマスタ画像を記憶するマスタ画像記憶部と、監査対象薬剤を撮影して撮影画像を取得する撮影部と、撮影画像における監査対象薬剤の位置を検出する薬剤検出部と、監査対象薬剤の画像に関心領域を設定する関心領域設定部であって、関心領域の位置、形状、及び大きさを検出した薬剤の位置に基づいて設定する関心領域設定部と、マスタ画像記憶部から処方箋に記載された薬剤を示すマスタ画像を読み出し、読み出したマスタ画像に基づいてテンプレートを生成するテンプレート生成部であって、設定した関心領域に対応させてテンプレートの位置、形状、及び大きさを設定するテンプレート生成部と、テンプレートと関心領域とを照合して、監査対象薬剤とマスタ画像が示す薬剤とが同一であるか否かを示す情報を出力する照合部と、を備える。

第１の態様によれば、撮影画像における監査対象薬剤（照合対象薬剤）の位置に応じて関心領域の位置、形状、及び大きさが設定され、設定した関心領域に対応させてマスタ画像の位置、形状、及び大きさが設定されるので、監査対象薬剤の位置に起因する薬剤形状の歪み、ボケ、端部の映り込み等を回避または低減できる。したがって照合条件による照合精度への影響が小さく、照合精度のロバスト性を高くすることができる。

第２の態様に係る調剤監査支援装置は第１の態様において、関心領域設定部は、検出した監査対象薬剤の位置と撮影画像の中心との距離が遠いほど関心領域を小さく設定し、テンプレート生成部は、設定した関心領域が小さいほどテンプレートを小さく生成する。監査対象薬剤と撮影画像の中心との距離が遠いと、監査対象薬剤が歪んで写る、ボケて写る、薬剤の側面が映り込む等の問題が生じる場合があり、このような状況で距離が近い場合と同様の大きさで関心領域及びテンプレートを設定すると、関心領域及びテンプレートにそのような問題が生じる領域が含まれてしまい、照合を高精度に行うことができない。これに対し第２の態様によれば、関心領域を小さく設定し、さらにそのような関心領域に対応してテンプレートを小さく設定することで上述した問題が発生する領域を避けることができ、監査対象薬剤が撮影画像の中心から遠い場合でも照合を高精度に行うことができる。

第３の態様に係る調剤監査支援装置は第１または第２の態様において、関心領域設定部は、検出した監査対象薬剤の位置と撮影画像の中心との距離が遠いほど、監査対象薬剤の画像における関心領域を撮影画像の中心の方向に大きく移動させて設定し、テンプレート生成部は、関心領域の移動量が大きいほど、マスタ画像に対して大きく移動させたテンプレートを生成する。監査対象薬剤と撮影画像の中心との距離が遠いと、監査対象薬剤の画像は中心から遠い側が近い側に対して大きくボケて写る場合があり、このような状況で距離が近い場合と同様に関心領域及びテンプレートを設定すると、照合を高精度に行うことができない。これに対し第３の態様のように関心領域を移動させ、さらに関心領域の移動量に対応して移動させたテンプレートを生成することでボケが大きく生じるのを避けることができ、監査対象薬剤と撮影画像の中心との距離が遠い場合でも照合を高精度に行うことができる。

第４の態様に係る調剤監査支援装置は第１から第３の態様のいずれか１つにおいて、関心領域設定部は撮影画像における関心領域の位置を監査対象薬剤に対する照明の方向に基づいて移動させ、テンプレート生成部は関心領域を移動させるのに対応させてマスタ画像に対するテンプレートの位置を移動させる。照合時の照明との関係に起因して薬剤の特徴の把握が困難になり照合精度が低下する場合でも、第４の態様のように関心領域の位置を移動させ、関心領域の移動に対応させてテンプレートの位置を移動させることでそのような問題が生じるのを避けることができ、照合を高精度に行うことができる。

第５の態様に係る調剤監査支援装置は第１から第４の態様のいずれか１つにおいて、関心領域設定部及びテンプレート生成部は、監査対象薬剤の位置と撮影画像の中心との距離がしきい値以下である場合は関心領域及びテンプレートをそれぞれ監査対象薬剤と相似形に設定し、監査対象薬剤の位置と撮影画像の中心との距離がしきい値を超える場合は関心領域及びテンプレートをそれぞれ矩形に設定する。監査対象薬剤が撮影画像の中心から近い場合（距離がしきい値以下の場合）、撮影画像における薬剤の形状は薬剤の真の形状に近いため関心領域及びテンプレートは監査対象薬剤と相似形でよいが、監査対象薬剤が撮影画像の中心から遠い場合（距離がしきい値を超える場合）は撮影画像において薬剤の形状が歪む、あるいは端部（側面）が写り込むといった問題が生じる場合がある。これに対し、第５の態様のように関心領域を設定し、関心領域に対応させてテンプレートを設定することでそのような問題が生じるのを避けることができ、照合を高精度に行うことができる。

第６の態様に係る調剤監査支援装置は第１から第５の態様のいずれか１つにおいて、照合部は、関心領域とテンプレートとのうち少なくとも一方を回転させることにより関心領域とテンプレートとの向きを合わせて照合を行う。第６の態様によれば、関心領域とテンプレートとの向きを合わせることで正確な照合を行うことができる。

第７の態様に係る調剤監査支援装置は第１から第６の態様のいずれか１つにおいて、照合部は、関心領域とテンプレートとのうち少なくとも一方を拡大または縮小することにより関心領域とテンプレートとの大きさを合わせて照合を行う。第７の態様によれば、関心領域とテンプレートとの大きさを合わせることで正確な照合を行うことができる。

第８の態様に係る調剤監査支援装置は第１から第７の態様のいずれか１つにおいて、テンプレート及び関心領域は、薬剤に施された刻印を示す刻印領域を含む。薬剤に施された刻印は照合の手がかりとして有効であり、第８の態様のように関心領域及びテンプレートが刻印領域を含むことで正確な照合を行うことができる。

第９の態様に係る調剤監査支援装置は第１から第８の態様のいずれか１つにおいて、マスタ画像は、撮影部により監査対象薬剤を照合の際に用いる照明の下で撮影した画像に基づく画像である。第９の態様では、撮影部により監査対象薬剤を照合の際に用いる照明の下で撮影した画像に基づく画像をマスタ画像とするので、マスタ画像撮影の際の照明と照合の際の照明とを一致させることができ、適切なマスタ画像を取得して照合精度を向上させることができる。

上述した目的を達成するため、本発明の第１０の態様に係る調剤監査支援方法は、薬剤を示すマスタ画像を記憶するマスタ画像記憶部と、監査対象薬剤を撮影して撮影画像を取得する撮影部と、を備える調剤監査支援装置による調剤監査支援方法であって、調剤監査支援装置が撮影画像における監査対象薬剤の位置を検出する薬剤検出工程と、調剤監査支援装置が監査対象薬剤の画像に関心領域を設定する関心領域設定工程であって、関心領域の位置、形状、及び大きさを検出した薬剤の位置に基づいて設定する関心領域設定工程と、調剤監査支援装置が処方箋に記載された薬剤を示すマスタ画像をマスタ画像記憶部から読み出し、読み出したマスタ画像に基づいて関心領域に対応させてテンプレートを生成するテンプレート生成工程と、調剤監査支援装置が、テンプレートと関心領域とを照合して、撮影画像が示す薬剤とマスタ画像が示す薬剤とが同一であるか否かを示す情報を出力する照合工程と、を有する。第１０の態様によれば、第１の態様と同様に照合対象薬剤の位置に起因する照合精度への影響が小さく、照合精度のロバスト性を高くすることができる。なお、第１０の態様に係る調剤監査支援方法を調剤監査支援装置（コンピュータ）に実行させるプログラム、及びそのプログラムのコンピュータ読み取り可能なコードが記録された非一時的記録媒体も本発明の態様として挙げることができる。

以上説明したように、本発明の調剤監査支援装置及び調剤監査支援方法によれば、照合精度のロバスト性を高くすることができる。

図１は、本発明の一実施形態に係る調剤監査支援装置の構成を示すブロック図である。 図２は、照明下で分包袋の画像を取得する様子を示す図である。 図３は、照明下で分包袋の画像を取得する様子を示す他の図である。 図４は、処理部の機能構成を示す図である。 図５は、記憶部に記憶される情報を示す図である。 図６は、調剤監査支援方法の処理を示すフローチャートである。 図７は、薬剤のマスタ画像及び属性情報を示す図である。 図８は、関心領域及びテンプレート設定の処理を示すフローチャートである。 図９は、薬剤の形状に起因する刻印のボケを示す図である。 図１０Ａは、薬剤の位置に応じた関心領域の設定を示す図である。 図１０Ｂは、薬剤の位置に応じた関心領域の設定を示す図である。 図１１Ａは、薬剤の位置に応じた関心領域の設定を示す他の図である。 図１１Ｂは、薬剤の位置に応じた関心領域の設定を示す他の図である。 図１２Ａは、薬剤の位置に応じた関心領域の設定を示すさらに他の図である。 図１２Ｂは、薬剤の位置に応じた関心領域の設定を示すさらに他の図である。 図１３は、照合結果の表示例を示す図である。

以下、添付図面を参照しつつ、本発明に係る調剤監査支援装置及び調剤監査支援方法の実施形態について、詳細に説明する。

＜第１の実施形態＞
図１は、本発明の一実施形態に係る調剤監査支援装置１（調剤監査支援装置）の構成を示す図である。調剤監査支援装置１は処理部１０（撮影部、薬剤検出部、関心領域設定部、テンプレート生成部、照合部）と、記憶部２０（マスタ画像記憶部）と、表示部３０と、操作部４０と、搬送機構５０と、を備え、処理部１０には照明部１２，カメラ１５Ａ（撮影部），カメラ１５Ｂ（撮影部），及び処方箋リーダ１６が接続されている。

カメラ１５Ａ及びカメラ１５Ｂはデジタルカメラにより構成される。図２に示すように、分包袋ＴＰ（薬包）が連続して構成される薬包帯ＰＢの上側（図２の＋Ｚ側）にカメラ１５Ａが配置され、薬包帯ＰＢの下側（図２の−Ｚ側）にカメラ１５Ｂが配置されて、分包袋ＴＰに分包された薬剤を上下（複数の異なる方向）から撮影する。分包袋ＴＰ（薬包帯ＰＢ）は搬送機構５０により図２の＋Ｘ方向（Ｘ軸は薬包帯ＰＢの長手方向に沿った軸）に搬送され、撮影の際には照明部１２が有する複数の光源１３が上下それぞれ４方向（±Ｘ方向、±Ｙ方向）から分包袋ＴＰを照明する。図３において、複数の光源１３のそれぞれとカメラ１５Ａ、１５Ｂの撮影光軸ＰＡとの間隔（ｄ１、ｄ２、ｄ３、ｄ４）は同じである。つまり、複数の光源１３は撮影光軸ＰＡと等間隔（ｄ１＝ｄ２＝ｄ３＝ｄ４）である。

処方箋リーダ１６は、処方箋情報を読み取る。例えばＯＣＲ（Optical Character Recognition）により、紙に記載された処方箋から患者氏名、処方された薬剤及びその数量等の情報を読み取る。処方された薬剤に関する情報を示すバーコード等が処方箋に記録されている場合は、処方された薬剤及びその数量等の情報をバーコードから読み取ってもよい。また、ユーザが処方箋を読み取り、操作部４０が有するキーボード等の入力デバイスにより処方箋情報を入力してもよい。

＜処理部の構成＞
図４は処理部１０の機能構成を示す図である。処理部１０は、処方箋情報入力部１０Ａと、撮影部１０Ｂ（撮影部）と、薬剤検出部１０Ｃ（薬剤検出部）と、関心領域設定部１０Ｄ（関心領域設定部）と、テンプレート生成部１０Ｅ（テンプレート生成部）と、照合部１０Ｆ（照合部）と、表示制御部１０Ｇと、通信部１０Ｈと、を備える。これらの機能は、ＣＰＵ（Central Processing Unit）、各種電子回路等のデバイスが、ＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory：非一時的記録媒体）等に記憶されたデータを参照して実現される。また、これらの機能はＲＯＭ（Read Only Memory：非一時的記録媒体）等に記憶された薬剤検査支援プログラムを実行することにより行われる。処理の際には、ＲＡＭ（Random Access Memory）等が一時記憶領域、作業領域として用いられる。なお図４ではＣＰＵ等のデバイスの図示は省略する。

処方箋情報入力部１０Ａは、処方箋リーダ１６を制御して処方箋に記載された情報（例えば患者氏名、薬剤の識別情報及び数量、用法等）を入力する。撮影部１０Ｂは、カメラ１５Ａ及びカメラ１５Ｂを制御して分包袋ＴＰに分包された監査対象薬剤を撮影し、撮影画像を取得する。薬剤検出部１０Ｃは、撮影部１０Ｂが取得した撮影画像における監査対象薬剤の位置を検出する。監査対象薬剤の位置に加えて向きを検出してもよい。関心領域設定部１０Ｄは、薬剤検出部１０Ｃが検出した位置に基づいて、監査対象薬剤の画像に対する関心領域の位置、形状、及び大きさを設定する。テンプレート生成部１０Ｅは、処方箋情報入力部１０Ａが読み取った情報に基づいて、処方箋に記載された薬剤を示すマスタ画像を読み出し、読み出したマスタ画像に基づいてテンプレートを生成する。照合部１０Ｆは、テンプレートと関心領域とを照合して、監査対象薬剤とマスタ画像が示す薬剤とが同一であるか否かを示す情報を出力する。表示制御部１０Ｇは、照合結果等の表示制御を行う。通信部１０Ｈはネットワークを介して図示せぬサーバ、データベース等と通信し、薬剤のマスタ画像、属性情報等の情報を取得する。これらの機能による調剤監査支援方法の詳細な処理は後述する。

上述した処理部１０の機能は、各種のプロセッサ（processor）を用いて実現できる。各種のプロセッサには、例えばソフトウェア（プログラム）を実行して各種の機能を実現する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）が含まれる。また、上述した各種のプロセッサには、ＦＰＧＡ（Field Programmable Gate Array）などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）も含まれる。さらに、ＡＳＩＣ（Application Specific Integrated Circuit）などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路なども上述した各種のプロセッサに含まれる。

各部の機能は１つのプロセッサにより実現されてもよいし、複数のプロセッサを組み合わせて実現されてもよい。また、複数の機能を１つのプロセッサで実現してもよい。複数の機能を１つのプロセッサで構成する例としては、第１に、クライアント、サーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の機能として実現する形態がある。第２に、システムオンチップ（System On Chip：ＳｏＣ）などに代表されるように、システム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各部の機能は、ハードウェア的な構造として、上述した各種のプロセッサを１つ以上用いて構成される。また、これらのプロセッサを動作させるため、本発明に係る調剤監査支援方法を調剤監査支援装置（コンピュータ）に実行させるプログラムのコンピュータ読み取り可能なコードが、不図示のＲＯＭ（Read Only Memory）等の非一時的記録媒体に記録される。

＜記憶部の構成＞
記憶部２０はＣＤ（Compact Disk）、ＤＶＤ（Digital Versatile Disk）、ハードディスク（Hard Disk）、各種半導体メモリ等の非一時的記録媒体及びその制御部により構成され、図５に示す画像及び情報を互いに関連づけて記憶する。処方箋情報２０Ａは処方箋リーダ１６を介して読み取った情報であり、例えば患者氏名、薬剤の識別情報及び数量、用法等が含まれる。マスタ画像２０Ｂは薬剤のマスタ画像、またはマスタ画像に画像処理を施した処理済みマスタ画像である。属性情報２０Ｃとしては薬剤の薬剤タイプ、形状、寸法、色、及び刻印等を挙げることができるが、これらに限定されるものではない。薬剤画像２０Ｄは、撮影画像及び／または撮影画像から抽出した監査対象薬剤の画像である。照合結果２０Ｅは処理部１０が作成した照合結果を示す情報である。記憶部２０には、これらの画像及び情報の他に、関心領域及び／またはテンプレートの情報等を記憶してもよい。処理部１０による処理の際には、処理部１０と記憶部２０との間で、これらの画像及び情報の読み込み、書き込みが行われる。

＜表示部及び操作部の構成＞
表示部３０はモニタ３２を備えており、処方箋リーダ１６を介して読み取った処方箋情報、分包された薬剤の画像、記憶部２０に記憶された情報及び画像、照合結果等を表示することができる。操作部４０はマウス等のポインティングデバイス及びキーボード等の入力デバイスを含んでおり、ユーザはモニタ３２に表示された画像、ボタン等を操作部４０により操作することができる。

＜調剤監査支援方法の処理＞
上述した構成の調剤監査支援装置１による調剤監査支援方法の処理について説明する。図６は調剤監査支援方法の処理を示すフローチャートである。

ステップＳ１００では、処方箋リーダ１６及び処理部１０（処方箋情報入力部１０Ａ）により処方箋情報を入力する。または、記憶部２０に既に記憶されている処方箋情報２０Ａを読み出してもよい。ステップＳ１１０では、撮影部１０Ｂがカメラ１５Ａ，１５Ｂを制御して薬包帯ＰＢの分包袋ＴＰに分包された薬剤を複数の方向（上下方向）から撮影して画像を取得する。

ステップＳ１２０では、ステップＳ１００で読み取った処方箋情報に基づいて、処方箋に記載された薬剤のマスタ画像を取得する。取得するマスタ画像は記憶部２０に記憶されたマスタ画像２０Ｂでもよいし、処理部１０（通信部１０Ｈ）を介して外部の薬剤データベース等から取得した画像でもよい。

マスタ画像として取得する画像は、監査対象薬剤をカメラ１５Ａ，１５Ｂ及び処理部１０（撮影部１０Ｂ）により光源１３（照合の際に用いる照明の光源）の下で撮影した画像に基づく画像（撮影した画像に画像処理を施した画像）でもよい。この場合、カメラ１５Ａ，１５Ｂの視野中心の近傍で撮影した画像に基づく画像をマスタ画像とすることが好ましい。

図７はマスタ画像の例であり、薬剤Ｔ１を異なる方向（薬剤の上下方向）から撮影して取得した複数の画像（マスタ画像ｉＭ１，ｉＭ２）を含んでいる。マスタ画像ｉＭ１は薬剤Ｔ１の表面についての画像であり、マスタ画像ｉＭ２は薬剤の裏面についての画像である。また、図７の例では薬剤Ｔ１の属性を示す属性情報（属性情報２０Ｃ：図５参照）がマスタ画像ｉＭ１，ｉＭ２に関連づけられており、処理部１０（表示制御部１０Ｇ）は、操作部４０を介したユーザの操作に応じて、このようなマスタ画像及び属性情報をモニタ３２に表示する。

処理部１０（薬剤検出部１０Ｃ）は、撮影画像から各薬剤の薬剤領域を抽出し、必要に応じて拡大または縮小、明るさ調整等の画像処理を施して、個々の薬剤の画像を取得する（ステップＳ１３０：薬剤検出工程）。個々の薬剤の画像を取得したら、処理部１０（薬剤検出部１０Ｃ）は、撮影画像における監査対象薬剤の位置を検出する（ステップＳ１４０：薬剤検出工程）。ステップＳ１４０では、例えば薬剤のエッジを検出してその中心を求め、求めた中心の位置を監査対象薬剤の位置として検出することができる。

＜関心領域及びテンプレートの設定＞
処理部１０（関心領域設定部１０Ｄ、テンプレート生成部１０Ｅ）は、ステップＳ１４０で検出した位置に基づいて関心領域及びテンプレートを設定する（ステップＳ１５０：関心領域設定工程、テンプレート設定工程）。以下、ステップＳ１５０における関心領域及びテンプレートの設定について、図８のフローチャートを参照して説明する。

ステップＳ１５１では、処理部１０（関心領域設定部１０Ｄ）は、ステップＳ１５０で検出した薬剤の位置に基づいて薬剤と撮影画像の中心との距離を算出し、算出した距離がしきい値以下であるか否かを判断する（ステップＳ１５２）。判断が肯定されたら（ステップＳ１５２でＹＥＳ）、処理部１０（関心領域設定部１０Ｄ）は関心領域を監査対象薬剤と相似形に設定する（ステップＳ１５３：関心領域設定工程）。また、処理部１０（テンプレート生成部１０Ｅ）は、関心領域の形状に対応させて、マスタ画像に対するテンプレートを監査対象薬剤と相似形に設定する（ステップＳ１５４：テンプレート生成工程）。「監査対象薬剤と相似形」とは、例えば薬剤が円形なら関心領域（あるいはテンプレート）も大きさが異なる円形であり、薬剤が楕円形なら関心領域（あるいはテンプレート）も大きさが異なる楕円形であることを意味する。

一方、ステップＳ１５２の判断が否定された場合（算出した距離がしきい値を超える場合）、処理部１０（関心領域設定部１０Ｄ）は関心領域を矩形に設定し（ステップＳ１５５：関心領域設定工程）、また、矩形の関心領域に対応させて、マスタ画像に対するテンプレートを矩形に設定する（ステップＳ１５６：テンプレート生成工程）。

ステップＳ１５６までの処理で関心領域及びテンプレートの形状が設定されたら、処理部１０（関心領域設定部１０Ｄ）は、薬剤と撮影画像中心との距離が遠いほど、関心領域の位置を撮影画像の中心の方向に大きく移動させ、また関心領域を小さく設定する（ステップＳ１５７：関心領域設定工程）。関心領域の大きさは、例えば、薬剤の半径をｒとし、薬剤と撮影光軸ＰＡとの成す角をθとしたときに、ｒ×ｓｉｎθ、０．５×ｒ×ｓｉｎθ等にすることができる。処理部１０（テンプレート生成部１０Ｅ）は、関心領域の位置、大きさ、及び形状に対応した位置、大きさ、及び形状のテンプレートを生成する（ステップＳ１５８：テンプレート生成工程）。

＜薬剤の位置及び光源との関係に起因する照合への影響＞
ステップＳ１５１〜Ｓ１５８の処理についてさらに説明する。薬剤Ｔ１が図９の断面図に示すような３次元構造（厚みを持ち、曲面により構成される）を有するものとすると、薬剤Ｔ１が視野の中心（撮影光軸ＰＡ）から遠い位置（図９では−Ｘ方向）に存在する場合、光源１３（図３参照）のうち−Ｘ方向の光源からの光Ｌの影響が強くなる。この光Ｌについて考えると、図９において刻印Ｆ２，Ｆ３に対しては光Ｌが斜めに入射するので影が形成されるが、刻印Ｆ１に対しては光Ｌがほぼ真上から入射するので影がほとんど形成されない。このため、撮影光軸ＰＡ（図３参照）を中心として薬剤Ｔ１を上方から撮影した場合、刻印Ｆ２，Ｆ３は鮮明であるのに対し刻印Ｆ１はボケてしまう。したがって、薬剤の位置によらずに関心領域の位置、大きさ、形状を固定しているとボケた刻印Ｆ１を含んだ状態で照合を行うこととなり、視野の中心付近で撮影されたマスタ画像に基づくテンプレート（刻印がボケていない）との間で刻印の不一致による誤照合が生じる場合がある。

また、薬剤Ｔ１の位置が撮影画像の中心から遠くなると、撮影画像において薬剤Ｔ１の形状が歪み、さらに薬剤Ｔ１の側面（撮影画像の中心に近い側；図９では右側）が写り込む。このため、薬剤の位置によらずに関心領域の位置、大きさ、形状を固定していると、歪んだ領域及び不要な領域を含んだ状態で照合を行うこととなり、視野の中心付近で撮影されたマスタ画像に基づくテンプレート（歪みがなく、側面が含まれていない）との間で誤照合が生じる場合がある。

このため第１の実施形態では、ボケた領域（図９の場合、刻印Ｆ１の部分）及び薬剤の側面が関心領域に含まれないようにするため、薬剤の位置に基づいて関心領域の位置、大きさ、及び形状を設定し、この関心領域に対応させてテンプレートの位置、大きさ、及び形状を設定している。以下、関心領域及びテンプレートの設定例を具体的に説明する。

＜関心領域の設定例＞
図１０Ａ及び図１０Ｂは、薬剤の位置に基づいた関心領域の設定例を示す図である。図１０Ａは、薬剤Ｔ１が撮影画像ｉＴ１（分包袋ＴＰを＋Ｚ方向から撮影）の中央部、中間部、及び端部に存在する場合（それぞれ参照符号をＴ１Ａ，Ｔ１Ｂ，Ｔ１Ｃとする）の関心領域の設定例を示す。具体的には、薬剤Ｔ１Ａ（薬剤Ｔ１が撮影画像ｉＴ１の中央に存在）の場合、処理部１０（関心領域設定部１０Ｄ）は関心領域ＲＡを薬剤Ｔ１Ａ（円形）と相似形である円形に設定する。関心領域ＲＡは、刻印“１３３”を示す刻印領域を含む。また、薬剤Ｔ１Ｂ（薬剤Ｔ１が、撮影画像ｉＴ１において−Ｘ方向の中間部に存在）の場合、処理部１０（関心領域設定部１０Ｄ）は、−Ｘ側及び側面領域ＥＢを含まないように、矩形の関心領域ＲＢ（関心領域ＲＡよりも小さい）を設定する。関心領域ＲＢも、刻印“１３３”を示す刻印領域を含む。なお、図１０Ａ及び図１０Ｂでは、±Ｘ方向及び±Ｙ方向に対して撮影画像ｉＴ１の中心から端部までの距離の３分の１をしきい値（この値は例示である）とし、薬剤Ｔ１Ｂの位置がＸ軸方向及びＹ軸方向についてしきい値を越えているものとする。

薬剤Ｔ１Ｃ（薬剤Ｔ１が、撮影画像ｉＴ１において−Ｘ方向の端部に存在）の場合、側面領域ＥＣが撮影画像に大きく写りこみ、また刻印“１３３”のうち−Ｘ側の光源に近くなる“１”の部分が大きくボケる。そこで処理部１０（関心領域設定部１０Ｄ）は、側面領域ＥＣ及び刻印の“１”の部分を避けて矩形の関心領域ＲＣ（ＲＢよりも小さい）を設定する。関心領域ＲＣは、刻印“１３３”を示す刻印領域のうち“３３”を示す部分を含む。

図１０Ｂは、関心領域ＲＡ，ＲＢ，ＲＣの中心ＣＡ，ＣＢ，ＣＣの位置を示す図である。中心ＣＡは薬剤Ｔ１Ａの中心、即ち撮影画像ｉＴ１の中心であり、中心ＣＢ，ＣＣは撮影画像ｉＴ１の中心側（＋Ｘ側）に移動させている（中心ＣＣの移動量＞中心ＣＢの移動量）。なお、図１０Ｂでは刻印の図示は省略している。

処理部１０（テンプレート生成部１０Ｅ）は、このように設定した関心領域に対応させてテンプレートの位置、形状、及び大きさを設定する（図８のステップＳ１５８：テンプレート生成工程）。具体的には、関心領域が小さいほどテンプレートを小さく生成し、関心領域の移動量が大きいほどマスタ画像に対するテンプレートを大きく移動させ、光源に対する関心領域の移動方向と同じ方向にテンプレートを移動させる。なお、処理部１０（テンプレート生成部１０Ｅ）は刻印（またはその一部分）を示す刻印領域を含むテンプレートを生成する。

図１１Ａ及び図１１Ｂは、薬剤Ｔ１が＋Ｙ軸方向の中央部、端部に存在する場合（参照符号をそれぞれＴ１Ａ、Ｔ１Ｄとする）の関心領域の設定を示す図である。図１１Ａにおいて、処理部１０（関心領域設定部１０Ｄ）は薬剤Ｔ１Ａについては図１０Ａ及び図１０Ｂと同様に円形（薬剤Ｔ１と相似形）の関心領域ＲＡを設定する。また、処理部１０（関心領域設定部１０Ｄ）は、薬剤Ｔ１Ｄ（薬剤Ｔ１が、撮影画像ｉＴ２において＋Ｙ方向の端部に存在）については、＋Ｙ側の領域（＋Ｙ側の光源の影響を強く受ける領域）及び側面領域ＥＤを含まないように矩形の関心領域ＲＤを設定する（関心領域ＲＤは関心領域ＲＡよりも小さい）。

図１１Ｂは関心領域ＲＡ，ＲＤの中心ＣＡ，ＣＤの位置を示す図である。中心ＣＡは図１０Ｂと同様に薬剤Ｔ１Ａの中心（すなわち、撮影画像の中心）であり、中心ＣＤは撮影画像の中心側（−Ｙ側；矢印方向）に移動させている。

上述した図１０Ａから図１１Ｂでは薬剤が横向き（刻印がＸ軸方向となる向き）の場合について説明しているが、薬剤が縦向き（刻印がＹ軸方向となる向き）の場合について説明する。図１２Ａ及び図１２Ｂは、図１０Ａ及び図１０Ｂの状況において薬剤が縦向きの場合の関心領域の設定を示す図である。図１２Ａにおいて、処理部１０（関心領域設定部１０Ｄ）は、薬剤Ｔ１Ｅ（薬剤Ｔ１が、撮影画像ｉＴ３の中央部に存在）については図１０Ａ及び図１０Ｂと同様に円形（薬剤Ｔ１と相似形）の関心領域ＲＥを設定する。薬剤Ｔ１Ｆ（薬剤Ｔ１が、撮影画像ｉＴ３において−Ｘ方向の中間部に存在）については、処理部１０（関心領域設定部１０Ｄ）は、薬剤Ｔ１Ｆの−Ｘ側の領域（−Ｘ側の光源１３の影響を強く受ける領域）及び側面領域ＥＦを含まないように矩形の関心領域ＲＦを設定する（関心領域ＲＦは関心領域ＲＥよりも小さい）。薬剤Ｔ１Ｇ（薬剤Ｔ１が、撮影画像ｉＴ３において−Ｘ方向の端部に存在）については、薬剤Ｔ１Ｇの−Ｘ側及び側面領域ＥＧを含まないように矩形の関心領域ＲＧを設定する（関心領域ＲＧは関心領域ＲＦよりも小さい）。

図１２Ｂは、図１０Ｂ及び図１１Ｂと同様に関心領域ＲＥ，ＲＦ，ＲＧの中心ＣＥ，ＣＦ，ＣＧの位置を示す図である。中心ＣＥは薬剤Ｔ１Ｅの中心、即ち撮影画像ｉＴ３の中心であり、中心ＣＦ，ＣＧは撮影画像ｉＴ３の中心側（＋Ｘ側）に移動させている（中心ＣＧの移動量＞中心ＣＦの移動量）。なお図１２Ｂでは刻印の図示は省略している。図１０Ａから図１１Ｂについて上述したのと同様に、処理部１０（テンプレート生成部１０Ｅ）は、このように設定した関心領域に対応させてテンプレートの位置、形状、及び大きさを設定する（図８のステップＳ１５８：テンプレート生成工程）。

このように、薬剤の位置に加えて向きに基づいて関心領域を設定し、この関心領域に対応させてテンプレートを設定することが好ましい。薬剤の向きは、処理部１０（薬剤検出部１０Ｃ）が例えばステップＳ１４０（薬剤検出工程）で検出することができる。

図８のフローチャートで関心領域の設定（ステップＳ１５７）及びテンプレートの生成（ステップＳ１５８）が終了すると図６のフローチャートに戻り、処理部１０（照合部１０Ｆ）は、テンプレートと関心領域とを照合して、監査対象薬剤とマスタ画像が示す薬剤とが同一の薬剤であるか否かを判断する（ステップＳ１６０：照合工程）。照合の際に、関心領域とテンプレートとのうち少なくとも一方を回転させて向きを合わせてもよい。また、関心領域とテンプレートとのうち少なくとも一方を拡大または縮小することにより大きさを合わせてもよい。処理部１０（照合部１０Ｆ）は、監査対象薬剤とマスタ画像が示す薬剤とが同一であるか否かを示す情報を出力する（後述）。

１つの監査対象薬剤について照合が終了したら、処理部１０（照合部１０Ｆ）は、ステップＳ１７０（照合工程）において、処方箋に記載された１つの薬剤と全ての監査対象薬剤の画像についての照合が終了したか否かを判断する。判断が肯定された場合（ステップＳ１７０でＹＥＳ）はステップＳ１８０に進み、否定された場合（ステップＳ１７０でＮＯ）はステップＳ１３０へ戻り次の監査対象薬剤の画像を取得して照合（ステップＳ１４０：照合工程）を行う。

ステップＳ１８０では処方箋に記載された全ての薬剤（分包袋ＴＰに分包されるべき全ての薬剤）について照合が終了したか否かを判断し、処方箋に記載された他の薬剤について判断が肯定されるまでステップＳ１２０〜Ｓ１７０の処理を繰り返して、判断が肯定されたら（ステップＳ１８０でＹＥＳ）、ステップＳ１９０へ進む。ステップＳ１９０では、処理部１０（照合部１０Ｆ）は薬包帯ＰＢに含まれる全ての分包袋ＴＰについての処理が完了したか否かを判断し、判断が肯定されるまでステップＳ１１０〜Ｓ１８０の処理（薬剤検出工程、関心領域設定工程、テンプレート設定工程、照合工程）を繰り返す。

全ての分包袋ＴＰについての処理が完了したら、処理部１０（照合部１０Ｆ、表示制御部１０Ｇ）は照合結果（監査対象薬剤とマスタ画像が示す薬剤とが同一であるか否かを示す情報）を出力する（ステップＳ２００：照合工程）。例えば、図１３に示すように、「薬剤Ｔ１（図７，９参照）である」と判断された監査対象薬剤の画像をモニタ３２に一覧表示する。この他、「監査対象薬剤とマスタ画像が示す薬剤とが同一、類似、非類似である」旨を監査対象薬剤ごとに、及び／またはマスタ画像ごとに表示してもよいし、類似度の値を表示してもよい。また、処理部１０（照合部１０Ｆ）は、照合結果（照合結果２０Ｅ）を記憶部２０に記憶させてもよい（ステップＳ２００：照合工程）。

以上説明したように、第１の実施形態によれば、監査対象薬剤の位置に起因する薬剤形状の歪み、ボケ、端部の映り込み等を回避または低減できるので、照合条件による照合精度への影響が小さく、照合精度のロバスト性を高くすることができる。

以上で本発明の実施形態及び例に関して説明してきたが、本発明は上述した態様に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能である。

１ 調剤監査支援装置
１０ 処理部
１０Ａ 処方箋情報入力部
１０Ｂ 撮影部
１０Ｃ 薬剤検出部
１０Ｄ 関心領域設定部
１０Ｅ テンプレート生成部
１０Ｆ 照合部
１０Ｇ 表示制御部
１０Ｈ 通信部
１２ 照明部
１３ 光源
１５Ａ カメラ
１５Ｂ カメラ
１６ 処方箋リーダ
２０ 記憶部
２０Ａ 処方箋情報
２０Ｂ マスタ画像
２０Ｃ 属性情報
２０Ｄ 薬剤画像
２０Ｅ 照合結果
３０ 表示部
３２ モニタ
４０ 操作部
５０ 搬送機構
ＣＡ 中心
ＣＢ 中心
ＣＣ 中心
ＣＤ 中心
ＣＥ 中心
ＣＦ 中心
ＣＧ 中心
ＥＢ 側面領域
ＥＣ 側面領域
ＥＤ 側面領域
ＥＦ 側面領域
ＥＧ 側面領域
Ｆ１ 刻印
Ｆ２ 刻印
Ｆ３ 刻印
Ｌ 光
ＰＡ 撮影光軸
ＰＢ 薬包帯
ＲＡ 関心領域
ＲＢ 関心領域
ＲＣ 関心領域
ＲＤ 関心領域
ＲＥ 関心領域
ＲＦ 関心領域
ＲＧ 関心領域
Ｓ１００〜Ｓ２００ 調剤監査支援方法のステップ
Ｔ１ 薬剤
Ｔ１Ａ 薬剤
Ｔ１Ｂ 薬剤
Ｔ１Ｃ 薬剤
Ｔ１Ｄ 薬剤
Ｔ１Ｅ 薬剤
Ｔ１Ｆ 薬剤
Ｔ１Ｇ 薬剤
ＴＰ 分包袋
ｉＭ１ マスタ画像
ｉＭ２ マスタ画像
ｉＴ１ 撮影画像
ｉＴ２ 撮影画像
ｉＴ３ 撮影画像

＜処理部の構成＞
図４は処理部１０の機能構成を示す図である。処理部１０は、処方箋情報入力部１０Ａと、撮影部１０Ｂ（撮影部）と、薬剤検出部１０Ｃ（薬剤検出部）と、関心領域設定部１０Ｄ（関心領域設定部）と、テンプレート生成部１０Ｅ（テンプレート生成部）と、照合部１０Ｆ（照合部）と、表示制御部１０Ｇと、通信部１０Ｈと、を備える。これらの機能は、ＣＰＵ（Central Processing Unit）、各種電子回路等のデバイスが、ＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory：非一時的記録媒体）等に記憶されたデータを参照して実現される。また、これらの機能はＲＯＭ（Read Only Memory：非一時的記録媒体）等に記憶された調剤監査検査支援プログラムを実行することにより行われる。処理の際には、ＲＡＭ（Random Access Memory）等が一時記憶領域、作業領域として用いられる。なお図４ではＣＰＵ等のデバイスの図示は省略する。

＜関心領域及びテンプレートの設定＞
処理部１０（関心領域設定部１０Ｄ、テンプレート生成部１０Ｅ）は、ステップＳ１４０で検出した位置に基づいて関心領域及びテンプレートを設定する（ステップＳ１５０：関心領域設定工程、テンプレート生成工程）。以下、ステップＳ１５０における関心領域及びテンプレートの設定について、図８のフローチャートを参照して説明する。

ステップＳ１８０では処方箋に記載された全ての薬剤（分包袋ＴＰに分包されるべき全ての薬剤）について照合が終了したか否かを判断し、処方箋に記載された他の薬剤について判断が肯定されるまでステップＳ１２０〜Ｓ１７０の処理を繰り返して、判断が肯定されたら（ステップＳ１８０でＹＥＳ）、ステップＳ１９０へ進む。ステップＳ１９０では、処理部１０（照合部１０Ｆ）は薬包帯ＰＢに含まれる全ての分包袋ＴＰについての処理が完了したか否かを判断し、判断が肯定されるまでステップＳ１１０〜Ｓ１８０の処理（薬剤検出工程、関心領域設定工程、テンプレート生成工程、照合工程）を繰り返す。

Claims (10)

1. 薬剤を示すマスタ画像を記憶するマスタ画像記憶部と、
   監査対象薬剤を撮影して撮影画像を取得する撮影部と、
   前記撮影画像における前記監査対象薬剤の位置を検出する薬剤検出部と、
   前記監査対象薬剤の画像に関心領域を設定する関心領域設定部であって、前記関心領域の位置、形状、及び大きさを前記検出した薬剤の位置に基づいて設定する関心領域設定部と、
   前記マスタ画像記憶部から処方箋に記載された薬剤を示す前記マスタ画像を読み出し、前記読み出したマスタ画像に基づいてテンプレートを生成するテンプレート生成部であって、前記設定した関心領域に対応させて前記テンプレートの位置、形状、及び大きさを設定するテンプレート生成部と、
   前記テンプレートと前記関心領域とを照合して、前記監査対象薬剤と前記マスタ画像が示す薬剤とが同一であるか否かを示す情報を出力する照合部と、
   を備える調剤監査支援装置。
2. 前記関心領域設定部は、前記検出した前記監査対象薬剤の位置と前記撮影画像の中心との距離が遠いほど前記関心領域を小さく設定し、
   前記テンプレート生成部は、前記設定した関心領域が小さいほど前記テンプレートを小さく生成する請求項１に記載の調剤監査支援装置。
3. 前記関心領域設定部は、前記検出した前記監査対象薬剤の位置と前記撮影画像の中心との距離が遠いほど、前記監査対象薬剤の画像における前記関心領域を前記撮影画像の中心の方向に大きく移動させて設定し、
   前記テンプレート生成部は、前記関心領域の移動量が大きいほど、前記マスタ画像に対して大きく移動させた前記テンプレートを生成する請求項１または２に記載の調剤監査支援装置。
4. 前記関心領域設定部は前記撮影画像における前記関心領域の位置を前記監査対象薬剤に対する照明の方向に基づいて移動させ、
   前記テンプレート生成部は前記関心領域を移動させるのに対応させて前記マスタ画像に対する前記テンプレートの位置を移動させる請求項１から３のいずれか１項に記載の調剤監査支援装置。
5. 前記関心領域設定部及び前記テンプレート生成部は、前記監査対象薬剤の位置と前記撮影画像の中心との距離がしきい値以下である場合は前記関心領域及び前記テンプレートをそれぞれ前記監査対象薬剤と相似形に設定し、前記監査対象薬剤の位置と前記撮影画像の中心との距離がしきい値を超える場合は前記関心領域及び前記テンプレートをそれぞれ矩形に設定する請求項１から４のいずれか１項に記載の調剤監査支援装置。
6. 前記照合部は、前記関心領域と前記テンプレートとのうち少なくとも一方を回転させることにより前記関心領域と前記テンプレートとの向きを合わせて前記照合を行う請求項１から５のいずれか１項に記載の調剤監査支援装置。
7. 前記照合部は、前記関心領域と前記テンプレートとのうち少なくとも一方を拡大または縮小することにより前記関心領域と前記テンプレートとの大きさを合わせて前記照合を行う請求項１から６のいずれか１項に記載の調剤監査支援装置。
8. 前記テンプレート及び前記関心領域は、前記薬剤に施された刻印を示す刻印領域を含む請求項１から７のいずれか１項に記載の調剤監査支援装置。
9. 前記マスタ画像は、前記撮影部により前記監査対象薬剤を前記照合の際に用いる照明の下で撮影した画像に基づく画像である請求項１から８のいずれか１項に記載の調剤監査支援装置。
10. 薬剤を示すマスタ画像を記憶するマスタ画像記憶部と、監査対象薬剤を撮影して撮影画像を取得する撮影部と、を備える調剤監査支援装置による調剤監査支援方法であって、
    前記調剤監査支援装置が前記撮影画像における前記監査対象薬剤の位置を検出する薬剤検出工程と、
    前記調剤監査支援装置が前記監査対象薬剤の画像に関心領域を設定する関心領域設定工程であって、前記関心領域の位置、形状、及び大きさを前記検出した薬剤の位置に基づいて設定する関心領域設定工程と、
    前記調剤監査支援装置が処方箋に記載された薬剤を示す前記マスタ画像を前記マスタ画像記憶部から読み出し、前記読み出したマスタ画像に基づいて前記関心領域に対応させてテンプレートを生成するテンプレート生成工程と、
    前記調剤監査支援装置が、前記テンプレートと前記関心領域とを照合して、前記撮影画像が示す薬剤と前記マスタ画像が示す薬剤とが同一であるか否かを示す情報を出力する照合工程と、
    を有する調剤監査支援方法。

Images