JP2004313563A

JP2004313563A - 読影支援システム、読影支援方法及びプログラム

Info

Publication number: JP2004313563A
Application number: JP2003113691A
Authority: JP
Inventors: Takayoshi Tsunomura; 卓是角村
Original assignee: Hitachi Medical Corp
Current assignee: Hitachi Healthcare Manufacturing Ltd
Priority date: 2003-04-18
Filing date: 2003-04-18
Publication date: 2004-11-11
Anticipated expiration: 2023-04-18
Also published as: JP4583721B2

Abstract

【課題】読影診断作業の効率を向上し、診断または読影に関する受診者の理解を向上させることが可能な読影支援システム、プログラムを提供する。
【解決手段】画像表示装置１５上にハードディスク９から読み込んだ画像を表示する。制御装置３のＣＰＵ５は、表示された画像を画像情報Ｖｎとして時系列に記録し、同時に音声入力装置２１により入力された音声を音声情報Ｓとして時系列に記録する。記録の開始、終了は、ボタン２３により制御する。記録が終了するとＣＰＵ５は、時系列に記録された画像情報Ｖｎと音声情報Ｓとを時系列に対応させて合成して合成データ３００を生成する。外部記録装置２５はメディア３１に合成データ３００を記録する。
【選択図】図１

Description

【０００１】
【発明の属する技術分野】
本発明は、画像と音声とをそれぞれ時間データと共に記録し、記録した時間データを基に合成することの可能な読影支援システム、プログラムに関する。
【０００２】
【従来の技術】
Ｘ線ＣＴ（ＣｏｍｐｕｔｅｄＴｏｍｏｇｒａｐｈｙ）装置、ＭＲＩ（ＭａｇｎｅｔｉｃＲｅｓｏｎａｎｃｅＩｍａｇｉｎｇ）装置、超音波診断装置などの医用画像診断装置においては、撮影された医用画像を医師が診断または読影する際には、撮影された医用画像を医用フィルムに出力したものをシャウカステンに照らして診断または読影を行う。
【０００３】
また、医用画像診断装置で撮影された医用画像をコンピュータに画像データとして取り込んで多値化処理などの種々の画像処理を行い、病巣候補を判別するようにした画像診断支援装置を用いて診断または読影を行う方法もある（例えば、特許文献１参照）。
【０００４】
上記診断または読影の結果は所定記録用紙に記述される等の方法で記録され、医師が患者または受診者に診断または読影の結果を説明する際には、医用フィルムまたはＣＲＴモニタ等の画像表示装置に表示された医用画像を参照しながら口頭で説明し、その結果は書面にて通知している。
【０００５】
【特許文献１】
国際公開第０２／０２００２号公報（第５−６頁、図１）
【０００６】
【発明が解決しようとする課題】
しかしながら、上記従来の診断または読影の説明または通知方法では、同じ患者や以前の受診者の過去の記録を閲覧する場合、該当の医用フィルムや、対応する所見記録用紙を探すのに時間がかかるという問題があった。また、受診者に読影結果を説明する際に、限られた時間での口頭説明や書面での結果通知では、受診者への理解が浸透しないという問題があった。
【０００７】
本発明は、このような問題に鑑みてなされたもので、その目的とするところは、任意の医用画像を表示させ、それに対する読影または診断に関する医師の説明の音声を記録し、その記録した音声と医用画像を患者または受診者に提供することで、医用画像の読影または診断作業にかかる時間を短縮し、読影診断作業の効率を向上すると共に、診断または読影に関する患者、受診者の理解の浸透を向上させることが可能な読影支援システム、プログラムを提供することである。
【０００８】
【課題を解決するための手段】
前述した目的を達成するために、第１の発明は、医用画像の病巣候補を抽出し、その抽出された医用画像の病巣候補を明示し、その明示情報と前記医用画像とを表示する手段と、この表示手段により表示された医用画像及び明示情報の診断情報を診断者の音声で入力する手段と、この音声入力手段により入力された診断情報と前記画像表示装置により表示された医用画像及び明示情報とを対応づけて音声画像合成情報を生成する音声画像情報合成手段と、この音声画像情報合成手段により生成された音声画像合成情報を記録する音声画像合成情報記録手段とを備えたことを特徴とする読影支援システムである。
【０００９】
ここで、明示情報とは、医用画像の病巣候補を明示するもので、例えば、癌の病巣候補を医用画像上に丸印等で明示するものである。
診断情報とは診断者である医師等が行う説明等の情報である。
【００１０】
この読影支援システムは、音声画像合成情報記録手段により記録された音声画像合成情報を再生する音声画像合成情報再生手段を備えたり、医用画像上に図形または文字を描画する描画手段を備え、この描画手段により描画された図形または文字を音声画像合成情報に対応付けて音声画像合成情報記録手段へ記録することもできる。
【００１１】
さらに、音声画像合成情報記録手段は、外部記憶装置に装填可能なメディアに記録することができる。
この読影支援システムは、音声画像合成情報記録手段の記録の開始と終了を行う記録通知手段を備え、この記録通知手段による記録開始と記録終了により音声画像合成情報記録手段での記録の開始と終了を行うこともできる。
【００１２】
この読影支援システムでは、画像表示手段に表示され、必要に応じて図形、文字等を書き込まれた表示画像を時系列に記録する。一方、音声入力装置から入力された音声情報を時系列に記録する。このとき、表示画像および音声情報と共に時間情報が記録されていることが好ましく、音声画像合成手段は、夫々に記録された時間情報を参照し、時間的に対応する表示画像と音声を合成して音声画像合成情報を生成する。
【００１３】
第２の発明は、医用画像の病巣候補を抽出し、その抽出された医用画像の病巣候補を明示し、その明示情報と前記医用画像とを表示し、該表示された医用画像及び明示情報の診断情報を診断者の音声で入力し、該入力された診断情報と前記表示された医用画像及び明示情報とを対応づけて音声画像合成情報を生成し、該生成された音声画像合成情報を記録することを特徴とする読影支援方法である。
【００１４】
第３の発明は、医用画像の病巣候補を抽出し、その抽出された医用画像の病巣候補を明示し、その明示情報と前記医用画像とを表示するステップと、表示された医用画像及び明示情報の診断情報を診断者の音声で入力するステップと、入力された診断情報と前記表示ステップにより表示された医用画像及び明示情報とを対応づけて音声画像合成情報を生成するステップと、生成された音声画像合成情報を記録するステップを、コンピュータに行わせることを特徴とする読影支援プログラムである。
【００１５】
【発明の実施の形態】
以下、図面に基づいて本発明の実施の形態を詳細に説明する。図１は、本発明の１実施の形態にかかる読影支援システム１を示す概略図、図２は、読影支援システム１の動作を説明するフローチャート、図３は、画像１００を示す図、図４は、画像１０６を示す図、図５は、画像情報Ｖｎの記録方法を示す概念図、図６は、音声情報Ｓの記録方法を示す概念図、図７は、画像情報Ｖｎと音声情報Ｓとの合成方法を示す概念図、図８は、合成データ３００を示す図である。
【００１６】
まず、図１を参照しながら、読影支援システム１の構成について説明する。図１に示すように、読影支援システム１は、制御装置３、表示装置１５、外部入力装置１９、音声入力装置２１、ボタン２３、外部記録装置２５等を有しており、必要に応じてネットワーク３３を介してサーバ３５に接続される。
【００１７】
制御装置３は、コンピュータシステムであり、ＣＰＵ５、メモリ７、ハードディスク９、インターフェース１１等を有している。ＣＰＵ５は、制御装置３の動作を制御する基本処理装置である。メモリ７は、制御装置３に内蔵された記録手段であり、画像情報、音声情報等を一時的に格納する。ハードディスク９は、制御装置３に内蔵された記憶装置であり、制御装置３に各種処理動作を行わせるためのプログラム、画像情報、音声情報、時間情報等を保存する。インターフェース１１は、制御装置３と外部との間での情報の入出力を制御する。
【００１８】
表示装置１５、外部入力装置１９、音声入力装置２１、ボタン２３、外部記録装置２５等は、インターフェース１１を介して制御装置３と接続されている。表示装置１５は、例えばＣＲＴモニタ、液晶表示装置等であり、ハードディスク９、外部記録装置２５、または、ネットワーク３３を介してサーバ３５のデータベース（図示せず）などから読み込んだ画像、外部入力装置１９から入力された文字、図形などを含む画像等を表示する。
【００１９】
外部入力装置１９は、例えばキーボード、マウス、タッチペン等であり、制御装置３に処理を指示する命令の入力手段、表示装置１５に表示されている画像への文字、図形の描き込み等を行う描画手段等として機能する。音声入力装置２１は例えばマイクロフォンであり、表示装置１５に表示された画像の説明等の音声を入力する。
【００２０】
ボタン２３は、メモリ７への画像情報、音声情報の記録開始あるいは記録終了の指示を行う記録通知手段である。記録の通知は、ボタン２３を１回押下することにより記録開始し、２度目に押下することにより記録終了するようにしてもよいし、ボタン２３を押下し続けている間、記録を行うようにしてもよい。
【００２１】
押下する毎に記録の開始、終了を通知する場合には、ボタン２３が押下されるとＣＰＵ５に記録開始を通知する制御信号を送信し、次に押下されると、ＣＰＵ５に記録の終了を通知する制御信号の送信を行うという方法が適用できる。ボタン２３を押し続けている間記録を継続する場合には、その間ＣＰＵ５に記録を継続させる制御信号を送信し続けるという方法が適用できる。また、記録通知手段としては、ボタン２３以外に、フットスイッチ、キーボード、マウス等からの入力、あるいは音声入力による方法を用いることもできる。
【００２２】
外部記録装置２５は、ＣＤ（コンパクトディスク）、ＭＯ（光磁気ディスク）、ＤＶＤ（ディジタルビデオディスク）等のメディア３１に情報の書き込みまたは読み取りを行うことが可能な記録装置である。外部記録装置２５は、制御装置３で合成された音声画像合成情報をメディア３１に記録する。また、画像表示装置１５に表示する画像を、外部記録装置２５で読み取るようにしてもよい。
【００２３】
ネットワーク３３は、インターネット、電話回線などの通信回線である。サーバ３５は、例えば医用画像を保持したデータベース（図示せず）を有し、そのデータベースの制御、ネットワークを介した通信の制御等を行うコンピュータシステムである。
【００２４】
次に、図２から図８を参照しながら読影支援システム１の動作を説明する。ここでは、医師が医用画像装置による検査を受けた受診者に検査結果を説明する場合を例にする。図２に示すように、制御装置３のＣＰＵ５は、ハードディスク９、外部記録装置２５、サーバ３５等、画像を保持している記録装置から画像情報を読み取ってメモリ７に展開し、表示装置１５に表示する（ステップ２０１）。この例では読み取られる画像情報は、Ｘ線ＣＴ装置、ＭＲＩ装置、超音波診断装置等で撮影され、ディジタルデータに変換されて記録装置に保持されている医用画像の画像情報である。
【００２５】
画像表示装置１５に表示された画像の患部や病変等を指摘するために図形または文字などを書き込む必要がある場合には、キーボード、マウス、タッチペン等の描画手段である外部入力装置１９により図形または文字などを描画する（ステップ２０２）。このとき図３に示すように、読み取った画像は、胸部のＸ線ＣＴ装置による画像であるとする。この画像１００には、肺癌の病巣候補を明示する明示情報として丸印１０３が描かれている。また、この画像１００には、図形１０２が描かれカーソル１０４が表示されている。図４に示す例では、画像１０６のように、「肺癌１０ｍｍ」という文字１０８が描画されている。図形１０２、カーソル１０４、文字１０８などは、医師が受診者に検査結果の説明を補足するために、必要に応じて描画され表示された画像である。
【００２６】
医師が受診者への説明の記録を開始する場合には、ボタン２３を押下する。ＣＰＵ５は、インターフェース１１を介してボタン２３からの信号を感知することにより押下されたか否かを判断する（ステップ２０３）。押されていない場合には、ステップ２０１に戻る。このとき、ステップ２０２で図形等を描画する前にボタン２３を押下して記録を開始し、説明を行いながら、表示画面に描画する経過も表示画像として共に記録するようにしてもよい。
【００２７】
ボタン２３が押下されたことが認識されるとＣＰＵ５は、図形１０２、カーソル１０４、文字１０８などを含む表示装置１５に表示されている画像を、画像情報Ｖｎとして時系列に記録する。
【００２８】
図５に示すように画像情報Ｖｎは、一定時間（以下、サンプリング時間という）毎に表示装置１５に表示されている表示画像をディジタルデータに変換した情報である。サンプリング時間は、例えば動画像表示の場合では１／３０秒程度にしてもよいし、静止画像の説明という用途に合わせて、例えば１秒程度としてもよく、任意に設定が可能である。また、画像情報Ｖｎが記録されている間に、外部入力装置１９から図形または文字などが入力された場合は、画像情報Ｖｎとして共に記録される。
【００２９】
このとき、記録が行われた時間ｔを共にメモリ７に一時的に格納する。例えばボタン２３が押下された時刻ｔ０を時間ゼロとした時間ｔを記録するようにしてもよいし、時刻を時間ｔとして記録してもよい。時間ｔは、時間ｔ０と画像情報Ｖ０、…、時間ｔｋと画像情報Ｖｋというように、画像情報Ｖｎと対応して記録される。
【００３０】
また画像情報Ｖｎが記録されている間、同時にＣＰＵ５は、音声入力装置２１から入力された音声を音声情報Ｓとして上記時間ｔと共にメモリ７に一時的に格納する（ステップ２０４）。すなわちこのとき、表示装置１５に表示された画像を見ながら医師が説明した音声が、サンプリング時間毎に記録された画像情報Ｖｎと共に時間ｔに対応づけられた状態でメモリ７に格納されていく。
【００３１】
図６に示すように、例えば時間ｔ０から次のサンプリング時間ｔ１までの音声情報Ｓを時間ｔ０と対応づけて記録し、同様に順次時間ｔと音声情報Ｓを対応づけてメモリ７に格納する。メモリ７に格納される際には、音声情報Ｓはディジタルデータに変換される。
【００３２】
ＣＰＵ５は、ボタン２３が離されたか否かを判断する（ステップ２０５）。離されていない場合、ボタン２３は制御装置３に制御信号を送り続けるため、ステップ２０４に戻って画像情報Ｖｎ、音声情報Ｓ、時間ｔのメモリ７への記録が継続的に行われる。図２の例では、ボタン２３が押下されている間、ボタン２３から制御信号が継続して制御装置３に入力され、記録を継続する方法であるが、１回押下されると記録を開始し、次に１回押下されると記録を終了するようにしてもよい。
【００３３】
ボタン２３が離され、制御信号の供給が停止されて記録が終了するとＣＰＵ５は、メモリ７に格納された画像情報Ｖｎ、音声情報Ｓ、時間ｔをハードディスク９に転送し、保存する（ステップ２０６）。このときも、画像情報Ｖｎ、音声情報Ｓは夫々ディジタルデータに変換されており、それぞれ時間ｔに対応づけられた状態でハードディスク９に保存される。
【００３４】
また、記録が継続されている間、画像情報Ｖｎ、音声情報Ｓ、時間ｔは一時的にメモリ７に格納されるが、記録時間が長くなり情報量が多くなる場合には、記録を継続している間に既に記録された画像情報Ｖｎ、音声情報Ｓ、時間ｔ等を順次ハードディスク９に転送し、記録するようにしてもよい。
【００３５】
ハードディスク９に上記画像情報Ｖｎ、音声情報Ｓ、時間ｔが保存されるとＣＰＵ５は、画像情報Ｖｎ、音声情報Ｓにそれぞれ対応づけられて保存された時間ｔを参照し、同一時間ｔの画像情報Ｖｎと音声情報Ｓとを合成し、合成データ３００を生成する（ステップ２０７）。
【００３６】
図７に示すように、時間ｔ０に画像情報Ｖ０と、時間ｔ０から時間ｔ１までの音声情報Ｓとを対応させることで、合成データ３００を生成する。すなわち図８に示すように、合成データ３００は、時間３０２が例えば時間ｔ０とすると、音声３０４として時間ｔ０から時間ｔ１までの音声情報Ｓを記録し、画像３０６として画像情報Ｖ０を記録する。以下同様に時間３０８、音声３１０、画像３１２、…と、同一時間における音声情報Ｓと画像情報Ｖｎとを対応づけて記録し、合成データ３００とする。このとき、画像情報Ｖｎ、音声情報Ｓはディジタルデータである。
【００３７】
ＣＰＵ５は、合成データ３００をハードディスク９に記録すると共に、外部記録装置２５によりメディア３１に記録する（ステップ２０８）。メディア３１としてはＣＤ、ＭＯ、ＤＶＤ等が利用可能である。このように合成データ３００を記録したので、メディア３１により、医師が説明している音声と、参照した画像が同時に再生することができる。
【００３８】
また、医師が、撮影された医用画像の読影または診断を行う場合には、対象の画像を表示装置１５に表示させ、ボタン２３を押下して、外部入力装置１９により必要な図形、文字などを描画しながら、記録しておきたい所見等を音声入力装置２１により記録させることもできる。このとき、記録装置に保存されている画像ならば、同一患者の過去のデータや他の患者の参考になる画像等、複数の画像を対比させながら表示させて参考にし、所見と共に記録しながら読影または診断を行うことや、一度読影または診断を行った医用画像を再び閲覧することも、資料を保管場所をから探す手間を省くことができるので容易に行える。また、受診者及び患者に対する説明の補充として用いることもできる。
【００３９】
以上詳細に説明したように、本発明の望ましい一実施形態によれば、合成データ３００が記録されたメディア３１が得られる。受診者はこのメディア３１を再生装置で再生することにより、随時繰り返して医師の説明を、画像を確認しながら聞くことができる。これにより、自分に下された診断や、生活上の注意点等についての理解を深めることが可能になる。また、別な医師にセカンドオピニオンを求める際に活用すれば、より正確に初めに診断した医師の診断内容を伝えることができ、別な医師の診断を受けることで重複して同じ検査をする等の無駄を省く効果もある。
【００４０】
以上、添付図面を参照しながら本発明にかかる読影支援システム、読影支援方法、プログラムの好適な実施形態について説明したが、本発明はかかる例に限定されない。当業者であれば、特許請求の範囲に記載された技術的思想の範疇内において各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【００４１】
例えば、本実施の形態においては、医用画像を用いた読影支援システムとしたが、表示される画像は医用画像に限定されない。記録装置に記録可能な画像であれば、動画、静止画いずれでもよく、アナログ信号で記録された画像でもよい。また、本実施の形態においては、音声を音声入力装置から入力したが、逆に、記録装置に記録された音声に合わせ、映像をビデオカメラ等の撮像装置により入力し、合成する方法でもよい。この場合も、記録装置に記録された音声はアナログ信号で記録されていてもよい。
【００４２】
【発明の効果】
以上、詳細に説明したように本発明によれば、画像と所見が時系列的に合成されて表示されるので診断時間の短縮、作業の効率を向上することができる。また、画像と所見が１つの記録媒体に収納されるので、患者及び検診受診者に診断後の説明を行う際に、画像を用いて説明した内容を記録し、患者または受診者に渡せるので、診断内容の理解を深めるという効果も奏する。
【図面の簡単な説明】
【図１】本発明の１実施の形態にかかる読影支援システム１を示す概略図
【図２】読影支援システム１の動作を説明するフローチャート
【図３】画像１００を示す図
【図４】画像１０６を示す図
【図５】画像情報Ｖｎの記録方法を示す概念図
【図６】音声情報Ｓの記録方法を示す概念図
【図７】画像情報Ｖｎと音声情報Ｓとの合成方法を示す概念図
【図８】合成データ３００を示す図
【符号の説明】
１読影支援システム
３制御装置
５ＣＰＵ
７メモリ
９ハードディスク
１１インターフェース
１５表示装置
１９外部入力装置
２１音声入力装置
２３ボタン
２５外部記録装置
３１メディア
３３ネットワーク
３５サーバ

Claims

医用画像の病巣候補を抽出し、その抽出された医用画像の病巣候補を明示し、その明示情報と前記医用画像とを表示する手段と、
この表示手段により表示された医用画像及び明示情報の診断情報を診断者の音声で入力する手段と、
この音声入力手段により入力された診断情報と前記画像表示装置により表示された医用画像及び明示情報とを対応づけて音声画像合成情報を生成する音声画像情報合成手段と、
この音声画像情報合成手段により生成された音声画像合成情報を記録する音声画像合成情報記録手段とを備えたことを特徴とする読影支援システム。
前記音声画像合成情報記録手段により記録された音声画像合成情報を再生する音声画像合成情報再生手段を備えたことを特徴とする請求項１に記載の読影支援システム。
前記音声画像合成情報記録手段は、外部記憶装置に装填可能なメディアに記録することを特徴とする請求項１に記載の読影支援システム。
前記医用画像上に図形または文字を描画する描画手段を備え、この描画手段により描画された図形または文字を前記音声画像合成情報に対応付けて音声画像合成情報記録手段へ記録することを特徴とする請求項１に記載の読影支援システム。
前記音声画像合成情報記録手段の記録の開始と終了を行う記録通知手段を備え、この記録通知手段による記録開始と記録終了により前記音声画像合成情報記録手段での記録の開始と終了を行うことを特徴とする請求項１に記載の読影支援システム。
医用画像の病巣候補を抽出し、その抽出された医用画像の病巣候補を明示し、その明示情報と前記医用画像とを表示し、該表示された医用画像及び明示情報の診断情報を診断者の音声で入力し、該入力された診断情報と前記表示された医用画像及び明示情報とを対応づけて音声画像合成情報を生成し、該生成された音声画像合成情報を記録することを特徴とする読影支援方法。
医用画像の病巣候補を抽出し、その抽出された医用画像の病巣候補を明示し、その明示情報と前記医用画像とを表示するステップと、
表示された医用画像及び明示情報の診断情報を診断者の音声で入力するステップと、
入力された診断情報と前記表示ステップにより表示された医用画像及び明示情報とを対応づけて音声画像合成情報を生成するステップと、
生成された音声画像合成情報を記録するステップを、コンピュータに行わせることを特徴とする読影支援プログラム。