JP2007319327A - 読影支援システム - Google Patents
読影支援システム Download PDFInfo
- Publication number
- JP2007319327A JP2007319327A JP2006151485A JP2006151485A JP2007319327A JP 2007319327 A JP2007319327 A JP 2007319327A JP 2006151485 A JP2006151485 A JP 2006151485A JP 2006151485 A JP2006151485 A JP 2006151485A JP 2007319327 A JP2007319327 A JP 2007319327A
- Authority
- JP
- Japan
- Prior art keywords
- interpretation
- image
- sight
- line
- diagnostic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000004438 eyesight Effects 0.000 claims 1
- 238000000034 method Methods 0.000 description 9
- 238000005259 measurement Methods 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 210000001508 eye Anatomy 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
Images
Landscapes
- Apparatus For Radiation Diagnosis (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
【課題】 読影業務において、読影者が見ている画像に関して、見ている部分と見ていない部分を識別し、識別された見ていない部分に対し読影漏れを指摘して、精度の高い読影業務を支援をする。
【解決手段】 読影者の視線を計測するカメラ1及び視線解析手段2と、その計測された視線と、GUIの操作記録を時系列に沿って記録する操作記録手段3とを有する。
【選択図】 図1
【解決手段】 読影者の視線を計測するカメラ1及び視線解析手段2と、その計測された視線と、GUIの操作記録を時系列に沿って記録する操作記録手段3とを有する。
【選択図】 図1
Description
本発明は、医療における画像診断の読影業務を支援する読影支援システムに属する。
医用画像の読影で、読影漏れを防止する方法は無かった。従来は、画像を操作した記録から、読影したということを間接的に保証するに過ぎなかった。
特許文献1は、読影作業において、操作を時系列データにそって保存し、後で読影作業を再生可能とするものである。
医用画像の読影では、読影する画像数が多くなると、読影に漏れが発生する可能性があった。仮に読影漏れが発生すると、患者の病変を見逃すおそれがある。
特開2002-253545号公報
特許文献1は、読影作業において、操作を時系列データにそって保存し、後で読影作業を再生可能とするものである。
医用画像の読影では、読影する画像数が多くなると、読影に漏れが発生する可能性があった。仮に読影漏れが発生すると、患者の病変を見逃すおそれがある。
しかしながら、画像を表示したということがすなわち、画像を読影したということにはならないため、画像を見たことを証明し、かつ見ていない部分を指摘して確実な読影を支援する必要がある。
本発明の目的は、読影業務において、読影者が見ている画像に関して、見ている部分と見ていない部分を識別し、識別された見ていない部分に対し読影漏れを指摘して、精度の高い読影業務を支援する読影支援システムを提供することにある。
上記目的は、医用画像の読影レポートをグラフィカルユーザインターフェース(GUI)を介して作成する読影レポーティングシステムにおいて、読影者の視線を計測する手段と、前記GUIの操作記録と共に前記計測された視線を時系列に沿って記録する手段とを備えた。
本発明によれば、読影業務において、読影者が見ている画像に関して、見ている部分と見ていない部分を識別し、識別された見ていない部分に対し読影漏れを指摘して、精度の高い読影業務を支援をする読影支援システムを提供できる。
図1を用いて、本発明の実施例について説明する。
読影レポーティングシステムにおいて、読影者の視線を計測するカメラ1と視線解析手段2、GUI操作記録手段3を有し、視線計測の記録と操作記録から画像に関する読影漏れを検出する読影漏れ検出手段5を有する。医用画像の読影において、読影者の操作及び、視線の計測結果を時系列に沿って記録する。視線の計測手段は、カメラ1と視線解析手段2よりなる。カメラ1で撮影した読影者の眼球の状態を視線解析手段2で解析して、読影端末上の視線の計測を行う。視線位置の計測結果は、レポーティングシステム上における2次元座標として検出する。GUIの操作記録は、マウス等のポインティングデバイスのポインタの座標と、マウスボタンやキーボード等の操作イベントを記録する。
ここで視野解析手段は、例えばhttp://www.creact.co.jp/jpn/j_n_tobii01.htmlで公知とされているディバイスを用いる。
読影レポーティングシステムにおいて、読影者の視線を計測するカメラ1と視線解析手段2、GUI操作記録手段3を有し、視線計測の記録と操作記録から画像に関する読影漏れを検出する読影漏れ検出手段5を有する。医用画像の読影において、読影者の操作及び、視線の計測結果を時系列に沿って記録する。視線の計測手段は、カメラ1と視線解析手段2よりなる。カメラ1で撮影した読影者の眼球の状態を視線解析手段2で解析して、読影端末上の視線の計測を行う。視線位置の計測結果は、レポーティングシステム上における2次元座標として検出する。GUIの操作記録は、マウス等のポインティングデバイスのポインタの座標と、マウスボタンやキーボード等の操作イベントを記録する。
ここで視野解析手段は、例えばhttp://www.creact.co.jp/jpn/j_n_tobii01.htmlで公知とされているディバイスを用いる。
視線位置、ポインティングデバイスの座標、操作イベントは、時系列に沿って記録する。このとき、アクセスしたデータやファイル、通信ログ、コマンドログも同時に記録する。つまり、任意の時刻において読影者が行っていた処理と読影者の見ていた部分を記録する。
記録された情報から読影者が見落とした部分の抽出方法に関して、図2で説明する。視線の中心座標を含む一定の範囲を注目視野とし、注目視野が画像中を走査した領域を観察済みの領域とする。画像中から観察済み領域を除くことで、未観察領域を抽出する。画像の四隅等のように臨床的に意味の無い領域は、予め観察が必要な領域(要観察領域)を設定し、未観察領域の候補から排除しておくことで、読影者の余分な手間を防ぐことが出来る。1枚の画像を表示してから該当画像に対する読影終了の操作をするまでに観察した領域を記録し、1画像を読影する毎に、観察済み領域と観察に要観察領域との差を取ることで、画像中の未観察領域を抽出する。そして、読影終了操作をする時に画像上にオーバーレイ表示することで、読影者に未観察領域を知らしめる。
図3では、読影漏れを防止する方法を説明する。基本的には、未観察領域が全て観察済みとなるまで、読影を完了しないことで、読影漏れ防止する。しかしながら、視野の境などの曖昧さがあることから未観察領域が、予め規定した面積よりも大きい場合、又は予め規定した重要部位を含んでいる場合には、読影完了としないように設定することが出来る。面積は、未観察領域の画総数を計測して求めることが出来る。また、予め設定する重要部位は、画像の中心付近の領域としても良いし、標準的な画像における重要臓器の位置に設定することも出来る。読影が終了できない時に読影終了捜査を行った場合には、アラートを音やダイアログによって表示することで、再度観察を要求する。
図4では、読影者が注視した部位を検出する例を示す。時系列と共に記録した視線の記録において、予め設定した領域における視線の合計滞留時間が、一定時間以上の場合、当該部位を含む一定の範囲をROIとして記録する。視線の滞留時間、当該部位を含む範囲は予め設定することが出来る。ROIの検出は視線の滞留時間の合計で判断し、例えば、視線の滞留時間を6秒とすると、6秒以上当該部位を凝視した場合だけでなく、2秒ずつ3回、当該部位を観察した場合もROIとして抽出する。もちろん、この設定は、ユーザにより変更可能であり、合計滞留時間を連続滞留時間とすることで、視線が通過しただけの場合は勘案せず、所定の時間以上凝視した場合のみをROIとして取り上げることも出来る。どちらの場合でも、時系列に沿って視線位置を記録することで、設定値との比較によって可能となる。
上記の様に記録されたROIは、ROIを示すマークを、画像上にスーパーインポーズして表示する。表示されたROIは、後から読影者の判断で、編集することが出来る。
上記の様に記録されたROIは、ROIを示すマークを、画像上にスーパーインポーズして表示する。表示されたROIは、後から読影者の判断で、編集することが出来る。
図5では、記録した読影状態を再生する実施例に関して説明する。前述までの実施例では、読影過程の視線と操作、読影対象を時系列に沿って記録データに記録する。記録データには、読影過程で利用された画像などのデータや、読影の結果生成した所見なども読影対象として記録している為、読影開始時点に立ち戻って、同じ読影対象に対して、同じ操作を行えば、同じ読影過程が再現できる。本発明では、このような読影過程の再現に対して、ディスプレィ上に読影者の視線の軌跡を表示することが特長である。GUI再生手段は、読影過程の再現(再生)時に、時系列データを一致させた視線の軌跡を表示することで、読影者が、どういう順番で画像を観察したか、画像のどの部位を見て所見を書いたか等を明確に出来る。読影者の視線の軌跡を含めた読影過程を再生することで、研修医等の学習、訴訟時の証拠に役立てる。
1 カメラ、2 視線解析手段、3 操作記録手段、4 操作再生手段、5 読影漏れ検出手段
Claims (1)
- 医用画像の読影レポートをグラフィカルユーザインターフェース(GUI)を介して作成する読影レポーティングシステムにおいて、
読影者の視線を計測する手段と、
前記GUIの操作記録と共に前記計測された視線を時系列に沿って記録する手段と、
を備えたことを特徴とする読影支援システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006151485A JP2007319327A (ja) | 2006-05-31 | 2006-05-31 | 読影支援システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006151485A JP2007319327A (ja) | 2006-05-31 | 2006-05-31 | 読影支援システム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2007319327A true JP2007319327A (ja) | 2007-12-13 |
Family
ID=38852614
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006151485A Pending JP2007319327A (ja) | 2006-05-31 | 2006-05-31 | 読影支援システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2007319327A (ja) |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011078527A (ja) * | 2009-10-06 | 2011-04-21 | Toshiba Corp | 医用画像管理装置、及び医用画像表示装置 |
JP2011092691A (ja) * | 2009-10-02 | 2011-05-12 | Kao Corp | 美容支援装置、美容カウンセリング方法および視線追跡データ取得方法 |
JP2011175620A (ja) * | 2010-02-23 | 2011-09-08 | Fuji Xerox Co Ltd | 画像分析支援方法、画像分析支援システムおよび画像分析支援のためのプログラム |
JP2014124315A (ja) * | 2012-12-26 | 2014-07-07 | Toshiba Corp | 画像処理装置、医用画像診断装置及び画像処理プログラム |
WO2015029970A1 (ja) | 2013-08-28 | 2015-03-05 | オリンパスメディカルシステムズ株式会社 | カプセル型内視鏡システム |
JP2015160083A (ja) * | 2014-02-28 | 2015-09-07 | 株式会社東芝 | 医用画像表示装置 |
JP2015198928A (ja) * | 2014-03-31 | 2015-11-12 | 株式会社東芝 | 医用画像処理装置、および医用画像処理システム |
WO2015174548A1 (en) | 2014-05-16 | 2015-11-19 | Canon Kabushiki Kaisha | Image diagnosis assistance apparatus, control method thereof, and program |
WO2016035312A1 (en) * | 2014-09-05 | 2016-03-10 | Canon Kabushiki Kaisha | Assistance apparatus for assisting interpretation report creation and method for controlling the same |
US20160317245A1 (en) * | 2013-12-24 | 2016-11-03 | General Electric Company | Method for medical image processing |
WO2017033516A1 (ja) * | 2015-08-24 | 2017-03-02 | 富士フイルム株式会社 | 読影支援装置及び方法 |
JP2017225742A (ja) * | 2016-06-24 | 2017-12-28 | 株式会社ジェイマックシステム | 読影支援装置、読影支援方法および読影支援プログラム |
JP2019008816A (ja) * | 2018-09-03 | 2019-01-17 | キヤノン株式会社 | 読影レポート作成のための支援装置およびその制御方法 |
US10475252B2 (en) | 2014-09-05 | 2019-11-12 | Canon Kabushiki Kaisha | Image diagnosis assistance apparatus, control method, and program |
US11642005B2 (en) | 2018-11-28 | 2023-05-09 | Olympus Corporation | Endoscope system, endoscope image processing method, and storage medium |
-
2006
- 2006-05-31 JP JP2006151485A patent/JP2007319327A/ja active Pending
Cited By (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011092691A (ja) * | 2009-10-02 | 2011-05-12 | Kao Corp | 美容支援装置、美容カウンセリング方法および視線追跡データ取得方法 |
JP2011078527A (ja) * | 2009-10-06 | 2011-04-21 | Toshiba Corp | 医用画像管理装置、及び医用画像表示装置 |
JP2011175620A (ja) * | 2010-02-23 | 2011-09-08 | Fuji Xerox Co Ltd | 画像分析支援方法、画像分析支援システムおよび画像分析支援のためのプログラム |
US8311279B2 (en) | 2010-02-23 | 2012-11-13 | Fuji Xerox Co., Ltd. | System and method for improved image analysis through gaze data feedback |
JP2014124315A (ja) * | 2012-12-26 | 2014-07-07 | Toshiba Corp | 画像処理装置、医用画像診断装置及び画像処理プログラム |
US9517001B2 (en) | 2013-08-28 | 2016-12-13 | Olympus Corporation | Capsule endoscope system |
WO2015029970A1 (ja) | 2013-08-28 | 2015-03-05 | オリンパスメディカルシステムズ株式会社 | カプセル型内視鏡システム |
US10314665B2 (en) * | 2013-12-24 | 2019-06-11 | General Electric Company | Method for medical image processing |
US20160317245A1 (en) * | 2013-12-24 | 2016-11-03 | General Electric Company | Method for medical image processing |
JP2015160083A (ja) * | 2014-02-28 | 2015-09-07 | 株式会社東芝 | 医用画像表示装置 |
JP2015198928A (ja) * | 2014-03-31 | 2015-11-12 | 株式会社東芝 | 医用画像処理装置、および医用画像処理システム |
JP2015217120A (ja) * | 2014-05-16 | 2015-12-07 | キヤノン株式会社 | 画像診断支援装置、その処理方法及びプログラム |
US10558263B2 (en) | 2014-05-16 | 2020-02-11 | Canon Kabushiki Kaisha | Image diagnosis assistance apparatus, control method thereof, and program |
WO2015174548A1 (en) | 2014-05-16 | 2015-11-19 | Canon Kabushiki Kaisha | Image diagnosis assistance apparatus, control method thereof, and program |
US10475252B2 (en) | 2014-09-05 | 2019-11-12 | Canon Kabushiki Kaisha | Image diagnosis assistance apparatus, control method, and program |
JP2016057695A (ja) * | 2014-09-05 | 2016-04-21 | キヤノン株式会社 | 読影レポート作成のための支援装置およびその制御方法 |
WO2016035312A1 (en) * | 2014-09-05 | 2016-03-10 | Canon Kabushiki Kaisha | Assistance apparatus for assisting interpretation report creation and method for controlling the same |
US11075003B2 (en) | 2014-09-05 | 2021-07-27 | Canon Kabushiki Kaisha | Assistance apparatus for assisting interpretation report creation and method for controlling the same |
JPWO2017033516A1 (ja) * | 2015-08-24 | 2018-06-07 | 富士フイルム株式会社 | 読影支援装置及び方法 |
WO2017033516A1 (ja) * | 2015-08-24 | 2017-03-02 | 富士フイルム株式会社 | 読影支援装置及び方法 |
US10456072B2 (en) | 2015-08-24 | 2019-10-29 | Fujifilm Corporation | Image interpretation support apparatus and method |
JP2017225742A (ja) * | 2016-06-24 | 2017-12-28 | 株式会社ジェイマックシステム | 読影支援装置、読影支援方法および読影支援プログラム |
JP2019008816A (ja) * | 2018-09-03 | 2019-01-17 | キヤノン株式会社 | 読影レポート作成のための支援装置およびその制御方法 |
US11642005B2 (en) | 2018-11-28 | 2023-05-09 | Olympus Corporation | Endoscope system, endoscope image processing method, and storage medium |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2007319327A (ja) | 読影支援システム | |
JP6811837B2 (ja) | 病理データ捕捉 | |
JP4537104B2 (ja) | マーカ検出方法、マーカ検出装置、位置姿勢推定方法、及び複合現実空間提示方法 | |
US10302932B2 (en) | Microscope system and microscopy method using digital markers | |
EP2472473A1 (en) | Image analysis device | |
US11207044B2 (en) | Information processing apparatus, information processing method, computer-readable medium, and biological signal measurement system | |
JP6996203B2 (ja) | 情報処理装置、情報処理方法、プログラムおよび生体信号計測システム | |
US20190051408A1 (en) | Medical tool work support system, medical tool work support method, and medical tool work support program | |
JP7009906B2 (ja) | 情報処理装置、情報処理方法、プログラムおよび生体信号計測システム | |
JP4731127B2 (ja) | 画像診断支援装置及び方法 | |
JP2020531099A5 (ja) | ||
JP2010042065A (ja) | 医用画像処理装置、処理方法 | |
JP5751899B2 (ja) | 医用画像処理装置及び医用画像診断装置 | |
JP6996095B2 (ja) | 情報表示装置、生体信号計測システムおよびプログラム | |
US11109810B2 (en) | Information display device, biological signal measurement system, and computer program product | |
US12042340B2 (en) | Method and system for the identification and handling of events in a system for the synchronization and combined display of information | |
US9386908B2 (en) | Navigation using a pre-acquired image | |
US20220351428A1 (en) | Information processing apparatus, information processing method, and computer readable recording medium | |
US11927540B2 (en) | Information processing apparatus, information processing method, and recording medium | |
CN118215936A (zh) | 用于腹腔镜和视频辅助手术的交互式增强现实系统 | |
JP2005287571A (ja) | 注意配分検査方法、注意配分検査装置、及び注意配分検査プログラム記録媒体 | |
JP7176197B2 (ja) | 情報処理装置、生体信号計測システム、表示方法、及びプログラム | |
US20160183781A1 (en) | Apparatus and method for assessing and improving the reliability of a visual field test | |
JP6941833B2 (ja) | 高次脳機能検査用の三次元表示装置、高次脳機能検査用の三次元表示方法、および高次脳機能検査用の三次元表示プログラム | |
KR20160112494A (ko) | 파노라마에서의 효율적인 구강 병변 발병여부 예측감지 방법 및 시스템 |