JP2007319327A - 読影支援システム - Google Patents

読影支援システム Download PDF

Info

Publication number
JP2007319327A
JP2007319327A JP2006151485A JP2006151485A JP2007319327A JP 2007319327 A JP2007319327 A JP 2007319327A JP 2006151485 A JP2006151485 A JP 2006151485A JP 2006151485 A JP2006151485 A JP 2006151485A JP 2007319327 A JP2007319327 A JP 2007319327A
Authority
JP
Japan
Prior art keywords
interpretation
image
sight
line
diagnostic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2006151485A
Other languages
English (en)
Inventor
Takayuki Nagaoka
孝行 長岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Healthcare Manufacturing Ltd
Original Assignee
Hitachi Medical Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Medical Corp filed Critical Hitachi Medical Corp
Priority to JP2006151485A priority Critical patent/JP2007319327A/ja
Publication of JP2007319327A publication Critical patent/JP2007319327A/ja
Pending legal-status Critical Current

Links

Images

Landscapes

  • Apparatus For Radiation Diagnosis (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

【課題】 読影業務において、読影者が見ている画像に関して、見ている部分と見ていない部分を識別し、識別された見ていない部分に対し読影漏れを指摘して、精度の高い読影業務を支援をする。
【解決手段】 読影者の視線を計測するカメラ1及び視線解析手段2と、その計測された視線と、GUIの操作記録を時系列に沿って記録する操作記録手段3とを有する。
【選択図】 図1

Description

本発明は、医療における画像診断の読影業務を支援する読影支援システムに属する。
医用画像の読影で、読影漏れを防止する方法は無かった。従来は、画像を操作した記録から、読影したということを間接的に保証するに過ぎなかった。
特許文献1は、読影作業において、操作を時系列データにそって保存し、後で読影作業を再生可能とするものである。
医用画像の読影では、読影する画像数が多くなると、読影に漏れが発生する可能性があった。仮に読影漏れが発生すると、患者の病変を見逃すおそれがある。
特開2002-253545号公報
しかしながら、画像を表示したということがすなわち、画像を読影したということにはならないため、画像を見たことを証明し、かつ見ていない部分を指摘して確実な読影を支援する必要がある。
本発明の目的は、読影業務において、読影者が見ている画像に関して、見ている部分と見ていない部分を識別し、識別された見ていない部分に対し読影漏れを指摘して、精度の高い読影業務を支援する読影支援システムを提供することにある。
上記目的は、医用画像の読影レポートをグラフィカルユーザインターフェース(GUI)を介して作成する読影レポーティングシステムにおいて、読影者の視線を計測する手段と、前記GUIの操作記録と共に前記計測された視線を時系列に沿って記録する手段とを備えた。
本発明によれば、読影業務において、読影者が見ている画像に関して、見ている部分と見ていない部分を識別し、識別された見ていない部分に対し読影漏れを指摘して、精度の高い読影業務を支援をする読影支援システムを提供できる。
図1を用いて、本発明の実施例について説明する。
読影レポーティングシステムにおいて、読影者の視線を計測するカメラ1と視線解析手段2、GUI操作記録手段3を有し、視線計測の記録と操作記録から画像に関する読影漏れを検出する読影漏れ検出手段5を有する。医用画像の読影において、読影者の操作及び、視線の計測結果を時系列に沿って記録する。視線の計測手段は、カメラ1と視線解析手段2よりなる。カメラ1で撮影した読影者の眼球の状態を視線解析手段2で解析して、読影端末上の視線の計測を行う。視線位置の計測結果は、レポーティングシステム上における2次元座標として検出する。GUIの操作記録は、マウス等のポインティングデバイスのポインタの座標と、マウスボタンやキーボード等の操作イベントを記録する。
ここで視野解析手段は、例えばhttp://www.creact.co.jp/jpn/j_n_tobii01.htmlで公知とされているディバイスを用いる。
視線位置、ポインティングデバイスの座標、操作イベントは、時系列に沿って記録する。このとき、アクセスしたデータやファイル、通信ログ、コマンドログも同時に記録する。つまり、任意の時刻において読影者が行っていた処理と読影者の見ていた部分を記録する。
記録された情報から読影者が見落とした部分の抽出方法に関して、図2で説明する。視線の中心座標を含む一定の範囲を注目視野とし、注目視野が画像中を走査した領域を観察済みの領域とする。画像中から観察済み領域を除くことで、未観察領域を抽出する。画像の四隅等のように臨床的に意味の無い領域は、予め観察が必要な領域(要観察領域)を設定し、未観察領域の候補から排除しておくことで、読影者の余分な手間を防ぐことが出来る。1枚の画像を表示してから該当画像に対する読影終了の操作をするまでに観察した領域を記録し、1画像を読影する毎に、観察済み領域と観察に要観察領域との差を取ることで、画像中の未観察領域を抽出する。そして、読影終了操作をする時に画像上にオーバーレイ表示することで、読影者に未観察領域を知らしめる。
図3では、読影漏れを防止する方法を説明する。基本的には、未観察領域が全て観察済みとなるまで、読影を完了しないことで、読影漏れ防止する。しかしながら、視野の境などの曖昧さがあることから未観察領域が、予め規定した面積よりも大きい場合、又は予め規定した重要部位を含んでいる場合には、読影完了としないように設定することが出来る。面積は、未観察領域の画総数を計測して求めることが出来る。また、予め設定する重要部位は、画像の中心付近の領域としても良いし、標準的な画像における重要臓器の位置に設定することも出来る。読影が終了できない時に読影終了捜査を行った場合には、アラートを音やダイアログによって表示することで、再度観察を要求する。
図4では、読影者が注視した部位を検出する例を示す。時系列と共に記録した視線の記録において、予め設定した領域における視線の合計滞留時間が、一定時間以上の場合、当該部位を含む一定の範囲をROIとして記録する。視線の滞留時間、当該部位を含む範囲は予め設定することが出来る。ROIの検出は視線の滞留時間の合計で判断し、例えば、視線の滞留時間を6秒とすると、6秒以上当該部位を凝視した場合だけでなく、2秒ずつ3回、当該部位を観察した場合もROIとして抽出する。もちろん、この設定は、ユーザにより変更可能であり、合計滞留時間を連続滞留時間とすることで、視線が通過しただけの場合は勘案せず、所定の時間以上凝視した場合のみをROIとして取り上げることも出来る。どちらの場合でも、時系列に沿って視線位置を記録することで、設定値との比較によって可能となる。
上記の様に記録されたROIは、ROIを示すマークを、画像上にスーパーインポーズして表示する。表示されたROIは、後から読影者の判断で、編集することが出来る。
図5では、記録した読影状態を再生する実施例に関して説明する。前述までの実施例では、読影過程の視線と操作、読影対象を時系列に沿って記録データに記録する。記録データには、読影過程で利用された画像などのデータや、読影の結果生成した所見なども読影対象として記録している為、読影開始時点に立ち戻って、同じ読影対象に対して、同じ操作を行えば、同じ読影過程が再現できる。本発明では、このような読影過程の再現に対して、ディスプレィ上に読影者の視線の軌跡を表示することが特長である。GUI再生手段は、読影過程の再現(再生)時に、時系列データを一致させた視線の軌跡を表示することで、読影者が、どういう順番で画像を観察したか、画像のどの部位を見て所見を書いたか等を明確に出来る。読影者の視線の軌跡を含めた読影過程を再生することで、研修医等の学習、訴訟時の証拠に役立てる。
本発明の構成図。 本発明の未観察領域の表示例。 本発明の読影漏れ防止例。 本発明のROI設定の例。 本発明の画面操作の再生例。
符号の説明
1 カメラ、2 視線解析手段、3 操作記録手段、4 操作再生手段、5 読影漏れ検出手段

Claims (1)

  1. 医用画像の読影レポートをグラフィカルユーザインターフェース(GUI)を介して作成する読影レポーティングシステムにおいて、
    読影者の視線を計測する手段と、
    前記GUIの操作記録と共に前記計測された視線を時系列に沿って記録する手段と、
    を備えたことを特徴とする読影支援システム。
JP2006151485A 2006-05-31 2006-05-31 読影支援システム Pending JP2007319327A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006151485A JP2007319327A (ja) 2006-05-31 2006-05-31 読影支援システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006151485A JP2007319327A (ja) 2006-05-31 2006-05-31 読影支援システム

Publications (1)

Publication Number Publication Date
JP2007319327A true JP2007319327A (ja) 2007-12-13

Family

ID=38852614

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006151485A Pending JP2007319327A (ja) 2006-05-31 2006-05-31 読影支援システム

Country Status (1)

Country Link
JP (1) JP2007319327A (ja)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011078527A (ja) * 2009-10-06 2011-04-21 Toshiba Corp 医用画像管理装置、及び医用画像表示装置
JP2011092691A (ja) * 2009-10-02 2011-05-12 Kao Corp 美容支援装置、美容カウンセリング方法および視線追跡データ取得方法
JP2011175620A (ja) * 2010-02-23 2011-09-08 Fuji Xerox Co Ltd 画像分析支援方法、画像分析支援システムおよび画像分析支援のためのプログラム
JP2014124315A (ja) * 2012-12-26 2014-07-07 Toshiba Corp 画像処理装置、医用画像診断装置及び画像処理プログラム
WO2015029970A1 (ja) 2013-08-28 2015-03-05 オリンパスメディカルシステムズ株式会社 カプセル型内視鏡システム
JP2015160083A (ja) * 2014-02-28 2015-09-07 株式会社東芝 医用画像表示装置
JP2015198928A (ja) * 2014-03-31 2015-11-12 株式会社東芝 医用画像処理装置、および医用画像処理システム
WO2015174548A1 (en) 2014-05-16 2015-11-19 Canon Kabushiki Kaisha Image diagnosis assistance apparatus, control method thereof, and program
WO2016035312A1 (en) * 2014-09-05 2016-03-10 Canon Kabushiki Kaisha Assistance apparatus for assisting interpretation report creation and method for controlling the same
US20160317245A1 (en) * 2013-12-24 2016-11-03 General Electric Company Method for medical image processing
WO2017033516A1 (ja) * 2015-08-24 2017-03-02 富士フイルム株式会社 読影支援装置及び方法
JP2017225742A (ja) * 2016-06-24 2017-12-28 株式会社ジェイマックシステム 読影支援装置、読影支援方法および読影支援プログラム
JP2019008816A (ja) * 2018-09-03 2019-01-17 キヤノン株式会社 読影レポート作成のための支援装置およびその制御方法
US10475252B2 (en) 2014-09-05 2019-11-12 Canon Kabushiki Kaisha Image diagnosis assistance apparatus, control method, and program
US11642005B2 (en) 2018-11-28 2023-05-09 Olympus Corporation Endoscope system, endoscope image processing method, and storage medium

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011092691A (ja) * 2009-10-02 2011-05-12 Kao Corp 美容支援装置、美容カウンセリング方法および視線追跡データ取得方法
JP2011078527A (ja) * 2009-10-06 2011-04-21 Toshiba Corp 医用画像管理装置、及び医用画像表示装置
JP2011175620A (ja) * 2010-02-23 2011-09-08 Fuji Xerox Co Ltd 画像分析支援方法、画像分析支援システムおよび画像分析支援のためのプログラム
US8311279B2 (en) 2010-02-23 2012-11-13 Fuji Xerox Co., Ltd. System and method for improved image analysis through gaze data feedback
JP2014124315A (ja) * 2012-12-26 2014-07-07 Toshiba Corp 画像処理装置、医用画像診断装置及び画像処理プログラム
US9517001B2 (en) 2013-08-28 2016-12-13 Olympus Corporation Capsule endoscope system
WO2015029970A1 (ja) 2013-08-28 2015-03-05 オリンパスメディカルシステムズ株式会社 カプセル型内視鏡システム
US10314665B2 (en) * 2013-12-24 2019-06-11 General Electric Company Method for medical image processing
US20160317245A1 (en) * 2013-12-24 2016-11-03 General Electric Company Method for medical image processing
JP2015160083A (ja) * 2014-02-28 2015-09-07 株式会社東芝 医用画像表示装置
JP2015198928A (ja) * 2014-03-31 2015-11-12 株式会社東芝 医用画像処理装置、および医用画像処理システム
JP2015217120A (ja) * 2014-05-16 2015-12-07 キヤノン株式会社 画像診断支援装置、その処理方法及びプログラム
US10558263B2 (en) 2014-05-16 2020-02-11 Canon Kabushiki Kaisha Image diagnosis assistance apparatus, control method thereof, and program
WO2015174548A1 (en) 2014-05-16 2015-11-19 Canon Kabushiki Kaisha Image diagnosis assistance apparatus, control method thereof, and program
US10475252B2 (en) 2014-09-05 2019-11-12 Canon Kabushiki Kaisha Image diagnosis assistance apparatus, control method, and program
JP2016057695A (ja) * 2014-09-05 2016-04-21 キヤノン株式会社 読影レポート作成のための支援装置およびその制御方法
WO2016035312A1 (en) * 2014-09-05 2016-03-10 Canon Kabushiki Kaisha Assistance apparatus for assisting interpretation report creation and method for controlling the same
US11075003B2 (en) 2014-09-05 2021-07-27 Canon Kabushiki Kaisha Assistance apparatus for assisting interpretation report creation and method for controlling the same
JPWO2017033516A1 (ja) * 2015-08-24 2018-06-07 富士フイルム株式会社 読影支援装置及び方法
WO2017033516A1 (ja) * 2015-08-24 2017-03-02 富士フイルム株式会社 読影支援装置及び方法
US10456072B2 (en) 2015-08-24 2019-10-29 Fujifilm Corporation Image interpretation support apparatus and method
JP2017225742A (ja) * 2016-06-24 2017-12-28 株式会社ジェイマックシステム 読影支援装置、読影支援方法および読影支援プログラム
JP2019008816A (ja) * 2018-09-03 2019-01-17 キヤノン株式会社 読影レポート作成のための支援装置およびその制御方法
US11642005B2 (en) 2018-11-28 2023-05-09 Olympus Corporation Endoscope system, endoscope image processing method, and storage medium

Similar Documents

Publication Publication Date Title
JP2007319327A (ja) 読影支援システム
JP6811837B2 (ja) 病理データ捕捉
JP4537104B2 (ja) マーカ検出方法、マーカ検出装置、位置姿勢推定方法、及び複合現実空間提示方法
US10302932B2 (en) Microscope system and microscopy method using digital markers
EP2472473A1 (en) Image analysis device
US11207044B2 (en) Information processing apparatus, information processing method, computer-readable medium, and biological signal measurement system
JP6996203B2 (ja) 情報処理装置、情報処理方法、プログラムおよび生体信号計測システム
US20190051408A1 (en) Medical tool work support system, medical tool work support method, and medical tool work support program
JP7009906B2 (ja) 情報処理装置、情報処理方法、プログラムおよび生体信号計測システム
JP4731127B2 (ja) 画像診断支援装置及び方法
JP2020531099A5 (ja)
JP2010042065A (ja) 医用画像処理装置、処理方法
JP5751899B2 (ja) 医用画像処理装置及び医用画像診断装置
JP6996095B2 (ja) 情報表示装置、生体信号計測システムおよびプログラム
US11109810B2 (en) Information display device, biological signal measurement system, and computer program product
US12042340B2 (en) Method and system for the identification and handling of events in a system for the synchronization and combined display of information
US9386908B2 (en) Navigation using a pre-acquired image
US20220351428A1 (en) Information processing apparatus, information processing method, and computer readable recording medium
US11927540B2 (en) Information processing apparatus, information processing method, and recording medium
CN118215936A (zh) 用于腹腔镜和视频辅助手术的交互式增强现实系统
JP2005287571A (ja) 注意配分検査方法、注意配分検査装置、及び注意配分検査プログラム記録媒体
JP7176197B2 (ja) 情報処理装置、生体信号計測システム、表示方法、及びプログラム
US20160183781A1 (en) Apparatus and method for assessing and improving the reliability of a visual field test
JP6941833B2 (ja) 高次脳機能検査用の三次元表示装置、高次脳機能検査用の三次元表示方法、および高次脳機能検査用の三次元表示プログラム
KR20160112494A (ko) 파노라마에서의 효율적인 구강 병변 발병여부 예측감지 방법 및 시스템