JP2016525426A - 撮像データセットの間の所見のマッチング - Google Patents
撮像データセットの間の所見のマッチング Download PDFInfo
- Publication number
- JP2016525426A JP2016525426A JP2016530635A JP2016530635A JP2016525426A JP 2016525426 A JP2016525426 A JP 2016525426A JP 2016530635 A JP2016530635 A JP 2016530635A JP 2016530635 A JP2016530635 A JP 2016530635A JP 2016525426 A JP2016525426 A JP 2016525426A
- Authority
- JP
- Japan
- Prior art keywords
- image
- earlier
- acquired
- interest
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
- A61B5/7425—Displaying combinations of multiple images regardless of image source, e.g. displaying a reference anatomical image with a live image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
- G06T7/0014—Biomedical image inspection using an image reference approach
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20101—Interactive definition of point of interest, landmark or seed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Public Health (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Biomedical Technology (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Quality & Reliability (AREA)
- Ophthalmology & Optometry (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
Description
Claims (20)
- 方法において、
画像のセットにおける生体構造画像の観察者の関心焦点を検出するステップと、
前記検出された関心焦点に基づき、前記生体構造画像の位置が、関心所見を持つ組織を含むことを決定するステップと、
表示された画像と同じ組織の部分を持つ生体構造画像をより早期に取得された撮像データセットから識別するステップと、
前記より早期に取得された画像を識別するグラフィック指示を、前記表示された画像と並行して視覚的に表示するステップとを有する、方法。 - 前記関心焦点を検出するステップが、前記観察者が前記生体構造画像の特定領域について思案していることを決定するステップを有し、前記位置は、前記特定領域である、請求項1に記載の方法。
- 前記関心焦点を検出するステップが、
前記観察者が前記生体構造画像の各位置を観察するのに費やす時間量を決定するステップと、
各位置での前記時間量と所定の閾値時間間隔とを比較するステップと、
前記位置での時間量が前記所定の閾値時間間隔を上回ることに基づき、前記生体構造画像の位置が、前記関心所見を持つ組織を含むと決定するステップとを有する、請求項1に記載の方法。 - 前記観察者が各位置を観察するのに費やす時間量を決定するため、アイトラッキングを使用するステップを更に有する、請求項3に記載の方法。
- 前記観察者の視線又は目の動きの少なくとも一方を追跡するため、アイトラッキングを使用するステップと、
前記追跡された視線又は目の動きの少なくとも一方に基づき、前記生体構造画像の各位置を前記観察者が観察するのに費やす時間量を決定するステップとを更に有する、請求項4に記載の方法。 - 前記グラフィック指示が起動されたことを示す入力を受信することに基づき、前記より早期に取得された画像を表示するステップを更に有する、請求項1乃至5のいずれかに記載の方法。
- 前記グラフィック指示が起動されたことを示す入力を受信することに基づき、前記より早期に取得された画像の注釈を表示するステップを更に有する、請求項1乃至6のいずれかに記載の方法。
- 前記表示された画像に対して前記より早期に取得された画像の前記注釈を伝播するステップを更に有する、請求項7に記載の方法。
- 前記表示された画像に対して注釈を加える、又は前記より早期に取得された画像の前記注釈を変化させるステップの少なくとも一方を更に有する、請求項7又は8に記載の方法。
- 前記画像のセットにおける画像の間で前後にスクロールすることのパターンを決定するステップと、
前記パターンに基づき、前記表示された画像と同じ前記組織を持つ前記生体構造画像を前記より早期に取得された撮像データセットから識別するステップとを更に有する、請求項1乃至9のいずれかに記載の方法。 - 前記より早期に取得された画像が、最初の画像であり、前記表示された画像は、前記最初の画像のフォローアップ画像である、請求項1乃至10のいずれかに記載の方法。
- 前記より早期に取得された画像が注釈を含まないことを示すメッセージを表示するステップを更に有する、請求項1乃至11のいずれかに記載の方法。
- より早期に取得された画像を評価するステップと、
前記評価されたより早期に取得された画像において注釈を識別するステップと、
前記より早期に取得された画像の第2の画像に対応する前記画像のセットにおける第2の画像が、注釈を含まないことを決定するステップであって、前記より早期に取得された画像の前記第2の画像が、注釈を含む、ステップと、
前記画像のセットの前記第2の画像が注釈を含まないことを示す第2のメッセージを表示するステップとを更に有する、請求項1乃至12のいずれかに記載の方法。 - 前記表示された画像と同じ前記組織を持つ前記生体構造画像を前記より早期に取得された画像から識別するステップが、注釈により局所化される以前の所見に対する距離を計算するステップを有し、
所与の閾値未満の最短距離が、前記対応する生体構造画像として識別される、請求項1乃至13のいずれかに記載の方法。 - システムであって、
モニタに表示される画像のセットにおける生体構造画像の観察者の関心焦点を検出するセンサと、
前記モニタのディスプレイジオメトリに基づき、前記画像に対する前記関心焦点をマッピングするマッパーと、
前記マップに基づきメトリックを決定するメトリック決定部と、
前記メトリックを所定のメトリックと比較し、前記メトリックが前記所定のメトリックを満たすことに基づき、前記生体構造画像の位置が、関心所見を持つ組織を含むことを決定する論理部と、
前記表示された画像と同じ組織を持つ生体構造画像をより早期に取得された撮像データセットから識別する画像セレクターと、
前記より早期に取得された画像を識別するグラフィック指示を表示するディスプレイモニタとを有する、システム。 - 前記画像のセットが、前記より早期に取得された撮像データセットと位置合わせされ、前記表示された画像と同じ組織を持つ前記生体構造画像は、前記より早期に取得された撮像データセットから前記位置合わせに基づき識別される、請求項15に記載のシステム。
- 前記画像のセットが、前記関心焦点に基づきセグメント化され、前記表示された画像と同じ組織を持つ前記生体構造画像は、前記より早期に取得された撮像データセットから前記セグメント化に基づき識別される、請求項15に記載のシステム。
- 前記画像のセット及び前記より早期に取得された撮像データセットが、2つの異なる撮像モダリティに対応し、前記画像のセット及び前記より早期に取得された撮像データは、融合され、前記表示された画像と同じ組織を持つ前記生体構造画像が、前記より早期に取得された撮像データセットから前記融合された画像に基づき識別される、請求項15に記載のシステム。
- 前記前に生成された撮像データセットからの前記前に生成された画像が、前記表示された画像及び前記前に生成された撮像データセットの画像の間の正規化された重み付けスコアを計算することにより、識別される、請求項15に記載のシステム。
- コンピュータ可読命令でエンコードされるコンピュータ可読ストレージ媒体であって、前記命令が、プロセッサにより実行されるとき、前記プロセッサが、
モニタに表示される画像のセットにおける生体構造画像の観察者の関心焦点を検出し、
前記検出された関心焦点に基づき、前記生体構造画像の位置が、関心所見を持つ組織を含むことを決定し、
表示された画像と同じ組織を持つ生体構造画像をより早期に取得された撮像データセットから識別し、
前記より早期に取得された画像を識別するグラフィック指示を、前記表示された画像と並行して視覚的に表示することをもたらす、コンピュータ可読ストレージ媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201361859884P | 2013-07-30 | 2013-07-30 | |
US61/859,884 | 2013-07-30 | ||
PCT/IB2014/062936 WO2015015341A1 (en) | 2013-07-30 | 2014-07-08 | Matching of findings between imaging data sets |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2016525426A true JP2016525426A (ja) | 2016-08-25 |
JP2016525426A5 JP2016525426A5 (ja) | 2017-08-17 |
JP6230708B2 JP6230708B2 (ja) | 2017-11-15 |
Family
ID=51539301
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016530635A Expired - Fee Related JP6230708B2 (ja) | 2013-07-30 | 2014-07-08 | 撮像データセットの間の所見のマッチング |
Country Status (5)
Country | Link |
---|---|
US (1) | US10614335B2 (ja) |
EP (1) | EP3027107B1 (ja) |
JP (1) | JP6230708B2 (ja) |
CN (1) | CN105473059B (ja) |
WO (1) | WO2015015341A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7787672B2 (en) | 2004-11-04 | 2010-08-31 | Dr Systems, Inc. | Systems and methods for matching, naming, and displaying medical images |
US9495604B1 (en) | 2013-01-09 | 2016-11-15 | D.R. Systems, Inc. | Intelligent management of computerized advanced processing |
JP6687393B2 (ja) * | 2015-04-14 | 2020-04-22 | キヤノンメディカルシステムズ株式会社 | 医用画像診断装置 |
JP7258846B2 (ja) * | 2017-07-31 | 2023-04-17 | コーニンクレッカ フィリップス エヌ ヴェ | 限定的心エコー検査を選択すべき場合を決定するためのデバイス、システム、及び方法 |
US11344371B2 (en) | 2018-10-19 | 2022-05-31 | Canon U.S.A., Inc. | Visualization of three-dimensional image data on a two-dimensional image |
US10778916B2 (en) * | 2018-10-24 | 2020-09-15 | Honeywell International Inc. | Applying an annotation to an image based on keypoints |
DE102019211536A1 (de) * | 2019-08-01 | 2021-02-04 | Siemens Healthcare Gmbh | Automatische Lokalisierung einer Struktur |
US20220392080A1 (en) * | 2021-06-03 | 2022-12-08 | Electronics And Telecommunications Research Institute | Apparatus and method for supporting attention test based on attention map and attention movement map |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0370381A (ja) * | 1989-08-10 | 1991-03-26 | Fuji Photo Film Co Ltd | 画像表示装置 |
JP2006511859A (ja) * | 2002-12-19 | 2006-04-06 | ブリティッシュ・テレコミュニケーションズ・パブリック・リミテッド・カンパニー | 画像の検索 |
US20060112334A1 (en) * | 2004-11-22 | 2006-05-25 | Serguei Endrikhovski | Diagnostic system having gaze tracking |
JP2007029248A (ja) * | 2005-07-25 | 2007-02-08 | Hitachi Medical Corp | 比較読影支援装置及び画像処理プログラム |
WO2007138510A1 (en) * | 2006-05-31 | 2007-12-06 | Koninklijke Philips Electronics N.V. | Controlling a viewing parameter |
US20090132279A1 (en) * | 2007-11-21 | 2009-05-21 | General Electric Company | Method and apparatus for significant and key image navigation |
US8020993B1 (en) * | 2006-01-30 | 2011-09-20 | Fram Evan K | Viewing verification systems |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6381339B1 (en) | 1997-01-15 | 2002-04-30 | Winton Emery Brown | Image system evaluation method and apparatus using eye motion tracking |
US7573439B2 (en) * | 2004-11-24 | 2009-08-11 | General Electric Company | System and method for significant image selection using visual tracking |
US7747050B2 (en) | 2005-11-23 | 2010-06-29 | General Electric Company | System and method for linking current and previous images based on anatomy |
EP2042969A1 (en) * | 2007-09-28 | 2009-04-01 | Alcatel Lucent | Method for determining user reaction with specific content of a displayed page. |
WO2010051037A1 (en) * | 2008-11-03 | 2010-05-06 | Bruce Reiner | Visually directed human-computer interaction for medical applications |
CA2781753A1 (en) | 2009-11-25 | 2011-06-03 | David J. Vining | Advanced multimedia structured reporting |
US8311303B2 (en) * | 2010-01-12 | 2012-11-13 | Siemens Corporation | Method and system for semantics driven image registration |
KR20140024788A (ko) * | 2010-09-20 | 2014-03-03 | 보드 오브 리전츠, 더 유니버시티 오브 텍사스 시스템 | 고급 멀티미디어 구조화 리포트 |
DE102013226244A1 (de) * | 2013-12-17 | 2015-06-18 | Siemens Aktiengesellschaft | Medizintechnische Steuerung |
-
2014
- 2014-07-08 CN CN201480042949.6A patent/CN105473059B/zh not_active Expired - Fee Related
- 2014-07-08 EP EP14765999.9A patent/EP3027107B1/en active Active
- 2014-07-08 JP JP2016530635A patent/JP6230708B2/ja not_active Expired - Fee Related
- 2014-07-08 WO PCT/IB2014/062936 patent/WO2015015341A1/en active Application Filing
- 2014-07-08 US US14/906,608 patent/US10614335B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0370381A (ja) * | 1989-08-10 | 1991-03-26 | Fuji Photo Film Co Ltd | 画像表示装置 |
JP2006511859A (ja) * | 2002-12-19 | 2006-04-06 | ブリティッシュ・テレコミュニケーションズ・パブリック・リミテッド・カンパニー | 画像の検索 |
US20060112334A1 (en) * | 2004-11-22 | 2006-05-25 | Serguei Endrikhovski | Diagnostic system having gaze tracking |
JP2007029248A (ja) * | 2005-07-25 | 2007-02-08 | Hitachi Medical Corp | 比較読影支援装置及び画像処理プログラム |
US8020993B1 (en) * | 2006-01-30 | 2011-09-20 | Fram Evan K | Viewing verification systems |
WO2007138510A1 (en) * | 2006-05-31 | 2007-12-06 | Koninklijke Philips Electronics N.V. | Controlling a viewing parameter |
US20090132279A1 (en) * | 2007-11-21 | 2009-05-21 | General Electric Company | Method and apparatus for significant and key image navigation |
Also Published As
Publication number | Publication date |
---|---|
US20160162745A1 (en) | 2016-06-09 |
JP6230708B2 (ja) | 2017-11-15 |
US10614335B2 (en) | 2020-04-07 |
CN105473059A (zh) | 2016-04-06 |
CN105473059B (zh) | 2019-03-08 |
EP3027107A1 (en) | 2016-06-08 |
WO2015015341A1 (en) | 2015-02-05 |
EP3027107B1 (en) | 2017-10-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6230708B2 (ja) | 撮像データセットの間の所見のマッチング | |
US10565710B2 (en) | Systems and user interfaces for determination of electro magnetically identified lesions as included in medical images of differing perspectives | |
US10275877B2 (en) | Methods and systems for automatically determining diagnosis discrepancies for clinical images | |
JP6023189B2 (ja) | 一連の調査の画像データ内における発見の解剖学的タグ付け | |
US11594002B2 (en) | Overlay and manipulation of medical images in a virtual environment | |
JP6134315B2 (ja) | 画像データにおける所見の解剖学的タグ付けの方法 | |
JP6014059B2 (ja) | 医療データの知的リンキング方法及びシステム | |
JP6198729B2 (ja) | 解剖学的タグ付けを用いた臨床発見管理によって容易化された検査レビュー | |
US10916010B2 (en) | Learning data creation support apparatus, learning data creation support method, and learning data creation support program | |
RU2699416C2 (ru) | Идентификация аннотаций к описанию изображения | |
RU2589384C2 (ru) | Временная диаграмма клинических состояний | |
US20130202169A1 (en) | Method and apparatus for providing ultrasound image data | |
JP2012143368A (ja) | 医用画像表示装置及びプログラム | |
WO2021103316A1 (zh) | 图像目标区域的确定方法、装置和系统 | |
JP5533198B2 (ja) | 医用画像表示装置及びプログラム | |
CN112740285B (zh) | 在虚拟环境中对医学图像的叠加和操纵 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20170214 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170703 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170703 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20170703 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20170919 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170926 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171017 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6230708 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |